大数据开发学习记录帖 Day2

【事宜】今天跟着视频搭建了hadoop完全分布式集群,配了历史服务器,日志聚集和时间同步。弄清楚每一步要做什么,怎么做,为什么要这样做?核心配置文件的位置在哪里?要如何修改?配置完文件切记要分发到每台机器上,shell语法还得多练习,基本的脚本要会写。

【笔记】
主机名文件位置:/etc/hostname
IP地址文件位置:/etc/sysconfig/network-scripts/ifcfg-ens33
HADOOP的核心配置文件:core-site.xml, hdfs-site.xml, yarn-site.xml, mapred.xml
分发文件命令:scp -r, rsync -av
首次搭建集群切记要格式化namenode,后续如果要再次格式化,一定要删掉所有机器的data和logs目录!!!

【力扣】leetcode总题数:171,依然只刷了每日一题。

【感想】今天几乎整个早上都在看视频,搭集群。虽然搭成功了,但是还不熟练。不看文档的话估计还是搭不出来,还是得多看,多敲,多记,不要畏难。

天气转凉,添衣保暖~
全部评论

相关推荐

牛客28967172...:跟着卡子哥才是正道,灵茶属实不太行
点赞 评论 收藏
分享
昨天 18:50
已编辑
长沙学院 Java
个人背景:学院二本计科专业 大二开始实习个人经历:安克创新 、理想汽车、字节跳动碎碎念:我做事只有三分钟热度。看到进了大厂的同学,我会羡慕,也会跟着努力上进;但遇到好看的小说,我又会放下手头的事沉迷其中,之前的坚持也就中断了。我有些自卑,总觉得自己学历和外貌都不够好。之前偶然在网上受到关注,我就喜欢上了上网,因为这里有很多人认可我。但我也很在意别人的评价,偶尔看到嘲讽的言论,会触发我的自卑情绪,让我感到愤怒。有时候我会强硬地回怼,有时候又会懦弱地选择无视。我也有虚荣心。不管是拿到安克、理想还是字节的机会,我在分享的时候都会带着这份心思。我会特意强调自己学历不好,是为了衬托出过程的艰难,以此显得自己更厉害。我知道,人往往会炫耀自己缺少的东西,来掩盖内心的空洞。我总想着走捷径,不太喜欢踏踏实实地做事。找实习的时候,我花了更多时间在研究面试技巧上,而不是提升专业能力。我会反复听面试录音分析技巧,看面试教程学习怎么和不同的面试官沟通,还会每天自言自语练习语言表达,同学都觉得我有点奇怪。我的实习生涯里,侥幸和运气占了很大一部分。我总在想,如果有一天我失去了这份幸运,这些特质可能会让我一蹶不振。ps: 很多人会问我学习路线和经验 但是就像我上面说的 我的实习过程靠的很多是关键节点的运气 技术上面我可能不如很多人  所以请大家理性求助和理性参考我的回答 附上我的投递记录
我的offer在哪里...:从去年看到现在,飞升哥就是榜样
我的求职进度条
点赞 评论 收藏
分享
评论
1
收藏
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务