首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
搜索
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
ynkxzgz
门头沟学院 Java
关注
已关注
取消关注
@三石大数据:
我的大数据开发学习之路
很多小伙伴在跟我交流的过程中,会问我这样一个问题:"大数据框架这么多,学了有啥用,有没有一些框架可以不学,企业里面开发要求会用这么多框架吗"我刚开始学习大数据的时候也和大家一样,这么多框架,不知道从何下手,又想速战速决,还不知道自己学习的内容是否能够对付未来在企业的开发工作...之前自己在学习大数据的时候浪费了很多的时间,这里为了帮助大家在学习大数据的时候少走弯路,同时也是对自己过去三年学习大数据过程的一个总结,今天就好好跟小伙伴们说一说如何高效学习大数据,一路直通大厂!!!学习路线预览编程语言Java:对于目标岗位是数仓开发的同学来说,只需要学习Java基础部分即可,后续有时间建议学习一下Web框架,这一部分是加分项。对于目标岗位是平台开发的同学来说,那么除了Java基础部分,Web框架是必会的Linux:在面试的过程中经常会问到 "请介绍一下你熟悉的几个Linux命令",所以Linux的学习也是有必要的,同时在平时学习的过程中,需要直接接触到大数据环境,这些环境都是搭建在Linux环境上的,那么就需要熟悉Linux命令来部署以及运行大数据框架。MySQL:SQL学习不管是对于后端开发还是大数据开发,都是必会的基础知识,而对于数仓开发的同学来说,SQL需要写的更熟练一些,也需要学习一些高阶的SQL技巧。硬核框架学习顺序:Hadoop三件套(HDFS,MapReduce,Yarn) -> Zookeeper -> Hive -> Flume -> Kafka -> HBase -> Scala(面试从来没被问到过,可以不学) -> Spark -> Flink 在学习这些框架的时候,它们的基础原理都是需要熟悉的,比如MapReduce的执行原理、Flink的watermark机制等,并且适当的去学习源码,比如HDFS的读写流程源码、Spark的Shuffle过程源码等,目前大数据开发岗位的面试越来越难,所以如果你懂源码,面试官就会有眼前一亮的感觉!!!注意:在面试中问的较多的框架有 Hadoop三件套、Zookeeper、Hive、Kafka、Spark、Flink,所以这几个框架在学习的过程中需要重点关注一下万能项目以下推荐的项目是个人觉得还不错的,不是打广告!!!《某谷离线数仓》:这个项目涵盖了数仓的建模知识(理论相当重要),还有就是这个分层思路基本上可以和很多企业对齐。在学习的过程中,要学会去提炼亮点,因为可能很多找大数据开发的同学都做过这个项目,那么如果你讲的东西都是别人讲过的,那么就很那脱颖而出。《某谷实时数仓》:如果倾向于去做实时数仓的同学,可以学习这一部分。《谷粒商城》:如果倾向于去做平台开发的同学,又没有真实的大数据平台的开发经历,那么就学习这个项目来突显自己的后端开发能力也是不错的。刷题突击算法:LC+ 剑指offer,算法题是很多同学认为在笔面试中最难的一部分,我觉得这一部分的学习没有捷径,多刷题即可!!!(这里提一下自己的刷题方法,不一定适合大家哦。我是按照算法类型去刷的,比如 动态规划、回溯、贪心等)SQL:牛客 + 面试常见HQL(前面的文章总结过,感兴趣可以看看),对于数仓的同学来说,SQL刷题要非常熟练,并且在练习的过程中尽量结合业务知识,因为在面试的时候,面试官通常会结合它们的业务来出题(只有结合业务的SQL才是最难的)送福利啦!!!书籍推荐以下都是自己学习后觉得还不错,并且对面试有帮助的一些书籍书籍PDF高清版都可以免费送给大家《阿里巴巴大数据之路》《华为数据之道》《数据分析思维:分析方法和业务知识》面试八股文大数据开发面试重点【2023届秋招总结】_牛客网这是之前在牛客写过的一篇大数据开发面试八股文的文章,仅展示了部分面试经典题目,我自己总结了一份字数10w+的大数据面试笔记总结本文介绍的大数据开发学习路线仅是个人学习过程的一个总结,不一定适用于所有人,大家可以借鉴,切勿盲目照搬如果同学们还有大数据相关的一些疑问,可以跟我讨论讨论,我会尽可能给大家解答
点赞 102
评论 20
全部评论
推荐
最新
楼层
暂无评论,快来抢首评~
相关推荐
03-30 22:41
Blessed John XXIII National Seminary (Weston) Java
90后大龄程序员失业4个月,终于上岸了
嘿,兄弟们好,昨天下午,我从新公司大楼签完字出来,阳光晃得我有点睁不开眼。我坐在路边花坛上,默默点了一根烟,坐了很久。整整 4 个月,120 天。作为一个 90 后、没赶上名校快车、又刚好撞上 30 多岁尴尬年纪的 Java 佬,这 120 天我经历的不仅仅是积蓄缩水的焦虑,更多的是一种职业信仰的崩塌。今天给大家聊聊这 4 个月我到底是怎么熬过来的,以及现在的外面市场到底变成了什么样。那些失眠的夜:从自信到自我怀疑刚失业那会儿,我心里其实挺稳的。干了 10 年 Java,在行业里扛过大流量,找工作还不是简简单单。但现实很快把我教训了。第一个月,我还在挑拣薪资;第二个月,开始觉得不对劲,投出去的...
大家都开始春招面试了吗
点赞
评论
收藏
分享
03-31 22:36
北京邮电大学 后端工程师
面试扎堆了
前期没面试,这周约了8个
钱嘛数字而已:
一定至少要拿下1个,不然就成了八挂阵了。
点赞
评论
收藏
分享
03-18 01:22
门头沟学院 Java
春招还有机会嘛
我现在这个水平大概能拿到多少薪资的offer😂
肖先生~:
先别说工资,现在有个工作就不错了
点赞
评论
收藏
分享
02-26 13:56
已编辑
重庆财经学院 Java
学院本真的没希望了吗😭秋招0offer,投了也石沉大海,求各位佬指点一下😭
King987:
你有实习经历,但是写的也太简单了,这肯定是不行的,你主要要包装实习经历这一块,看我的作品,你自己包装一下吧,或者发我,我给你出一期作品
点赞
评论
收藏
分享
03-26 20:56
杭州电子科技大学 大数据开发工程师
AI面试到底会问哪些问题?整理了3轮面经,附答题思路!
写在前面:AI面试一般分技术面和行为面,大厂会有2~3轮技术面 + 1轮HR面。技术面以手撕代码 + 八股知识点为主,行为面主要考察项目经历和沟通能力。下面按模块整理高频题。1、机器学习基础请解释过拟合的成因以及你会如何处理?几乎每家必问。答题时要涵盖:正则化(L1/L2)、Dropout、数据增强、Early Stopping、降低模型复杂度等。BatchNorm 和 LayerNorm 的区别,各自适用场景?CV 方向 BatchNorm 更常见;NLP/Transformer 中 LayerNorm 是标配。能对比 GroupNorm 加分。梯度消失/爆炸是怎么产生的,有哪些解决思路?从...
查看7道真题和解析
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
我放弃互联网大厂了。。
3521
2
...
Vibe Coding开发前的 7 个关键步骤
3203
3
...
字节实习一、二、三、HR面面经
2834
4
...
双非前端字节一面面经(难度 plus ultra 版)
2483
5
...
我招了!当年就是被招行这么招进去的
1731
6
...
京东零售平台产品与研发中心一面
1546
7
...
如何把面试主动权握在手里?Ai岗面试焚诀!
1374
8
...
美团暑期二面
1355
9
...
美团后端暑期实习一面
1345
10
...
在工作中,如何正确使用vibe coding来增效?
1345
创作者周榜
更多
正在热议
更多
#
你觉得大几开始实习最合适?
#
9298次浏览
89人参与
#
实习生的蛐蛐区
#
921350次浏览
4698人参与
#
招商银行数字金融训练营
#
68896次浏览
787人参与
#
你见过哪些招聘隐形歧视?
#
6535次浏览
64人参与
#
毕业季等于分手季吗
#
59262次浏览
680人参与
#
面试被问到不会的问题,你怎么应对?
#
8578次浏览
69人参与
#
开放七大实习专项,百度暑期实习值得冲吗
#
28582次浏览
529人参与
#
面试吐槽bot
#
182170次浏览
865人参与
#
好好告别我的学生时代
#
138147次浏览
1554人参与
#
25届秋招公司红黑榜
#
328704次浏览
1292人参与
#
小厂实习有必要去吗
#
87340次浏览
417人参与
#
租房前辈的忠告
#
380306次浏览
7491人参与
#
你都用vibe coding做过什么?
#
3762次浏览
157人参与
#
做完笔试后你收到面试了吗?
#
9045次浏览
81人参与
#
Vibe Coding 会干掉初级岗位吗?
#
7613次浏览
129人参与
#
实习转正进行时
#
168361次浏览
1064人参与
#
AI Coding实战技巧
#
2836次浏览
75人参与
#
你现在一天AI几次?
#
2638次浏览
57人参与
#
牛友の3月总结
#
13070次浏览
120人参与
#
如果人生可以debug你会改哪一行?
#
3464次浏览
73人参与
#
大厂实习和小厂实习最大的区别是什么?
#
17137次浏览
111人参与
#
百度工作体验
#
319682次浏览
2239人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务