03-10 10:40 已编辑 西安电子科技大学 大数据开发工程师 发布于北京
关注
腾讯数据工程 一面面经
时间：3月3日
1.自我介绍
2.说一下熟练到不熟练的技术栈（编程语言和框架）
3.spark和hadoop MR两者的区别 ，spark相比hadoop的缺点
4.spark内存有500G，数据量有一个T，那spark能不能处理这个数据
5.讲讲宽窄依赖、stage怎么划分的
6.常用的转换算子和action算子有哪些，reducebykey是action算子吗，和groupbykey有什么区别
7.解决数据倾斜的方式 加前缀怎么加
8.spark的OOM都是什么原因导致的
9.spark的executor内存分成哪几部分 spark.memory.fraction=0.6是控制什么的
10.聊聊广播变量 什么时候广播
11.两个sql题，比较简单
反问
更新 3.7二面挂
回答的不好
1.hive的元数据管理
2.怎么保证数据一致性
3.怎么做数据治理
4.怎么把天调度任务做到小时
更新 3.10 被捞 晚点更新面经
#数据开发工程师面经# #腾讯#
1.自我介绍
2.说一下熟练到不熟练的技术栈（编程语言和框架）
3.spark和hadoop MR两者的区别 ，spark相比hadoop的缺点
4.spark内存有500G，数据量有一个T，那spark能不能处理这个数据
5.讲讲宽窄依赖、stage怎么划分的
6.常用的转换算子和action算子有哪些，reducebykey是action算子吗，和groupbykey有什么区别
7.解决数据倾斜的方式 加前缀怎么加
8.spark的OOM都是什么原因导致的
9.spark的executor内存分成哪几部分 spark.memory.fraction=0.6是控制什么的
10.聊聊广播变量 什么时候广播
11.两个sql题，比较简单
反问
更新 3.7二面挂
回答的不好
1.hive的元数据管理
2.怎么保证数据一致性
3.怎么做数据治理
4.怎么把天调度任务做到小时
更新 3.10 被捞 晚点更新面经
#数据开发工程师面经# #腾讯#
全部评论
门头沟电工
北京交通大学 大数据开发工程师
佬没去腾讯去字节了嘛？
在写总结的小松鼠很卖萌
蚂蚁集团_数据研发(实习员工)
请问是哪个group的呀
三火啥也不会
门头沟学院 大数据开发工程师
m
相关推荐
点赞 评论 收藏
分享
牛客72783561...：简历不是这么写的，你这两个项目只说了用到了什么技术，却没说取得了什么成果，在我看来这就是你自己做的一个demo，没有价值。你为什么不写你电赛国二的那个项目？ 点赞 评论 收藏
分享
12-08 10:03
河南科技学院 前端工程师 苦闷的仰泳鲈鱼刷了1...：提前实习，是让你提前熟悉业务的，后续是入职后可以减少试用期的（大部分是包入职的）；转正实习，要是hc不够或者其他原因，让你正式offer可能都没有，这个风险很大。 ---个人看法和了解到的。 点赞 评论 收藏
分享
