#腾讯大数据开发工程师面经#
#大数据开发工程师面经#
#大数据面试

昨天面试腾讯大数据开发,面试题奉上,欢迎大佬指点

问题:
 1.自我介绍
 2.项目细节
 3.题目 有用户对于微信文章表t_user_log,数据量约40亿,t_wx_doc表,数据量约400W,
 表结构信息如下
 create table default.t_user_log (
   ip string comment 'ip',
   ts string comment '时间戳',
   userid string comment '用户id',
   docid string comment '文章id',
   action string comment '用户行为1 阅读,2点赞,3 分享,4 打赏, 5 评论',
   entry  string comment '如口'
 ) partitioned by (
   day string comment ''
 )

create table default.t_wx_doc (
cpid string comment '公众号id',
ts string comment '发文时间戳' ,
docid string comment '文章id',
text string comment '文章内容',
category string comment '文章分类'
)
机器资源有限,(vcore 小与100, &&men<400G)请编程解决下面两个问题
计算框架 算法不限
1 .找出热门的公众号top10
2. 给定一个10000w 大小用户包(userid 字符长度为16)计算他们各自最可能喜欢的5个公众号

4. Flink如何保障在使用kafka的时候是execyly-one的?
5. Flink与spark的区别
6. Flink内存模型
7. Spark内存模型
8. Spark shuffle过程
9. Spark Rdd属性
10. Rdd的那个算子可以重分区但是不用shuffle
11. 问题3热门文章数据量大的时候,出现数据倾斜如何解决

面试完之后感觉要跪了,效果很差。继续加油补知识
全部评论
大佬知道是腾讯哪个事业群吗?
点赞 回复 分享
发布于 2021-01-20 15:24
能问下怎么投的大数据开发吗?校招岗位只有数据分析啊😂
点赞 回复 分享
发布于 2020-07-14 11:10
码一下,我是刚选方向的菜鸡
点赞 回复 分享
发布于 2020-07-14 01:41
感谢分享
点赞 回复 分享
发布于 2020-07-02 12:28

相关推荐

不愿透露姓名的神秘牛友
07-11 11:22
怎么这么多逆天求职者,救救我救救我救救我😭
flmz_Kk:哈哈哈哈哈哈,这么多求职者,肯定有那一两个逆天的
点赞 评论 收藏
分享
06-15 02:05
已编辑
南昌航空大学 数据分析师
Eason三木:你如果想干技术岗,那几个发公众号合唱比赛的经历就去掉,优秀团员去掉,求职没用。然后CET4这种不是奖项,是技能,放到下面的专业技能里或者单独列一个英语能力。 另外好好改改你的排版,首行缩进完全没有必要,行间距好好调调,别让字和标题背景黏在一起,你下面说能做高质量PPT你得展现出来啊,你这简历排版我用PPT做的都能比你做的好。 然后自我评价,你如果要干数据工程师,抗压能力强最起码得有吧。
简历中的项目经历要怎么写
点赞 评论 收藏
分享
点赞 评论 收藏
分享
评论
10
25
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务