蔚来二面凉经（中间件开发）

请问一下各位消息中间件开发具体是做什么工作的？比如开发Kafka/RocketMQ这种，不是有开源的可以直接用吗。lz暑期实习拿到了某云下面这个团队的offer。想问一下前辈们，都是大厂的offer，中间件开发（消息队列）和业务开发（交易系统/视频后台之类的）之间该怎么选择？

暑期把范围框死在了上海（其他地区也投了，但主要是练面试），上海公司没北京那么多，主要是 （携程 美团 字节 饿了么 蚂蚁 小红书 得物 B站 百度 pdd）。最后居然只有美团和得物的offer，其他全挂了，难受。尤其是面了几次字节，我这一题hot100都遇不到，手撕被干烂了，真无语了（但我笔试也没这么差劲啊，美团2.2，饿了么1.5的水平，怎么一到面试字节手撕就拉坨大的）。好在美团业务不错，接了。得物广告业务其实也挺好的就是title不太够。心累真找不到更好的了，美团我又回来了呜呜，爱团信团！

#数据人的面试交流地##实习进度记录##数据人的面试交流地#作业帮时间是随机的，今天下午测的。作业帮是10道选择题加2到算法题：选择题：考了数据结构排序二叉树，linux命令：awk '$NF' test 这里的test是一个有多行数据的文件，这命令是输出该文件末行的内容。还考了mapreduce优化数据倾斜的办法这里我好像选错了有两个选项一个是把count(distinct ) 替换为sum()group by 还有是将小文件先保存到内存中这两个好像是对的都可以优化数据倾斜此问题。还考了Flink的一些特性不过我还没学过flink，还考了kafka的高性能和低性能的一些问题，这我也是一脸懵。还考了六个盘的汉洛塔要移动几次才通过。然后是算法题，第一个是简单的二分查找，不过我只通过了94%，后面看估计是我对左右指针移动还是有点问题。第二个是leetcode32题，最长有效括号，可惜了我两个月前还写过但是还是没写对，只通过了63%。也不知道能不能过。阅文（寄了，以为是8.30考没想到是8.30结束结果只写了20分钟）：这好像是前面是单选题，中间是不定项，后面是问答题单选题：考了hive内置函数，考了hive与spark的对比，hadoop节点默认备份是多少~（还考了斗破苍穹的主角是谁虽然我没看过印像中好像叫萧炎）不定项：有mysql中delete，drop和truncate这三者的区别特点（我对truncate完全没印象），还考了flink的一些知识。问答题：第一个是mapredce工作流程这个还好，第二个是如何解决spark数据倾斜的方法。这里时间不够了我一点没写，也没多少印象。这里我现在写一下加深点印象1.可以增加随机前缀或后缀：来打散数据分布，在后继计算中去除前后缀从而负载均衡2.广播小表，如果是原因是小表与大表join可以将小表广播到每个节点，避免产生数据倾斜。3.salting方法：为倾斜数据填加盐值，打散倾斜数据4.分区策略调整：通过自定义分区器或者合理选择内置分区器来均匀分布数据5.增大并行度：针对只有少量数据造成的倾斜任务，增加并行度可以更快地处理这些小任务6.数据预处理：合并一些小文件，fliter操作等第三四个就是写sql语句，第三个挺简单的就是第四题来不及看了。ok就是这些了，预祝大家都能找到自己想要的工作实现，我还是继续去沉淀去了，这一个月也不知道自己在忙些啥好像就是一直在刷算法题和sql题，八股都没怎么看，对组件的掌握还是太浅了。#实习##数据开发工程师实习##暑期实习加油##牛客AI配图神器#

阅文笔试很轻松 感觉。做起来舒服多了 但是最近有些懈怠，很多写的模棱两可，smbjoin忘了具体语法了就写了下步骤。reduce端口shuffle需要归并排序忘了写了。网络也没咋了解。二次握手不清楚是啥？ack反馈么我猜是的。sql也基本a了，两道题算是4道？topn，连续登录，留存率，最早最晚登录我用的拉链表。可能细节有问题？但是感觉思路还可以。希望能进面吧。进面自己就蛮开心的了。但是第一次笔试做那么好已经很开心了。对了，单选有个题目是斗破主角 当时就蛮开心的，逗乐了。双非2本大厂看了很多，也意识到更多的是幸存者偏差了，只有过的人发了出来，更多的是和我一样没过的人，自己并没那么优秀，目标还是中小厂吧。大厂更多的是面试经验。也希望大家能多开心些。大家加油