快手数据开发日常实习

一面（面试官很好！很有耐心！）1.spark中rdd叫弹性分布式数据集，这个弹性的含义2.小文件的危害以及怎么处理3.spark中宽依赖、窄依赖4.stage的划分5.kafka怎么保证数据不重复消费（没回答上，但说了怎么重复消费数据）6.checkpoint机制7.spark的三种join（boardcast join,sort merge join,shuffle hash join）7.四道sql（前两道很简单，第三道次日留存和七日留存，第四道连续登录问题）8.算法题：移动最少区间个数 使得剩余区间无重叠1. 输入：[1,2][2,3][4,6][1,3]2. 输出：13. 解释：移除[1,3]后，剩余区间无重叠（面试后在牛客网看见有人分享这道算法题）一面最后面试官还问我以后的计划，我说打算先实习明年春招边实习边找工作，她居然问我没想留着字节吗（我当然想！）中间有些问题没想起来，耗时1小时40分钟二面（面试官很好！问的都是和数仓相关的，结合我的实习问）1.之前工作都干了什么2.之前实习搭建数仓的结构3.了解事实表吗，了解维度表吗4.怎么和其他人对接的5.你属于风控部门，但主要是构建数仓开发，那有没有和其他数据开发人员交流过6.你只有一段实习吧，那实习前后有什么感悟吗7.为什么要选择数据开发（我说因为之前实习是干数仓的，他说不要因为之前干什么就觉得以后三十年干什么，实习还是丰富点，看看干什么）8.最后反问二面耗时50分钟，感觉面试官对我回答的第七个问题不满意，只是我明年要毕业了，得多来一份垂直的实习建议多复习spark、hive方面的八股文、概念问题，实习生主要负责离线数仓开发

故事的开始故事从 16 年开始，那年高三。和许多高三的学生一样，每天家和学校两点一线。本来应该老老实实备战高考，争取考个好大学，走向美好的未来。但一次意外的受伤，生活的轨迹开始发生了偏移。由于备考压力大，学校也管的严，平时的消遣只剩了跑跑步活动下筋骨。但在一次跑步的时候拉伤了肌腱，当时便疼痛难忍请假去了医院。医生说需要静养一周再去上学。本来也没啥，但是学校每周有周考，父亲认为这点小伤有啥好养的，耽误了学习怎么办？于是矛盾产生了，本来压力就大，有些厌学情绪在。再被要求一定要去周考，自然就不乐意了。家乡是个四川的十八线城市，父亲是个正常的厂里员工，在他看来没有什么比好好学习考上一个好的大学更重要。...

1. 我看你是做服务端的，但是你投的是客户端开发，你后面是倾向于安卓还是IOS？2. get和post的区别是什么？3. 实现用户登录功能该用post还是get？为什么用post？post就安全吗？body不也可以通过抓包看见吗？3. HTTPS加密的过程？我答的是公私钥结合的方式其实就是TLS协议交换密钥的过程。追问如果代理人攻击如何解决？提示CA证书机制没答出来具体的机制是如何实现的4. TCP三次握手，为啥不是二次握手？为啥不是四次握手，这样岂不是更能保证可靠我说四次的话，感觉没有必要三次就能保证建立连接的可靠5. UDP协议在那一层？那我传输的时候可不可以绕过UDP协议直接交给IP层？这里没答好正确答案应该是，传输层负责端到端的通讯，屏蔽底层细节，通过ip协议可以把数据传输到对应的主机，但是如果没有端口信息不能定位到具体主机的应用进程，还有就是传输层的作用，可靠传输、拥塞控制、流量控制5. 线程和进程的区别？线程与线程之间是共享内存的吗？进程与进程之间呢？6. hashmap的put和get过程7.arraymap 和hashmap如何选型的？我不知道arraymap 是什么java中没有后来才知道是客户端的8. equal和hashcode那些经典八股9. 如何判断一个对象能否被垃圾回收？可达性分析算法 gcroot，那些可以作为gcroot？虚拟机栈和本地方法栈中引用的对象、方法区中静态属性引用的对象和方法区中常量池引用的对象10 .垃圾回收机制，分代回收机制，老年代新生代那一套11 .threadlocal 底层实现原理12 .单例模式懒汉和饿汉的区别？然后分别用在那些场景中，你实际用的话？13 .为啥设计双亲委派机制手撕1.单例模式2.删除链表重复元素手撕2翻车其实是有点紧张加上第一次面字节，也不太习惯飞书的编译器，双指针一直有BUG很慌就没调出来，反问还有那些需要提升的点？面试官说基础知识掌握还可以，编码习惯有待提升，下去再练练吧。败在了本来最擅长的点😣，这手撕已经很给我机会了，自己没把握住

1.你熟悉sql吗2.sql表关联有哪些3.join分类4.case when了解吗5.开窗函数中的排序函数6.问项目7.问比赛8.问几号入职9.口头offer电话面，问的挺简单的，又口头发offer，有点快，内心慌慌的