vivo大模型研究员 一面

📍面试公司：B站💻面试岗位：大模型❓面试问题：手撕多头注意力机制，然后问了为什么除以dk，除了注意力，transformer还有什么，batch norm和layer norm的区别，非线性是谁提供的对比学习的loss聊了很久的论文，具体都有什么场景dpo和ppo的区别，包括理论上，还有项目实际落地闲聊+反问🙌面试感想：体验良好，整体氛围很轻松

上期写道刚开始面试的时候，这期写一写5月11号时候，这个时候手上就已经有两三家offer了，然后去北京的前一两天又发了三家offer随便选了个离公司近的工资高点的就去了。那么这期还是讲一下怎么去面试。其实面试的东西都一样，就是说你干过什么，回答问题就行了你要考虑的，不是这么去背八股文，而是要去琢磨到底要不要去实习，我个人而言，我最开始是因为电脑配置带不动才去好点的公司有好的卡给我用，然后呢去了也有工资，但是我的自由被限制了，我没法再天天琢磨新玩意我很痛苦，然后学会了怎么摸鱼，人家都是9点半来，我一开始是8点40到，我现在就吃了早饭再去差不多9点能到（就尽力偷懒还是最勤奋的那一批，因为人家都是老...

✅一面✴️0、手撕： tokenizer，RAG基本流程（可伪代码） ✴️项目： 1、项目具体解决问题 2、每个模块如何实现 3、NL2SQL在处理多表查询的时候采取啥策略 4、k8s和docker在项目中的作用 ✴️八股： 5、对PPO DPO GRPO计算逻辑的理解 6、对KL散度的三种估计的理解 7、LoRA和p-tuning v2的区别，怎么初始化 8、DeepSeek R1训练全流程，MLA具体怎么做的 9、梯度爆炸和消失怎么处理的 10、torch中register_parameter和buffer啥区别 11、torch如何实现不记录梯度 12、torch squeeze和unsqueeze干嘛的 13、python设计删除流程的时候，若涉及可变和不可变对象该如何debug 14、多机多卡和单机多卡的实现上有什么不同？ 15、tokenizer的输出？📳对于想求职算法岗的同学，如果想参加高质量项目辅导，提升面试能力，欢迎后台联系。

前言最近这段时间，2026届的各位佬们应该差不多都暑期实习入职了期待大家都能在秋招取得好的结果没有找到满意暑期实习的也别气馁，感觉最近秋招提前批应该快开始了，如果实在来不及了，可以先准备秋招提前批了~话说回来，其实我是一位2025届的学生，两年半学制，一月份毕业，目前校招已经入职快半年，马上面临转正了。大家可以从我的主页看到，去年暑期实习和秋招，我其实都更新了很多很多面经。秋招结束后，牛客这边基本就没有再经营了，也没有新的产出，这是因为我已经搬到了别的平台，目前所有平台都在另一边更新（可能很多人已经刷到过）某天打开牛客（很久没打开了）发现私信有几十条，问题都差不太多，无非就是选offer、问学...