字节豆包大模型面经

1️⃣一面:
1.自我介绍
2.选一个做的好的实习或者论文讲一下
3.了解 RAG 吗, GraphRAG 的做法
4.讲一下 FlashAttention 的思想和做法
5.讲一下 RoPE ,目前常用的位置编码还有哪些, Ro PE 有什么优点
6.场景题:如果要提升大模型的多轮对话能力,你有哪些可以改进的点
7.代码题:56.合并区间
2️⃣二面:
1.自我介绍,问实习和论文
2.实习微调过Qwen2,你说说Qwen2的模型结构吧,Qwen2相比Qwen1做了哪些改进
3.为什么现在 Decoder - only 成为大模型的主流架构
4.了解过哪些模型训练推理优化的方法
5.为什么有了 SFT 之后还需要 RLHF
6 .PPO 和 DPO 的主要思想是什么
7.代码:23.合并 K 个升序链表
3️⃣三面:
1.自我介绍,过实习和论文
2.了解 Qwen 的结构吗,微调的数据配比是怎样的
3.大模型的灾难性遗忘问题怎么解决
4.了解 KV cache 吗, GQA 的思想是什么
5.场景题:目前有一些专业领域知识(如医疗知识或者法律条文),准备做个智能助手,如何搭建一个 RAG 链路
6.开放题:用过豆包吗,觉得目前豆包还存在什么问题
7.代码:416.分割等和子集
📳对于想求职算法岗的同学,如果想参加高质量项目辅导,提升面试能力,欢迎后台联系。
全部评论
问一下三面多久有结果
点赞 回复 分享
发布于 01-24 09:43 吉林
能咨询下,面的是豆包基座还是应用算法。要是应用算法应该投哪里
点赞 回复 分享
发布于 2025-11-30 17:55 北京

相关推荐

攒人品中,祝大家都能拿到满意的Offer!1.项目拷打2生成式推荐本质上是在做隐空间到离散iD的映射,你如何证明你生成的 ID 序列保留了用户意图的最优压缩3.比如广告场景下不仅仅是预估 CTR。如果我们将生成式排序引入 GSP拍卖,大模型生成的候选列表概率分布,如何保证满足激励相容性4如果模型生成的排序导致广告主出现竞价上的博弈呢5.在H100集群上跑生成式重排,现在的瓶颈不在计算而在存储带宽。如果分阶段推理,我在Prefill阶段采用了FlashAttention-3,但在 Decoding 阶段因为 KV Cache 导致的Fragmented Memory太严重,怎么办6.推荐系统要求毫秒级响应对于1B规模的排序模型,如果我要做Speculative Decoding,你如何设计那个Draft Model?这个小模型是该学大模型的 Logits 分布,还是该学用户的Embedding聚类7.假设构建一个端到端生成式广告系统。现在面临一个场景:某个新入驻的土豪广告主投放了一批高质量视频,但由于模型对新 ID 的 Semantic Indexing 尚未完全对齐,导致第一波推荐给了错误的人群,产生了极高的 Negative Feedback,生成式模型的自回归特性会不断放大这种“第一印象”,导致该广告主瞬间被屏蔽你如何设计一套Online Counterfactual Correction这种,在不重新训练模型的前提下,通过修改 KV Cache里的隐藏状态来强行挽回这批广告的生命周期9.在短视频重排阶段使用了一个 10B 的生成式模型但是业务反馈说模型在学会了今天最火的某个梗以后,竟然忘记了如何处理用户对“长尾科普视频”的旧兴趣,发生了明显的 Catastrophic Forgetting,设计一种基于 Gradient Orthogonal Projection的优化器,确保模型在更新实时热点知识时,参数更新量在旧知识的Null Space内。10.都知道生成式模型有位置偏差从 Attention Entropy 的角度来看,为什么 $N$ 个候选 Item 在序列中的排列顺序会直接导致 Logits 的非线性漂移
查看9道真题和解析
点赞 评论 收藏
分享
评论
6
29
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务