大模型面经分享

各位哥哥姐姐兄弟姐妹家人朋友们，想跟大家调研下在互联网大厂的你们一般第一年入职的时候日均上班时长在什么程度呢😥25届过着9 11 5没加班费的生活想要开开眼界

简述 Transformer 多头注意力机制理解词间关系的原理。​训练 Transformer 时，如何解决梯度消失或梯度爆炸问题？​GPT 等模型对 Transformer 结构做了哪些改进以提升生成效果？​如何优化 Transformer 模型预测速度？​说明 RAG 结合外部知识库与大语言模型提升回答准确性的机制。​用 RAG 构建问答系统时，如何处理检索内容不相关或不全的问题？​如何确定 RAG 系统中文档的合适切分粒度？​当 RAG 系统知识库数据量大、检索慢时，有哪些提速方法？​如何协同使用 Transformer 与 RAG 以发挥最佳效果？​用 RAG 优化模型回答，有哪些实用...

 什么是MOE（混合专家模型）？其核心设计思想是什么？   DeepSeek MOE是哪家公司的产品？其架构设计有哪些特色？   门控网络（Gating Network）的作用是什么？ 如何解决MOE中专家负载不均衡问题？   在分布式训练中，MOE如何实现专家参数的高效更新？   DeepSeek MOE如何优化长序列场景下的推理效率？   如何评估MOE模型的稀疏性效率？请列举至少2个指标。   若设计多模态MOE模型，门控网络应如何融合图像/文本特征？   若MOE推理时出现“专家选择震荡”，如何解决？

游戏策划：以《蛋仔派对》为例，谈谈你对休闲竞技类游戏社交互动设计的理解，它有哪些优点和可改进之处？如果要开发一款以 “元宇宙校园生活” 为主题的手机游戏，设计 3 个独特玩法，阐述玩法规则和亮点。在一款角色扮演游戏里，玩家升级所需经验值按等差数列递增，1 级升 2 级需 100 经验，2 级升 3 级需 150 经验，以此类推。求玩家从 1 级升到 10 级总共需要多少经验？针对 12 - 18 岁的中学生群体设计一款游戏，你会重点考虑哪些需求和喜好？分享你参与过的游戏项目，阐述负责的内容，遇到的最大挑战及解决办法。为游戏中的一个隐藏关卡撰写一段剧情文案，要求包含悬念和转折。对比《原神》和《崩...