大模型应用算法暑期实习Offer选择

今天老师为大家梳理了字节算法岗关于大模型Rag的面试题，供各位同学参考。1️⃣ LORA 原理：解释 LORA(Low-RankAdaptation)的核心思想，如何通过低秩矩阵实现参数高效微调?数学形式如何表达?2️⃣Self-Attention机制：自注意力机制中 O/K/ 矩阵的作用是什么?如何通过缩放点积计算注意力权重?公式推导并解释Softmax 的意义。3️⃣位置编码：Transformer为何需要位置编码?主流 LLM(如 LLaMA、GPT)使用哪种位置编码(如 ROPE)?相比绝对/相对位置编码有何优势?4️⃣Seq2Seg 模型：Seq2Seq模型的核心组件是什么?Encoder-Decoder结构如何解决长程依赖问题?5️⃣RAG技术：RAG(检索增强生成)的完整链路包含哪些步骤?为什么它能提升生成质量?6️⃣大模型幻觉：大模型产生幻觉的根本原因是什么?7️⃣显存计算：7B 模型在训练和推理时的显存占用如何估算?显存与参数量、批次大小、序列长度的关系是什么?8️⃣实习与论文：详细说明实习中解决的一个技术难点，涉及哪些模型或算法?如何评估效果?9️⃣链表操作：删除链表倒数第 N 个节点的算法思路?如何用双指针法实现?边界条件(如头节点删除)如何处理?📳对于想求职算法岗的同学，如果想参加高质量项目辅导，提升面试能力，欢迎后台联系。    

今天一早，京东官方号发出了几乎是有史以来言辞最激烈的文章之一，一纸“致全体外卖骑手兄弟们的公开信”，不但疯狂点名某平台压榨骑手，逼迫数百万底层骑手二选一，还拿出杀手锏，所有超时20分钟以上的订单全部免单，外卖员如果有对象，对象也可以获得一份京东的工作，而且未来三个月将招聘十万名外卖员。          其实，这封不点名却句句直指美团的檄文，标志着中国互联网巨头们又一场激烈厮杀的开始。不点名是一种艺术，用“某平台”代替，即使大家都看出来他在说谁，万一出了问题，京东也可以辩解：“我没有说你，怎么能确定是谁呢？”          所以同时，也有人认为，京东这么一封公开信有点道德绑架的“油腻”意思...

一面，面试官水平很高，气质上给我的感觉像是清华或者中科大少年班的。面试体验很好。首先聊了聊无经验为什么做AI Sys，答有传统计算机系统的学习经验，AI Sys很多思想和传统sys相同。举例Paged Attention和操作系统中虚拟内存分页的相似性。接下来问了问大模型推理的过程，有哪些潜在的优化点。接下来做题，一道没刷过的dp，虽然一眼看出是dp，但转移方程还是在面试官的提示下才设计出来的，最后corner case没处理好，没撕出来。技术不行，沉淀再战。   

最近，本地生活服务领域很热闹。京东全面进军外卖市场后，美团和阿里饿了么的接招，让这次本地生活服务的“突发战役”，成为近年来国内商业竞争最大的焦点之一。就在昨天，市场监管总局会同多部门约谈了京东、美团、饿了么等平台企业，这并非要阻止外卖市场的竞争，而是希望引导行业更加健康有序地发展。毕竟，此轮外卖大战的背后，是即时零售这个万亿级市场的全面争夺，消费升级和数字经济的长远发展，都绕不开它。之前一段时间，消费贡献的热点何其多，光茶饮的上市溢价就震撼了整个市场。我们可以确定，即时零售消费效应的延伸，可能才是这轮大战背后最值得关注的机会点。包括晚点latepost报道淘宝闪购入局时，后者的内部人士有一句话...