腾讯大模型搜索算法岗社招一面
1️⃣RAG部分
1.讲一下RAG的总体流程?—结合项目
2️⃣Query 理解
2.用户理解阶段一般会做哪些处理?有何作用?可以做哪些优化?
3️⃣Index 构建
3.文档问答中,如何构建索引,提升对用户问题的泛化能力?
4️⃣Retrieval 召回
4.多路检索如何实现?如何合并多路检索的结果,对它们做排序?
5️⃣Reranker 精排
5.如何构建重排序模型的微调数据?
6️⃣模型结构部分
6.RoPE相对正弦位置编码有哪些优势?
7.为何使用 RMSNorm 代替 LayerNorm?
8.RMSNorm与LayerNorm在数学公式上的核心区别是什么?
7️⃣微调部分
9.指令微调(Instruct-tuning) 和 提示学习(Prompting)的区别是什么?
10.LoRA的工作原理及其优势?
11.为什么在参数高效微调中使用低秩矩阵分解?
1.讲一下RAG的总体流程?—结合项目
2️⃣Query 理解
2.用户理解阶段一般会做哪些处理?有何作用?可以做哪些优化?
3️⃣Index 构建
3.文档问答中,如何构建索引,提升对用户问题的泛化能力?
4️⃣Retrieval 召回
4.多路检索如何实现?如何合并多路检索的结果,对它们做排序?
5️⃣Reranker 精排
5.如何构建重排序模型的微调数据?
6️⃣模型结构部分
6.RoPE相对正弦位置编码有哪些优势?
7.为何使用 RMSNorm 代替 LayerNorm?
8.RMSNorm与LayerNorm在数学公式上的核心区别是什么?
7️⃣微调部分
9.指令微调(Instruct-tuning) 和 提示学习(Prompting)的区别是什么?
10.LoRA的工作原理及其优势?
11.为什么在参数高效微调中使用低秩矩阵分解?
全部评论
相关推荐
今天 09:16
Java 牛客38753147...:后端的竞争者一届比一届卷,前两年非985还很多,一段大厂实习就已经非常优秀了。
现在985硕多如狗,人手一段大厂实习,而且腾讯和百度今年都宣布实习扩招了一倍不止,越来越多的人从本一研一就开始刷实习,信息差也基本没有了。可以预见的,以后只会越来越卷。

点赞 评论 收藏
分享
点赞 评论 收藏
分享