美团AI产品经理面经

1、说一下PPO算法2、在PPO算法中，PPO是如何平衡探索和利用的？3、PPO算法中GAE算法的公式以及原理4、说一下SAC算法5、在SAC算法中，熵是怎么设置的，在具体实现的时候有哪两种实现方法，熵是怎么更新的？6、为什么PPO类的算法是在线策略、SAC是离线策略7、GRPO算法和PPO有什么改进8、Lora算法的原理9、Lora中 矩阵A和B是怎么初始化的，他们的秩设置有什么原则10、怎么进一步降低Lora的参数 （也就是QLora的原理）11、什么是矩阵的秩12、能不能从特征值的角度来说一下矩阵的秩13、Transformer相比起以前的注意力机制有什么不同14、Deepseek 中的前馈神经网络层和Transformer的有什么不同15、 对比一下 Deepseek，Llama，GPT316、你认为强化学习有没有给大模型带来新的知识

还记得 2022 年，正好是我研究生入学的年份。那一年有几件事，后来回头看，全是时代拐点：疫情突然放开，所有人几乎在同一时间“阳”了一遍；ChatGPT发布，我想注册个账号，官网排队、封号、收不到验证码，最后还是去闲鱼花钱找人代注册；GitHub、微软和OpenAI一起推了个叫Copilot的玩意，定价10美元一个月，说是能“辅助写代码”，我心想ntnd能写代码，那我以后干啥，至少在我身边，没有一个人真的在用。那会儿的大模型，更像是个玩具，你能感觉到它很聪明，但没人真的相信它能走进实际开发。大家的共识很简单：写代码这事儿，还是得靠咱老百姓。到了 2023 年，气氛开始有点不一样了。我几个师兄在...

首先你要会python（不需要熟练，只要用python写过简单项目）其次你要对算法的通用训练流程有个概念学历至少211，这决定你能不能过简历筛选 我们的目的就是以最低的时间成本快速过面，因此首先拆解一下面试组成部分常规面试时间一个小时，40分钟简历面+20分钟笔试+反问环节简历面主要考项目和八股。你最好有两个相关的项目，可以把四十分钟撑满；或者有一个充实的项目，可以经得住面试官拷打；如果项目都很浅很简单，那你需要对八股掌握的滚瓜烂熟。对面试者来说，问项目意味着自己掌握主动权，我们可以把自己的优势在项目里体现（比如可以在数据环节做复杂的设计，在调参上做设计，在训练流程上体现自己的独特insight），也可以通过项目提到的内容给自己划八股重点（一般提到数据就会问数据合成方法，提到微调就会问了解哪些微调方法和框架，提到rl就逃不开ppo grpo还有一些更新的等，提到rag会问检索 embedding，提到agent会问架构、memory等）。八股不是所有都考。我遇到过，力扣原题、transformer架构、KL散度这些神经网络公式的，还有数据处理的、设计prompt的等等。不过一般难度都不会很大，力扣的简单中等题做个大概，transformer和神经网络的经典实现看一看，其他的有一些些基础之后临场基本都能做出来。综上，时间有限：项目 >> 八股 = 力扣项目怎么找？ 网上有很多博主推荐项目，无非就是sft+rl，但我建议自己找一个研究背景，设计自己的数据格式，然后套那些技术手段（很多项目其实被做烂了，同质化很严重）。大概写一个项目的雏形出来，可以扔给llm跟他对话，让它充当面试官提问题。八股怎么找？ 最快的方式就是找各种面经，记录问题，然后自己借助大模型学答案，不要试图抱着一本书从头看到尾。大概准备的差不多70%之后就抓紧去面试，面试不要怕编的项目被拆穿、也不要怕答不上来面试官的问题尴尬，抱着学习的心态去面试，不要抱着通过的心态去面试。

今年大疆秋招截止特别早，我也是赶在了截止ddl之前完成了投递，投递岗位是图像处理算法。9.4 一面只有一个面试官，面试时间很短，只有不到半小时，项目问的不是很深入，反而有不少偏通用能力和协作相关的提问。1.自我介绍2.部署在哪里？什么型号的开发板？什么芯片的？3.部署时候有没有一些加速4.有没有其它的一些合作的项目？扮演着什么角色？5.有没有一些分歧的问题，是怎么解决的？6.如果工作遇到了时间紧任务重、或者因为别人导致你这边进度卡住了，你会怎么办？当时面完后感觉寄了，过了好久之后才通知我二面，当时想着大概率是kpi面。9.29 二面也是只有一个面试官，面试时间特别短，只有大概二十分钟。1.自我介绍2.算法的核心价值是什么？有自己有思考过吗？3.怎么样才能认为这个图像算法做的比别人好呢？那从哪些维度去评价呢？4.为什么选择这个算法？5.这个算法测试时存在哪些问题？出现这些问题的原因是什么？后面是怎么解决的？6.了解ISP pipeline吗？7.为什么考虑大疆？8.用过大疆什么产品？当时面完后感觉时间这么短，并且我回答的一般般，肯定是寄了，后面就没有对这个公司抱有太高的期望。过了差不多两个月，在11.28的时候，突然收到hr的口头意向，当时很震惊，后面又陆续收到了书面意向并且完成了签约。后面我对此进行复盘，认为主要的原因如下：1.大疆的老员工走了一大批，导致大疆现在很缺人，今年hc很多2.两次面试流程都很短，技术深挖不算多，更多是在确认背景、思路以及是否能快速融入团队，而恰好我的学历、实习、校园项目都还可以，只看这些我确实满足要求。3.感觉面试官的研究或工作方向和我并不完全一致（我做的ISP中的DRC模块，相对比较小众），导致面试官被我的简历唬住了，没搞懂我的真实水平