秋招第三个意向：高德

1. 介绍一下项目2. 多头注意力机制的计算复杂度是多少？3.LoRA 的核心思想是什么？4. GRPO 训练时 KL 散度控制得怎么样？5. SFT 阶段如何避免对padding token 计算 loss ？6.训练 SFT 模型时 loss 出现剧烈震荡，你是如何诊断并解决的？7. Transformer 中为何使用 LayerNorm 而非 BatchNorm ？8. Transformer 里LayerNorm 放在 Attention 前还是后？有什么区别？9. logprobs 在一致性奖励中起什么作用？📳对于想求职算法岗的同学，如果想参加高质量项目辅导，提升面试能力，欢迎后台联系。

1.八股：vLLM中使用的技术是否熟悉（如Paged Attention、KV Cache）？2.八股：了解加速推理框架DeepSpeed吗？3.八股：MoE模型专家的负载不均衡问题如何解决？4.八股：如何通过修改损失函数来解决负载均衡问题？5.项目：SFT使用的数据集，使用了多少张卡？SFT训练多久？6.项目：SFT 的数据集是越大越好吗？会存在scaling law 吗？7.项目：SFT使用的数据可能和原始模型预训练时的数据分布有较大区别，怎么解决？8.项目：讲一下LoRA微调的原理，A、B矩阵怎么初始化的，LoRA微调秩设置的是多少9.项目：讲一下什么场景下用SFT，什么场景下用RL10.项目：为什么使用强化学习会存在训练不稳定问题？为什么业界还在用？11.代码题：lc129 求根节点到叶节点数字之和

1.vivo，n×15，base杭州，相对wlb2.dj，（n+12）×15，base上海，工作强度未知都是影像算法相关，v可能更接近前沿技术探索，dj专注短侧部署。综合到手差异、工作强度、发展空间、base地差异，请各位大佬发表看法或建议

1、实习介绍2、synchronized的底层原理?3、字节码层面上相关的指令有了解吗?4、synchronized锁升级和优化。5、偏向锁是怎么实现的?轻量级锁、重量级锁在操作系统层面怎么实现的，有了解过吗?6、介绍一下volatie的实现原理，说一说JMM。7、还有一个作用。(防止指令重排序)8、从操作系统的层面取理解Java的线程有哪些部分?或者有哪些组成元素?9、线程进行上下文切换的时候都需要哪些东西来保证线程能够恢复到原来的待运行状态?10、说一下Hashmap和concurrentHashMap，介绍1.8之后就行。concurrentHashMap是怎么控制并发的?11、设计模式，说一下单例模式12、说一下工厂模式常用的地方,13、说一下7层网络模型14、输入一个网址，整个过程有哪些步骤。TCP连接一定会断开吗?15、http1.1和2.0有啥主要的区别?16、jvm运行时的数据区域?17、堆内存分配策略?18、创建一个对象的步骤(业务自定义的类对象)。(类加载、内存分配和初始化(堆)、设置对象头、执行实例初始化代码、返回对象引用)19、类加载机制?20、垃圾回收算法?21、相关的垃圾回收器?22、说一下索引结构?索引类型?23、主键索引会需要回表查询吗?24、最左前缀原则?索引失效场景?25、介绍一下spring中bean加载流程?26、介绍一下threadlocal的原理?怎么处理hash冲突的?27、redis常用的数据结构?28、zset底层实现?插入一个元素的流程?查找时间复杂度?最坏?29、我看你解决了一些缓存问题，你们缓存的主要是什么东西?怎么解决缓存雪崩?30、你分布式锁锁的是什么东西?怎么实现的?