蚂蚁算法

蚂蚁算法28号二面完没动静了，三面大概多久会通知啊 #我的实习求职记录#  #蚂蚁集团暑期实习#

1.问项目项目的某个模块能不能用大模型来做？如果用大模型来做有什么优势？2.结合项目问一些八股lora和qlora的原理3.用两个骰子采样1-36的均匀分布=用两个rand(6)实现rand(36)

投的是算法工程 算法工程岗位。做的是 Ai infra。实际上是做大模型推理加速训练加速之类的优化框架， 没啥经验。1. 自我介绍2. 介绍一下自己第二段实习遇到的难点（就从算法和工程两块随便说了一点）3.C++指针和引用的区别4.STL 常用吗？ map 的具体实现懂吗？（红黑树，不过用 umap 更多，哈希表）5.那你介绍一下哈希表的常用实现方式。（就讲了一下拉链法， 桶，重哈希啥的）6. 智能指针了解吗？ 介绍一下7. 右值引用知道吗？移动语义介绍一下。8.transformer 的结构了解吗？介绍一下9.有了解过大模型的并行优化方式吗？（随便讲了一下模型并行 数据并行 流水线并行）10.那我现在一个 gpu 都放不下一层怎么办？（张量并行）11.那你知道张量并行怎么设计吗？就是矩阵之类的怎么拆？（这个不太了解了）12. deepspeed 和 megatronLM 有了解吗？（不太了解其实，只用过，什么 3D 并行13.flash attention 有了解吗？（大概讲了一下 QKV 中间状态不保存， 后向重新计算， 还有 softmax 分块计算）代码题字符串反转 to be or not to be 反转成 be to not or be to整体而言不难，但是主要是整体问的都比较底层和框架一点，其实都不太了解， 不知道面试官咋看。

更新：已经收到感谢信。 另外提醒各位一句，骚扰拦截关了。我的小米把阿里巴巴的电话拦截成房产中介了3.28晚7点的电话面，最绝望的一次面试。面试官人很好，就是不知道为什么这种部门会捞我这种废物。项目面试官：你项目上线了吗？我：没有，我这个项目。。。面试官：好的，那我们聊技术问题吧？八股讲讲java的类加载器机制。那你觉得类加载主要解决什么问题等下，我追问下哈，你学过c语言吧？c语言有类加载器吗？ 他也需要加载入内存吧？你再想想。 redis里面有个skiplist了解吗？简单说说线程池了解吧?类的名字知道吗？主要有哪些模式？场景题假如你设计了这么一个服务器，用户请求了一个很耗时任务，你用线程池...