图形学选手秋招(冬招?)总结

京东面经（总共30分钟，项目15分钟，八股15分钟）1.1-2分钟自我介绍项目一(rag)1）请你讲一下文档解析与向量检索的部分2）文档解析这一块，不能解析扫描件的pdf文档类型，你后续有什么方法去解决吗（我答的利用MCP去调用WPS的文档解析服务，面试官补充说可以利用OCR工具去实现3）ES向量检索召回率很低怎么办，（答了利用faiss去优化向量检索4）用的什么向量模型，维度是多少，有去横向对比过吗5）用到了什么大模型，这个大模型的优缺点是什么，横向对比过吗6）平时会去用ai辅助编程吗7）redis在项目中主要的用途有哪些8）在利用security+jwt这样的鉴权方法，有什么更好的方法去优化吗（面试官补充了SSO，OAuth，可以实现第三方登录，单点登录）9）讲一下你实现的security+jwt这样的过滤器流程，怎么进行权限控制的10）为什么要用websocket去进行交互，优缺点在哪，相比于http的区别11）谈一下你对ai的看法，了解哪些ai的技术栈，框架，未来的发展方向有想法吗12）有什么想特别学习的技术吗项目二1）讲一下利用Redis缓存+定时异步将热点数据的并发点赞、评论、和收藏回写到数据库2）你刚刚说定时用到了@schedule注解，那如果是6台服务器去回写，怎么保证一致性，你会怎么做3）雪花算法的核心概念讲一下，它的缺点在哪，它在部分场景下会失效，有什么更好的ID生成方法吗4）两个项目的消息队列用的是什么，为什么要用rabbitMQ和Kafka4.八股1）反射的缺点是什么2）注解的底层原理是什么3）讲一下JVM的运行时内存区域，各自的作用是什么，static修饰的成员变量放在哪4）讲一下类加载机制5）项目中有用到并发编程的地方吗6）讲一下线程安全类，说一两个，他们在项目中的使用场景7）concurrHashmap和hashmap的区别，在项目中有用到吗8）semaphore，countdownlatch，cyclicBarrier了解吗9）MySQL的锁机制，索引类型，为什么要用B+树10）redis的持久化过程11）怎么自定义Starter的，详细过程讲一下12）有读过框架的底层代码吗，mybatis，问了xml配置文件中，从前端到dao层的流程，xml配置文件中的sql语句是如何运行的13）项目管理除了maven，还有用到其它的吗

1.自我介绍和过项目2.知道 deepspeed 和 megatron 吗，分别介绍一下3.Decoder 文本生成有哪几种方法4.Attention 为什么要做scaled ，不做会怎么样，为什么用根号 d _ k5.说一下 Decoder 的因果注意力， QKV 分别来自哪6.深挖多模态大模型论文用的video - llama ，讲一下大模型的结构7.LoRA 初始化怎么做的，用的秩是多少，为什么不选其他的数8. 介绍一下 ALBEF 、 BLIP

一面 1.介绍项目，问项目难点在哪，怎么解决的2.问项目里的数据合成方法，如果不这么做还可以怎么做3.问RAG的流程，知识库，检索方式，提示词怎么写的，问RAG里的一些问题，如果检索不到怎么办，如果知识库没结果怎么办等等4.问DPO PPO GRPO原理，问loss怎么算的，对比5.做DPO的时候调了哪个参数，有什么作用(beta)6.transformer架构、注意力机制，问知不知道其他的除了7.MHA之外的比如GQA等8.手撕-旋转遍历矩阵二面1.介绍项目，问项目背景、项目里一些问题2.讲了实习项目里DPO的一些设计3.问知不知道模型训练的一些参数，答了温度参数、topp、top-k这些，然后问互相搭配的一些影响，问原理手撕-忘记了但也是力扣原题很简单

1．项目介绍2．讲讲你对 transformer 的了解3．有哪些常用的解码策略， topp 和 topk 的具体细节，以及实现上的差别4. 意图分流的 agent 怎么做微调的，用了多少数据5.如何做 embedding 微调的，如何构造正负样例，训练的 loss 是什么6.RAG有哪些可优化的地方7．你的 RAG 项目中用到了 agent 吗，一般 agent 会用在RAG 链路中的哪些部分8．做 sft 时是怎么做数据配比的，参数具体怎么设置的9.RLHF的流程，有没有训过 PPO10. deepseed 的原理，zero1,2,3怎么做的11.了解过排序模型吗，讲几个经典的排序模型吧12．说一下 vllm 部署8*7B的 MOE 模型每秒大概能推多少token13．对比学习了解吗，讲一下（比较突然，不知道为啥要问）14.code :实现rand5到rand7