java转大模型应用/后训练

1.八股：NLP和LLM最大的区别是什么？两者有何共同和不同之处？2.八股：激活函数有了解吗，你知道哪些LLM常用的激活函数？为什么选用它？3.八股：开源框架了解过哪些？Qwen，Deepseek的论文是否有研读过，说一下其中的创新点主要体现在哪？4.项目：介绍微调负责的工作，大模型微调最重要的是什么？5.项目：SFT+DPO训练怎么组织这部分数据的？是自己构造还是用公开数据？6.项目：看你做过LoRA微调，那你是怎么选rank值？合并adapter权重的时候有没有遇到梯度爆炸？7.项目：说下LoRA的原理，LoRA是不是只能在Linear层插？为什么不能插在LayerNorm之后？这会对训练稳定性造成什么影响8.项目：刚才提到用过QLoRA，能具体说说QLoRA是怎么降低资源成本吗？9.项目：llm推理效率，如果真的部署到在线系统里，这个效率的问题怎么解决呢10.项目：有没有尝试过模型裁剪？比如 low-rank adaptor、LoRA 融合，或者用Mamba替换部分token path？11.代码题：实现Casual mask的MHA，说下计算复杂度

在做深圳入户体检时，有些平常作息规律，没有不良习惯的小伙伴，突然测出血压偏高，这到底是怎么回事呢？1.什么是血压？在跟大家解释这种现象前，小编先跟小伙伴们谈一谈什么是血压。血压，是指血液在血管内流动，对血管壁产生的单位面积侧压力。我们通常说的血压是指动脉血压，用血压计在肱动脉上测得的数值来表示，以mmHg（毫米汞柱）或kPa（千帕斯卡）为单位，它包含收缩压和舒张压两部分。对于成年人来说，90 mmHg＜收缩压＜140 mmHg，60 mmHg＜舒张压＜90 mmHg为正常。当收缩压大于≥140 mmHg，或舒张压≥90 mmHg（即收缩压或者舒张压其中一个超过临界值），视为血压升高或高血压。2...

1.在 RAG 应用中是如何做效果评估具体用了哪些指标2.如何训练用于 RAG 场景的生成模型3.vLLM 的核心原理是什么4.如何增强模型的多轮对话能力5. CoT ( Chain - of - Thought )训练数据如何构造6.介绍vL LM 、量化、 KV Cache 优化技巧7." packing "形式和"多轮对话"形式有何区别？8.LeetCode 72编辑距离📳对于想求职算法岗的同学，如果想参加高质量项目辅导，提升面试能力，欢迎后台联系。