oppo内推 oppo内推码

自我介绍了解 DeepSeek-R1 吗？介绍一下？R1 的 MLA 是如何实现 KV-Cache 的节约R1 在 SFT 时冷启动的目的位置编码是什么？解释 ROPE？一个 14B 的模型，推理和训练要多少缓存显存的占用和哪些因素有关大模型灾难性遗忘是什么？如何解决？BF16、FP16、FP32 对比？Adam、AdamW 原理deepspeed 的三个阶段自我介绍手写 Self-Attention 公式，解释 Q/K/V 的作用位置编码有哪些实现方式？相对位置编码相比绝对位置编码的优势？LayerNorm 和 BatchNorm 的区别？为什么 Transformer 用 LayerNor...

终于结束了提心吊胆的好几天

这才七月底，就有一堆公司开启了提前批，这让我这种还在实习的小趴菜怎么办，完全不敢投要简历没简历，要八股没八股，每天起床就是跟 dirty work 对线，工作了一整天，回到宿舍累得一批，都学不动了我想的是这半个月好好整理实习的东西，等到八月中旬再开投，不知道还来不来得及，大家怎么看呢