2023/11/2 字节笔试AK

自我介绍了解 DeepSeek-R1 吗？介绍一下？R1 的 MLA 是如何实现 KV-Cache 的节约R1 在 SFT 时冷启动的目的位置编码是什么？解释 ROPE？一个 14B 的模型，推理和训练要多少缓存显存的占用和哪些因素有关大模型灾难性遗忘是什么？如何解决？BF16、FP16、FP32 对比？Adam、AdamW 原理deepspeed 的三个阶段自我介绍手写 Self-Attention 公式，解释 Q/K/V 的作用位置编码有哪些实现方式？相对位置编码相比绝对位置编码的优势？LayerNorm 和 BatchNorm 的区别？为什么 Transformer 用 LayerNor...

😇

😭她没看我的简历就把我刷了    

你好，我是Guide。最近，圈子里一个词的讨论度很高——大厂“内包”。像蚂蚁的“数字马力”、腾讯的“腾讯云智”，这些由大厂100%控股的子公司，就是典型的例子。它们是大型企业为了解决传统外包带来的数据安全、协同管理和成本问题，而催生出的新用工形态。虽说名为“内包”，但它们的整体待遇通常优于大部分中小厂，且面试难度往往不低。顺便吆喝一句，技术大厂机会，前端-后端-测试，待遇还可以，感兴趣试一试。下面是一位球友分享的数字马力面经，这是他面试了很多家公司拿到的唯一 offer。他直言，身心俱疲，再也不想经历面试了。为了方便大家学习参考，我为其中的面试题补充了详尽的参考答案。概览：自我介绍面试时的自我...