面试题简述Transformer中用的是LayerNorm，而不是常见的BatchNorm，这是为什么？面试官想听的意识到不是BN不好，而是不适合Transformer的使用场景。面试回答举例Transformer中选择LayerNorm而不是BatchNorm，主要原因和序列建模方式以及训练场景有关。详情请查看：http://xhslink.com/o/8yJohFzKSX6由浅入深分析1、BN 依赖 batch 统计量。2、LN 只依赖特征维度。3、Transformer 的 token 并行与 BN 设计目标维度不一致。4、自回归推理场景下 BN 表现不稳定。面试加分点1、提出推理阶段 ...

什么水平

面评一定不怎么样吧

1.笔试，暑期实习和日常实习很不一样，暑期实习是有笔试的！而且难度很大，不少同学被卡在了笔试结果最后连面试机会都拿不到！2.暑期实习和日常实习不一样，流程很长，说是3月份开始暑期实习，但是有很大部分的同学是5月份才拿到Offer，甚至是6-7月份。3.准备路线看这里，牛客高赞文章：https://www.nowcoder.com/discuss/824693499982315520?sourceSSR=search4.暑期实习其实难度和秋招差距不大，但是比秋招好一些，因为绝大多数同学都没有准备好！所以早就是优势！