面试题简述训练大模型经常会遇到梯度爆炸和消失，你知道有哪些改善方法吗？softmax会不会导致梯度爆炸或消失？transformer的设计里有哪些方法用于解决这个问题？面试官想听的1、L2 clipping、梯度缩放、初始化模块；2、softmax为什么会导致梯度爆炸；3、了解 DeepNet init、RMSNorm 等提升稳定性的方法。面试回答举例梯度爆炸一般用梯度剪裁解决，梯度消失可以通过残差连接 + 合理初始化 + LayerNorm 减轻。softmax 本质上确实会带来梯度集中到一个token上，从而导致梯度消失，尤其是 logits 非常大时。详细内容可跳转该链接查看详情：htt...

offer1:🌸终端云，游戏部门，可以做服务器开发，开了大概14a，base东莞，n*14offer2:某直聘，后端研发，做内部聊天，base北京，(n+3)*16作息感觉两边差不多，不知道该怎么选了，从薪资，前景上，看大家有没有什么说法，以后跳槽认可度怎么样

深圳入职体检会查乙肝吗？除外少数特殊行业和岗位，一般情况下，常规的入职体检是禁止强制检测乙肝项目的。深圳入职体检一般情况下不需检查乙肝，因为目前国家并不允许检查乙肝，但肝功能检查依然是比较常规的项目。在医生那里我了解到，入职体检是否允许查乙肝，这主要取决于具体的单位和行业要求。一般来说，医疗、制药等特殊行业的员工体检是需要检查乙肝的，因为这些行业的工作性质可能对员工的健康状况有更高的要求。然而，对于其他行业，对乙肝的检查可能并没有严格的要求，所以说常规的入职体检是不会查乙肝的。社会压力逐渐地提升，更多人会选择成为一名上班族，但是如今的各大企业都要求必须要进行入职的体检，在入职体检过程中同样也需...

#字节##快手##小马智行求职进展汇总##offer##offer帮选##offer决赛圈，我是怎么选的#