26秋招猿辅导大语言模型算法一面

一开始介绍项目,了解在项目中负责的工作,对细节适当提问。然后着重考察大模型训练和微调的原理
1,介绍在项目中负责的工作;RAG怎么优化和评估
2,生成模型选择什么,跟其他模型对比
3,模型预训练和微调有什么区别
4,预训练是怎么做的,输入是什么,怎么训练
5,微调的输入是什么,和推理的输入有什么区别
6,输入样本在训练前需要做哪些处理;训练损失如何计算
7,批量训练怎么实现的,样本间长度不一怎么解决
8,大模型训练时采用什么padding方式,为什么
9,算法题:滑动窗口最大值
全部评论

相关推荐

评论
点赞
1
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务