今天 17:30 门头沟学院 推荐算法
关注
百度大模型多模态算法实习面经分享
被横向挂了，希望发出来对大家有帮助！
1. 讲一下主要的多模态模型的模型结构
2. 对多模态的数据有什么了解，我回答之前看了一些多模态cot的工作构造的dpo数据，以及毕设做的多模态数据增强
3. 之前的工作的多模态数据有什么特点和创新点，觉得还可以有什么改进
4.统一生成理解模型下游微调各个任务的数据是怎么构造的
5. dpo算法是怎么实现的，和其他强化学习有什么区别
6. 看项目有目标检测任务，问了IoU是怎么算的，目标检测一般有哪些损失优化
code：
1. 实现dpo损失，按照想法能写多少是多少，不要求跑通
2. 手写IoU损失，要求跑通
1. 讲一下主要的多模态模型的模型结构
2. 对多模态的数据有什么了解，我回答之前看了一些多模态cot的工作构造的dpo数据，以及毕设做的多模态数据增强
3. 之前的工作的多模态数据有什么特点和创新点，觉得还可以有什么改进
4.统一生成理解模型下游微调各个任务的数据是怎么构造的
5. dpo算法是怎么实现的，和其他强化学习有什么区别
6. 看项目有目标检测任务，问了IoU是怎么算的，目标检测一般有哪些损失优化
code：
1. 实现dpo损失，按照想法能写多少是多少，不要求跑通
2. 手写IoU损失，要求跑通
全部评论
相关推荐
03-21 11:27
复旦大学 Java 点赞 评论 收藏
分享