2023-12-24 19:45 门头沟学院 施工员
关注
纯cv想找多模态的实习，必须有论文才行吗
在实验室做的都是纯cv的检测识别之类的，计算资源也很少跑不了大模型。想去找多模态的实习，需要学习什么东西，有什么成果，准备到什么程度呢。
最近的话，先把vit,swin,mae这些vision transformer的东西巩固了一下，然后找了一些博客，把从CLIP开始到VLMo到BEiT，这些多模态大模型预训练的东西看了看。下周准备找个下游任务，多模态检测比如GLIP，还有VQA之类的，跑跑代码。这个方向的多模态实习好找吗
还是说大部分多模态大模型做的还是DALL E, SD那种生图的工作，可是GAN我都一点不懂，这个转起来感觉跨度太大了
最近的话，先把vit,swin,mae这些vision transformer的东西巩固了一下，然后找了一些博客，把从CLIP开始到VLMo到BEiT，这些多模态大模型预训练的东西看了看。下周准备找个下游任务，多模态检测比如GLIP，还有VQA之类的，跑跑代码。这个方向的多模态实习好找吗
还是说大部分多模态大模型做的还是DALL E, SD那种生图的工作，可是GAN我都一点不懂，这个转起来感觉跨度太大了
全部评论
Proto1
腾讯_TEG_算法工程师
实习可以没有论文，学校够硬就行
有礼貌的打工鸭a
清华大学 算法工程师
多模态大模型看下Blip2, LLaVA, CogVLM这些基础的常用的。
相关推荐
07-17 13:41
门头沟学院 Java 点赞 评论 收藏
分享
东南路西北厂里面的水...：运气就是这样子，我和同学三个人一起面试，其它两个都过了，唯独我初选都没有过，直接pass，另一个同学还是有挂科的，照样过，另一个四级也没有过，他也通过了初选，我真的崩溃了
点赞 评论 收藏
分享
投递米哈游等公司7个岗位