OpenMMLab 第六课速通

前言

首先,给出语义分割,目标检测和实例分割的区别。 语义分割就是把图像中每个像素赋予一个类别标签,呈现出来就是不同的类别的像素用不同的颜色进行表示。 目标检测,输出bbox检测框。 实例分割输出是mask。实例分割和语义分割容易混淆,注意语义分割对每一个像素进行分类,但是实例分割不需要,它只用找到感兴趣的物体的边缘轮廓就行了。像下面这张图一样。 alt

再区分一下全景分割,注意全景分割中,类别cls指的是背景,前景专门说stuff实体。 alt

全连接层的卷积化

这可以让网络适应任何尺寸的图片。之前有说过。来自2015年全卷积网络。简单来说,就是FC层的参数向量,原本都是对应不同类别的,现在把它们攒成卷积核(反向量化)。FC变成卷积操作。原本FC结果是一个向量,向量元素对应不同的类别,现在成了1*1*Class数,类别体现到通道上去了。 alt

基于多层级特征的上采样

高层特征经过多次降采样,细节损失严重,低层卷积细节信息丰富但是语义信息贫乏,高层特征图中语义信息丰富但是细节信息贫乏。我们可以结合低层次和高层次的特征图。 alt 利用上采样,结合低层特征图的方法恢复细节信息。 alt

上下文的重要性

感兴趣局域的周围内容可以帮助我们做出更加准确的判断。就和阅读完型填空似的。但是滑动窗口丢失以上下文信息。 alt 如果解决丢失上下文信息的问题呢?我们需要保证感受野够大~ 在2016年,PSPNet中,使用了多尺度池化的方法 alt

DeepLab

这是我的毕设呜呜呜好好学 DeepLab是语义分割的一系列工作,主要贡献有

  • 使用空洞卷积解决网络的下采样问题
  • 使用条件随机场CRF作为后处理手段,精细化分割图
  • 使用多尺度空洞卷积ASPP模块,捕捉上下文信息 2014 v1 2016 v2 2017 v3 2018 v3+
空洞卷积(取代下采样)

下采样+标准卷积 等价于 空洞卷积;不需要额外的插值操作。 alt alt

条件随机场

一种后处理手法。crf是一个概率模型。 alt alt

空间金字塔 ASPP

这是一种仿照PSPNet的手法,只不过不是不同尺度的标准卷积,而是不同尺度的膨胀卷积。 alt

融入decoder思想

就是抽了一层低层卷积的细节信息,融合了而已。 alt alt

评估

alt

全部评论

相关推荐

各位前辈好,先说声抱歉,可能又是一篇“求骂醒”的帖子,但我真的需要一个方向。我的情况比大多数人都糟糕:双非软件工程,大四,马上毕业了,0实习经历,0工作经验。秋招根本没参加,原因很傻——我一头扎进了一个自己觉得“挺有意思”的项目里,天真的以为把项目做好工作自然会找上门。现在春招也快结束了,我才如梦初醒,发现简历投出去基本石沉大海。我没有什么能拿出手的背景,唯一能说的就是这个从后端到前端全栈独立开发的电影推荐平台。我知道在各位前辈眼里这大概率就是个小玩具,但我确实是下了功夫去琢磨的,它不是什么网上扒的代码,下面这些是我自己琢磨并落地的东西:项目概况:Spring Boot + MyBatis-Plus + Redis + JWT + MySQL + Vue3(前端是AI辅助生成的)我自己觉得花了心思的几个点:1. 推荐算法落地:没有照搬别人的推荐逻辑。我是基于用户多维行为数据(评分、收藏、浏览时长)去计算标签权重,然后用“评分×log(热度+1)”的公式做加权排序;冷启动场景用热门数据兜底。推荐结果用Redis的ZSet缓存,用户行为一变化就主动删缓存触发重算。2. 缓存体系设计:不是那种“面试八股文背完就扔”的表面理解。我实际遇到了缓存穿透和击穿的问题,然后自己用空值缓存+逻辑过期去解决。热门电影定时预热、批量查询用multiGet减少IO次数,还封装了MyCacheUtils通用模板,让整个项目其他模块也能复用这套缓存逻辑。3. 并发与一致性:用Redis的SET NX EX实现了收藏/点赞的分布式锁,key精确到“用户+操作对象”级别,不是粗粒度的一锁全锁。异常回滚时Redis和MySQL数据一致性问题也思考并落地了。验证码的原子性校验用了Lua脚本来保证。4. 性能是真实数据:我用JMeter做了2000并发的压测,引入Redis缓存体系后,推荐接口平均响应从6466ms降到155ms,吞吐量翻了一倍,缓存命中率干到98%以上。这些数据不是编的,是我自己反复调优跑出来的。说实话,做完这些的时候,看着压测报告我是挺兴奋的,觉得“这也算出活儿了吧”。但现实是,0实习好像成了我简历上的原罪,很多公司直接筛选条件就把我过滤了。所以我想跪求各位前辈指点我几个问题,每一条我都认真看、认真执行:1. 关于简历:0实习的应届生,还有资格谈“项目亮点”吗?我这项目,是不是在专业面试官眼里就是一个“低配版培训项目”?如果这个项目还有救,该怎么在简历上呈现,才能让HR或者面试官至少愿意给我一个电话面试?如果没有,一个0实习的应届生到底该在简历上写什么?2. 关于面试:如何用项目细节证明“我虽然没实习但真的能干活”?我挺怕面试官看到我没有实习经历就直接失去兴趣。真到了面试那一步,我该怎么引导对话,用上面这些技术细节去对抗“没实习=没工程经验”的刻板印象?比如缓存那块,怎么从“我解决了击穿”讲出一个有技术判断力和工程思维的完整故事?3. 关于求职策略:错过了黄金窗口期,现在该冲什么样的公司?大厂我肯定不奢望了。现在这个时间点,我应该去投那些小公司和外包吗?要不要把薪资预期降到最低先入行再说?对于0实习的应届生,什么样的公司是真的有机会让我进去学技术、积累经验的?4. 关于未来:如果现在直接找不到工作,我该怎么办?这段时间我想好了,如果实在是找不到研发岗,我要不要去干测试或者运维先入行?还是找家小公司被压榨一年攒个经验?还是干脆先找个其他工作边干边学等下一轮秋招?我什么建议都能接受。我知道自己起步晚了,代价得自己扛。现在唯一能做的就是面对现实,然后找到一条最有可能逆袭的路。希望前辈们能给我指个方向,即使简单几句“没救了”或者“还能救,去做XXX”我都非常感激。
jiestart:这简历肯定没面试的,你得包装个实习再加一个agent项目才有希望
点赞 评论 收藏
分享
评论
点赞
7
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务