OpenMMLab 第六课速通

前言

首先,给出语义分割,目标检测和实例分割的区别。 语义分割就是把图像中每个像素赋予一个类别标签,呈现出来就是不同的类别的像素用不同的颜色进行表示。 目标检测,输出bbox检测框。 实例分割输出是mask。实例分割和语义分割容易混淆,注意语义分割对每一个像素进行分类,但是实例分割不需要,它只用找到感兴趣的物体的边缘轮廓就行了。像下面这张图一样。 alt

再区分一下全景分割,注意全景分割中,类别cls指的是背景,前景专门说stuff实体。 alt

全连接层的卷积化

这可以让网络适应任何尺寸的图片。之前有说过。来自2015年全卷积网络。简单来说,就是FC层的参数向量,原本都是对应不同类别的,现在把它们攒成卷积核(反向量化)。FC变成卷积操作。原本FC结果是一个向量,向量元素对应不同的类别,现在成了1*1*Class数,类别体现到通道上去了。 alt

基于多层级特征的上采样

高层特征经过多次降采样,细节损失严重,低层卷积细节信息丰富但是语义信息贫乏,高层特征图中语义信息丰富但是细节信息贫乏。我们可以结合低层次和高层次的特征图。 alt 利用上采样,结合低层特征图的方法恢复细节信息。 alt

上下文的重要性

感兴趣局域的周围内容可以帮助我们做出更加准确的判断。就和阅读完型填空似的。但是滑动窗口丢失以上下文信息。 alt 如果解决丢失上下文信息的问题呢?我们需要保证感受野够大~ 在2016年,PSPNet中,使用了多尺度池化的方法 alt

DeepLab

这是我的毕设呜呜呜好好学 DeepLab是语义分割的一系列工作,主要贡献有

  • 使用空洞卷积解决网络的下采样问题
  • 使用条件随机场CRF作为后处理手段,精细化分割图
  • 使用多尺度空洞卷积ASPP模块,捕捉上下文信息 2014 v1 2016 v2 2017 v3 2018 v3+
空洞卷积(取代下采样)

下采样+标准卷积 等价于 空洞卷积;不需要额外的插值操作。 alt alt

条件随机场

一种后处理手法。crf是一个概率模型。 alt alt

空间金字塔 ASPP

这是一种仿照PSPNet的手法,只不过不是不同尺度的标准卷积,而是不同尺度的膨胀卷积。 alt

融入decoder思想

就是抽了一层低层卷积的细节信息,融合了而已。 alt alt

评估

alt

全部评论

相关推荐

缓解焦虑的最好方法是回家。鼠鼠昨天上午考完了本科阶段的最后一场考试,大概率考得稀烂,但是没多想,考完立马收拾行李,坐上了提前约好的顺风车飞奔回家。虽然家和学校很近,只有一百多公里的路程,但距离上次回家也已经有三四个月了。每次想回家,期间总有考试、毕业设计、面试、实习等等各种各样的原因,没办法回去,待在学校和公司的每一天也都充斥着无形的压力和焦虑。现在终于完成了答辩,考完了试,公司那边也请了假,是时候回去一趟了。没有提前通知爸妈,想给他们一个惊喜。下午提前到了家,他俩还在上班,只好让外公外婆来给我开门。因为我的回家,晚上外婆在厨房格外忙碌,做了满满一大桌子菜,填饱了我天天吃外卖的肚子。晚上也没空...
梦想是成为七海千秋:取决于家庭吧?其实回家更焦虑了,每天起床父母都问实习找好了没简历投递了没今天有没有面试,但是又没有什么结果,玩两下手机父母就会说你看你啥也没找到为什么天天就知道刷手机,怎么不去学习…我现在就希望我能永远在外面实习,报喜不报忧,等拿到一个好offer再回家
点赞 评论 收藏
分享
点赞 评论 收藏
分享
评论
点赞
7
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务