ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

Deformable Convolutional Networks

2020-12-31 18:32:13  阅读:198  来源: 互联网

标签:Convolutional RoI 卷积 Deformable 物体 变形 特征 Networks


Deformable Convolutional Networks

1.产生背景

视觉识别中一个挑战是如何适应目标在比例、姿势和部分变形,一种解决方案是扩大数据集到包含所有变化类型的物体,方法有仿射变换。第二种是通过变换不变性特征和算法来提高特征表达的鲁棒性[遇到未见过的情形时算法仍然有较好的输出]。后者通过手工设计的特征不具有“远见”,预判不到对任务有意义的未知几何变换,而且有些已知变换很难通过手工设计不变性特征进行建模。
当今几何变换建模的能力主要来源于数据扩增和简单手工设计的模块,如最大池化带来微小的平移不变性。所以CNN被固有的大的、未知的变换限制着。本文用可变性卷积来提取特征,增加空间采样位置,感受野根据物体的大小和形状自适应调整,对背景、小目标、大目标采取根据物体量身定做几何形状的卷积核,从而提取到各类物体更好的特征。

2.可变形

  • Deformable Convolution:通过卷积层学习关于卷积核形状的偏置矩阵,再与特征图进行对应元素进行相乘获取特征提取的结果,这样摒弃了之前常规卷积对图像中所有物体均采取相同大小的卷积核,提高了特征提取能力。下图1是常规卷积和可变形卷积在空间上的操作上的不同,图2是具体的3*3卷积。

在这里插入图片描述
在这里插入图片描述

  • Deformable RoI Pooling:类似于可变形卷积,该方法在RoI
    Pooling的基础上增加了影响池化范围的偏置,可以利用bin(感兴趣区域划分的大小相同的块)外的特征值,提高了灵活性。如下图所示。

在这里插入图片描述

3.直观效果

可变形卷积的感受野根据物体的大小和形状自适应调整。
在这里插入图片描述
可变形RoI pooling
在这里插入图片描述
要去跨年了,未完待续!!!

标签:Convolutional,RoI,卷积,Deformable,物体,变形,特征,Networks
来源: https://blog.csdn.net/m0_37166734/article/details/112043500

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有