ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

Human Pose Estimation:Learning Specific Features for Related Parts笔记

2020-11-25 18:00:41  阅读:262  来源: 互联网

标签:所有 特征 Pose Related 学习 Human 部位 相关 共享


Human Pose Estimation:Learning Specific Features for Related Parts 为相关的parts学习具体特征

文章指出,人体姿态估计(HPE)本质上是一个同构的多任务学习问题,人体每个部位的定位是一个不同的任务。之前所有基于cnn的HPE方法都想当然地认为所有身体部位的特征都应该完全共享。如:最近的HPE方法普遍地学习了所有部件的共享表示,从该表示中线性回归所有部位的位置。
作者进行统计分析,表明并不是所有的部位都是相互关联的related to each other。在相关任务之间共享一个表示可以产生更紧凑的模型和更好的泛化能力。而对于那些不相关或弱关联的任务,共享特征则会降低其性能(也称为negative transfer)。
作者首先提出一种数据驱动的方法,根据相关部位共享的信息的多少来对它们进行分组。然后引入了基于部位的分支网络来学习每个组的特定表示。

图1。Top:之前的方法利用cnn充分学习所有身体部位的共享特征,并将它们的位置以空间坐标或热图的形式进行线性回归。
中间:右脚踝的位置与各部分位置的相互信息。
下图:我们的统计分析(3.1节)表明,并不是所有的部分都是相互关联的。由于对不相关的任务共享一个表示会降低它们的性能,因此本文试图识别出相关的部位,并研究为它们学习特定的特征是否有助于提高姿态估计。

1.Introduction

具体来说,cnn的前几层学习低层次的特征,如Gabor filter和颜色斑点,这是许多数据集和任务[54]通用general的,因此可以安全地分享给所有的parts。更高层次的语义,出现在更深的层次(如身体部位)。一些部位(如膝盖)的提示,为定位其他相关部位(如脚踝)提供了重要信息和约束条件。
怎么识别相关的parts并对其进行分组?
作者提出两种策略:

  1. 基于人体结构,手工制作的[41,38,59]。直觉上来说,自然连接着的部位是相关的。
  2. data driven,它将每个部位的位置视为一个随机变量。我们从公共数据集[1]估计它们的概率分布,并根据它们的相互信息对相关部位进行分组。

(作者证明了第二种策略更优)
然后介绍了一种part-based分支网络PBN。它包括一个来学习对所有身体部位通用的共享表示的主干trunk网络,以及一些后续branch来学习特定于每组相关部位的高级特特征。如图一。

标签:所有,特征,Pose,Related,学习,Human,部位,相关,共享
来源: https://blog.csdn.net/qq_41944101/article/details/110137601

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有