本文共 1063 字,大约阅读时间需要 3 分钟。
参考代码:
导读:这篇文章聚焦人体关键点检测任务中高分辨率特征的学习表达,现有的特征表达方式一般采取分辨率从高到低的演化路径,这篇文章中为了保持高分辨率特征的作用(分辨率越高关键点定位自然越准确),在网络的pipeline中保持与原始输入尺寸一致的特征图,通过逐步添加低分辨率平行分支并与其它分辨率互连的形式构造一种新的特征提取方式。这样的方式带来的好处也是显而易见的,极大提升了文章在COCO与MPII人体关键点检测任务检测精度(直观感觉相应的内存/FLOPS会增加很多,实际上比较之后其实并不是)。
对于人体关键点检测的backbone部分之前也有对应的改进工作,比如对称出现的low-to-high,VGG/ResNet网络后面几层使用膨胀卷积等,下面是集中特征提取的backbone网络:
这篇文章从不同分辨率图像并行的角度提出了High Resolution Net(HRNet)很好保留了各个分辨率下的特征,其网络结构见下图所示:
文章提出的网络结构与传统的high-to-low网络不同的是采用了不同分辨率网络平行的策略,从而很好保留了各个尺寸上的信息特征(对一些对尺度比较敏感的网络友好),其结构见下图所示:
其中, N s r N_{sr} Nsr代表stage为 r r r且当前特征图的分辨率为 r r r。
为了有效利用不同分辨率特征图之间的信息,文章提出了一种信息流策略,充分使用了各个分辨率的信息,其信息流向见下图所示:
性能比较:
转载地址:http://jwkhj.baihongyu.com/