融合注意力机制的人体关键姿态估计
2023-10-12薛晶霞刘才华
计算机工程与设计 2023年9期
冯 霞,薛晶霞,刘才华+
(1.中国民航大学 计算机科学与技术学院,天津 300300;2.中国民用航空局 智慧机场理论与系统重点实验室,天津 300300)
0 引 言
在特定人体动作识别[1-6]中,不同人体关键姿态(即不同人体关键点)的重要程度各不相同。如在检测是否存在货物暴力分拣行为时,与动作高度相关的手腕关键点识别比眼睛、鼻子等其它关键点识别更重要。而大多数现有人体姿态估计方法将人体所有关键点同等对待,如文献[7]通过融合多尺度特征增大局部区域感受野,改善整体关键点识别;文献[8]采用3个反卷积生成高分辨率热图,提升整体关键点的识别性能;文献[9]基于文献[8]框架,使用PixelShuffle上采样方法进一步提升了整体关键点识别性能。以上模型忽略了不同关键点的重要程度不同这一重要因素,而且在特征提取阶段对特征信息利用不充分。
针对以上问题,本文提出了一种融合注意力机制的人体关键姿态估计方法。首先在下采样-上采样两阶段融入注意力机制,引导模型在通道和空间维度自适应关注特征区域中的重要信息,弱化不重要的特征信息;其次提出一种代价敏感损失函数,使模型在学习过程中能聚焦于代价更大的目标关键点,提升模型对目标关键点的识别性能。在COCO公共数据集和CargoSorting数据集上的实验结果表明,本文方法在少量增加模型参数前提下,提升了目标关键点和整体关键点识别准确率。
1 方法设计
本文模型框架如图1所示。该框架主要包括3个模块。……
登录APP查看全文
