APP下载

融合注意力机制的人体关键姿态估计

2023-10-12薛晶霞刘才华

计算机工程与设计 2023年9期
关键词:关键点特征方法

冯 霞,薛晶霞,刘才华+

(1.中国民航大学 计算机科学与技术学院,天津 300300;2.中国民用航空局 智慧机场理论与系统重点实验室,天津 300300)

0 引 言

在特定人体动作识别[1-6]中,不同人体关键姿态(即不同人体关键点)的重要程度各不相同。如在检测是否存在货物暴力分拣行为时,与动作高度相关的手腕关键点识别比眼睛、鼻子等其它关键点识别更重要。而大多数现有人体姿态估计方法将人体所有关键点同等对待,如文献[7]通过融合多尺度特征增大局部区域感受野,改善整体关键点识别;文献[8]采用3个反卷积生成高分辨率热图,提升整体关键点的识别性能;文献[9]基于文献[8]框架,使用PixelShuffle上采样方法进一步提升了整体关键点识别性能。以上模型忽略了不同关键点的重要程度不同这一重要因素,而且在特征提取阶段对特征信息利用不充分。

针对以上问题,本文提出了一种融合注意力机制的人体关键姿态估计方法。首先在下采样-上采样两阶段融入注意力机制,引导模型在通道和空间维度自适应关注特征区域中的重要信息,弱化不重要的特征信息;其次提出一种代价敏感损失函数,使模型在学习过程中能聚焦于代价更大的目标关键点,提升模型对目标关键点的识别性能。在COCO公共数据集和CargoSorting数据集上的实验结果表明,本文方法在少量增加模型参数前提下,提升了目标关键点和整体关键点识别准确率。

1 方法设计

本文模型框架如图1所示。该框架主要包括3个模块。……

登录APP查看全文

猜你喜欢

关键点特征方法
肉兔育肥抓好七个关键点
如何表达“特征”
不忠诚的四个特征
用对方法才能瘦
四大方法 教你不再“坐以待病”!
捕鱼
医联体要把握三个关键点
锁定两个关键点——我这样教《送考》
线性代数的应用特征