科研之友
微信
新浪微博
Facebook
分享链接
摘要
人体动作识别已成为当今热门研究领域之一，基于骨架的人体动作识别方法因其能够明确展现人体动作而备受关注。针对提取特征时手工设计的人体拓扑图无法获取全局信息、存在大量冗余信息等问题，提出一个双模注意力时空图卷积网络，充分利用了对动作识别起关键作用的节点信息。首先，提出SGSAE模块，使用自注意力机制对所有关节点之间的关系进行建模，实现对节点信息全局特征的提取，并且在网络的训练过程中优化图的拓扑结构，最终获得适应各种数据样本的图拓扑结构；其次，按不同权重融合节点的全局特征与局部特征；最后，将通道注意力机制引入到网络模型中，提出MCA模块融合通道特征，减少大量冗余信息，提高动作识别精度。实验结果表明，双模注意力时空图卷积网络在NTU-RGB+D和Kinetics数据集上取得了较好的动作识别效果。
- 出版日期2023
- 单位沈阳航空航天大学
