基于运动-时间感知的人体动作识别方法

作     者：王晓路 汶建荣 WANG Xiaolu;WEN Jianrong

作者机构：西安科技大学通信与信息工程学院陕西西安710054 

出 版 物：《计算机工程》 (Computer Engineering)

年 卷 期：2025年第51卷第1期

页      面：216-224页

学科分类：081203[工学-计算机应用技术] 08[工学] 0835[工学-软件工程] 0812[工学-计算机科学与技术（可授工学、理学学位）] 

基　　金：西安市科技计划项目(2020KJRC0070) 

主　　题：深度学习 动作识别 运动感知 时间注意力 3D残差网络 

摘      要：针对动作视频中存在冗余信息及动作信息的特征通道分布稀疏问题,提出一种基于运动-时间感知的3D残差网络。利用运动感知模块(AM)计算特征级别的时间差来激励运动敏感通道,以此获取运动特征;通过时间注意力模块(TM)沿着时间维度计算注意力权重矩阵,以获取局部时间特征。将AM模块和TM模块的计算结果相加,得到动作信息的融合特征,再加入到3D残差网络中,以此构造基于运动-时间感知模块(ATM)的3D残差网络。实验结果表明,在公共数据集UCF101和HMDB51上,相对于3DResNeXt-101网络,基于ATM模块的3DResNeXt-101网络的动作识别准确率分别提升1.6%和2.8%,说明所提方法具有可行性和有效性。