首页|期刊导航|华侨大学学报(自然科学版)|基于动作特异图卷积与注意力机制的行为识别方法

基于动作特异图卷积与注意力机制的行为识别方法OA

Action Recognition Method Based on Action-Specific Graph Convolution and Attention Mechanism

中文摘要英文摘要

为应对边缘端设备资源受限下的人体行为识别挑战,提升模型鲁棒性并缓解相似动作混淆的问题,提出一种基于动作特异图卷积与注意力机制的行为识别网络(ASGCA-Net).时间维度上,设计多尺度时间卷积注意力单元,可同时捕获短时局部运动模式与长时全局依赖关系,从而增强动作序列的时序建模能力,并通过注意力机制学习各通道的权重重要性;空间维度上,在固定拓扑上引入隐式边,补充跨物理连接的关节依赖,并通过门控机制自适应调整结构边与隐式边的权重,实现不同动作类型的自适应特征建模;最后,在 NTU RGB+D数据集和 NTU RGB+D120 数据集上对 ASGCA-Net 进行评估.结果表明:相较于基线网络2s-AGCN、ASGCA-Net在 NTU RGB+D和 NTU RGB+D120 数据集上的准确率均有较大提高.

To address the challenges of human action recognition on resource-constrained edge devices,en-hance model robustness,and alleviate confusion among similar actions,a behavior recognition network based on action-specific graph convolution and attention mechanism network(ASGCA-Net)is proposed.In the tem-poral dimension,a multi-scale temporal convolutional attention module is designed to simultaneously capture short-term local motion patterns and long-term global dependencies,thereby strengthening the temporal mod-eling capability of action sequences.The attention mechanism is further employed to learn the weight impor-tance of each channe.In the spatial dimension,implicit edges are introduced into the fixed topology to supple-ment joint dependencies across physical connections,and a gating mechanism is used to adaptively adjust the weights of structural and implicit edges,enabling action-specific feature modeling for different action types.Finally,ASGCA-Net is evaluated on the NTU RGB+D and the NTU RGB+D 120 datasets.The results show that compared with the baseline network 2s-AGCN,ASGCA-Net achieves substantial accuracy improve-ments on both datasets.

吴增群;李国刚;陈金凯;陈俊良

华侨大学 信息科学与工程学院,福建 厦门 361021||华侨大学 厦门市专用集成电路与功率半导体系统重点实验室,福建 厦门 361021华侨大学 信息科学与工程学院,福建 厦门 361021||华侨大学 厦门市专用集成电路与功率半导体系统重点实验室,福建 厦门 361021华侨大学 信息科学与工程学院,福建 厦门 361021||华侨大学 厦门市专用集成电路与功率半导体系统重点实验室,福建 厦门 361021华侨大学 信息科学与工程学院,福建 厦门 361021||华侨大学 厦门市专用集成电路与功率半导体系统重点实验室,福建 厦门 361021

信息技术与安全科学

人体行为识别图卷积时间卷积注意力机制

human action recognitiongraph convolutiontemporal convolutionattention mechanism

《华侨大学学报(自然科学版)》 2026 (1)

83-92,10

国家自然科学基金资助项目(61370007)

10.11830/ISSN.1000-5013.202510014

评论