摘要: 针对基于视觉的动态手势识别易受光照、背景和手势形状变化影响等问题,在分
析人体手势空间上下文特征的基础上,首先建立一种基于人体骨架和部件轮廓特征的动态手势
模型,并采用卷积姿势机和单发多框检测器技术构造深度神经网络进行人体手势骨架和部件轮
廓特征提取。其次,引入长短时记忆网络提取动态人体手势中骨架、左右手和头部轮廓的时序
特征,进而分类识别手势。在此基础上,设计了一种空间上下文与时序特征融合的动态手势识
别机(GRSCTFF),并通过交警指挥手势视频样本库对其进行网络训练和实验分析。实验证明,
该系统 可以快速准确识别动态交警指挥手势,准确率达到94.12%,并对光线、背景和手势形
状变化具有较强的抗干扰能力。
何 坚1,2, 廖俊杰2, 张 丞2, 魏 鑫2, 白佳豪2, 王伟东1,2. 基于长短时记忆和深度神经网络的视觉手势识别技术[J]. 图学学报, DOI: 10.11996/JG.j.2095-302X.2020030372.
HE Jian1,2, LIAO Jun-jie2, ZHANG Cheng2, WEI Xin2, BAI Jia-hao2, WANG Wei-dong1,2. Visual gesture recognition technology based on long short term memory and deep neural network[J]. Journal of Graphics, DOI: 10.11996/JG.j.2095-302X.2020030372.