基于门控循环神经网络的人体姿势预测

来源 :沈阳工业大学 | 被引量 : 1次 | 上传用户:outong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体姿势预测是计算机视觉领域里的一项非常具有挑战性的任务,它可以估计像行人这样的目标物体接下来的举动进而预测其接下来的轨迹。近些年来,人体姿势预测的应用范围越来越广泛,例如人机交互、人员跟踪及自动驾驶等。由于深度学习的进步,应用卷积神经网络或循环神经网络的人体姿势预测方法也得到了较广泛的发展。但是人体姿势预测会受到许多不确定因素的影响,例如运动速度,运动幅度,运动背景等,这些不确定因素将会引起预测的第1帧不连续而且准确预测的时间会比较短。本文针对人体姿势预测中的第1帧不连续、准确预测时长比较短以及网络结构复杂、训练困难等问题,先后分别提出了基于双向门控循环单元(Gated Recurrent Unit,GRU)网络的人体姿势预测模型(EBiGRU-D)、基于注意力机制的人体姿势预测模型(At-seq2seq)以及基于双向GRU和注意力机制的人体姿势预测模型(BiAGRU-seq2seq)。在EBiGRU-D网络模型中编码器的组成是双向GRU网络,该模型的解码器部分组成是典型的GRU网络。双向GRU网络让输入的原始数据能够从正方向和负方向分别输入到编码器中并对输入的数据进行编码操作,输入的数据经过编码后会形成一个状态向量。该状态向量将输入到解码器中进行解码操作。双向GRU网络比较突出的优点是将现时刻的输出与其前后时刻的状态相关联从而使输出充分地考虑了前后时刻的数据特征。在At-seq2seq网络模型中编码器的组成是GRU网络,而其解码器部分的基本网络也是GRU网络,但与编码器的区别是这里引入了注意力机制。在解码器部分添加注意力机制的目的是将编码器的输出编码成包含多个子集的向量序列,这样做的目的是让解码器可以从这些序列中选择最相关的部分进行解码操作。BiAGRU-seq2seq网络模型结合了EBiGRU-D网络和At-seq2seq网络模型的优点。该模型的编码器由双向GRU网络来组成,在解码器部分注意力机制被引入到GRU网络中。同时,该模型还引入了残差架构,该架构的目的是将解码器的输入和输出数据同时馈送至残差架构中以模拟人体的运动速度。本文所提出的3种网络模型均已在Human3.6m视频姿态数据集上得到了验证,目前该数据集是国际上公开可用的最大的视频姿态数据集。它包括由专业演员进行的各种活动,并通过Vicon姿势捕捉系统记录下来。实验结果表明,所提出的模型不仅可以降低人体姿势预测的误差,而且还可以准确地预测多帧人体姿势。
其他文献
研究目的:为了提高我国控烟健康教育的效果,本研究应用行为经济学中“框架效应”理论对控烟健康教育信息的有效性进行分析。“框架效应”是指由于语义的改变而导致决策者对同
随着我国经济体制改革的逐步深入和世界经济全球化的不断发展,影视产业逐步朝着娱乐化、商业化、国际化的方向不断发展,在给影视业发展带来前所未有机遇的同时,也带来了巨大
金融扶贫作为精准扶贫战略的重要组成部分,在脱贫攻坚与促进县域经济发展中发挥着越来越重要的作用,也为金融业自身创新发展带来了契机。农商行作为地方金融机构金融扶贫的主
利用计算机视觉和图像处理技术对叶片进行识别在农业领域逐步得到应用,但是,将叶片从具有复杂背景的图像中准确识别出来还是很难。本文提出了一种能有效地从具有复杂背景的图
目的探讨纤维支气管镜在不间断机械通气重症肺炎诊治中的临床价值。方法选取我院收治的90例重症肺炎患者为研究对象,按照随机数字表法将其分为试验组(n=50)和参照组(n=50)。
会议
以金线鱼鱼丸为研究对象,将银杏叶提取物添加到金线鱼鱼丸中,测定分析其在真空包装下冷藏过程中感官品质、细菌总数、挥发性盐基氮(total volatile basic nitrogen,TVB-N)、pH
本文旨在通过分析天线辐射方向图与截获覆盖区的关系来评估飞机整机的射频隐身性能。首先介绍了机载天线覆盖区的空间角覆盖比例模型,接着引出了一种典型的相控阵天线和接收
<正>乐购、屈臣氏陷"价签门"被罚超市卖场成"低标高结"重灾区超市"价格欺诈"现常态化倾向,中国连锁经营协会推出相关措施加强超市价签管理。消费者在超市购物结账时的价格和
宁夏中部干旱带生态环境脆弱,农业生产发展受水热条件制约。砂田是我国西北地区农民在长期劳动实践中探索形成的一种独有的保护性耕作方式,具有保温增渗、改善土壤理化性质的作用,能显著提高降水利用效率增加作物产量。过去关于砂田土壤属性空间异质性的研究多从保水抑盐角度对砂田土壤水分和盐分空间分布规律进行阐述,忽略了中尺度下砂田土壤生化性质空间异质性的综合研究。本文以中卫香山砂田土壤为研究对象,采用1.5×1.