基于残差网络的3D人体姿态识别算法研究与实现

来源 :东南大学 | 被引量 : 0次 | 上传用户:huier0001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人体姿态识别在计算机视觉领域是一项基础性和具有挑战性的技术。相比二维(2D)人体姿态识别,三维(3D)人体姿态识别得益于其包含的深度信息可以更加准确地应用于三维空间下的异常行为检测、3D动画渲染和机器人动作教学等场景。当前3D人体姿态识别方法大多基于残差网络,通过对RGB图像进行多层卷积实现特征提取,再解析深层特征图生成关节热力图,最后提取关节坐标。但是,这些方法往往只依赖于深层特征图,未对特征信息进行强化,姿态识别误差较大。因此,本文在残差网络的基础上借助特征融合和注意力机制对特征信息的强化进行探索。主要研究内容如下:(1)提出了基于多尺度特征图均等化融合的方法。该方法首先将深浅层特征图的通道数目和尺寸进行均等处理,其次将不同尺度的特征图进行融合,以此完成对特征信息的强化。在Human3.6M数据集上,相比于以往的方法,该方法平均根节点位置误差减少了0.9 mm,普式平均关节位置误差减少了4.5 mm,实验结果表明均等化融合方法可以有效降低3D人体姿态识别的关节误差。(2)提出了基于多尺度特征图级联融合的方法,从深到浅逐层对多个特征图进行融合。相比于均等化融合方法,该方法利用不同深度特征图之间的递进关系进行逐层级联融合,具有结构清晰有序、递进融合的特点。在Human3.6M数据集上,相比于以往的方法,该方法平均根节点位置误差减少了1.2 mm,普式平均关节位置误差减少了5.2 mm,实验结果表明级联融合方法姿态识别效果优异。(3)提出了基于注意力机制的双分支网络方法。相比于多尺度特征图融合方法,该方法分支一利用残差网络学习姿态的特征信息,分支二利用注意力机制学习姿态的注意力分布信息,并借助注意力分布对特征信息进行强化。在Human3.6M数据集上,相比以往的方法,该方法平均根节点位置误差减少了1.7mm,普式平均关节位置误差减少了8.2 mm,实验结果表明该方法可以获得更为准确的人体姿态。
其他文献
在我国经济高速发展的今天,由于农业个体制约整体的关系,“三农问题”已经成为我国发展中的“掣肘”。为有效解决“三农问题”,首先就是要在乡村振兴战略指导下做好产业兴旺,推进农村一二三产业融合,需要更多地借助“互联网+农业”来实现,利用互联网现代技术和互联网平台能够在较大程度上延伸乡村的农业产业链。我国自2014年连续六年出台的中央一号文件中都提及农村电商,乡村振兴,农村电商是实现弯道超车的重要抓手。但
作为世界互联网金融发展的高地,中国互联网金融发展全球瞩目。然而在强监管叠加两轮低潮的行业背景下,P2P平台想要强劲发展,风险能否得到控制是决定其平台能否持续发展的关键,而P2P平台最重要的风险就是借款人的信用违约风险。为此,本文将回归微观风控,聚焦对借款人的信用违约风险进行研究。为解决阻碍我国P2P行业信用经济发展的难题,本文基于机器学习算法对P2P平台设计出一款信用评级产品,在传统回归的基础上引
室内移动机器人为目前的生产、生活提供了巨大的便利,稳定可靠安全的定位算法为室内移动机器人高质量、高效率的完成任务提供了保障。基于超宽带与微惯性测量单元的组合导航系统为室内移动机器人的自主定位和导航提供了解决方案。然而,对于多变的室内环境,室内移动机器人定位过程中存在不确定性,其系统模型往往具有非线性和不确定性的特点。为改善室内机器人定位精度及稳定性,对基于超宽带(Ultra Wide Band,U
学术图书作为学术成果的重要组成部分,其评价工作在学术评价中占据着不可或缺的重要地位。科学合理地测度学术图书的影响力与价值具有理论和实践双重意义,一方面在理论上可以促进学术图书评价和科学计量评价指标的研究工作;另一方面在实践上既可以为科学评估科研工作者的“代表作”及其科研绩效提供依据,又可以帮助读者挑选出高质量学术图书。但与期刊论文相比,学术图书评价研究成果较少且分散,实际评价工作面临着严峻的困境,
土体是一种在特定沉积环境下形成的自然或人工产物,其物理力学性质与沉积时间、物理化学作用等因素相关。土体的含水量、孔隙比、液性指数、压缩模量等物理力学指标一般呈现较大的不确定性,直观表现为指标参数离散程度过大,从而导致岩土参数取值的可靠度降低,进而影响可靠性理论在岩土工程设计中的应用。区域范围内的土性参数取值往往呈现较为稳定的特点,加强区域土性参数的统计分析工作并建立区域标准地层,对于指导工程建设具
P5区气藏随着开采程度的不断加深,地层压力下降,气井产能降低,加上部分井见水,近井地带液锁伤害加重,气井产水及井筒积液对生产的影响越来越严重,造成的停喷井逐年增加。根据川渝气田的开采经验,生产后期气井产水或水气比往往呈上升趋势,排液采气是产水气藏生产中后期提高采收率的必然选择。针对以上问题本文开展了 P5区有杆泵排水采气工艺方案研究,为后续开展有杆泵排液采气提供技术准备。(1)结合P5区开采基本情
近年来,随着经济迅猛的发展,人们的生活水平也在日益提高。在第十九次全国人民代表大会上有代表提出:在2020年,我国力争全面建成小康社会,这一举措也标志着我国的整体国力发展达到了新的高度。在物质生活富足的情况下,人们更多开始关注自身的未来,尤其是老年后的生活。由于二战后的婴儿浪潮、近年来的低生育率等一系列原因,世界很多国家开始迈入老龄化进程。老龄化已经引起了各个国家政府以及社会的高度关注,尤其是关于
党的十八大以来,面临从严治党的新形势,市以下的基层税务机关作为税务系统的执法一线和服务窗口,怎样发挥党建在税收工作中的作用已成为摆在税务系统面前的一个亟需解决的时代性课题。本文全面总结十八大以来市以下基层税务机关通过几大党建活动开展党建工作取得的经验,深入挖掘基层税务机关党建工作的薄弱环节和现实问题,坚持以问题为导向,创造性地提出了以党建工作为统领,通过实施“政治建设、组织建设、作风建设、制度建设
流感病毒是一种可导致人类和动物的严重呼吸道感染的传染性病原体,持续对公共健康构成威胁。为了解流感病毒的致病机理,使用体外细胞模型和小型哺乳动物模型已变得不可或缺。然而,目前在实验室环境中使用的细胞系和动物模型或多或少存在缺陷和不足。唾液酸转移酶(Sialyltransferase,ST)调控生成的唾液酸受体与病毒血凝素相互作用合是流感病毒有效感染和传播的关键,但在常见细胞系和流感动物模型中存在唾液
本文以胡平报告文学作品合集《胡平文集》为研究对象,通过品读其报告文学作品,对胡平报告文学作品从主题内涵、写作特色和意义价值三个层面进行分析解读。首先,主题内涵这一章节将胡平报告文学作品的主题分为个人命运的人文关怀、时代潮流的全面思考、当代历史的沉重回望以及故国家园的文化解读这四个层面,分别展开论述。通过对胡平报告文学作品进行主题划分,来更好地品评和掌握其作品的思想内涵,在作品中来体味作者自觉承担的