基于深度学习的行人追踪与姿态识别算法研究

来源 :浙江科技学院 | 被引量 : 0次 | 上传用户:wcbcni22
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
面向智能交通领域,道路中的目标一直是研究的热点方向。行人是道路交通中的运动主体,也是交通工具的主要服务对象,因此对行人的检测与识别是交通中的重点。随着计算机视觉技术的发展,深度学习在检测和识别方向的应用越来越广泛。在识别设备方面,也有新的技术的创新,由原来的单目摄像头发展成多目摄像头,还有新的激光雷达和点云去获取前方的道路信息。本文基于自动驾驶和辅助驾驶车载摄像头获取图像,对行人检测、行人追踪和行人姿态识别进行展开研究:(1)针对自动驾驶和辅助驾驶车载摄像头获取行人图像,存在背景复杂和行人数量多且密集等现象和车载硬件系统相对经济型,本文在检测速度较快的Yolov3-tiny算法上增加扩大感受野模块,有效的提高了检测的精度;将IOU值检测框回归改为增加中心点距离和长宽比的CIOU值检测框回归,起到加快模型收敛和检测框准确定位行人位置信息作用;在算法预测阶段采用将非极大值抑制和加入中心点距离的IOU结合的形式筛选检测结果,避免了暴力剔除检测框现象,算法在行人遮挡和密集场景下得到了显著提升。(2)针对检测算法中存在检测框不稳定和不连续现象,提出在行人检测器的基础上增加行人追踪器,从而弥补检测算法的缺陷。本文采用TBD策略,在改进Yolov3-tiny行人检测器的基础上结合改进的Deep SORT行人追踪器,实现了对行人的实时和准确的定位。主要在Mars数据集上采用轻量化的Shufflenetv2重新训练行人外观特征进行匹配;采用DIOU替换IOU进行目标匹配,最后根据本文的应用场景对追踪器进行调参,实现多目标追踪准确度更高的行人追踪算法。(3)针对检测追踪算法无法对存在危险系数的行人进行识别,提出在行人检测追踪的基础上增加行人姿态识别和行人距离测量,有利于提高自动驾驶和辅助驾驶系统的安全性,对存在危险状态和制动距离内的行人信息产生反馈作用。本文采用轻量化的Lightweight OpenPose算法得到人体关键图,提出根据关键点物理位置、关键点连成的人体检测框长宽比和姿态识别网络这三种方法完成对行人的四个方向和三种状态的姿态识别,最后基于双目摄像头成像原理,提出行人姿态识别和行人测距算法。最终将以上方法部署在嵌入式平台Jetson Nano上,完成算法在移动端的实现。本文中的算法能够对无人驾驶和智能驾驶技术的发展起到积极促进作用,并且实际硬件应用也能推动产业化的发展。
其他文献
近年来,随着国民经济的快速增长,对矿产资源的开发需求日益增加,矿产资源的开发带来的环境问题层出不穷,对人们的生产生活造成了严重影响。尤其是目前的有色金属采选和冶炼造成的重金属污染环境灾害不断增加。采矿活动对环境重金属污染已引起人们的严重关注。因此基于环境问题的绿色发展模式的迫切需求。本文以锑矿企业重金属排放特征为切入点,通过分析锑矿开发过程带来的主要环境问题、重金属排放主要环节及影响重金属排放的因
学位
学位
本文利用NECP/FNL再分析资料、多普勒雷达基数据等,结合中尺度数值模式WRF,模拟研究了2005年5月31日和2008年6月23日发生在北京地区的两次典型冰雹天气过程,研究了下垫面、地形、云滴(云凝结核)浓度对雹云形成发展的影响过程及机理。探讨了雹云中冰雹增长的条件以及雷达资料同化在冰雹云模拟及预报中的作用等问题,取得了一些新的认识。下垫面特征敏感性试验表明,与农田相比,城市下垫面的地面感热通
用G=(V,E)表示一个顶点集为V,边集为E的有限、简单无向图,{1,2,…,k}表示k个颜色的集合.G的一个正常k全染色是指一个映射φ:V∪E→{1,2,…,k}使得相邻的点、相邻的边以及相关联的点和边都接受不同的颜色.如果G有一个正常k全染色,则称G是k全可染的.G的全色数χT(G)是使得G可以正常k全染色的最小非负整数k.图G的一个全色列表是一个颜色集合簇L,对G的每个元素x∈V∪E都配一个
本论文研究了新型抑制剂超低碳取向硅钢的生产工艺,利用电子显微镜、EBSD、TEM等设备手段研究了不同冷轧及中间退火制度下组织、织构及析出物的演变规律及其对二次再结晶和磁性能的影响,得到以下结论:(1)超低碳取向硅钢热轧板表层为细小的等轴晶粒,次表层为部分拉长变形晶粒与细小等轴晶粒的混合区,中心层为拉长的变形组织,织构主要为表层Goss织构、中心层α织构,析出物主要为MnS、NbN及其复合析出,析出
近年来,农产品地理标志作为我国发展优势特色农业和推动农业产业结构升级的有效途径,在我国的农业经济优化发展中发挥着重要的作用。随着《中华人民共和国政府与欧洲联盟地理标志保护与合作协定》的签订,更进一步对我国的农产品地理标志的法律保护工作推进提出了要求,对农产品地理标志进行完善的法律保护是我们对国内和国际社会保护要求的一种回应。目前,我国对于农产品地理标志的法律保护处于一种三轨并行的状态,即以《商标法
干涉合成孔径雷达(In SAR)技术是在合成孔径雷达(SAR)的基础上利用两幅或多幅复图像处理得到目标场景的干涉相位,并结合测量平台与目标地形间的几何关系反演得到目标地形高程。目前In SAR测量技术在军事、民生领域得到巨大发展,随着干涉合成孔径雷达技术的飞速发展,高分辨、大幅宽、分布式、多模式的In SAR测量技术已经成为最新的干涉测量技术发展趋势。本文针对高分辨、高保相In SAR成像算法展开
随着经济全球化和文化多元化的高速发展,人们的物质生活水平得到极大的提高,但是物质的极大丰富远远超过人们精神的提升。如今,享乐主义、拜金主义、极端个人主义等消极因素盛行,悄然间滋生着人们的思维惰性与生存空虚感。这些不良思想也在一定程度上影响着学生的生命价值观和生活方式,校园欺凌、吸毒、自残自杀或伤人等事件屡见各种媒体报道,社交障碍、焦虑、抑郁等症状逐渐普遍化。国家和学校深刻认识到对青少年进行生命教育
笔者参与建造了一套阈值光电子-光离子符合成像(TPEPICO-imaging)装置,并用这套装置研究了NO分子电离为c 3Π(v’=0)态NO+的解离电离(DPI)动力学过程。在使用垂直分子束的情况下,通过一些近似并用矢量加法规则推导了碎片离子在质心坐标系和最可几质心坐标系中的速度,飞行时间和在速度图像中的位移之间关系。应用这些关系,得到并讨论了N+碎片离子在质心坐标系中速度及在最可几质心坐标系中