基于视频的人体行为识别研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:chenhonghongshi
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,由于计算机性能的提高,存储器容量的提升,传感器的不断发展,照相机摄像机等的广泛应用,无论线上还是线下视频数据量都呈现爆炸式增长。实现基于视频的人类行为识别,在智能监控,人机交互,虚拟现实,智能安防,运动员辅助训练等各个方面有极为现实的意义。如今在图像识别方面深度学习已经有很大的突破,虽然基于视频的人体行为识别与图像识别有一定的相似性,但是人体行为识别面临更多的问题,主要有几方面的挑战:一是视频不仅包括了空间信息,还包括帧与帧的时序性信息,因此如何提取并学习这种时序信息成为了关键,二是视频转换成单帧带来的庞大,冗余的数据量,三是相机视角的不确定性,而且相机移动对识别人体行为具有一定干扰性,四是环境因素的影响,如光照,像素等。因此如何克服这些难题准确理解人体行为成为行为识别的主要研究内容。本文主要在公开的大型视频数据集UCF-101和HMDB51上展开人体行为识别研究,主要内容如下:提出了基于分而治之的行为识别模型,包括两个模块,分别是基于稀疏采样的行为识别模块和基于密集采样的行为识别模块。在稀疏采样识别模块中,由于视频转换成单帧图像带来的大量冗余数据,从视频帧中稀疏采样一定数量图像,利用深度学习进行预训练和分类,并设置阈值α,当预分类效果小于α时,预分类结果即为最终分类结果,当其大于α时,此行为需要在密集采样模型中进行分类,这一步我们主要利用视频中的空间信息,关键帧等特征作初步分类,保留好的分类效果,筛选出分类效果差的数据进入密集采样模型中。密集采样识别模块针对上一步中预分类值大于α的行为数据,当其大于α时,此行为并没有被稀疏采样识别模块较准确的识别,大多数情况下是由于行为特征相似度较高,稀疏采样模型难以区分,需要密集采样模型来进一步识别,最终输出融合了稀疏采样模型和密集采样模型的结果。最后对模型进行测试,在UCF-101和HMDB51数据集上的实验结果表明基于分而治之的人体行为识别模型整体上有较好的识别率,分别达到了94.5%和69.2%的准确率。
其他文献
随着交通一体化的逐渐发展,轨道交通逐步成为解决城市公共交通问题的首要选择。作为主流车体结构之一的不锈钢车体,其生产制造技术得到了快速发展。基于轻量化的设计思想,不锈钢车体多采用薄板焊接结构,电阻点焊是其主要的焊接方法。电阻点焊过程电流大、时间短,易产生飞溅、虚焊等缺陷,同时,点焊熔核的生长处于封闭空间,无法直接观测,给焊接质量控制造成较大困难。因此,高效、准确的点焊质量评估技术对于获得合格焊点、保
近些年来杀扑磷对水体的污染已引起人们的关注。杀扑磷是一种较理想的杀介壳虫药剂,毒性强,效果好,可以用于防治大多数农作物上的蚧壳虫等害虫。因它在农产品,水体等中不易分
兽用抗生素与有机氯农药在土壤环境中广泛存在,一直是生态学研究的热点,但二者在土壤中互作的效应目前还鲜有报道。本文以强力霉素(Doxycycline,DOX)和五氯酚(Pentachlorophe
侧链型液晶高分子(SCLCPs)兼具高分子骨架无定型及侧链液晶基元各向相异的优异性能。通过高分子骨架与不同功能的液晶基元合理组合,可以实现具有特种功能的高分子的合成,近年来
我国在十九大报告中明确指出,要坚定实施创新驱动发展战略,加快建设创新型国家,同时指出必须培养造就一大批具有国际水平的战略科技人才、科技领军人才、青年科技人才和高水平创新团队。由此可见创新(尤其是科技创新)在国家发展中的核心地位,以及科技人员在创新发展中的战略作用。科技人员作为创新活动的设计者及组织者,是科技创新的主体,是促进经济增长至关重要的因素。企业是承担技术创新的主要社会组织,而领导作为组织中
近年来随着抗生素的大量使用,细菌耐药现象日渐严重,且抗生素的研发速度远低于细菌耐药性的产生速度,因此,需要寻找应对耐药细菌的新方法。噬菌体作为感染细菌的病毒,具有数量多、特异性强等优点,有望替代抗生素作为消除环境病原菌的有效手段。本研究从贵州开阳、西藏乃东和辽宁盘锦三个地点采集的13个样品(6个沉积物样品、6个水样和1个钟乳石表面样品)中分离细菌及其相应的噬菌体。同时对宿主菌的抗生素耐药性以及噬菌
随着万物互联时代的到来,越来越多的数据产生了,使得数据在规模和维度上都急剧的增加,比如——位置、喜爱偏好、运动轨迹等,因此对大数据的计算需求也越来越高。许多“大数据”应用程序必须实时处理数据,然而由于设备的不同,所得到的数据难免会比较单一,这样单一的数据流就很难得到用户的全部信息,如果想要得到用户的全部信息就需要将所有的数据流整合在一起。而连接(Join)操作是连接不同数据流的一个有效的手段,在多
4-氨基喹啉类药物萘酚喹是临床上常用的长效抗疟药,通常作为配体药物与青蒿素类抗疟药配伍联用。萘酚喹的药动学研究表明,口服给药后吸收迅速(tmax约2-4h),消除缓慢(t1/2大于
随着时代的发展,射击训练不仅是军事上基本的训练科目,在体育运动和学生军事化教育上,也成为了训练和教育的必备科目。射击训练往往都是实弹射击训练,但是传统的射击训练在耗材、安全性和场地要求等方面有着很严格的规范,这种规范使射击训练花费大、安全性低,还需要特定的场地进行训练。为了使射击训练变得方便安全且经济,射击的模拟训练系统的开发,可以达到这些要求。本文对模拟训练系统中的射击目标图像信息处理技术进行研
硫噻唑是一种有机化合物,化学名为4-甲基-5-(β-羟乙基)-噻唑。作为饲料添加剂生产原料之一,近年来随着国家环保意识的加强,对饲料香味添加剂生产厂可挥发性有机物排放量要求越来越严格,为解决硫噻唑生产进程中和使用过程中造成的环境污染,目前采用微生物处理方法进行降解是解决其对环境污染的方法之一。利用微生物的降解作用可以消除在生产过程中和使用过程中由于挥发性而溢出的该物质对环境造成的不良影响。本研究基