基于深度学习的在线人体动作分析

来源 :济南大学 | 被引量 : 1次 | 上传用户:jmshello
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在线视频动作分析是计算机视觉中的一个重要研究课题,在视觉监控、人机交互和机器人智能导航等领域有着广泛的应用。与离线视频动作分析在动作被完全捕获后再进行识别不同,在线动作分析的目的是在动态中尽可能早的检测动作发生的状态,对即将发生或正在发生的事件做出准确、快速的响应,以提供更好的实用价值。本文针对在线人体动作识别分析进行探索研究,主要研究内容包括视频动作识别、时序动作检测和重复动作计数三个方面。针对视频动作识别任务,本文分别基于BN-Inception(Inception with Batch Normalization)网络建模表示动作外观特性的空间特征和基于C3D(3-Dimensoinal Convolutional)网络建模包含动作上下文信息时空特征,提取鲁棒性的动作特征表示;然后对多分类识别,分别使用基于一对多的LSVM分类器和基于softmax loss搭建的分类网络训练分类模型,完成在线人体动作的识别任务,并验证其有效性。针对时序动作检测任务,为了准确的识别视频中动作类别及发生的起始和结束时间,本文提出了基于动作时间语义连续性规则优化候选时间片段的方法。首先按照动作时间语义连续性规则对同一尺度和不同尺度的滑动窗口进行整合;然后,对整合结果重新获取分类置信分数,通过非极大值抑制(NMS)消除不准确检测。该方法突破了滑动窗口固定的限制,可以产生任意长度的动作时间片段,并抑制了冗余检测,使得检测结果更符合预期。针对重复动作计数任务,与以往传统方法只能处理静态和平稳周期运动不同,本文首次采用深度ConvNets提取的空间和时空特征获取重复动作的运动规律:首先对高维人体动作特征进行PCA算法降维,获取表现动作时序运动特性的主成分;然后基于傅里叶变换,通过分段阈值滤波去除噪声、平滑运动轨迹,完成无约束视频的无监督重复动作计数任务。实验结果表明,该方法对真实场景的动态和非平稳视频中的重复动作分析同样有效,对处理复杂的现实场景视频数据具有一定的鲁棒性。在实际应用场景中,在线视频动作分析不仅考虑识别准确性,同时还要求时间效率。本文对该工作进行在线测试分析,结果表明当在线获取当前帧和当前帧之前的479帧作为一次检测输入时,处理速度达到最优值,比实际输入时长快2.93倍。表明了在线视频分析的有效性,为该任务的实际应用打下了理论基础。
其他文献
永磁同步电机因结构简单、维护方便、功率密度大的优点,被广泛用于工业生产、家用电器等领域。通常永磁同步电机驱动系统由不控整流电路供电,直流环节需要大容量电解电容来保
互联网、云计算、传感技术等新技术的产生与应用,使得急剧增加的碎片化数据在特定情况下成为财务主数据,信息化、数字化、综合化已然成为企业发展的新方向。基于大数据概述,
本文选取我国30个省、直辖市及自治区2006——2018年的面板数据,采用固定效应模型,研究了人口的年龄结构、城乡结构特、教育结构和性别结构特征对商业健康险需求的影响。实证
随着社会的发展,我们正处于一个科技突飞猛进的信息化时代,全球一体化促使国际交往更加频繁,因而对跨文化人才有着更高的要求。跨文化交际人才培养重任落在了各大高校中。就
石版画是版画艺术中的一大门类,在全世界的发展已经超过了200年。如今,在中国的各大艺术院校中,石版画的创作、教学仍然很受欢迎,发展势头良好。但总体来看,石版画艺术的材料
目的:研究追风透骨胶囊中挥发性成分的超临界CO2萃取工艺。方法:采用正交试验法,以GC测定桂皮醛的转移率为指标,优选超临界萃取条件。结果:超临界CO2萃取的最佳工艺为:萃取压
目的探讨综合疗法治疗直肠脱垂的临床疗效。方法采用经肛门直肠黏膜点状结扎、消痔灵注射及肛门紧缩术治疗成人完全性直肠脱垂24例,观察其术后疗效及并发症,并跟踪随访6个月
目的探讨半导体激光在根管治疗一次法中的效果。方法采用前瞻性研究方法,选取2016年3-12月在解放军第五医学中心(原解放军307医院)诊治牙髓炎疾病的患者184例,随机分为试验组
昆仑奴中国古代的黑人奴隶李键提起黑人,许多人自然会联想到非洲,那里是黑人的故乡。但却很少有人知道,早在一千多年前黑人就已经来到了中国的土地上。大约从9世纪开始,黑人奴隶作
我们专题学习了《准则》和《条例》,学习了巴音朝鲁书记的讲话精神。各位同志认识深刻、态度坚决,我再谈一谈认识,同时对学习贯彻作出初步安排。一、深刻认识学习贯彻《准则