基于视觉手势识别的机械手操控系统的研究

来源 :天津工业大学 | 被引量 : 6次 | 上传用户:honest
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器人技术的飞速发展,机器人已经广泛地应用于生产、生活等各个领域中,人与机器人之间的交互活动也就变得越来越频繁。但是目前机器人的操控方式却很单调、繁琐,人与机器人之间的交互不够直观、自然而且效率比较低。因此,研发基于视觉的自然手势交互系统不仅具有一定的学术研究价值,而且具有相当大的实际应用前景。本文在分析了国内外手势识别和机器人控制系统的相关研究资料及成果的基础上,选取了 Leap公司出产的Leap Motion传感器获取人手信息,并针对单个传感器使用时因视觉干扰或者不可避免的遮挡而导致手势识别准确率降低的现象,研究并实现了一种基于多Leap Motion传感器的机械手手势操控系统。这一系统采用多个传感器在多方位对操作者的手势进行探测追踪并进行手势识别,实现了通过自然手势控制机械手动作的非接触式交互。该系统主要包括客户端(手势检测模块)、信息服务器端(数据处理模块)、机械手控制器及机械手机构,文中主要对手势采集模块以及数据处理模块进行了研究讨论。该文首先介绍了该基于手势识别的机械手工作原理,然后在对Leap Motion传感器进行了一定的研究分析后,确定了多个传感器位置布局,实现了一个基于多传感器的手势数据采集模块。该系统中数据处理模块的主要作用是对从多个传感器获取的手势数据进行数据分析处理,为了更加及时地响应人手运动状态的变化和获取较稳定、准确的人手位置数据,本文提出了一种改进的基于"当前"统计模型的自适应卡尔曼滤波算法进行滤波和轨迹追踪;对于通过手指指骨向量计算得到的关节角度,采用一种改进的基于均值的加权滑动均值滤波算法进行稳定性滤波平滑处理。当进行手势的姿态识别时,将手指关节角度等手势特征向量送入支持向量机(SVM)进行手势分类,并采用交叉编译和网格搜索的方法对其参数进行寻优,手势识别准确率可达98.5%。数据处理模块会实时地将位置增量、旋转角度增量或者姿态动作指令发送给机械手控制器,机械手控制器会通过内部运动学反解算法得到机械手各个关节轴运动数据从而驱动各个伺服电机转动。在最后的系统实验环节,操作者通过改变自身手部的空间位置和姿态达到了手势操控机械手运动的目的,并验证了该系统的可用性以及数据处理算法的有效性。
其他文献
随着计算机技术、通信技术和网络技术的广泛应用和普及,计算机网络逐步渗透到人们生活的各个方面。它给人们带来巨大效益与方便的同时,也引发了一系列社会问题和一种新形式的
本文根据我院1992年7月31日南京机场空难中一次性救治的31例遇难伤员的临床资料,进行了较完整的初步分析,并针对诸如急救护士的明确分工,保持呼吸道通畅,早期积极救治休克,准确判
工程项目是施工企业的成本中心,也是利润的主要来源。随着行业竞争日趋激烈,获利空间越来越小,施工企业应更加重视工程项目的施工成本控制管理,把成本控制在预定的目标内为企
目的研制出的气囊式胃管替代普通胃管,减少普通胃管易滑脱而反复插管而引起的胃粘膜出血、喉头水肿、咽炎、食管炎等副损伤。方法气囊式胃管为双腔道结构,气囊装置有独立腔道
<正>"平易近人,如亲人;和蔼可亲,似家人;化解矛盾,耐心人;解读政策,细心人;吃苦耐劳,初心人;脱贫攻坚,带头人……"2月27日,罗涛收到了一份特别暖心的"新春礼物"——一封来自
<正>引言随着现代社会的深入发展,我国环境问题、能源问题日趋严峻的形势下,发展低碳经济已成为我国提高国际竞争力、实现科学发展的必然选择。发展低碳经济需要从低碳能源、
如何有效防范法律风险是基层央行必须面对的现实而紧迫的问题。本文分析了基层央行面临法律风险的特征,结合现实案例详尽列举了法律风险的表现形式,并就基层央行如何有效防范
企业融资与资本结构的关系十分密切,一方面资本结构是决定最佳融资组合方式和融资次序的重要影响因素之一;另一方面资本结构在理论上存在最优组合。本文以中国旅游类上市公司
利用显微镜、氩离子抛光、核磁共振、电子扫描显微镜及生排烃模拟等技术手段,以渤海湾盆地济阳坳陷泥页岩为例,剖析不同泥页岩岩相储集性、含油性和页岩油可动性特征。分析了
近年来,天津市着力打造多层次信用体系,征信体系在帮助全社会树立信用意识、防范金融风险、改善金融生态环境、支持"三农"和中小企业融资等方面取得了积极成效,促进了实体经