基于虚拟现实技术的热室机械手视觉定位及仿真平台搭建

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:JunKao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
核工业机械手作为核电设施维护的重大装备,可应用于人类无法进入的核环境热室中进行繁重复杂的工作。然而国内热室机械手操作员在作业过程中,仅仅采用肉眼通过窄小的防辐射窗来观察作业对象位置,很容易导致安全隐患。因此本文开展核环境下基于虚拟现实(VR)技术的动力机械手视觉定位研究,利用机器视觉定位结果搭建VR仿真平台辅助操作员观察与作业。本文首先对目前国内核环境下热室机械手操作过程进行了调研。针对核辐射高能粒子对精密传感仪器的干扰问题,提出了采用防辐射双目相机进行热室前端数据采集,室外上位机进行后端数据处理的总体方案。然后针对采集图像数据的辐射干扰问题采用中值滤波算法进行图像去噪预处理。接着设计了一种基于深度学习的改进Yolo.v4-tiny热室机械手作业对象目标检测算法,与经典算法对比显著提高了作业对象检测速度与效果。在对防辐射双目相机进行张正友标定后,提出一种深度学习目标检测与BM双目立体匹配融合算法,将检测算法的二维信息拓展到三维,实现目标的空间定位。针对算法中由于深度图空洞产生的检测目标遗漏、数据异常问题,开发了一种中值筛选与上下文比对过滤算法脚本。最后基于Unity3D搭建了VR仿真平台,实现前后端数据通讯以及作业对象的实时重构仿真。并对该系统平台进行测试,验证了研究的正确性和可行性。本文的研究实现了核环境下热室作业对象端到端的空间定位及VR仿真,从而辅助操作员远程作业。其高精度实时定位特性为核工业机械手的智能化作业提供了思路。
其他文献
目的 探讨慢性阻塞性肺疾病(COPD)患者肺组织标本的沉默信息调节因子相关酶1(SIRT1)、活化转录因子4(ATF4)、涎液化糖链抗原-6(KL-6)蛋白水平差异及与气道重塑的相关性。方法 分别收集2020年1月至2021年5月在该院呼吸内科就诊的合并肺肿瘤的急性加重期COPD、稳定期COPD的肺叶切除组织蜡块标本各40例,分别纳入急性期组、稳定期组;另外选取40例该院实验室保存的行肺肿瘤肺叶切
盲源分离(Blind Source Separation,简称BSS)是在一定的约束条件内将未知的源信号从混合的观测信号中恢复出来的一种方法。盲源分离技术由于其强大的分离能力,目前已在语音信号、数字通信、生物医学、雷达阵列处理、信息安全等领域发挥了重要作用。本文重点研究了盲源分离算法在雷达信号抗干扰中的应用。论文的主要工作和创新点如下:1、论文建立了PD和LFM雷达回波信号的模型,对信号的模糊图特
学位
短程定位和生命体征探测是医疗监控、驾驶员辅助和室内导航等领域的两个热门研究课题。事实上,在很多场景下两者已交叉融合:例如,通过捕捉目标的生命体征来定位隐藏的入侵者,或对住院患者进行轨迹跟踪并实时监测患者生命体征。相比于接触式传感器、光学相机和红外传感器等传统技术,雷达传感器在生命体征探测和短程定位领域的应用具有非接触、可穿透、不受光照温度影响等独特优势,获得了广泛研究与应用。但当前的雷达传感器也存
现代光学显微仪器将高性能光学组件与数字图像的采集处理功能相结合,实现了远远超过了人眼感知的,对待测样品微小细节的可视化的复杂功能,已被广泛应用于疾病诊断、医药学研究和材料科学等领域。尤其在生命科学与生物医药学领域,现代光学显微镜扮演着不可或缺的角色。然而,目前的光学显微镜却面临体积日益庞大、系统日益复杂、造价日益昂贵、并且对于细胞之类的生物学样品需要借助染色手段进行标记的问题。针对上述问题,本文基
人脸超分辨率重建(Face Super-Resolution,Face SR)是一种通过算法来提高人脸图像分辨率的方法,与改良硬件设备的方式相比,它拥有低成本、易升级等优势。深度学习的飞速发展使得卷积神经网络在人脸超分辨率重建任务中取得了不错的成绩,但是目前人脸超分辨率重建使用的网络结构大多是来自于普通图像重建算法的模型,没有利用人脸独有的面部特征,容易产生面部模糊、五官混淆等问题,无法达到理想的
作为非直观成像技术的重要组成部分,偏振光谱成像技术能够有效地从复杂样品中提取出偏振散射特征,对于生物组织等物质特征检测有着很好的应用前景。偏振调制的方法与各类光学系统有着很好的兼容性,可以方便地结合到检测场景中。现有的偏振检测研究主要应用于单波长领域,对于细节特征检测程度还不够,结合光谱调制能够对偏振参数的光谱特性进行检测,这样可以通过偏振光谱的差异性来获取样品的多维偏振参数信息,能够大大提升细节
计算机控制光学表面成型技术(Computer Controlled Optical Surfacing)即CCOS技术,广泛运用于中小口径的光学反射镜的加工,该技术以小磨头技术为代表,科技的发展与更高的光学元件加工需求也促使该技术融合更多更先进的加工技术。本文所涉及加工流程从单轴机研磨开始,光学元件面型到达一定精度后采取CCOS加工机床加工来进一步降低pv及rms值直到达到加工需求为止。本论文采用
随着制造业与科技水平的飞速发展,在熔焊与增材制造领域,传统的人工焊接已经无法满足工业界对大规模生产的需求,因此需要一种利用机器人代替人力焊接的自动化焊接方案。在智能化焊接中,由于焊接方式、焊接环境复杂多变,基于传统图像处理算法的焊缝跟踪方案已经难以实现理想的跟踪效果,所以需要提出一种能够适应复杂焊接环境的图像处理算法。本文针对增材制造领域中的焊缝跟踪技术进行研究,将基于深度学习的图像分割算法应用于
学位