基于深度学习的人像分割方法研究

来源 :西北农林科技大学 | 被引量 : 0次 | 上传用户:acdd5230351
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为计算机图形图像处理领域的研究热点之一,人像分割技术是图像分割技术的重要组成部分,其应用领域涉及到自动驾驶、智能搜救、电视电影传媒领域等,具有极大经济价值和实用价值。然而,人像分割目前存在人像数据集中人物标记不够精细、分割技术精度不高以及效率不佳等问题。针对如上问题,本研究采集并制作了一批人像数据集,基于深度学习提出了融合注意力机制的改进UNet人像分割算法和基于轻量级U型网络的人像分割算法,并采用迁移性更强的基于轻量级U型网络的人像分割算法设计了一款人像分割APP,使得用户即使在离线情况下也能轻松进行半身人物的图片分割和动态分割。本文主要研究内容如下:(1)人像数据集的构建本研究采集并制作了一批网络人物自拍照数据集作为模型训练集,并基于mask等比例分离人像,以更换背景图的方式进行人像数据集的扩充。为了扩展人物分割细节观察方式,将人物原图与分割结果mask按照6:4的比例融合,形成人物分割合成掩膜以便于更为仔细的观察人物分割效果。(2)融合注意力机制的改进UNet人像分割算法本研究遵循UNet的基本架构,对UNet进行模型扩展工作。通过在原UNet模型的基础上对模型进行加深、加宽,减少通道融合数,在下采样及中间层过程中增加注意力机制,在上采样过程中添加卷积核层数等,有效地减少了模型参数量,提高了模型的精度。利用混合损失函数联合指导模型的学习和训练,提高了模型训练的稳定性。在Human_Matting和EG1800公开数据集的实验证明,该模型算法精度分别达97.2%(Matting)、96.8%(EG1800),IOU指标分别达97.9%(Matting)、97.5%(EG1800),Dice系数分别达96.5%(Matting)、96.3%(EG1800)。(3)基于轻量级U型网络的人像分割算法本研究在融合注意力机制的改进UNet人像分割算法的基础上,针对模型轻量化程度不高、难以进行迁移的问题,对模型结构进行进一步轻量化、剪枝操作。将轻量级网络Mobile Net V2作为骨干网络,中间层剪枝,精简解码器部分卷积核,使用注意力机制等提高了模型的轻量化程度,利用混合损失函数共同指导模型的学习和训练,使得模型具有较强的迁移性、更好的细节保留程度、更强的性能表现,为人像分割APP的设计和实现奠定了基础。在Human_Matting和EG1800公开数据集的实验证明,该模型算法精度分别达98.4%(Matting)、98.0%(EG1800),IOU指标分别达98.6%(Matting)、98.3%(EG1800),Dice系数分别达97.3%(Matting)、97.0%(EG1800)。(4)人像分割APP的设计与实现本研究基于用户对于工具类人像分割APP的需求,设计并实现了一款能够实现图片分割和动态分割的安卓端人像分割APP。该手机应用程序基于Android Studio使用Tensor Flow Lite框架转换并移植基于轻量级U型网络的人像分割算法,从UI界面设计依据和主要功能技术架构进行APP设计构建,使用两款市面主流机型在Human_Matting、EG1800公开数据集上进行测试评估,经实验得知,该手机应用程序运行流畅,在华为手机上处理600*800分辨率的RGB图片平均只需0.3s,能较好的满足用户的使用期待。
其他文献
随着计算机信息技术和人工智能技术的发展,人体行为识别成为最热门的研究方向之一,并广泛应用于人机交互、自动驾驶、智能家居、智能监控以及医疗保健等领域。传统的人体行为识别算法需要人工针对特定任务进行设计,且提取特征的过程比较复杂,导致效率低下、泛化能力差。近年来基于深度学习的三维卷积神经网络算法以端到端的方式提取行为特征、准确率高等优点替代了传统算法。但也存在一些不足之处,首先,三维卷积神经网络参数量
非遗助力残疾人就业是帮助残疾人就业的新模式。基于对江苏省常州市181个社区通过开展社区教育助力残疾人就业现状的调查,以及对常州市市级以上非遗项目传承人的访谈,总结了影响非遗助残就业的因素,提出了通过社区教育利用非遗助力残疾人就业的对策建议。
行人重识别技术的主要目的是利用视觉外观信息,在跨摄像机的监控网络下检索到特定的人,该技术是智能监控的核心技术之一,其具有很广泛的现实应用场景,如视频监控,人的行为分析,多目标跟踪等。近年来,越来越多的研究人员将卷积神经网络应用到行人重识别任务中,用于提取行人特征。但是由于背景噪声,相机风格不同,光照条件不同等因素的影响,导致行人的外观产生较大的变化,这些挑战增大了行人重识别任务的难度;另外,由于行
数学是初中教学中的重点和难点课程,数学水平对学生综合素质的发展起着重要作用。随着新课程教育改革的不断深入,对初中数学教学提出了相应要求标准,其中明确提出教师在实际教学过程中,不仅要注重对学生理论知识的教学,同时更重要的还要加强学生数学能力的培养。新课程改革促使教师重视学生核心素养的提高和培养。在构建高效课堂环节的过程中,培养学生的核心素养也是必不可少的内容。因此,教师应注意不断吸收先进的教育理念,
<正>2020年9月,浙江省老年服务业协会文化专业委员会成立并落地杭州市第二社会福利院,院领导将“文化养老”理念积极引入并创新推出系列文化活动:开设“幸福颐养直播厅”,以实况在线直播打造“透明式”养老院;拍摄系列微电影,彰显养护情感与专业形象;设立“幸福摄影棚”,开展“生日祝福送上门”等活动,给老年人带来绚烂多姿的精神文化生活。
期刊
目的 探讨木香烃内酯(costunolide,Cos)对肝癌SMMC-7721细胞凋亡的影响及其作用机制。方法 将SMMC-7721细胞随机分为对照组、10、20、30μmol/L Cos剂量组。采用流式细胞术检测Cos对SMMC-7721细胞凋亡的影响,Western blot检测SMMC-7721细胞中凋亡相关蛋白(Bax、Bcl-2、Caspase-3)及内质网应激(endoplasmic
<正>1整地施肥每667 m2施农家有机肥3 000~4 000 kg,复合肥(15-10-20)30 kg或者商品有机肥400~500 kg,碳酸氢铵30 kg,磷酸二铵50 kg,硫酸钾50 kg。有机肥撒施于土壤表面,施后耕翻25~30 cm,混匀,化肥集中施在定植行中间,挖沟施入。提前扣棚。覆盖地膜前铺设滴灌带,滴灌带宽3~4 cm,距定植行10~15 cm。
期刊
结合工业大数据的特点,构建基于Hadoop的工业物联网大数据平台,对数据进行预处理、存储和分析计算,并应用于智慧工厂中。结合Mind Sphere平台,利用其向上与Mind Sphere的云端进行连接,向下与工厂众多硬件连接,完成数据采集与传输,实现对大量"低质"工业数据的提炼。通过安全通道实时传输到云端,并在云端为企业提供大数据分析挖掘,监控预警等服务,实现工业大数据的有效处理。