基于深度学习的卡通角色身体语义解析

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:juhaixu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
卡通角色是机器很难理解的一种艺术形式。对角色的身体解析是一种类似于细粒度语义分割的方法,可以帮助机器理解卡通角色。虽然关于卡通解析任务的研究非常有限,但是对自然图像的研究却很丰富。在这一领域,前沿的研究使用深度卷积神经网络(DCNN),但是需要大量的数据才能取得很好的结果。由于卡通画具有无限多种独特的绘画风格,并且数据集稀少,卡通角色解析任务的复杂性远高于自然图像的人物解析任务。在本文中,卡通狗是我们确定研究的实例类型。我们创建了一个新的数据集,由965张卡通狗的绘图组成,以适用于卡通狗解析任务,其中每幅图片都有其7个语义身体部分的精细标签注释。在此基础上,我们设计了一种新型的深度卷积神经网络(DCNN),称为密集特征金字塔网络(DFPnet),用于卡通狗绘图的身体语义分割。为了针对我们的任务创建出最佳的模型,我们对最新的语义分割方法进行了广泛的实验。在我们的卡通狗数据集上,DFPnet超越了相关研究工作的最新技术水平。在测试集上,我们的DFPnet达到了68.39%m Io U,93.5%像素准确度,79.4%平均准确度。我们的研究成果可以为数字艺术作品理解等后续研究工作提供有用的基础。
其他文献
涝渍灾害是限制玉米产量提高的主要因素之一。现有研究表明,ERF类转录因子,特别是ERF第七亚家族转录因子在植物涝渍胁迫调控中扮演着重要角色。实验室前期通过候选基因关联分析发现玉米ERF第七亚家族基因(ERFVIIs)与渍水抗性显著相关;另外利用耐渍QTL定位结合转录组数据分析鉴定到ERF第五亚家族转录因子ZmEREB46也参与渍水胁迫响应。本研究在此基础上,对多个玉米ERF家族基因进行生物信息学分
旋翼无人机广泛的应用于人类生活的各个场景,航拍、救援、影视拍摄、电路检修等等。提高旋翼无人机自主避障飞行的能力,是无人机安全飞行的关键要素。环境感知和旋翼无人机的自主飞行,也一直是该行业的研究热点。传统避障算法研究的关注点在于准确的获取与障碍物之间的距离上,与之不同的是,我们仿照动物的快速视觉避障,使用单目相机,通过预估稠密的碰撞时间信息,建立局部的概率地图,从而达到无人机避障的效果。使用碰撞时间
在计算机基础技术的发展之上,赋予计算机以视觉是实现人机非接触智能交互的一个基础保障。目前人类是社会活动的主体,其动作传递着关键性的信息,因此基于人工智能技术定位并识别视频中的人类动作有着重要的学术意义和应用价值。然而,视频背景的复杂性极易影响到动作检知的结果,因此基于特征简单的人体骨架数据实现动作检测任务展现出了较大的优势。在此背景下,本文首先基于深度网络对人体姿态估计问题进行了研究,分别使用自上
铸造Al-Li-Cu合金具有低密度、高比强度、高比刚度的特点,能够通过液态成型制备复杂结构铸件,在航空航天飞行器、水中兵器等武器装备用高承载轻量化壳体部件上有着广阔的应用前景。但是,目前关于铸造Al-Li-Cu合金的研究大多集中在成分设计和组织、力学性能分析,很少有关于铸造Al-Li-Cu合金腐蚀性能的研究报道。腐蚀性能是构件实际服役过程中的关键指标,因此,开展铸造Al-Li-Cu合金腐蚀行为研究
卷积神经网络近几年来发展迅速,出现了各种网络结构,针对问题选择合适的网络结构,需要专业人员大量的时间进行设计。如何降低神经网络结构设计成本,是神经网络更广泛应用必须面临的问题。近几年,有学者提出利用进化算法搜索合适的神经网络结构,但这些算法计算成本较高,无法使用较少的资源进行计算。本文主要讨论了已有进化神经网络算法,提出一种基于已有的网络子结构进行神经网络结构搜索的进化神经网络算法,以降低结构搜索
目前,随着大数据、人工智能、5G等新兴技术的不断进步,网络的创新突破也成为智能化进程的重要环节。网络空间中所存储的海量内容蕴含了丰富的语义及情感信息,具有重要的研究价值,能够促进网络智能化发展,因此发展以内容为中心的网络已成为主流趋势。同时随着以人为中心的服务需求不断增长,对不同场景和人类意图的内容认知要求也逐步提高。而现有的网络无法以人类可以理解的方式处理信息,也没有考虑其思想和精神层面的内在需
目的:探究不同严重程度认知障碍组别间脑内扩张血管周围间隙(enlarged perivascular spaces,EPVS)和脑白质高信号(white matter hyperintensity,WMH)的差异,分析EPVS、WMH和认知功能的相关性。通过神经心理学评估及影像学检查初步筛选主观认知下降(subjective cognitive decline,SCD1)及轻微认知下降者(subt
目的:探索儿童卵巢未成熟畸胎瘤的miRNA分子表达谱并筛选其特异性分子标记物。方法:收集儿童卵巢肿瘤组织标本共20例,其中18例为石蜡切片标本,包括卵巢囊肿2例、成熟型畸胎瘤3例、未成熟畸胎瘤6例、卵黄囊瘤3例、幼年型颗粒细胞瘤3例、无性细胞瘤1例;2例为冰冻组织标本,1例为成熟型畸胎瘤,1例为卵黄囊瘤。运用美国安捷伦公司的基因芯片检测样本表达的miRNA,分为三组进行统计学分析,主要将卵巢未成熟
目的:酒精、烟草、苯二氮?类药物及其他非法成瘾物质的滥用(成瘾)是一个严重的公共卫生问题,影响到个体健康以及社会安定。考虑到目前社区医疗机构对药物滥用干预服务的不足,以及简短干预在其他国家减少药物滥用问题的可接受性,可行性和有效性,我们在中国五地区的社区医疗机构进行了多中心的临床试验。目的是比较强化干预组、简短干预组与对照组在减少物质滥用行为上(任何非法药物使用或处方药滥用)的有效性。方法:设计:
应用在工业领域的基于时隙跳频的大规模无线传感器网络,是由大量无线传感器节点组成的树状拓扑网络。在这种汇聚型网络中,处于根节点附近的热点区域节点承担了大量上下行数据的收发工作,发生拥塞的风险很大。因此,如何解决无线传感器网络中的拥塞控制是无线传感器网络研究的重要课题之一。现有的拥塞控制算法都是从抑制报文发送速率的角度出发,将大量并发的数据包后压,从而达到缓解网络拥塞的目的。但是,实际上终端节点设备并