数据标注众包平台系统的设计与实现

来源 :北京交通大学 | 被引量 : 1次 | 上传用户:ndspsp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网时代的迅速发展,使得机器学习、深度学习也取得了巨大的进展。数据一直以来都是互联网时代的核心,然而很多未经加工的数据不能体现其价值,因此人工数据标注也就成为了一项重要的工作。目前,国内外都有较为成熟的数据标注众包平台。相较于国内的平台,国外的数据标注平台发展的更为成熟。由于网络连接、语言障碍、国内用户较少等问题,国外的平台无法支持频繁的数据标注任务;而国内的标注平台,由于标注的质量良莠不齐也无法提供良好的用户体验。因此,需要一个功能完善、使用方便的数据标注众包平台,进行数据标注任务的发布、接受、完成等工作。数据标注众包平台的用户分为两类,一类是消费者,即任务的发布者,另一类是贡献者,即任务的接受者。任务发布者选择任务模板,发布任务之后可对任务进行监控,并通过订单管理服务批量管理任务;贡献者通过完成任务获取成长积分,随着等级的增加,所能接受的任务等级也随之提高。本项目将基于Java语言进行开发,完成单点登录与鉴权、任务管理、订单管理、任务搜索、用户管理、质量管控等功能的设计与开发。消费者输入原始数据,经过贡献者标注,得到标注数据并支付一定的酬金。本人在项目研发过程中主要负责登录鉴权服务、任务管理服务、订单管理服务、任务搜索服务、用户管理服务和质量管控服务的设计与开发工作。研发主要基于Spring Cloud框架、Spring Boot框架,结合My Batis搭成基本骨架,使用My SQL、Redis、Elastic Search作为数据存储的工具,以高性能、高稳定性、高可扩展性为原则进行设计,结合众多当前优秀的框架,完成系统的开发。目前本项目已经投入到实习单位的日常使用,其价值是为单位的数据收集以及数据标注工作带来了方便,并提高了标注数据的效率和质量。通过数据众包标注平台,更多高质量的人工标注的数据投入到了语言学相关的研究中去,带来了更多的学术上的成果。
其他文献
疟疾(Malaria)是一种传染性极强的虫媒传染病,威胁着全球近一半的人口。目前世界范围内最有效的疟疾治疗策略是以青蒿素为基础的联合疗法(artemisinin-based combination therapy,ACT),但随着疟原虫对青蒿素产生耐药性,治疗效果不断下降。据近几年世界卫生组织(world health organization,WHO)的疟疾年报数据,从2015年后,全球疟疾感染
番茄又名西红柿,含有丰富的营养物质,具有较强的抗氧化能力,可以提高免疫力,深受广大消费者青睐。传统分级包装主要包括人工分级和机械分级,其中人工分级具有劳动力浪费、个人判别方式和标准不统一等缺陷,容易造成番茄分级包装品质良莠不齐;机械分级主要是从番茄重量、大小进行分级包装,无法对番茄品质进行判断。为了解决上述问题,论文在已有包装机械的基础上,利用机器视觉技术以及图像处理基本理论和方法,完成番茄缺陷果
村民公共活动空间是农村基础建设中不可或缺的重要组成部分,随着乡村振兴的推进,各地都己逐渐加大了对农村地区基础建设的投入力度。近两年,村民活动空间在农村如雨后春笋般涌现,这使得农村居民的文化、体育、娱乐等公共活动愈加丰富。但在村民公共活动空间设计中,普遍存在功能上不完善、不实用,设计风格单一,装饰细节同质化。本次的研究对象为川西平原地区的村民公共活动空间设计,目的是打造适合村民的活动空间环境。以和林
在今天,很多像素游戏的角色已经从游戏中跳脱出来,变成了一种符号,被广告、设计广泛使用。这一方面说明了大家对像素游戏人物的喜爱,一方面也说明像素画并没有被时代遗忘,是不断地进化演变,融入了现代生活的方方面面。在高清时代下,像素画电子游戏并未消失,反而在不同地域中呈现出了自己的风格魅力。将像素画融入于突破了传统剧本和传统游戏模式的Meta-game中,又呈现出了强大的生命力,像素画给予玩家想象空间,这
中国领土面积广阔,特别是在中西部的一些大省,如青海、西藏、甘肃、内蒙古和新疆等,土地面积较大,而人口较其他经济发达地区分布密度低,导致很多村镇地区由于通电成本太高而没有通电,或者用电量很有限,难以满足基本用电需求。但这些地区风光等大自然资源特别丰富,且不会像化石能源一样对环境产生污染,如果能将风能与光能进行结合复合设计来发电,对这类地区生活的居民是非常有利的。本文以内蒙古锡林郭勒盟为研究地区,以清
癌症已经成为威胁人类健康的主要公共卫生问题,细胞内基因组DNA受到内源或外源物理化学因素的损伤,遗传物质复制的准确性与稳定性遭到破坏是诱发癌症的主要原因之一。烷化剂是一类具有高度活泼化学性质的化合物,能够与DNA中富电子基团发生共价结合造成烷基化损伤。多环芳烃(polycyclic aromatic hydrocarbons,PAHs)是一类常见的烷基化损伤物质,极强的致癌性引起了人们的广泛注意。
特许权使用费作为一种无形资产使用权转移的价值支付,在高科技企业中广泛存在,其定价具有先天的难度,并且涉及关务和税务风险两部分。在关务方面,其可物化存在于进口商品的属性,由于未被多数企业充分认识,从而埋下关务隐患;在税务方面,由于无形资产使用权作为商品,其本身的价值难以被量化,所以学界对其定价方法一直存在较大的争议。当苹果公司的“双爱尔兰-荷兰三明治模式”被披露后,特许权费用作为转移定价的重要手段再
新闻作为一种特殊语篇发挥着报道新闻信息、反映和引导舆论等作用。但是,不同国家的媒体对同一新闻的报道差异经常导致各个国家的受众产生不同的观感,进而产生不同的认知偏向。为了研究这一现象及其背后的成因,本研究选取中国媒体(以中国日报和环球时报为代表)和美国媒体(以华盛顿邮报和华尔街日报为代表)在2019年5月至11月间对华为公司的报道为语料,借助WORDij和Gephi等语料处理软件工具生成了双方媒体的
进入转型期以来,中国的腐败状况在不断的恶化,不仅造成了巨额经济损失,而且构成了对政府合法性的严重挑战,形成了严重的社会污染,为人们所厌恶。调查表明,腐败已经成为中国民
报废汽车零部件及各总成经拆解后,剩余部分被压缩破碎分选处理,回收其中大部分金属材料后所剩残余物即为汽车破碎残余物(Automobile Shredder Residue,ASR)。随着我国汽车市场