基于强化学习的码头集装箱装卸智能化系统的设计与实现

来源 :山东大学 | 被引量 : 0次 | 上传用户:chao19890103
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网、云计算、大数据和人工智能等技术的不断成熟,港口行业也在迈入与信息化深度融合、向智能化跨越发展的新时代。当前,全国各大港口延续了良好的发展态势,货物吞吐量、集装箱吞吐量增长明显。但从长远来看,要持续提高港口行业的竞争力,必须改变传统的港口管理和作业模式,尤其是在集装箱装卸方面,积极引入智能化管理的技术和方法,从而实现大型集装箱码头的提能降耗和作业优化。本文对集装箱装卸智能化问题进行了深入的分析,针对国内外现有研究方法存在的问题和不足,结合港口集装箱装卸作业的特点,从强化学习的角度对该问题进行建模,并提出了基于多智能体强化学习的集装箱装卸智能化决策模型。该模型根据港口集装箱装卸作业流程,将智能体分为堆场智能体、装卸设备智能体及泊位智能体,并组成多智能体系统,随后基于多智能体系统设计实现了集装箱装卸智能化算法。具体工作如下:(1)针对集装箱装卸作业复杂性、全局性的特点,进行了基于多智能体强化学习的DQN算法建模,考虑到生产业务需要与真实环境频繁交互的特性,本文创新性地提出了基于分组共享式模型的DQN算法。本文在对用户提交的船舶计划数据以及系统固定信息数据进行综合分析之后,综合当前码头的实际生产作业状态,自动生成集装箱装卸的智能作业计划。经过与先前平均每个集装箱卸船作业中的装卸成本的对比分析,本文提出的智能化算法能够降低集装箱装卸过程中的装卸成本,提升作业效率和企业利润率。(2)针对企业需求,设计并实现了一个基于多智能体强化学习的集装箱装卸智能化系统。分析了当前集装箱码头的生产作业流程及特点,进行了总体架构设计和模块设计,将整个智能化系统分为数据采集模块、数据存储模块、算法分析模块和业务处理模块;然后将所提基于多智能体强化学习的分组共享式模型应用于此系统,实现了基于强化学习的集装箱装卸智能化系统;最后进行了算法效果验证和系统测试,验证了该系统在功能和性能方面的高效性。
其他文献
健康体检行业作为医疗健康领域的细分行业,近年来处于高速发展期,行业竞争日益激烈,随着国家监管的规范化,目前增速放缓,已形成较为稳定的行业头部竞争格局。伴随着技术进步,该行业发展从初期的连锁化扩张、规模化经营,资本化抢占市场和集约化降低成本,发展到目前逐渐与健康管理、医疗服务及慢病管理等围绕健康体检服务而延伸的全流程健康管理闭环的平台搭建和产品整合。作为区域性中小型的健康体检机构,先天无法通过更加快
煤矿作为八大高危行业之一,顶板、瓦斯、火灾等事故案例已屡见不鲜。近些年,随着安全生产水平的提升,虽然我国煤矿安全状况正逐渐改善,但煤矿事故的频发不仅造成巨大经济损失,而且严重威胁着员工的生命安全。顶板事故作为煤矿事故发生频率最高的事故,对煤矿安全有着深刻的影响与研究价值。然而顶板事故的发生并不仅仅是单一因素作用的结果,而是由人的不安全行为、设备和环境的不安全状态以及管理的缺陷共同相互影响和相互作用
近年来,一种以随机抽选为主要特征的玩具盒子正通过线上线下的各种渠道迅速风靡全国,不仅经营商家众多、市场规模逐年递增,与之有关的话题更是屡屡占据各类社交平台的热榜;这种不能提前得知具体款式的潮流玩具被称为“盲盒”。以国内最大的盲盒公司泡泡玛特为例:数据显示,2020年,泡泡玛特全年营收高达21.36亿元,同比增长54.3%;各类线上渠道销售收入占比从2017年的9%大幅提升到38%。除此之外,截至2
灰树花(Grifola frondosa)营养物质含量丰富,是一种食药用兼备的大型食用菌,也是一种潜在的健康食品来源。目前灰树花的研究主要在多糖领域,而有关灰树花蛋白质的报道较少。本研究以灰树花为试验对象,采用超声波辅助碱溶酸沉法提取灰树花蛋白质(GFP),通过单因素和响应面法对蛋白制备工艺进行优化;并初步探究反复冻融对该蛋白质结构、加工特性及消化特性的影响。试验结果如下:(1)采用碱溶酸沉法,借
“脆弱青铜器”是基于文物保存实践中主观感知的一类概念,强调了青铜器失去(或本不具备)原有金属韧性和强度、易破碎、易损毁、难以用常规方法处置的状态,如深度矿化、粉状锈、酥粉锈、薄壁等。在本研究中,“脆弱青铜器”是指青铜器在多因素(外因+内因)耦合作用下的重度腐蚀结果。鉴于目前保护工作中对青铜器脆弱状态描述的主观性、模糊性,本研究提供了一种利用多元统计方法对青铜器的腐蚀劣化程度进行量化表征的思路,以实
随着国家颁布了系列慢行交通发展政策,以自行车为代表的绿色交通的理念越来越得到广大居民的认可。然而,城市非机动车道受机动车流影响,其空间受限,同时非机动车间存在较强的冲突干扰,严重影响其通行安全与运行效率。本文以西安市的城市非机动车道为试验区域,对发生避让冲突的自行车群体进行采样,调查采集道路环境、车群规模、位置分布、速度位移等信息,对冲突干扰环境下的非机动车避让特性进行分析。构建避让轨迹预测模型和
猪繁殖与呼吸综合征(Porcine reproductive and respiratory syndrome,PRRS),是由猪繁殖与综合征病毒引起的,能够导致妊娠母猪流产、仔猪呼吸道症状,且高死亡率的一种病毒性传染病,俗称蓝耳病。自该病被发现以来人们意识到其临床症状在个体间具有很大的差异性,PRRSV不产生特殊的临床症状,其表现的临床症状反映的是PRRSV的毒力,猪的年龄、免疫状态以及并发感染
城市最基本的特征是人的活动,最富有活力的空间是城市公共空间,社区中的公共空间作为城市公共空间体系一部分,是居民健康活动最直接的空间载体,与公共健康有着密切的关联。疫情未艾,国家、政府、专家甚或普通的居民都对其公共健康问题提出再度审视,人与环境如何融合共生?纵观其发展溯源,公共空间作为社区的公共领域,经历了从无到有的发展过程,在空间组织层面从“单一维度”递升发展到“多维融合”,在行为活动层面从“消极
ZnO量子点(ZnO QDs)存在制备过程不稳定、发光强度较弱以及光谱调制困难的问题,本文分别对每个问题开展研究。第一,本文研究了ZnO量子点的稳定制备技术,稳定合成了无壳ZnO量子点方法,量子点的光致发光光谱具备所需的各个波段;第二,本文合成了高发光强度ZnO-MgO核壳结构量子点,发光强度大大增强,扩展了ZnO量子点光谱范围;第三,本文研究了ZnO量子点的新制备方法,对ZnO量子点的发光进行光
传统广告时代,广告的制作与发布处于某种垄断地位。社会化媒体的出现打破了这种垄断,使广告真正脱离了“一些人”进入了“全民时代”,在社会化媒体平台,每个人都可以为自己或为自己服务的集团做广告,尤其短视频的视听功能和平台特性为广告的内容制作与推广提供了更加广阔的空间。但在新媒体环境下,信息的碎片化带来受众观看习惯的碎片化,注意力成为稀缺资源,广告仅要留住受众的目光就已异常艰难,毋宁说要让受众接受且认可广