基于深度强化学习的敏捷成像卫星任务规划方法

来源 :浙江大学 | 被引量 : 0次 | 上传用户:lwz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
敏捷成像卫星具有较强的姿态机动能力,相比于普通成像卫星具备沿俯仰轴侧摆的能力,对于地面观测目标可产生更长的可观测时间窗口。随着敏捷成像卫星应用领域的不断扩大和用户任务需求的不断增加,如何对输入的用户任务序列进行规划,制定出合理有效的任务执行序列,充分发挥敏捷成像卫星的运行效率,对实现敏捷成像卫星在轨运行的自主化、智能化具有重要的意义。本文围绕敏捷成像卫星任务规划问题,建立了带有时间窗口约束的敏捷卫星成像卫星任务规划模型,基于深度强化学习方法,针对如何提高算法的训练速度、泛化能力、收敛速度以及收益率等方面展开了研究。具体工作包括以下几个方面:1)综合考虑时间窗口约束、任务转移时卫星姿态调整时间、存储约束和电量约束,对普通成像卫星任务规划问题进行建模。考虑到在密集观测场景下,敏捷成像卫星任务对应的可观测时间窗口之间的重叠度较高,针对敏捷成像卫星具备沿俯仰轴侧摆的能力,可在时间窗口内选取任意一段时间执行观测的特点,设计了敏捷成像卫星任务规划所要满足的时间窗口约束,以实现对敏捷成像卫星较长时间窗口的高效利用。2)针对成像卫星任务规划问题约束复杂、求解空间大和输入任务序列长度不固定的特点,借鉴多头注意力机制对Pointer Networks机制进行改进,提出了MHA-PN序列决策算法模型对建立的成像卫星任务规划问题模型进行求解,使用Mask向量考虑成像卫星任务规划问题中的各类约束,通过Actor Critic强化学习算法对算法模型进行训练,以获得最大的收益率。根据实验结果可以得出,MHA-PN算法模型具有较快的训练速度和更强的泛化能力。3)在完成MHA-PN算法求解普通成像卫星任务规划问题的基础上,针对密集观测场景下敏捷成像卫星任务规划问题求解空间大、输入任务序列较长的特点,利用Ind RNN在处理较长序列上的优势,使用Ind RNN作为MHA-PN算法模型的解码器,提出一种融合Ind RNN和Pointer Networks的Ind-PN算法模型对建立的敏捷成像卫星任务规划问题模型进行求解。实验结果表明,对于密集观测场景下的敏捷成像卫星任务规划,IndPN算法收敛速度更快,可获得更高的观测收益率。4)基于Django框架建立敏捷成像卫星任务规划仿真验证系统,满足对地观测场景下敏捷成像卫星对地面观测目标进行任务规划的需求,并对算法功能进行仿真验证。系统针对敏捷成像卫星、观测目标和观测目标集合实现了增加、删除、参数设置和查看等管理功能,提供了任务规划推理算法的选择接口,支持嵌入多种算法,并针对规划结果提供了多视角的可视化功能。
其他文献
[db:内容简介]
[db:内容简介]
[db:内容简介]
近年来,人工智能特别是深度学习技术在模式识别、场景感知和任务决策等方面取得了突出的效果和成绩。与此同时,边缘计算和设备如嵌入式终端等的发展也带来了更高的数据处理和计算需求。深度神经网络出色的数据特征提取和分析能力在边缘计算场景有着广泛的应用前景。然而,深度神经网络的复杂度严重限制了其在资源有限的边缘计算场景下的部署和应用。因此,如何有效地降低深度神经网络的复杂度是本研究的重点问题。首先,本研究从深
随着我国技术的发展以及医疗保障体系的完善,基于人工智能和大数据的临床决策支持系统逐渐成为满足人民健康需求的重要工具。本文基于合作单位浙江省立同德医院的实际需求,围绕慢性肾脏病的预测和药物不良反应识别展开研究。第一项研究从浙江省立同德医院收集了2213名病人的电子医疗记录,其中639名病人发展为慢性肾脏病。然后,本研究提出MD-BERT-LGBM方法建立预测模型,并与现有的其它机器学习方法进行比较。
智能卡设备作为一种保障用户信息安全的产品,其内部实现的密码算法都是满足理论安全要求的商用密码算法,如DES,AES,RSA等,以确保恶意攻击者无法获取内部的关键信息。这些密码算法都是经过了一系列理论验证和筛选,以及传统密码分析方法实际攻击后被证明安全的算法。但是,这些密码算法实现在具体的物理设备上时,设备运行过程中的泄漏信息提供了关于设备中关键信息的先验知识,使得攻击者能够通过旁路攻击这种手段恢复
电弧故障已逐渐成为住宅建筑电气火灾事故的主要成因之一。由于电弧故障拥有因其复杂、随机和不确定等特性,传统的空气开关断路器无法及时响应切断电源并因此失效。针对这种情况,本文对电弧故障特征进行了初步分析。提出了基于时间片的电弧故障特征检测算法,结合该算法和离散小波变换(Mallat算法),实现了一个数字硬件检测电路。该电路与高速ADC一起协同工作,对电弧故障信号进行分析和计算,克服了传统MCU软件实现
水声传感网络(Underwater Acoustic Sensor Networks,UWASNs)是探索、观测及利用海洋的重要基础设施,媒体接入控制(Medium Access Control,MAC)协议是其中的关键技术之一。MAC协议负责分配信道资源,保证网络节点尽可能合理地共享信道。论文以数据收集为应用场景,研究水声传感网络的MAC协议。针对现有协议存在多应用适应或分区域服务质量(Qual
用户的用水类型是供水企业对用户用水收费的重要标准。用户用水类型标签作为供水企业对用户定价的关键凭证,在用户的用水类型申报、供水企业的运营减负及利润保障上起着极为重要的作用。然而随着供水产业改革以及用户规模扩大,用户用水标签错标、标签无法随用户用水性质自动更新等问题日益加剧。供水企业客户基数大、用户长期流动、变动频繁,同时运营资金投入少、人工维护困难等问题使大数据量下用水用户标签的更新和清洗难以实现
鱼类及其相关产品是人类饮食食谱上蛋白质的重要来源之一,渔业的健康发展与人们的生活密切相关。优良的鱼种资源是渔业可以持续健康和快速发展的基础,育种和优选是渔业养殖过程的关键环节。鱼苗的优选除了依靠一些生化指标外,鱼苗的表型数据也是鱼种优选的重要参考指标。目前鱼育种的研究机构多采用人工测量方法获取鱼苗的表型数据,这个过程费时费力且易出错,同时难以获得全面的表型数据。为了帮助研究人员快速准确的测定鱼苗的