基于深度强化学习的无人船路径规划研究

来源 :大连海事大学 | 被引量 : 0次 | 上传用户:odeartiger
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
无人船具有广阔的应用前景,自主路径规划作为其关键技术,已在无人船研究领域中发展成为热点研究方向。结合人工智能理论方法,本文开展基于深度强化学习的无人船路径规划研究,解决未知复杂航行环境下的无人船自主航路规划问题。首先,在开阔水域中,通过对环境进行无人船安全范围的区域划分和视觉可视剪枝技术,并结合Theta*理论生成足够稀疏的全局最优航路点。进一步,在复杂的狭窄水域中,将精英和多样化策略融入遗传算法,设计了能够生成稀疏航路点的精英遗传算法。进一步部署了B样条技术,以进行灵活平滑的插值,从而得到由最佳稀疏路点组成的平滑路径。其次,在不可预见的情况下,为具有运动学约束的无人船创建了一种结合了全局路径规划和局部层次结构的运动学约束的全局-局部混合路径规划方案。为了应对动态不可预见的环境,通过模糊决策层和精细动态窗口层建立了局部分层结构,分别通过控制前向和艏摇角速度来分别负责避免大范围和近距离碰撞。借助于精细动态窗口层,与无人船有关的受约束的运动学将融入到局部路径规划中,进而得到一条可跟踪且避免碰撞的局部路径。同时,设立虚拟航路点使局部路径和全局路径无缝衔接。从而为整个混合路径规划方案做出贡献。在现实世界中进行了仿真研究和综合比较,以证明所提出的混合路径规划方案的有效性和优越性。此外,结合B样条平滑路径,开发了具有任务导向的奖励函数的深度确定性策略梯度算法,并从存储池中的数据确定性地提取深度领航策略,即得到从路径跟踪误差到力控水平动作的映射,从而得到基于遗传辅助深度强化学习的无人船自主领航方案,并且该方案是由航路点生成、路径平滑和力控水平的无人船领航策略组成的自主领航框架。本文在相同条件下与多种算法在不同的地理区域进行综合对比,从而验证了算法在应对突发状况和海洋扰动下的稳定性和有效性。此外,通过在不同地理区域使用其他环境训练得到的深度领航模型,从数据结果分析得出模型具有良好的泛化性能。
其他文献
目的:研究本院产超广谱β-内酰胺酶(ESBLs)大肠埃希菌所致尿路感染耐药情况、产ESBLs的检出率及其危险因素,为临床医生及时了解本院尿路感染患者的耐药情况,依据药敏结果调整
结肠癌是临床常见的恶性肿瘤之一,在美国其发病率和病死率分别占恶性肿瘤的第2位和第3位。聂绍发等心早有研究提示我国普通人群中结肠癌的发病率也有逐渐增高的趋势,达到年均4%,
儿化词教学是对外汉语教学的一个教学难点,不仅学生理解儿化词困难,而且教师多从语音角度教授儿化,容易忽视意义教学,导致儿化词教学效果不佳。已有研究较多关注教材中的儿化
目的:评价国产坎地沙坦治疗高血压的疗效及安全性.方法:48例原发性高血压患者随机分入坎地沙坦酯组(24例)和芦沙坦组(24例),剂量分别为每日8~16 mg和50~100mg,疗程8周.结果:坎
“每部电影、电视剧、网络视听节目全部演员、嘉宾的总片酬不得超过制作总成本的40%,主要演员片酬不得超过总片酬的70%。”日前,中宣部、文化和旅游部、国家税务总局、国家广播
报纸
信息技术的广泛应用和网络空间兴起发展,网络空间测绘则成为近两年来一个新的研究领域,网络地图就是网络空间测绘的实际应用呈现。通过一些相关技术,探测全球互联网上的各类
随着2016年以培养“全面发展的人”为中心的《中国学生发展核心素养》的正式发布,被誉为“撬动课堂转型的一个支点”的单元教学设计,成为目前我国基础教育改革中的热点词汇。