基于深度学习的快速航拍图像匹配

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:yinmeng6112501
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像匹配在无人飞行器视觉导航中发挥着重要的作用。通过将航拍图像与电子地图进行图像匹配,或对相邻两帧航拍图像进行匹配,能够得到飞行器的位置与速度信息。传统的图像匹配算法主要基于手工设计的特征,具有很好的泛用性,但在有些任务中匹配性能不佳。目前,深度学习迅速发展,但在图像匹配方向刚刚兴起,在精度和速度上存在较大的上升空间。为此,本文主要研究基于深度卷积神经网络的图像匹配算法,以期提高匹配精度和速度。主要工作如下:(1)提出了一种航拍图像匹配数据集制作方法,提高了Hardnet网络的匹配精度。Hardnet是一种提取128维特征描述子的深度卷积神经网络,但训练使用的UBC Phototour数据集与航拍图像差异较大,影响实际匹配性能。为此,首先分析了航拍图像数据与UBC Phototour数据之间的差异。然后基于SIFT算法的特征提取方法,对航拍图像数据进行特征提取与匹配。接着,基于孪生网络的思想,生成了50000对正样本与负样本,并以UBC Phototour数据集的格式生成了航拍图像数据集。最后,使用本文生成的数据集对Hardnet网络进行训练。实验结果表明,基于Hardnet的航拍图像匹配方法比传统算法SIFT准确率平均提升了约1.7%,并且具有更高的稳定性。(2)提出了一种CENet进行感兴趣区域提取,用于提升Hardnet图像匹配速度。当前常用的感兴趣区域提取算法存在检测结果不够准确的问题。为此,在传统深度卷积神经网络的基础上,引入集成学习的思想,通过使用多个深度卷积模块进行特征提取并集成,得到更为准确的检测结果。为了增强不同深度卷积模块提取特征之间的差异,采用了一种新的训练流程与损失函数进行训练。CENet网络以VGG16网络作为骨干网络进行构建。实验结果表明,CENet能够有效地检测出不同的特征,得到更为准确的感兴趣区域,与CENet网络基于的VGG16网络与改进的UNet网络相比,在F值上分别提升了3.86%和3.23%,在MAE上CENet比VGG16网络降低了14.8%。(3)融合了CENet和Hardnet网络,实现了航拍图像的快速匹配。首先使用高斯差分尺度金字塔进行了特征点提取,然后使用CENet网络提取航拍图像的感兴趣区域,并基于此区域对特征点进行筛选。考虑到手工标注航拍图像数据需要大量的时间,本文使用了LC算法对航拍图像进行预标注,然后进行手工调整,最后将筛选后的特征点周围区域通过Hardnet网络进行特征提取,从而实现了航拍图像的快速匹配。实验结果表明,感兴趣区域能够有效地筛选出合适的特征点,有效提升了航拍图像匹配的速度,是单独使用Hardnet网络检测速度的1.2倍,同时略微提升了图像匹配的精度。
其他文献
在我国茶叶产品中绿茶中拥有着非常重要的地位,其中,龙井茶便是绿茶中的典型代表,龙井茶作为一种名优茶在我国茶产业产量最多、平均售价也是最高的。当前社会人们对养生的日
近年来,得益于硬件计算能力、传感器技术与计算机视觉技术的快速发展,智能交通领域获得了广泛的关注,其中高级辅助驾驶系统(ADAS)更是市场焦点。同时,近年来,深度学习技术在
随着云计算和物联网等各种信息技术的发展,大数据作为信息技术融合应用的新热点,未来一段时间内,它将改变人类的思维方式和生活方式,导致各个领域和行业的管理、服务和商业等
微结构光纤在生物医学、环境监测控制、化学及食品安全检测等领域有着广泛的应用;氧化石墨烯(GO:Graphene Oxide)不仅对光波导器件的感光区起到一个很好的增敏作用,同时在基
随着对数据采集与信息获取要求的提高,传感器、物联网、无线通信等技术发展迅速,无线传感器网络(WSNs)的应用领域越来越广,向着全面化、智能化方向发展。WSNs可以获取区域内
行人重识别是智能视频监控领域中的核心技术之一。近年来,基于卷积神经网络的行人重识别方法取得了突破性的进展。然而,现有方法大多数建立在使用外部数据预先训练好的经典分
手机作为当今社会通信的重要工具,对其内部的消噪系统的性能要求越来越高,怎样去判定手机消噪系统的好坏?其内部的消噪系统所用的算法效果怎么去评价?现有的评价方法分为主观
高质量高效的医疗可以提高人们的生活质量。而肝肿瘤作为一种恶性肿瘤严重威胁着人们的生命健康。因此肝肿瘤的射频消融(Radio Frequency Ablation,RFA)治疗逐渐受到广泛关注
目的研究经皮迷走神经耳支电刺激对药物难治性癫痫大鼠痫性发作的治疗效果并初步探讨其机制。方法采用氯化锂—匹鲁卡品腹腔注射的方法点燃Wistar雄性大鼠建立颞叶癫痫大鼠模
随着技术的迭代发展和世界各国政府对人工智能产业发展的新一轮推动,机器人产业及其基础理论研究备受研究人员重视。而同步定位与建图技术是人工智能移动机器人在众多地理环