基于多任务网络和网络蒸馏的可行驶区域辨识算法研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:woai2010ni
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着交通事业的发展,道路交通事故形势愈发严峻,对人民的生命财产安全造成了巨大损失。智能网联汽车可以承担部分或全部驾驶任务,提高行车安全性。其中,可行驶区域辨识技术可检测出当前车辆可行驶的道路区域,以确保在道路上安全行驶,是智能网联汽车环境感知的基础性研究工作。因此,研究智能网联汽车的可行驶区域辨识技术,对于提高交通安全有着重要意义。随着人工智能技术的高速发展,其与智能网联汽车深度融合,迅速成为研究的热点之一。智能网联汽车的智能化和网联化与车路协同系统密切关联。实现道路环境的“全感知”,对车路协同环境下的智能网联汽车至关重要。其中,可行驶区域辨识技术作为环境感知技术的核心组成部分,已取得部分研究成果,但仍有完善之处,具体包含:1)基于车道线和道路点的可行驶区域检测方法应用场景有限;2)基于深度学习的可行驶区域辨识方法难以兼顾准确性和实时性;3)智能路侧系统(路端)的可行驶区域辨识技术相关研究较少;4)已有可行驶区域辨识算法难以在实际应用中部署。基于上述分析,本文基于计算机视觉和深度学习等相关技术,开展基于多任务网络和蒸馏的智能网联汽车可行驶区域辨识算法研究。论文具体研究内容如下:(1)基于多任务网络的车端可行驶区域辨识。本文深度探究语义分割技术在可行驶区域辨识中的应用。以语义分割模型Deeplabv3+和BiSeNet为基础,构建道路分割+场景识别的多任务网络。首先,从当前车辆前方环境中,多任务网络提取出适于自车行驶的可行驶区域。其次,提出DBSCAN密度聚类的后处理算法,将可行驶区域分为可行驶区域、左可选行驶区域和右可选行驶区域3部分,实现智能网联汽车车端的可行驶区域辨识功能。本文提出的BiSeNet多任务网络,在BDD100K数据集上,平均交并比MIoU(Mean Intersection over Union)为79.37%,FPS为131。(2)基于网络蒸馏车端可行驶区域辨识模型优化。深度学习网络难以兼顾准确性和实时性。为此,本文采用了知识蒸馏的训练方式,将模型结构复杂、准确率高的Deeplabv3+作为教师网络,并将模型结构简单、实时性好的BiSeNet作为学生网络,通过教师网络改善学生网络的准确性能。此外,本文利用自注意力蒸馏的训练方式,进一步提升模型的准确率。本文提出的知识蒸馏+自注意力蒸馏方法在BDD100K数据集上,平均交并比MIoU达到84.05%,可行驶区域辨识准确率比未优化前高出约5%。(3)智能路侧系统(路端)可行驶区域辨识。仅依靠车端辨识可行驶区域,可能存在感知盲区,如前车或建筑物遮挡,传感器检测范围限制等;可通过智能路侧系统(路端)感知车端的辨识盲区,实现道路场景的融合感知。所以,本文在车端可行驶区域多任务网络模型的基础上,保留特征共享网络和道路分割分支,简化场景识别分支,并构建可行驶区域路端辨识数据集,搭建路端可行驶区域辨识模型。(4)基于嵌入式平台的可行驶区域辨识模型加速与移植。在以构建的车端-路端可行驶区域辨识模型的基础上,研究可行驶区域辨识模型的加速和移植方法,将本文车端-路端可行驶区域辨识模型部署至Jetson Xavier NX嵌入式平台。经试验验证,本文提出的可行驶区域辨识算法,可在Jetson Xavier NX嵌入式平台良好运行,准确性、实时性和鲁棒性达到较好平衡。
其他文献
近年来,多孔吸油剂得到了广泛的研究。氮化硼由于其优异的化学惰性、耐高温性、无毒性、疏水亲油,是一种理想的能承受恶劣条件的无机材料。然而,制备成本高、需要极高温度烧成以及危险的烧成气氛是制备氮化硼多孔材料的挑战。因此,开发一种简便、绿色、免烧结以达到氮化硼多孔化目的的方法,成为研究热点。但是,六方氮化硼片间的弱范德华力导致其宏观不稳定性,以及其亦会因强共轭作用而发生团聚,造成复合氮化硼多孔材料制备的
池塘养殖目前仍是我国淡水养殖的主要方式,但在长期发展过程中存在水资源浪费、鱼病频发、养殖废水排放污染周围水体等问题。近年来,随着对养殖废水排放的管理趋于规范和严格,集装箱循环水养殖技术等新型的水产养殖方式应运而生,依靠生态池塘等污水处理设施对养殖废水进行无害化处理,在节水减排和废水循环利用上表现出巨大潜力,可满足生态文明建设和鱼类安全生产的要求。然而,目前对于集装箱循环水养殖技术中生态池塘对养殖废
蒸汽发生器是核动力装置中的重要设备,不仅起着热交换的作用,还阻隔着放射性堆芯冷却剂可能的外漏。传热管通过胀焊接工艺与管板连接,胀焊接工艺过程管内壁胀接边界及焊接接头处存在残余应力,且管子内部流动介质具有强腐蚀性,在高温高压工作环境作用下,管子管板极易发生应力开裂失效。因此研究管子管板残余应力分布及变化情况对保障核电设备的安全运行具有重要的意义。本文以管子管板为研究对象,研究的内容如下。(1)基于弹
自主水下潜器作为一种重要的水下结构物形式,在国防军事领域、科学考察领域以及民用经济领域均具有广泛的应用前景。在水下结构物水动力性能设计的初始阶段,采用传统的设计方法,基于系统(System-based)简化数学模型并通过模型实验及水动力导数(Hydrodynamic Derivatives)回归可完成水下结构物的操纵性预报。此方法简单快速,但对结构物数学模型的准确性有较高要求且无法对潜器附近流场进
混响场情况下,早期、后期反射声对语言可懂度的作用效果受多种因素的影响。信噪分离角度(目标语音与掩蔽噪声的分离角度)以及混响时间均会影响反射声对语言可懂度的作用效果。本文采用测量言语接受阈的方法评估语言可懂度,研究了三种声场模式(直达声、直达声+早期反射声、双耳房间脉冲响应)在不同信噪分离角度、不同混响时间下的语言可懂度。同时,计算了双耳互相关系数、语言传输指数等客观参量。进一步地,通过脑电实验记录
随着材料加工技术的成熟和发展,冷弯成形钢材由于受力性能良好、构件重量轻等特点,在国内外钢结构和大跨度空间结构领域的应用愈发广泛。然而,截至目前国内外对冷弯成形的钢拱结构的力学性能研究较少,对此类钢拱进行稳定承载力设计时仍沿用梁柱构件相同的残余应力分布模式,与工程设计的实际情况存在差别。因此,本文在现有的国内外研究成果和我国现行的结构规范标准的基础上,对辊弯成形残余应力应变分布和辊弯成形的圆弧钢管拱
随着中国城镇化进程不断推进,城市道路范围不断外扩,城郊公路面临着从公路功能向市政道路功能转变的需求,公路市政化改造势在必行,但目前还没有相应规范指导改造工程实施,这是公路市政化改造工程亟需解决的问题。本文首先明确公路市政化改造工程的涵义,通过对改造工程的车型分布、交通需求和未来趋势进行分析,基于城镇化率和迭代约束对传统交通量预测四阶段法进行优化,进而确定公路市政化改造工程的道路分级和设计速度等几何
金属增材制造,又称3D打印,是一类在航空航天、生物医学和汽车制造等工业领域具有广泛应用价值的先进技术。其独特的逐层建造金属零件的特点,可极大提高设计自由度和制造灵活性,从而实现具有复杂的几何形状零件的快速制造。然而现有合金因其成形过程中容易产生柱状晶粒和周期性裂纹缺陷,使其难于直接应用于增材制造。目前在增材制造过程中引入金属凝固成核剂是解决这些缺陷的一个有效途径。TiC颗粒因其熔点高、弹性模量大、
面对当前社会所面临的严峻能源与环境问题,燃料电池和锂离子电池作为一种清洁且高效的能量转化与存储装置越来越被受到重视,而其中的电解质材料是电池的核心部件,获得性能优异的电解质材料一直是研究者们致力追求的目标。固态电解质材料相比于传统的液态电解质材料因其化学稳定性好、安全性高等优点备受关注,而现有市售的固态电解质材料需要在较为温和的环境中才能实现较好的性能,一定程度上限制了其在电池中的应用。使用无机填
自适应输出调节问题一直都是控制理论领域非常重要的研究课题,其研究目标是设计一个输出反馈控制器,使得闭环系统稳定的同时,系统输出能渐近跟踪上给定参考信号。传统的二次型Lyapunov函数技术可以很好地解决自适应输出调节问题,但无法保证系统的暂态性能。时变障碍Lyapunov函数是一种采用系统输出跟踪误差和时变误差约束函数来构造Lyapunov函数的新技术,可以有效解决输出受限的非线性系统的输出调节问