基于深度图的移动端点云分割方法研究

来源 :中国科学院大学(中国科学院长春光学精密机械与物理研究所) | 被引量 : 0次 | 上传用户:Daniel999
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着大数据时代的到来与计算机硬件性能的提升,深度学习技术迎来了新一波的发展浪潮,在图像识别与理解、三维场景分析、自然语言处理等方面取得了重要的进展。在计算机视觉领域,研究任务也从单纯的二维图像理解逐渐发展到三维空间分析,并在高精地图、自动驾驶、智慧城市、AR、VR等方面得到了广泛应用。点云是一种重要的三维数据,点云数据语义分割对于三维场景理解有重要作用,最初的点云分割技术是从二维图像分割中发展起来的,虽然在方法上有所改进但始终没有脱离图像语义分割的基本框架。不管是多视图或是体素化的方法,本质都是对二维分割方法的一种直接延伸,没有最大程度上利用点云数据本身的特点,随后产生的Point Net网络开创了点云直接分割方法的先河,并取得了较好的效果,为三维场景理解指明了新的发展方向。传统的点云分割流程包括前期数据采集与桌面端后期处理两个阶段,其中常用的采集设备有激光雷达、TOF相机等,它们通常价格昂贵且有安装结构要求,此外这种前后端分离的工作模式在实时性方面也表现较差。本文在点云语义分割网络Point Net的基础上,结合移动端本身所具有的轻量、便捷的优势,探索了仅使用移动端智能手机设备同时进行三维数据采集与智能处理的一体化方案,旨在进行前后端的无缝集成。通过对单目深度估计算法与多视几何原理的理解,本文结合谷歌的AR Core开发平台,进行了安卓设备上的深度图获取实验;并通过对模型轻量化方法的研究,改进了Point Net网络,使模型参数量减少为原来的1/5,同时在SUN RGB-D三维数据集上具有73.3%的总体分割精度;最后利用Tensor Flow Lite移动端深度学习框架,将Point Net模型成功部署到了华为nova3智能手机上,量化后的tflite模型仅268KB大小,在手机端启用GPU加速后,对单幅场景点云数据的推断速度约为0.7s。
其他文献
利用PCR从芽孢杆菌(Bacillus sp.)的基因组DNA扩增脂肪酶BSL编码的基因片段,将该基因分别克隆到原核表达载体pQE-30和pET22b(+)中构成表达质粒,并分别转化大肠杆菌M15和BL21,经诱导
二十世纪初,复式簿记与资本主义之间的关系开始受到西方学者的关注,其中,由Weber和Sombart所提出的复式簿记与理性资本主义这一命题,吸引了广泛的讨论,并持续成为历史学家讨
由于中英文之间的巨大差异,中国英语学习者饱受中式英语的困扰。产出导向法作为一种本土语言教学法,强调学用有机结合。本研究将产出导向法用于减少初中生写作中的中式英语,并提出3个研究问题:一、产出导向法是否能减少写作中的中式英语;二、与传统英语写作法相比,产出导向法是否能更有效地提高英语写作能力;三、减少写作中的中式英语是否与提高写作信心和动机存在何种关联。研究对象为51名初三学生,所有学生在实验前未进
目前糖尿病是仅次于肿瘤和心血管疾病的第三大慢性疾病,它会引起多种并发症,严重威胁了糖尿病患者的身体健康。为了有效控制糖尿病患者的血糖浓度以及减少并发症的发生,需要实时监控个人的血糖水平。目前临床和家用的血糖仪多采用酶葡萄糖生物传感器监控血糖,但是酶容易受到环境、p H值对其稳定性的影响,且酶价格昂贵,制备过程复杂,限制了酶生物传感器的应用。近几年来,拥有制备简单、价格低、响应快等优势的无酶葡萄糖传
随着大数据技术的发展,网络环境日益复杂,网络信息中关于金融的信息量呈爆炸性增长,如何从海量信息中获得有用的信息并构建金融领域的知识图谱成为研究焦点。金融领域知识图谱可帮助金融从业者根据图谱中的知识进行分析、投资、交易等操作,也能够使普通民众清晰了解各类金融企业的内在关系,在一定程度上降低金融投资风险。本文主要研究如何从海量的金融文本数据中获取金融领域实体识别以及关系抽取,以完成信息抽取工作,进一步
微波光子将微波与光波、光电器件与系统相结合,在光域处理微波信号,不仅解决了电域的瓶颈问题,同时具备带宽宽、可远程传感、损耗低等优势。将此技术应用到传感领域,能够大大提升传感结构的解调速度。本文从微波光子滤波器的角度对不同抽头的微波光子传感与解调系统进行研究,具体工作如下:(1)研究了基于双光纤布拉格光栅的双抽头微波光子传感与解调系统。对双抽头的MPF进行了理论分析,实现了对灵敏度的优化。根据输出信
由荧光粉与玻璃基体复合组成的荧光粉/玻璃复合材料(PiG)在半导体照明显示领域具有广泛的应用。然而,同时具有较低玻璃化转变温度(T_g)且化学性能稳定的玻璃体系是研究中要解决的突出问题。本学位论文针对这一问题,采用氯磷锡体系、硼酸铋体系和磷硼酸盐复合体系作为低T_g玻璃基体,采用发射黄绿光的YAG:Ce3+和发射远红光的Zn Ga_2O_4荧光颗粒,构筑Pi G(Phosphor-in-Glass
燃料电池因具有清洁,高能量密度和可持续工作等特点,近年来备受国内外科研人员和政府关注。在各类燃料电池中,氢氧质子交换膜燃料电池具有常温下启动,高效安全等特点,使其成为燃料电池研究中的主要方向。质子交换膜燃料电池的阴极反应是氧还原反应,高的过电势导致在催化剂的使用上,多以高活性铂基催化剂为主,但是铂基催化剂不仅价格昂贵,而且全球储存量低,导致燃料电池的成本过高,阻碍了其大规模商业化。制备高性能高稳定
国务院办公厅在2020年颁布《关于全面加强和改进新时代学校体育工作的意见》(以下简称意见)提出学校体育是实现立德树人,提升学生综合素质的基础性工程,同时对学校体育提出了新要求。假期家庭体育作业是学校体育的重要组成部分其内容丰富、方式途径多样,既注重学生体质健康培养,也注重学生思想道德教育,是实现《意见》的重要途径。因此本研究通过文献资料法,数理统计法、访谈法、逻辑分析法、问卷调查法对秦皇岛市海港区
相比于锂离子电池,钠离子电池具有成本低,来源易获得等优点,钠离子电池的正、负极和电解质材料的研发对发展钠离子储能器件具有重要意义。化学计量比为Na3Sc2P3O12(NSP)的钠超