由粗至精的室内场景图像空间布局估计

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:liangzi_li
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
室内场景布局估计作为图像处理和计算机视觉的研究热点之一,广泛应用于3D重建、场景恢复等新兴领域。室内场景通常存在家具等杂物,虽然为场景语义分类提供较丰富上下文线索,但也会遮挡房间结构布局边界,致使仅基于RGB图像的室内场景布局估计任务具有挑战。于是,本文设计了一种由粗至精的室内场景图像布局估计方法,主要包括改进型消失点估计方法生成布局候选项、全局特征诱导布局候选项粗选取和基于区域级特征的布局估计。针对传统方法难以估计统一顺序的消失点问题,本文提出改进型室内场景房间消失点序列化估计方法。首先,基于局部不连续自适应阈值的直线段检测方法得到室内场景图像中若干长直线段,根据线段方向性划分为竖直和水平方向线段。然后,采用投票评分机制,针对竖直方向直线段组计算相应直线段对可能竖直消失点的贡献得分,估计得到竖直方向消失点;再根据正交性原理和投票评分机制针对水平方向直线段组估计得到水平和投影方向消失点;据此,有序地估计得到相应消失点坐标值。相比于传统消失点估计方法,本文改进型消失点估计方法不仅可以提高计算效率和估计精确度,而且能有效实现有序的消失点估计。针对传统方法仅涉及布局区域级特征提取和学习,本文提出基于全局特征的布局候选项粗选取策略。首先,整幅原始图像输入以VGG-16为原型且模型参数已训练的全卷积神经网络,估计输出相应室内场景的布局边界信息;且经Softmax分类器处理上述网络fc7层特征估计出布局类别。然后,融合场景布局边界和相应类别信息生成全局特征,以约束整个室内空间布局的潜在边界,粗选取场景布局候选项,以缩小后续布局候选项的搜索空间,有利于高效选取潜在空间布局候选项。Hedau和LSUN数据集实验表明,相比于传统布局估计方法,本文全局特征诱导粗选取策略能实现对室内场景空间布局结构和房间边界位置的整体约束。针对传统布局方法仅限颜色和纹理等外观特征,本文提出融入几何深度法向量区域级特征的布局候选项最优化选取估计方法。首先,采用消失射线夹角参数化三维盒式空间布局以构建布局估计模型,将布局估计任务转化为结构化预测问题;接着,利用改进型空间多尺度VGG卷积神经网络迁移估计场景表面法向量和几何深度,几何积分累加提取并融合各个布局多边形区域的空间几何和平面外观特征为区域级特征;最后,采用Cutting-plane结构化优化算法求解模型参数。利用即得模型参数,依据最大化得分的结构化预测估计室内场景布局结构。Hedau和LSUN数据集实验表明,相比于传统布局估计方法,本文布局估计方法能提升空间布局估计的准确性,有利于提高布局模型对被室内物体遮挡场景布局边界的鉴别能力。
其他文献
最近,可见光通信作为一种新兴的无线通信技术,与其他无线通信技术相比,具有节能、无电磁干扰和传输速率高等特点。以LED作为光源的可见光通信系统在照明的同时能够进行数据传
在第五代无线通信技术的研究中,毫米波(mmWave)通信凭借着其可利用频谱宽、抗干扰能力强、易于集成化等优势,得到了广泛的关注和研究。而将mmWave技术与目前已经广泛使用的大
细胞运动追踪的研究一直是生物学、生物医学和细胞学的重要组成部分。尽管活跃细胞在序列图像中所占的比例不大,但它却有着非常重要的作用。而准确地预测和追踪序列图像中的活
众所周知,目前网络流量增加很快,特别是关于多播类的应用也越来越多,所以核心交换节点越来越成为网络的瓶颈。作为交换节点的主要交换设备——路由器和交换机,对其的研究成为互联
目前海上航行安全受到越来越多国家的重视,船载卫星应急示位标(EPIRB)是船舶发生紧急情况时的求救装置,EPIRB检测仪是为了保证EPIRB的可靠性对其进行维护和年检的重要设备。本文
作为一种全天时、全天候、远距离的主动式观测系统,雷达成像技术在国防和民用领域均发挥着重要的作用,是雷达发展的一个重要里程碑。合成孔径雷达(synthetic aperture radar,
随着信息感知技术、人工智能技术和网络技术的发展,人们生活质量得到了很大的提高。由于室内环境作为人们主要的生活环境,居家室内环境监测系统在这背景下应运而生。如今的居
海洋环境噪声,一直以来都被当做声纳系统的一种干扰。不管是主动声纳系统还是被动声纳系统,研制时都要考虑如何能够有效的抑制水下背景噪声,来提高声纳系统的工作性能。而水下噪
SDN(Software Defined Network,软件定义网络)将传统网络中控制与转发功能进行解耦,采用集成了网络控制功能的SDN控制器通过开放南向接口对整个网络进行统一的配置管理,在业
城市化发展带来的整体环境的改变,使得无线信号的传播信道愈加恶劣,与此同时,室内数据、语音等业务需求不断增大,这使得高质量的室内覆盖变得十分迫切。家庭基站作为一种室内