基于全景视频内容的空间音频生成算法研究与实现

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:lxg888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着虚拟现实技术的发展,360度全景视频作为一种新的视频形式,其可全角度环绕式观赏的特点为用户带来了沉浸式的体验。为了在全景视频基础上获得更强的沉浸感,业界一般会为视频添加与之匹配的空间音频。然而,如何生成逼真的空间音频融入视频的场景仍然是一个难点。一方面,民用的全景视频拍摄自带的录音设备无法达到令人满意的效果,而人工为全景视频配音或购买的专业空间音频录制设备会花费大量的人力或财力。因此,本课题设计并实现了一套基于全景视频内容来生成空间音频的系统,用户可以借助此方法高效快速地为全景视频生成与之匹配的空间音频。本文首先将生成空间音频所需要素分解成声音对象、房间混响、环境音效三部分。基于视频内容,分别通过多目标检测与跟踪、房间参数回归、场景分类模块实现这些要素的产出,并建立环境音效数据库来辅助这一过程。利用本文提出的算法实现了空间音频生成的软件系统,在此基础上对算法设计并进行了用户研究。通过分析统计数据了解了本算法具有的优势和算法中各组件的相对重要性。在空间音频生成算法使用基于DeepSORT的多目标检测与跟踪模块时,为了解决DeepSORT在全景视频上的不适用性,本文提出了 S-DeepSORT算法。S-DeepSORT在原DeepSORT基础上,引入了基于SphereNet的Sphere-SSD作为目标检测器,并通过坐标转换、数据增强的手段,使算法可以更好的在全景视频环境下使用。通过与现有算法数据指标的对比实验,表明S-DeepSORT能够对全景视频下的多目标检测与追踪取得较好的效果。最后,本文基于Unity引擎设计并实现了一个对全景视频的空间音频进行视听与编辑的系统平台。
其他文献
传染性支气管炎是世界各国养禽业的主要经济上重要的家禽疾病之一.该病是由传染性支气管炎病毒引起的,可感染多种禽类动物发病.禽传染性支气管炎造成的经济影响包括蛋鸡产蛋量下降和蛋质量差、肉鸡生长发育迟缓、胴体重低和死亡率.尽管禽传染性支气管炎主要影响家禽的呼吸道器官,但禽传染性支气管炎病毒表现出广泛的组织趋向性,包括肾脏和生殖系统.因此,禽传染性支气管炎发病结果可能受所涉及的器官或组织以及感染病毒的病理类型或感染的禽传染性支气管炎病毒毒株的影响.因此,了解特定地区流行的禽传染性支气管炎病毒毒株的流行病学知识对于
牛病毒性腹泻(BVD)是由牛病毒性腹泻病毒(BVDV)引起的外来传染病,近几年随着国内牛只频繁调运,导致国内大部分牧场存在不同程度感染.牛病毒性腹泻对牛的生长、繁育和产奶量影响较大,患病牛主要表现为消化道黏膜溃烂、坏死、胃肠道炎症及腹泻等症状.如果防治不当,就会对牧场造成巨大的经济损失.本文从病原、临床症状、治疗及预防措施几个方面进行阐述,以期帮助牧场进行科学防控,减少养殖业经济损失.
规模化养鸡具备非常突出的优势,如有政策补贴、养殖户抗风险能力较高、可对粪污资源利用获取更多收益等.但在规模化养鸡过程中仍需要做好标准化、精细化的管理,需要预防鸡生病或鸡疫病的蔓延,以降低养鸡场生产成本.预防养鸡场疫病作为当前养殖户非常关注的问题,本文将重点分析规模化养鸡场中鸡发生疾病的特点,并结合养鸡场现实情况提出疾病防控措施.
马立克氏病是一种由病毒感染后引起的一种传染性疾病,主要表现为淋巴细胞增生,鸡在感染病原后具有非常高的发病率和死亡率,对鸡群的危害非常严重,给养鸡场造成的经济损失也非常巨大.本文通过对蛋鸡马立克氏病进行全面的剖析和归纳总结,旨在可以为本病的防控提供一些参考,以避免或减少遭受经济损失.
牛瘟是一种毁灭性的牲畜疾病,造成全大陆的饥荒和贫困.联合国农业组织和世界动物卫生组织宣布全球消灭牛瘟;这是我们时代要消灭的第二个疾病.常规控制措施,主要是大规模接种疫苗和动物检疫程序,导致牛瘟发病率大幅下降.然而,在过去几十年中,以克服诊断和监测方面的挑战、病毒致病性的变化、野生动物种群中疾病的传播,以及为经常处于不稳定状态的偏远和游牧社区提供服务.
肉牛养殖会受到技术投入、肉牛品质、环境因素以及流行病因素的影响,所以需要工作人员熟知牛病的诱发原因,在养殖中做好防控工作确保肉牛养殖经济效益.基于此,文章就牛病的流行特点及防治措施进行探讨.
自从2012年能级弥散概念和分数维度电子态系理论提出以来,关于能级弥散效应的进一步实验验证和分数维度电子态系理论在相关光电子器件中的应用问题便提上了议事日程。一方面,作为介于激光器和发光二极管之间、兼具高功率和宽光谱特性的一种光源,超辐射发光二极管(SLD)是最能体现能级弥散效应和分数维度电子态系特征的典型光电子器件之一。因此结合典型分数维度SLD的性能探究能级弥散效应的真实性、进一步完善分数维度
牛皮蝇蛆是皮蝇属的牛皮蝇和纹皮蝇的三期幼虫寄生于牛背部皮肤引起的一种慢性疾病,该病在世界范围内广泛分布,是影响牛健康养殖的重要寄生虫病.该病可以影响患病牛的整体健康状况以及免疫系统,从而对牛肉产品、牛奶和皮革产生影响,给动物生产造成了巨大的经济损失.关于该疾病的控制措施,已经有效地实施了不同的方法,因此该疾病在许多欧洲国家在国家层面得到控制.本文对牛皮蝇蛆诊断、防治等方面进行综述,旨在为牛皮蝇蛆病的防治工作提供参考.
牛养殖产业是我国重要的产业类型,新时期,随着市场需求量的扩大以及养殖技术的进步,肉牛养殖工作在不断的发展和进步,一定程度上带动了养殖人员增收致富,较好的满足了市场需求.随着养殖规模的扩大,养殖工作发展的过程中面临着疫病高发的情况,像肉牛高热相关疫病就是常见的易患病,不仅会对肉牛的健康造成不利影响,同时也影响着养殖业的健康发展.该类疾病的发病率高,流行速度快,会对牛的健康生长造成严重影响,若是养殖人员对疾病不够了解,可能会导致延误最佳治疗时机,造成严重的经济损失.基于此,文章对肉牛高热相关疫病的病因、临床特
恶性卡他热是由恶性卡他热病毒感染引起,主要患病动物以反刍动物尤其是牛的一种高度致死性疾病.由于临床易感宿主和不同物种宿主的发病机制和流行病学的复杂性,给兽医临床诊断造成了严重的困难.病毒核酸和特异抗体血清学检测方法等最新研发的检测方法极大可扩展了恶性卡他热的检测方法,提高了诊断的准确性,为恶性卡他热的诊断提供了新的技术.目前,恶性卡他热的防控工作中,准确的和适当的检测占据重要地位,也是预防恶性卡他热疫病暴发的重点.本文对恶性卡他热的流行病学、临床症状以及诊断方法的研究现状进行综述,为恶性卡他热诊断方法的研