基于云计算平台的转码服务器的设计与实现

来源 :中国科学院大学 | 被引量 : 5次 | 上传用户:shizelinli
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来互联网技术和新媒体得到了高速的发展,很多基于新媒体的应用在软件市场上越来越丰富,尤其是视频业务已经成为用户的“新宠儿”。当前市场上,由于终端设备类型的多样化、各种视频媒体格式以及网络环境的差异性,这就需要一种能够解决海量视频转码、实时快速处理视频的技术。而云平台通过其强大的并行计算能力、较高的容错能力和良好的扩展性等特点,并且云技术的发展越来越成熟,因此可以探究将视频转码任务转移到云平台上进行。在众多的云平台中,目前运用最广泛的是Hadoop云计算平台,它是一个开源框架,同时支持分布式计算、海量数据处理与存储。因此,Hadoop开源框架的出现,使得解决面向多种终端设备、多种视频格式、多种码流要求的实时视频转码问题成为可能。本文依托研究科室的“新媒体互动广播”项目,提出并实现一种基于Hadoop云计算平台的转码方案。本文主要技术是利用Hadoop云计算平台和FFmpeg开源转码工具对视频进行分布式转码,主要内容是研究和分析Hadoop平台的两大核心:分布式文件系统HDFS(Hadoop Distributed File System)和MapReduce并行计算模型,利用视频文件封装原理、视频格式和视频编解码技术,采用基于GOP(Group of Pictures)连续帧的分片技术,把原始视频文件分割成若干个视频片段,再结合MapReduce编程思想设计并实现Mapper和Reducer工作任务,本文最后还针对系统的分布式转码功能进行了实验和测试。经过实验表明,本文实现的云转码系统能够在一定程度上提高视频转码的效率,并且在整体上增强了项目平台的业务能力。该方案不仅充分利用了云平台中集群的并行计算能力,解决了研究室之前项目中单机转码的性能瓶颈问题,而且满足了研究室新媒体互动广播业务的发展需求,具有较强的实际意义。
其他文献
对于传统的发动机营销模式而言,发动机厂家的利润来自发动机、配件的销售,随着社会的发展,客户对售后服务的要求愈加多样化,对产品的维修、保养也提出更高的要求,同时当今市
在语义Web服务的相关研究工作中,以Web服务的组合、发现为目的,已经有大量的研究人员和研究机构对其进行了广泛的研究,其中包括:OWL-S;以工作流为基础的Web服务组合;扩展现有
国民的身体健康及体质状况是一个涉及到国家长治久安、兴旺发达的根本因素。然而本世纪以来,伴随着社会生活节奏的逐渐加快,以及物质生活的日渐丰富,传统生活模式和生活习惯已然
本文以提高合成孔径雷达(SAR)实时成像处理系统性能为目标,重点研究并实现了SAR成像处理算法中三个关键运算单元。   论文设计并实现了一种高性能定点FFT IP核。论文从DFT
近年来,由于材料和加工技术的限制,单核处理器的性能已经难以有所提高了,无法满足应用的需求。为了进一步提高处理器的性能,必须采用多核结构的处理器。多核处理器采用了并行计算
随着数据量的增加和数据存储操作性能需求的提高,传统基于DRAM+HDD存储架构的存储系统面临着严峻的挑战。由于HDD的I/O时延过高,HDD已经成为数据存储系统的性能瓶颈。相对于H
学位
EAST等离子体控制系统(PCS)继承于DIII-D的等离子体控制系统架构,以等磁通控制作为等离子体位形控制的主要方式,并且利用RT-EFIT程序作为位形控制过程中基本的平衡反演工具。由
数据中心的能效问题受到了越来越多人的关注,降低数据中心的能耗不仅直接关系到降低运营成本,还有助于减少温室气体的排放。MapReduce已经成为了数据中心主要的大规模数据处
随着时代的发展,信息技术已经深入到社会生活的各个领域,软件开发也从最初的小规模作坊模式演变为今天的大规模系统化工程。质量控制、成本管理已不仅仅是软件开发需要考虑的唯