数据放置相关论文
随着互联网、移动互联网、物联网等相关技术的发展,各个行业的数据量飞速增长,人们急需一种有效的手段充分挖掘海量数据背后所蕴含......
作为替代传统内存的理想候选者,尤其是在并行系统中,磁畴壁存储(DWM)具有许多优秀特性,例如低泄漏功耗,高密度和低访问延迟。但是,由......
IPSAN以其相对低廉的价格和高效的性能,逐步进入媒体服务应用.以IPSAN上媒体服务的特性开始,分别从三个方面研究IPSAN系统中I/O请......
并行数据库通过将一个关系中的元组分割放置在多个节点的磁盘上,利用I/O并行性,来获得较高的性能.如何对数据进行划分和放置就是所......
新型非易失存储器件(Non-Volatile-Memory,NVM)具有高密度、低延迟、低能耗、非易失、字节粒度寻址等众多优势。NVM因此能够同时弥补D......
随着互联网应用和计算机技术扩展到社会生活的各个方面,数据量呈现出爆炸式的增长。今天,存储和处理大规模数据和超大规模数据已经......
大数据时代的到来,一方面我们需要安全有效地存储海量数据信息,存储系统的容量亟待增大;另一方面大数据量也对数据处理能力提出了......
由于云计算广为接受,越来越多的传统应用转移到云环境中。云服务系统是部署在云中,按照云计算软件即服务的思想对外提供业务服务的......
Spark Streaming是大数据流式计算的最新进展,是建立在Spark引擎上的批量流式数据计算平台。它将流式计算看作一连串短小的Map/Red......
Hadoop分布式文件系统(Hadoop Distributed File System,HDFS)作为新一代企业级存储架构的核心,是云计算和大数据时代应对存储容量......
学位
随着互联网和在线社交网络应用的不断发展,数以十亿计的用户活跃在大型社交网络平台并产生大量的社交网络数据。在线社交网络数据......
在大规模分布式存储系统中,由于节点数目规模庞大且单个节点可靠性不高,致使存储节点失效事件频发。为了确保数据的高可靠性和高可......
近年来,互联网相关行业产生了大量由用户通过如社交网络、博客以及多媒体共享服务等应用生成的数据。研究界和工业界面临的共同挑......
随着科学技术的迅速发展,为了有效处理出现在众多领域中的数据量的爆炸式增长问题,云计算相关技术有了长足的发展,并在相关领域发......
本文论述了存储I/O子系统的关键技术、磁盘调度策略、数据放置策略、扩展性存储子系统的关键技术、层次存储策略、系统管理子系统......
分布式存储利用分散的数据节点分担存储负荷,提升系统性能。在分布式存储领域,数据可靠性以及系统中通信和存储开销的优化问题是该领......
随着大数据时代的到来,不同领域的科研人员往往需要跨科研机构甚至是跨国家地域的移动大规模科学数据,从而更好的共享科研数据并促......
随着云计算、视频监控、多媒体、数据挖掘、高性能存储器的快速发展,已经在电子商务、电子政务、金融证券等领域得到了广泛的普及和......
将HDFS应用于云存储备份系统已引起学术界和企业界的广泛关注,但是HDFS假设集群中的节点是同构的,且在数据块的放置时采用了随机的数......
网络化存储通过引入网络的概念将存储独立于服务器甚至通信网络,已经成为传统存储方式的有力替代者.然而,FC-SAN虚拟存储方式的存......
针对在异构环境下采用现有MapReduce任务调度机制可能出现各计算节点间数据迁移和系统资源分配难以管理的问题,提出一种动态的任务......
分布式存储系统作为数据存储的载体,广泛应用于大数据领域.纠删码存储方式相对副本方式,既具有较高的空间利用效率,又能保证数据存......
当前,在分布式云文件系统中,纠删码冗余技术以较高的容错性能和较大的空间利用率逐步取代副本冗余技术来保证数据的可靠性。多数基于......
随着高速宽带接入技术的发展,流媒体技术的研究得到了迅速的发展,并具有广阔的应用前景。流媒体代理技术作为减轻服务器的访问负载、......
负载平衡是提高大规模存储系统资源和能源使用效率,进而降低系统建设成本和运行成本的重要手段。然而,该领域相关工作多侧重于具体技......
利用HDFS进行大规模交通监控视频的存储和处理是一种可靠、高效、可扩展的数据存储方案。针对HDFS默认的机架感知策略可能造成存储......
数据密集型应用越来越多,如何将大数据在数据中心实现有效放置变得日益重要.研究了大数据的放置模型.影响大数据放置的因素主要有:......
随着电力企业信息化建设的发展,应用平台承载的数据呈指数级增长,用户数量迅速增加,导致计算机存储系统在访问过程中产生了瓶颈效......
1.电子贸易的机遇与挑战 我们正处于一个商业化时代,人们生活的各个角落都充满了商业化的气息;而我们也正进入一个网络时代,不知不......
本文针对并行面向对象数据库的特点,结合异步并行查询执行策略[1],提出了一种基于对象类的混合式数据放置策略,理论分析和模拟结果都......
随着网络技术的快速发展,在不同场景下,用户对于信息获取的实时性需求越来越呈现多样化。研究表明,数据放置策略优化可有效提高数......
多bank的粗粒度可重构处理器结合了高性能和高灵活性的优点,但是现有的编译技术难以充分利用其多bank存储资源,本文在同时考虑数据放......
数据的可靠性一直是云计算领域中的热点问题,副本备份机制作为保证数据可靠性的重要手段应用比较广泛。但随着副本个数的增加,该机制......
...
互联网促进了分布式计算、移动计算的应用和改进,使人类社会迈入云计算时代,积累了海量的网络数据。为了提高数据的可用性、安全性和......
HPDPM系统是基于无共享群集结构的支持并行数据处理的中间件.提出了中间件系统的体系结构和主要功能模块,详细论述了利用中间件系......
JobManager作业管理系统是众多作业管理系统中的一员。随着计算机应用的增加和巨大的数据需求,Job—Manager作业管理系统对数据的放......
云计算技术的快速发展积累了海量的数据资源,数据资源存储调度算法的好坏直接影响人们使用信息资源的效率。为了提高人们搜索数据......
云计算是一种以国际网络相关服务为基础的资源共享计算模式。云计算平台是以数据存储、数据处理为主的计算型平台并且在共享海量分......
随着科技的发展,微博、YouTube、Twitter等社交网络应用为人们提供了便捷的沟通方式。传统社交媒体内容主要以图片、文章等形式为......
分布式内存计算平台Spark是海量数据处理领域的最新技术进展。RDD是Spark中海量数据的抽象表达。交互式应用是Spark平台的一类典型......
学位
研究了动态网络环境下基于网络的存储系统的数据放置算法,分析了现有的数据放置算法,提出了通用带权分布式哈希表算法。与相容哈希算......
当诸如亚马逊的S3和EBS这样的服务在十多年前开始出现时,IT经理普遍对云存储持怀疑态度或视为威胁。但今天存储分层技术已经实现高......
目前大数据处理过程较少关注任务所处理数据间的依赖关系,在任务执行过程中可能产生大量数据迁移,影响数据处理效率.为减少数据迁......
当前,大数据及人工智能技术向嵌入式系统发展,对嵌入式系统的存储访问能力提出了更高的要求.磁畴壁存储器凭借其高读写速度、高密......
在数据中心放置海量数据时,每个数据常有多个副本,服务提供商需要支付巨额电费以运行存储这些数据副本的服务器。同时,为保证多个......