数据去重相关论文
随着海量高速移动互联网设备的普及,数据存储呈现爆炸性增长,传统的存储方案无法满足复杂多样、规模庞大的新型存储需求。随着海量......
随着互联网的迅猛发展,数据量出现大幅度的增长,用户需要消耗大量的人力物力来管理和存储数据,云存储技术应运而生。用户之间持有......
在面临海量数据的存储和管理时,基于LSM（Log-Struct Merge,日志合并）树结构的Rocks DB键值数据库凭借其良好的写性能,同时在不同的工......
云存储为用户提供文件外包存储功能,然而随着数据外包数量的激增,数据去重复变得至关重要.目前数据压缩非常有效也是很常用的一个......
针对在数据预处理中数据清洗的重复数据问题,通过使用Kettle工具中的转换脚本达到去重的目的。在换脚本中使用“唯一行”组件或者......
云存储作为云计算的一个重要领域，通过把存储作为服务提供给外界使用，使得用户不需要建立自己的数据中心，只需要向存储服务提供商申请......
在当今的云数据中心，受共享式存储架构和I/O虚拟化技术的限制，虚拟机的存储性能已经成为虚拟机整体系统性能的瓶颈，阻碍了数据密集型......
随着国家对下一代宽带无线移动网络建设的推进，能够满足各种电信业务数据要求的移动控制网络对后台的存储支持提出了越来越高的要求......
随着网络普及，电子商务的迅猛发展，出现了很多类型的电子商务网站。为了给用户提供便捷的商品导购比价服务，让用户在短时间内找到高质......
固态硬盘由于存取性能高、能耗低的优点不断被普及,利用SSD+HDD搭建分层的混合存储系统被不断开发和利用。然而由于SSD受到写次数......
随着近年来数据规模的爆炸式增长,数据去重和数据压缩作为削减数据冗余的两种关键技术,受到了更多的关注。和数据去重技术相比,数......
随着信息化科技的发展,人们对计算资源和存储资源的需求不断的增加。云计算的提出能够很好的解决因需求增长带来的资源利用问题。......
伴随着我国下一代无线移动网络的进程,支撑各种各样电信业务的移动控制网络对底层的存储系统的支持提出了更高的要求。如今日益增......
安全数据去重是保证云存储用户文件机密性的前提下,同时实现高效数据去重的密码机制.然而,现有安全数据去重方案不能抵抗在线暴力......
基于NAND闪存的固态盘由于其性能优于机械磁盘而被广泛部署在存储系统中,但由于写放大以及闪存介质磨损等原因,减少写操作可提高固......
随着通信技术的发展以及互联网的普及,越来越多的家庭在收看电视节目时选择了点播的方式进行观看。而制片方和广告投放者也越来越......
云存储的廉价以及存储访问方便,吸引了越来越多个人和公司将自己的数据迁移到云中存储。但是公有云服务器并不是完全可信的第三方......
随着云计算的日益普及,越来越多的用户被云存储的管理成本低、存储空间大、按需付费等优势所吸引,选择把本地数据外包储存到云服务......
根据IDC预测,2020年全球数据存储需求将会达到44ZB的规模。如今,每一天的每一分钟,会有2.04亿封邮件发布,Google会产生400万条搜索......
随着大数据时代的到来,云存储很好的解决了数据存储与共享问题,但存储在云中的数据频繁遭到黑客攻击,泄露数据的机密性与隐私性.为......
在去重备份系统中,随着数据实例被引用的次数越来越多,数据碎片也越来越多,后期备份的文件几乎都不是保存在物理上连续的磁盘上.如......
随着更多用户向大数据中心外包数据,这也就导致很多冗余数据出现在云存储系统,使得大数据中心云存储系统有着指数级别数据增长,极......
在数据备份系统中,使用重复数据删除技术在消除重复数据提高系统存储的空间效率时,将必然会有多个逻辑映像共享去重后的数据实例,......
云存储系统由于其系统复杂性和业务特征，使数据可靠性受到严重挑战。针对云计算环境下带数据去重的云存储系统的内部数据保护问题，提......
对物联网用户感知数据进行去重监控,能够有效提升物联网服务质量。当前物联网用户数据量庞大,且对其进行去重处理时忽略了对数据进......
分析数据去重的重要意义,根据现有的数据去重技术和算法,改进MD5码指纹的计算算法并进行优化,分析并重组指纹计算的流水化方法,利......
现有的所有权证明去重方案容易遭受诚实但好奇服务器的威胁影响,借助可信第三方解决该问题将导致开销过大。基于动态bloom filter......
数据去重的过程中,云存储系统会产生大量的计算机调度冲突。针对去重操作调度冲突问题,提出一种基于长短期记忆网络(LSTM)机器学习......
网络数据量的不断增长和网络内容的不断多样化,使得提高网络访问效率、有效降低网络访问延迟成为当前网络存储领域面临的严峻挑战......
重复数据删除技术是云存储系统中一种高效的数据压缩和存储优化技术,能够通过检测和消除冗余数据来减少存储空间、降低传输带宽消......
研究云端文件同步与共享服务系统校园私有云中云端文件存储服务系统的文件分块技术,分别从分块的必要性、分块的流程、分块的大小......
本文讨论了目前数据备份系统中的几种数据去重技术，并分析了去重技术将面临的挑战，以期对数据去重技术做一个总结和展望。......
数据持有性证明（provable data possession,简称PDP）和数据可恢复性证明（proofs of retrievability,简称POR）是客户端用来验证存储在云......
提出支持数据去重的数据持有性证明方案，该方案改进了原有数据去重中利用MD5值冒领原数据使用权的安全问题，并且引入可信第三方对不......
论文针对传统海量关系数据去重处理技术的局限性，选取上下线日志数据这种典型关系数据为研究对象，采用基于MapReduce的海量关系数据......
针对当前支持去重的属性加密方案既不支持云存储数据审计,又不支持过期用户撤销,且去重搜索和用户解密效率较低的问题,该文提出一......
随着科学技术的快速发展,数据备份系统的压缩率和恢复的数据也越来越多,所以,数据备份系统中的去重技术作为一种新型的恢复技术已......
数据去重能消除备份中的冗余数据,节省存储资源和网络带宽,因而成为当前数据存储领域的研究热点。针对常用的块级数据去重技术指纹......
数据去重是云存储系统提高存储率的主要手段之一,为解决查重过程中因数据量大而导致的索引I/O瓶颈和数据块指纹冲突问题,从而提高......
【摘要】 信息技术不断的更新和发展推动全球进入大数据时代。传统型广域网传输方案伴随通信量的急剧增长已经很难满足用户的数据......
在云存储和备份系统等领域,数据去重被广泛地用来消除冗余数据及节约传输带宽,数据去重的安全问题受到越来越多的关注。现有收敛加......
在一些去重备份系统中,本次提交的备份数据和上次备份的数据比较备份顺序和备份的内容基本没有太多的变化,针对这种客户端每次备份......
可去重云存储系统中一般采用收敛加密算法,通过计算数据的哈希值作为其加密密钥,使得重复的数据加密后得到相同的密文,可实现对重......
作为优化存储空间、改善网络带宽、降低总体开销的关键技术之一,数据去重已成为云服务提供商(CSP)外包数据管理不可或缺的一部分,......
在信息存储技术领域,使用数据去重技术的备份系统中的垃圾回收一直是人们关注的焦点。在备份系统中,一般会为备份数据设置一个保留......
随着云计算技术的发展,其在人们的日常生活和工作中也应用的越来越广,为了方便的保存数据和共享数据,许多人选择将数据上传至云端......
对直接去重算法、Hash去重算法和Hadoop集群数据去重算法进行研究分析,得出各算法在密码字典数据去重中的适用场合。去重后的密码......
