论文部分内容阅读
进入到21世纪之后,随着信息技术水平的提升和大数据应用范围的扩大,当今社会对于信息的索取越来越精确,数据信息的重要性在各行各行的发展中逐渐加强,而且互联网所收集与储存的信息量愈来愈丰富,Web数据集成与挖掘技术的作用逐渐显示出来。本文基于云计算、分布式并行编程模型Map Reduce、Hadoop大数据技术,探讨了大数据集成与挖掘的设计与实现。