基于Spark的大数据计算模型

来源 :电脑知识与技术 | 被引量 : 0次 | 上传用户:bestopx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
作为第三代机器学习工具,spark被视为替换Hadoop的下一代数据处理解决方案.包括了迭代计算、批处理计算、内存计算、流式计算、数据查询分析计算及图计算,提供了强大的内存计算引擎.Spark有望成为下一代大数据热门框架.研究分析了Spark组件生态圈和Lambda架构.最后介绍了Spark应用于机器学习领域.
其他文献
叙述了聚合物基无机纳米复合体系存在有序组装现象,揭示了该体系中无机纳米微粒的有序组装和诱导聚合物有序组装的现象,从静电学、氢键等观点叙述了有序组装的机理,提出了纳米作
电力系统中性点运行方式的选择,应综合考虑多方面的因素.在国外,220 kV及以上电压等级电网都采用中性点直接接地运行方式.110~154 kV电网,各国根据不同的条件有不同的考虑;而2
近年来,客车的设计在注重性能、实用的同时,越来越强调客车的结构设计、内饰等方面的问题,越来越注重乘客对客车在舒适、便利、美观等方面的要求;目前,我国汽车生产迅速发展,
文章通过对30名维吾尔族学习者和30名汉族学习者听辨汉语普通话辅音(不包含只出现于音节末的/η/)的情况进行调查,其结果验证了我们通过标记性区分假设作出的有关维吾尔族学习者
结合某场地工程勘察实例,针对场地内卵石地层,采用钻探和物探两种方法相结合对其进行了地层划分,实践证明,钻探和物探在该场地的综合应用满足了设计要求,达到了预期目标。
从QSGD2804/4型轻便输送机结构特点及主要技术参数的设计计算从而论述输送机的应用前景.
提出了基于S12X双核微控制器的染色自动化控制器的设计方案,重点介绍了XGATE协处理的编程方法以及在染色控制流程中的应用。通过实例验证了该方案完全能满足染色工艺过程的控
雅各布森从符号学的观点出发把翻译看成一个过程,将其分为三类:语内、语际以及符际翻译。论文以雅各布森翻译理论为指导,对蔡志忠《论语》漫画本(中英版)在语内、语际及符际翻译三
通过对辽阳市弓长岭区污水处理厂建设和运行进行分析,根据该厂实际运行境况建议对氧化沟好氧段的溶解氧进行控制,并调整污泥处理段的运行状态,为类似工程积累了经验。