【摘 要】
:
随着数据规模的快速增长,单机的数据分析工具已经无法满足需求。针对大数据的分析问题,设计并实现了一种基于组件的大数据分析服务平台Haflow。Haflow自定义了业务流程模型和
【机 构】
:
中国科学院大学,中国科学院软件研究所
论文部分内容阅读
随着数据规模的快速增长,单机的数据分析工具已经无法满足需求。针对大数据的分析问题,设计并实现了一种基于组件的大数据分析服务平台Haflow。Haflow自定义了业务流程模型和可扩展的组件接口,组件接口支持各种异构工具的集成。系统接收用户定义的业务流程,将其翻译成执行流程实例,提交到Hadoop分布式集群上执行。Haflow是一个可扩展的、分布式的、支持异构分析工具的、面向服务的大数据分析服务平台。提出该平台有两重意义:一方面平台将与数据分析业务无关的工作封装起来,支持各种异构组件,以加快分析应用的开发速度;另一方面,平台后端使用Hadoop分布式系统来实现多任务的并发,从而提高应用的平均执行速度。
其他文献
我国对电子病历系统的研究虽然开始时间不长,但已经有了一定的规模。基于对CNKI学术期刊总库,电子病历系统研究文献进行检索所得结果,通过文献统计分析,总结归纳出我国近年来
"女强人"通常是对事业有成的女性群体的称谓,这个称谓是男权社会中在男性本位立场上由男性话语赋予和建构的,在肯定和称赞女性作为的同时,加载了更多的负面象征意义,带有对女
随着高校改革的进一步发展,校园环境日趋复杂,高校面临的治安形势也变得更加严峻,校卫队作为维护学校安全和稳定的重要力量,应加强队员的实战心理、体能、擒拿格斗等方面的战
<正>航空安全是民航业永恒的主题,是航空企业的头等大事。高风险是现代民航业一个显著的特点,要想实现企业价值,就必须依法治企业,依法管安全。航空安全是一项系统工程,影响
文章基于《中国残疾人事业统计年鉴》2006-2011年间的相关数据,重点分析了我国大陆地区残疾人中等职业教育机构数量、规模、地区差异、毕业生素质等现状。同时,基于对23所残
高中校园体育文化直接影响高中学生的体育意识、体育态度、体育行为、体育价值观念等,对学生的生活质量、生活习惯及生活方式有着不容忽视的作用。高中校园体育文化与素质教
采用问卷调查法对北京市21所特殊学校710名特殊教育在职教师进行了调查。结果发现:首都特殊教育教师队伍以中青年教师为主;性别比例失衡;教师学历层次有所提高,但在特殊教育
近年来,面向服务的体系结构(SOA)逐渐成为软件工程领域的研究热点,它在企业信息系统集成、分布式软件系统开发方面都具有明显的优势,也是应对企业灵活多变的业务需求挑战的关
随着物联网的广泛应用,如何有效实现轻量级密码算法成为近年的研究热点。对2011年提出的TWINE加密算法进行了硬件优化实现,相同的轮运算只实现一次,采用重复调用方式完成。TW
本文在详细分析ERP系统中物流的基础上,针对电信企业的特点,研究设计了电信企业的ERP模型,并详细设计了电信企业ERF物资管理系统模型,其中具体实现了电信企业ERP中的物资管理