大数据背景下长江水文数据开放平台设计研究

来源 :水利信息化 | 被引量 : 0次 | 上传用户:t381598972
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
科学数据共享对增强国家科技创新能力、促进社会和经济发展具有重要意义.为提升大数据背景下长江水文数据资源共享能力,在分析研究水文数据特点的基础上,提出水文数据开放能力的相关概念,同时结合水文数据开放应用需求,对构建具备数据和能力开放应用的开放平台建设体系进行研究,设计水文数据开放平台总体框架和功能结构.在此基础上,通过分析长江水文建设水文数据开放平台的基础和条件,提出开放平台的主要建设内容,阐述开放平台建设在数据开放范围、质量保障、开放友好性和安全性等方面面临的挑战,并针对性地从开放机制、产品形式、应用生态等方面提出对策建议,为开放平台落地应用提供重要技术保障.
其他文献
为系统梳理中国智慧水利历史演变过程,把握其研究方向,以中国知网(CNKI)2010—2020年收录的974篇文献为研究对象,借助CiteSpace软件进行关键词共现、聚类和时间线视图分析,通过对关键词突现、归类和时区演进分析,并结合水利部重大会议和相关文件内容进行分析,结果表明:2010年以来中国智慧水利的研究与国家政策密切相关,并在2017年至今呈现爆发式发展;聚类分析发现,智慧水利的技术路线、应用方向和发展要求是主要研究方向,大数据、风景园林、水利工程、智慧水务和区块链是主要的聚类群体;关键词时区演进
近年来,对水资源评价的时效性与准确性要求不断提高,数据量随之不断增长,对数据处理技术要求越来越高.为解决水资源动态评价大量数据的汇集、存储、计算等需求,深入分析水资源动态评价大数据的数据和计算需求,提出数据采集—存储计算—数据应用的分层大数据计算框架,并着重研究水资源动态评价数据的多源实时汇集技术,实现多源数据统一采集处理.针对数据分析的计算算法模型,研究CPU和GPU混合计算架构,实现机器和深度学习计算支撑.目前,研究成果已经在水利部完成部署,运行良好,可为水资源动态评价工作提供计算支撑.
当前我国县域水务信息化与智慧化建设仍处于起步阶段,不同业务应用存在大量共性的技术和功能需求,为实现业务系统的快速搭建、降低开发维护成本的同时满足未来技术快速迭代需求,在立足县域区域发展实际,系统梳理县域地区水务业务、水务用户和关联协作等系统的基础上,提出基于微服务架构的县域水务轻量化智慧管理平台框架.智慧管理平台以解决县域水务管理核心需求为主要目标,以核心业务为功能牵引,以专业模型及数值算法为智慧引擎,以个性化定制为用户扩展.通过对水务系统各业务流程进行功能分解及共性提取合并,构建各业务系统可共用的微服务
水利行业各级政府网站所发布的信息应该及时、准确、权威,信息一旦被篡改,将会严重影响国家安全,损坏水利政府部门公信力和形象,传统防篡改系统存在默认信任特定节点,底稿存储不可靠等问题.为更好地保障水利行业政府网站信息安全,降低入侵风险,通过研究区块链的分布式记账原理和可信去中心化特点,提出一种基于区块链和分布式存储的新型防篡改系统.利用区块链的去中心化的信任机制和分布式存储的安全性,新型防篡改系统能够消除单点薄弱环节,可靠存储底稿文件,不需信任特定节点.测试结果表明:与传统防篡改系统相比,新型防篡改系统能够更
为减轻台风灾害风险,辅助开展台风风险防控,基于1974—2019年台风路径、风力和降雨等数据对我国台风危险性进行分析.将我国划分为多个地理网格,采用分布式数据库Hbase构建网格、台风和影响分值列簇,基于网格对历史台风路径及风力、降雨再分析数据进行预处理,建立台风影响范围拟合和影响力衰减等函数,利用分布式计算引擎MapReduce计算台风对各网格造成的影响力分值,并计算不同年份、年段台风危险性.结果表明:1)本方法数据依赖性较低,计算效率较高,评估结果更客观,推广性较强;2)研究过程中采用归一化法对危险性
随着信息化建设快速发展、财务体制改革不断深化,如何实现业务流程与财务管理、会计核算的信息化系统融合,已经成为新型财务信息管理系统的构建目标.立足于水利科研单位财务信息管理系统现状,分析业财一体化的内涵,提出业财一体化的实现方法和实现架构,并讨论财务管理系统业财一体化所采用的关键技术.在标准规范及安全保障体系下,以精细化财务管理理念为依托,以智能化流程管控为手段,以项目经费管理为主线,通过信息化技术支持,将预算、执行、决算等核心主线与业务结算和财务核算对接,使预算编制、执行与具体业务环节有机结合,实现对业财
为提高黄河下游河势遥感监测能力,提升河势遥感监测服务水平,深入探讨黄河下游河势遥感监测的现状和存在的问题,提出黄河下游河势遥感监测系统的建设目标及思路.通过充分整合卫星遥感、黄河水利对象等相关数据,最大程度地共享现有数据资料和软硬件资源,设计开发黄河下游河势遥感监测系统,包括卫星遥感数据传输通道建设、遥感数据处理软硬件和存储设施建设、河势信息解译和服务功能开发,以及河势信息数据库建设等.结果表明:黄河下游河势遥感监测系统的建设可强化黄河河势遥感监测的数据计算与存储服务能力,提升河势信息解译的自动化水平,实
为全面实现水土保持监管规范化和现代化,充分发挥监管对生产建设项目水土保持工作的效能,在厘清法律法规关于生产建设项目水土保持工作的规定,确定监管工作边界及其任务的基础上,提出生产建设项目水土保持监管数据链及其总体功能目标,阐明数据链的数据流路和应用程序功能要求,设计各项监管业务对应的数据库及其内容,把与监管相关的各方通过数据采集与录入、信息分析与共享等环节构成的数据流链接起来,推动从水土保持方案报批直到设施验收与报备核查等全流程、全流路的监管工作规范实施.基于生产建设项目水土保持监管数据链,对全国水土保持信
小型水库数量多、分布广、坝型结构多,加上现有的相关技术规范针对性不强,从而使得小型水库雨水情和工程安全监测实施过程中各地理解不一.为提高小型水库雨水情测报与工程安全监测标准化水平,充分考虑水库库容、上游来水、坝型、坝高、溢流泄洪设施等水库特征,结合现有监测技术的发展,根据我国小型水库相关规章和规范性文件,结合相关技术规范,提出小型水库雨水情测报与工程安全监测标准化建议,从监测项目和测点布置、仪器设备配置、软件功能及模型开发几个方面入手,根据水库实际安全风险进行小型水库的标准化研究,推进编制适合我国的小型水
为实现高效配置各种阶段性分析报表或文档,研发一种基于算法库的自定义报表系统.自定义报表系统采用B/S模式,用户界面使用MiniUI前端集成框架,利用HTML+CSS+JavaScript语言技术,服务端以Tomcat为基础,采用Java技术构建服务器应用程序,通过Spring框架程序实现与数据库通信,同时扩展一个开源的Web编辑器CKEditor,在此基础上实现算法模板、方法属性、参数设置、站群管理等插件,开发出模板设计器;数据实现通过构建算法库,基于实时库和特征值库表结构创建上百种统计分析函数,存储在数