地震大数据机器学习平台

来源 :防灾科技学院 | 被引量 : 0次 | 上传用户:holight123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
地震是一种常见的自然灾害,全球每年大概有500万次左右的地震发生,给人类社会带来严重的经济损失和人员伤亡。我国对于地震的相关研究从未停下脚步,自1980年开始到现在全国已经建设了数以千计的地震观测台站,积累了大量的形变、地电、地磁、重力、流体等学科的前兆观测数据。这些数据对于地震行业的研究人员来说具有重要的研究意义,如何存储、如何快速地分析数据,是地震工作者面临的一个难题。大数据技术的出现使得海量地震数据的存储难题迎来了希望曙光,不仅如此,人工智能时代的到来促进了机器学习与深度学习等技术的发展,这为地震数据分析提供了新的思路。对于地震行业工作者来说,利用大数据与人工智能技术搭建一个集数据存取、处理、分析于一体的地震大数据机器学习平台可以对其研究工作起到很大的帮助作用。
  在数据存储方面,论文提出了一种基于HBase的地震前兆时间序列观测数据存储策略。设计HBase存储模型的关键在于设计合理的Rowkey,地震前兆时间序列观测数据具有多种采样率,以天为单位将Rowkey设计为:台站ID_测点ID_测项ID_采样率_数据日期,其中时间精确到天合并1天内的观测数据作为1条记录。基于HBase的存储方案无论在查询操作方面,还是在插入操作方面,都表现出了很好的性能,可以满足地震行业人员对于科研的需要。
  在数据分析方面,论文提出了一种基于模板文件的具备高扩展性的算法模型实现方案。根据对传统机器学习、深度学习的研究,将地震数据分析核心业务功能抽象为数据集选取模块、算法模型设置模块、超参数设置模块、模型训练与结果展示模块四部分,用户只需要提供算法的模板文件、前端解析规则文件以及对应的python算法程序就可以订制属于自己的算法模型,这也是平台的创新性所在。该方案为地震大数据平台的各类地震监测、预报及数据管理部门提供数据挖掘、深度分析等大数据服务提供相应的技术探索及验证。
  在开发技术方面,平台采用了B/S架构模式。Web前端使用Vue,服务器端使用Django框架结合Spark组件进行实现,具有简单易用、高性能、可扩展性强等特点。地震大数据机器学习平台的研究与实现就是为了给地震研究人员提供一个方便、快捷、可靠的地震大数据处理平台,该研究将极大地节省地震行业研究人员的时间,提高其工作效率,进而促进我国地震行业的研究与发展。
  
其他文献
地震通常会造成大量的人员伤亡和财产损失,地震预警是减少灾害的有效手段。精确的地震数据可以帮助地震预警系统获得准确的到时,但是,由于台站的监测环境日益复杂,采集的地震数据通常会受到各种种类噪声的强烈干扰,而地震数据中存在噪声会对地震到时的检测、震相获取等工作产生较大的影响,进而导致影响地震预警的准确性,因此需要对采集的地震数据进行降噪。然而传统地震信号降噪算法的降噪结果受人工选取的特征函数或者阈值参
随着“十三五”规划完美收官和“十四五”规划良好开局,我国社会发展迈上新台阶,对地震灾害防治工作也提出新任务、新要求。甘肃省位处于我国西北地域,具有丰富的自然资源,且省内社会经济高质量发展,各县区城市化建设不断提速,全省区域内防震减灾工作面临新形势、新任务。摸清甘肃省省内地震灾害造成损失的原因,了解省内区域受到地震灾害的影响程度,分析各县区地震灾害风险程度,才能有效提高区域的承灾能力和区域抗震减灾能
学位
河南省鹿邑县是内陆农业大县,地下水为区域内重要的生产、生活用水水源。随着经济和人口的增长,区域内地下水环境面临着巨大的压力。开展地下水脆弱性评价可以反映出地下水系统遭受污染的风险程度,为鹿邑县地下水资源的管理保护提供理论依据。  本文在野外水文地质调查的基础上,分析了研究区的实际情况,构建出DRAIC-LN模型,对鹿邑县地下水脆弱性进行评价。利用ArcGIS的空间插值、数据转换、空间叠加分析等功能
学位
随着人们对地质地矿领域的深入研究,微地震监测技术已经成为鉴定评估岩石宏观损伤、破裂程度的重要手段,其结果不但成为了核废料处理、大坝等危险性结构预防的关键依据,同时也是研究冲击地压、矿井突水等矿山动力灾害预测预报技术的重要支撑。加速度传感器作为微地震监测技术中的关键器件,其性能决定了是否能对频率覆盖大、能量弱、持续时间短的微地震信号进行有效监测。光纤布拉格光栅(Fiber Bragg Grating
学位
四川省位于我国西南部,受地理位置和自然条件影响,当地自然灾害类型多且频发多发,给当地及周边省份的经济和社会发展造成了巨大影响。同时,四川省少数民族人数多,人口结构、民族关系构成复杂,文化差异大,对自然灾害的敏感性较高。作为防灾减灾的重要环节,自然灾害脆弱性评估是评估区域自然灾害应对能力的重要途径,具有重要的现实意义。在相同的自然活动强度下,脆弱性决定了社会体系受影响的程度。因此辨认脆弱性因素,是制
学位
河流作为水文循环中重要的组成部分,其水化学特征可以在一定程度上指示河水环境质量状况、区域环境化学特征、不同水体迁移转化规律。伊犁河位于我国新疆西部,是极其少见的由低纬度流向高纬度的折返型河流,独特的地理位置使其异于其他河流。分析伊犁河水化学特征,能更好的评价水资源状况,了解区域的水文循环过程。  本文以新疆伊犁河春季和夏季河水为研究对象,在分析流域气象、水文、地质等资料的基础上,采集伊犁河河流干流
我国地震灾害频发,为了能够及时的开展抗震救灾及后续科学研究工作,需要对地震台站监测数据进行震相自动识别。然而传统的地震震相自动识别方法局限性较大,随着地震数据量的增加,传统方法难以处理海量的地震数据,同时,其识别结果还受特征函数、阈值等参数的影响,导致震相识别结果精度低、漏检率高。随着深度学习技术的不断发展,其超强的学习能力有利于处理海量的地震数据,也减少了人工设置参数,其高效性和准确性有利于提高
学位
低频振动监测在地震灾害监测领域具有非常重要的意义。加速度传感器是地震灾害监测领域的关键之一,其性能对低频地震信号的监测至关重要。光纤布拉格光栅(FBG)加速度传感器是近些年的研究热点,它具有抗电磁干扰、体积小便于携带、精度高、可靠稳定性好等优点,能够代替传统电类传感器进行低频振动信号测量。但是,对小于10Hz的低频振动信号测量存在无法准确测量和测量灵敏度低的问题,针对上述存在的问题,本文研制了一种
强震记录是研究反应谱的首要资料,在强震记录处理时,信噪比的选取对设计反应谱的影响是工程抗震领域关心的问题。本文研究了不同信噪比确定截止频率的选取对加速度反应谱及其标定的影响;以黄土场地收集到的近十年的强震记录为数据基础,系统分析了高通截止频率、低通截止频率的选取对地震动相关参数和对位移、速度和加速度反应谱的影响。同时,对不同滤波处理后的加速度反应谱进行标定,对标定后的设计加速度反应谱及特征参数进行
学位
刚/柔组合墙面加筋土挡墙是一种新型加筋土挡墙,是由返包式加筋土挡墙发展而来,通过预留在返包式挡墙内的连接杆件将混凝土面板与柔性挡墙连接为一个整体,由于增加了刚性墙面和预制连接件,其传力机制与返包式加筋土挡墙相比较复杂。且此类面板形式挡墙在我国铁路工程已有实际工程应用,使其成为当前研究的热点和难点问题。本文通过振动台试验对比返包式加筋土挡墙与刚/柔组合墙面加筋土挡墙动力特性,并在振动台试验和理论计算