分析数据库ClickHouse在国家地球物理台网中心的应用

面对日益增长的地球物理观测数据,传统的Oracle数据库已经力不从心。根据地球物理历史数据可大量被读取的使用特点,通过技术选型,以具备横向扩展能力的分布式OLAP数据库ClickHouse作为数据底座,重新设计适用于ClickHouse的地球物理观测数据表结构。经过全库迁移、增量迁移和数据对比,国家地球物理台网中心的Oracle数据库中约13 TB的数据已经迁移到ClickHouse并每日更新。实际测试表明：ClickHouse显著提升数据读写性能,增强了数据统计查询能力,并且通过多副本保证了数据库的一致性和安全性。     

地震前兆数据监视与管理系统

在北京十三陵地震台建设了一个高度集成的地震观测监控系统, 将原来分散的观测项目(如测震、 GPS、 气氡、 气汞、 电磁波、 地电场等测项), 改造为集中到一台服务器管理, 在一个监控平台上统一实现了对台站数据的收集、 入库、 管理、 处理、 监控等业务; 对这些观测项目可以在控制台上直接取数并将数据入库; 初步实现了观测数据的收集、 数据处理、 数据管理、 数据监控的软件管理系统, 减少了系统维护工作量, 方便台站工作人员操控。 监控系统的地震前兆数据监管软件系统DataMonitor可准实时监视数据, 检查数据的异常和到达情况, 并向台站数据管理人员告警; 可对数据库数据进行统计, 包括数据到达情况统计、 缺数统计、 数据连续率统计等, 并可按用户定制的测项分类进行统计。 该系统还提供多种前兆数据处理方法, 实现对前兆数据的各种常规分析处理。 地震前兆数据监视与管理系统已在北京十三陵地震台应用, 满足了数据管理人员日常工作需要, 可及时方便地掌握数据的情况并对观测系统进行维护。     

时序数据库在海量地震波形数据分布式存储与处理中的应用初探

通过分析时序数据库的技术特点和海量地震数据存储和处理的需求,设计和实现了基于时序数据库的地震波形数据存储和处理系统。经过开发、测试和应用比较,新的地震时序数据库系统具有高可用、实时存储吞吐量大、历史数据压缩率高、分布式处理速度快等优势,能够较好地解决地震波形数据体量激增带来的存储和处理困难问题。     

地球物理台网仪器维修信息管理的研究与实现

针对地球物理台网仪器维修信息化薄弱的现状,提出一个规范的地球物理台网仪器维修流程,并对故障仪器的流通和维修订单的处理动作等信息进行研究,设计了满足地球物理台网仪器维修信息管理的数据库结构,设计和实现了基于B/S架构的仪器维修管理系统,并在全国地球物理台网业务中部署使用。该系统具有可视化流程操作、维修资源弹性可扩展、维修信息共享和维修资源协同化的特点,满足地球物理台网仪器维修信息化管理需要,并为其它地震仪器信息化管理系统的设计提供了借鉴。     

地震数据分布式存储系统建设模式与服务效能研究

我国地震监测系统历经了数字化、网络化和自动化的变革。随着地震监测站网规模的不断扩大,作为国家数据中心,中国地震台网中心面临数万地震台站观测数据处理和存储压力。本文基于前期国家地震烈度速报与预警工程、公共安全信息化工程(中国地震局)建设项目等建设经验,总结地震数据分布式存储系统的建设模式,并验证其合理性。同时以历史数据迁移归档业务为例,分析共享存储系统的服务效能,为海量观测数据的高效存储管理、共享数据存储系统建设提供参考。     

地球物理场流动观测数据管理系统建设

本文主要介绍了地球物理场流动观测数据管理系统的主要功能和关键技术。本系统主要功能包括流动地磁观测基础信息管理、数据入库、数据目录总览、数据浏览及备份、备份数据入库、数据库检查等。通过本系统的数据备份和备份数据入库功能,可按观测任务期次进行数据备份,并较好地解决了单位间的数据交换问题。数据目录让用户和管理者能够一目了然地了解库里的数据内容。数据库检查则可以定期对数据的正确性和一致性进行检查,以清除数据垃圾,保持数据库的健康性。     

Sybase网络分布式地震数据复制的实现

介绍了首都圈分布式数据库的试验情况,数据复制的基本概念,Ｓｙｂａｓｅ复制服务器的技术特性,体系结构和工作原理,以及在地震数据信息中心和山东省地震局之间进行数据复制的实现过程。通过试验说明在网络的速率不太高的情况下,使用Ｓｙｂａｓｅ数据库管理系统,可以实现地震系统的分布式数据管理和共享服务。     

《地震地磁观测与研究》

<正>向您推荐综合性学术期刊欢迎订阅2016年利用观测技术掌握信息资源推动工作进展扩大研究领域《地震地磁观测与研究》由中国地震台网中心,中国地震局地球物理研究所,中国地震学会地震观测技术专业委员会联合主办。是从事地震地磁,空间物理观测和研究的地球物理专业工作者及地震台站管理人员进行工作、科研的重要参考文献。《地震地磁观测与研究》是中国学术期刊综合评价数据库统计源期刊;中国期刊全文数据库全文收录期刊;中国科学引文数据库来源期刊。主要刊载地震学,地磁学,重力学,地球物理观测技术和研究的最新成果;地     

河北地震流体数据质量在线监控与评价软件设计

利用河北地球物理台网ORACLE数据库中的观测数据为软件数据源,通过河北地震流体数据质量在线监控与评价软件,对日、周、月、年不同时间尺度的观测数据及跟踪分析进行准确、高效在线质量监控与评价.结果 显示:该软件及时、准确实现质量监控、评比评价、跟踪分析汇总等功能,实现了河北地震流体学科观测数据质量监控与评价需求.     

云南分布式地震观测数据库系统的设计与实现

结合云南地震观测数据库建设和云南地震业务系统运行管理模式,在对云南地震观测数据的产生、流程和运用需求充分论述的基础上,按照分布式数据库系统的技术特点和规范,详细设计了分布式地震观测数据库的节点分布构架、数据分布策略、数据分布存储、节点间数据库复制计划,并以省中心节点和红河州节点为例,实现了云南分布式地震观测数据库系统,对分布式数据库系统环境下的应用作了初步探讨,为实现“十五”项目“地震信息服务系统”提出的数据共享目标做出了有益的探索。     

design and construction of national active fault data integration and sharing platform

Over the past nearly 20 years, there is a huge development in active fault database related technologies in China, mass of active fault data has provided us important basis for researching on earthquake and disaster reduction, etc. However, with the appearance of huge amount of active fault data, lots of problems have emerged, such as data redundancy, inefficient management and information islands, etc. One of the major reasons is lack of efficient method to share the active fault data we owned.By study and comparison, we find that WebGIS is a good solution to solve the problem of active fault data publishing and sharing. WebGIS has well combined the advantages of traditional GIS and internet technologies, it could also share geographic data quickly, provide abundant browsing, searching and analysis functions. Based on the project of "China Earthquake Active Fault Detection—The North China Tectonic Region", and taking the foundational database information sharing platform of the active fault detection and survey as an example, the paper introduces the key technologies of active fault data sharing platform with latest WebGIS technology. The sharing system, which employs ArcGIS Server 10.0 as the GIS server, and utilizes MS-Silverlight technology at the client side, makes use of three-layer architecture which is popular in current B/S mode. To guarantee the security of the database on the internet, data source in the backend of the system is a simplified version of the active fault database of the North China tectonic region. Finally, the system has realized the publishing and sharing of 1 ︰ 50000 active fault mapping and main geophysical survey lines in North China tectonic region, and moreover, it provides some conventional map operations as well as fault searching and locating functions.The wide use of active fault data decides the significance of sharing system. It is very convenient to use this lightweight data sharing system to provide important basis for relevant industries, such as urban planning, land use and engineering site option, etc.     

地震观测数据平台体系架构研究

随着中国地震观测网络项目的实施,我国建设了现代化的地震综合观测系统,日产出数据约40GB.如何对地震观测数据进行规划,实现有效的存储和管理,建设完善的数据管理体系,为地震观测业务系统的持续发展和新业务拓展提供支撑,发挥地震观测数据的效益,使之能更好地为国民经济建设服务,已成为地震观测数据系统建设的关键.本文基于我国地震观测系统现状,结合地震观测台网的组织结构和数据分布、产出特点,阐述了地震观测数据汇聚、存储、交换和服务模式,探讨了我国地震观测数据平台的架构体系.     

中国地震台网波形数据整理及服务平台建设

对中国地震台网中心2008—2021年间存储的中国地震台网固定观测台站近150TB波形数据进行了归档和整理,并对数据可用率和断记缺失情况进行了调查统计。在建立波形文件索引数据库的基础上,建设了符合国际标准Web服务接口的波形数据服务平台,能够7×24h不间断提供数据服务,实现了用户通过应用程序自动获取定制波形数据的功能,为人工智能等新数据驱动技术在地震监测中的发展应用提供了支撑。     

山西省地震局绩效管理系统的设计与实现

山西省地震局绩效管理系统是根据目前绩效考核统计方面存在的不足和实际需求,运用PHP作为开发语言,MySQL作为后台数据库,开发出的一款通过使用浏览器端线上进行网络绩效填报和审批的软件。该软件主要采用B/S架构,使用HTML技术编写网页,各个浏览器IE、360安全浏览器、Mozilla Firefox等均可访问系统。PHP组件和WEB技术等的有机结合,使软件具有较好的可扩展性。该软件在山西省地震局应用以来,实现了减少人为失误、便捷高效的目的。     

地球化学数据库管理平台的建设与思考

为更好地发挥地球化学数据及方法在异常分析及震情跟踪研判中的作用,提高地球化学数据获取的便利性及数据存储的可靠性,规范异常核实及流动观测等地球化学样品的采集及检测流程,实现地球化学数据的自动分析及相关图件的自动绘制,中国地震台网中心建立了基于Linux系统的地球化学数据库管理平台,该平台应用数据库、地理信息系统(GIS)、WebGIS等技术,集成了样品送检、实验室检测、报告产出、数据存储筛选下载分析、图件绘制等功能,利用Piper图、Na-K-Mg三角图、同位素分析等方法,分析不同样品的地球化学特征,并给出相关图件。平台自推广以来,收集了大量的地球化学数据,提升了数据的可利用性,降低了地球化学数据分析的技术门槛,在异常性质分析及震情跟踪研判中发挥了作用。     

基于B/S架构的区域前兆数据库信息服务与运行管理平台的设计与实现

区域前兆台网的大量数据存于数据库中。为便捷地查询测项信息、台站工作日志和观测日志、台站基础信息,并减少区域台网中心工作人员工作量,提高工作效率,我们建立了基于B/S架构的前兆数据信息服务与管理平台。该平台很好地解决了上述问题,并在江苏省地震监测中心、预报研究中心、各省属地震台和市县地震部门广泛使用。     

地震前兆Oracle数据库备份策略与应用

"十五"中国地震前兆台网观测数据依照设计存储在Oracle 10g数据库中,国家地震前兆台网中心汇集全国地震前兆观测数据,面对日益增长的庞大数据库,难以使用常规备份方式进行备份和迁移。在经历国家地震前兆台网中心主数据库磁盘阵列故障和地电学科中心数据库崩溃后,笔者提出适用于大型前兆数据库全库备份的准在线冷备份方式,并且运用到实践,取得良好效果。对国家中心数据存储架构调整进行讨论,以规避将来可能的数据风险。     

SQL Server数据库中数据的安全监控

本文主要阐述了作者在工中遇到的SQL Server数据库中一些重要数据泄漏或是异常变动现象,随后通过各种技术手段追踪数据异常变更的根源的学习研究过程.从而达到了对日常工作中的重要数据进行安全监控、跟踪相关操作的目的,同时,也为各类数据的安全性、准确性提供了坚实的保障.     

基于微服务架构的分布式灾情管理系统设计

为及时获取多源异构灾情信息,以多源灾情管理系统的架构和功能模块为研究对象,针对单体系统存在灵活性差、性能低、资源消耗不均衡等问题,提出基于微服务架构设计,在分布式环境下利用Spring Cloud框架,通过业务划分,设计独立模块的微服务,同时加入熔断器、消息队列等组件,缓存处理数据。运用地理信息系统实现灾情数据实时获取、灾情编码入库、地震灾情速报产品实时发布以及灾后应急管理。实验结果表明,采用多层微服务架构,系统扩展性增强,并发性能得到提高,提升了灾情数据管理效率。