基于消息的气象数据处理系统运维自动化初探

目前气象大数据云平台(天擎)系统庞大且数据种类繁多,而现有的监控止步于数据消息积压后的告警。本文通过jQuery技术研究Rabbit消息,在消息粒度上获取消息积压信息,实现自动处理相应数据的解码程序,开拓了自动运维业务,在一定程度上减轻了运维压力,提高工作效率。尤其在长时间没有收到消息告警时,缩短排查故障时间。对于省级自动化运维,具有较强的参考和推广价值。     

Storm流式技术在地面气象数据处理中的应用

地面自动站气象数据的量级、观测传输频次日益增长,传输方式从传统的文本方式发展到消息传输,对数据处理时效有了更高的要求。该文提出采用Storm流式技术进行地面自动站气象数据的解码和入库,使用Spout节点连接外部数据源,将数据转化为Tuple,传递给解码Bolt、入库Bolt和DI/EI消息Bolt,分别进行实时的入库和监控,且达到灵活调整系统资源的目的。该应用与传统的简约流程对比,稳定性、处理效率、拓展性都有了显著提高。     

贵州省自有数据接入CIMISS流程介绍

以SWAN产品接入为例,介绍将贵州省非结构化数据接入CIMISS系统平台,完善并丰富数据种类,为基础业务提供强有力的数据环境支撑。     

2018年贵州省常规站温度要素数据评估

随着气象观测的自动化,地面气象观测在观测时次和空间密度上得到极大提高。常规站资料是地面观测资料的重要组成部分,其站点分布合理、监测连续,对于气候变化监测、预测和影响评估有着极为重要的作用。质量控制确保资料的可靠性和代表性,提高资料的应用价值。目前,经过已有的自动化质量控制之后,常规站观测资料中质量控制仍有错判、漏判等问题存在。该文以2018年贵州省常规站气温相关要素数据评估为例,实现本地常规气象资料质量控制方法的优化。     

CTS2消息中间件监控与告警系统的设计与实现

国省气象通信系统(CTS2)通过部署消息中间件(RabbitMQ)实现文件类（FILE）和消息类（BUFR）气象数据的收发业务。本文在梳理文件类和消息类资料传输流程的基础上,基于开源监控平台（Zabbix）设计了一套消息中间件监控与告警系统,实现了消息队列的精细化监控与告警,并通过开源监控工具（Grafana）直观展示监控指标。该系统通过辅助值班人员监控消息队列从而快速定位气象数据传输故障,提高运维效率和气象数据传输保障能力。     

基于ZABBIX气象信息业务监控告警方法实现

本文在贵州省气象信息中心搭建的基于ZABBIX框架气象数据实时监控平台的基础上,主要对该架构监控流程、企业微信告警服务接入等功能的实现进行了介绍,利用ZABBIX的开源框架的企业微信告警接口分别对接本文开发程序模块和睿象云智能告警平台,实现对气象系统监控到的故障进行企业微信告警推送,使运维人员及时发现异常故障事件并对其进行快速的响应与恢复,从而为气象大数据云平台资源的自动化运维提供支撑和帮助,使气象数据故障维护的效率得到大幅提高,以此保证气象数据服务应用的及时性和可靠性。     

贵州年最大小时雨强时空分布变化特征

应用贵州现有自记降水、自动降水观测资料,统计分析了贵州1954—2017年国家气象站累年最大小时雨强、年最大小时雨强的时空分布特征,1968—2017年50年年最大小时雨强变化。结果表明,贵州年最大小时雨强分布于13.6～117.4mm·h~(-1)之间,累年最大小时雨强在53.0～117.4mm·h~(-1)之间。贵州西南部、中西部、东北部,东南部都出现了小时最大雨强100mm·h~(-1)以上的区域,西南部为小时雨强最强区域。贵州强降雨3—11月均有发生,集中出现在5—8月,6月强降雨最多,贵州强降雨具有明显的夜发性特征,出现时间集中于午夜前后2h左右,前半夜多于后半夜,午间时间是出现最少时段。贵州小时雨强增大与减小趋势都不明显,在东南面、南部、西部有弱增大趋势,东北和西北面呈弱减小趋势。