基于数据湖的省级卫星直收站数据共享服务设计

针对省级卫星直收站数据存储分散造成共享应用不便的问题,提出卫星多源数据便捷高效访问和安全分级管理方案。引入数据湖技术,按照全国统一规范构建了基于气象大数据云平台的省级气象数据湖系统,基于此实现了FY-3、FY-4卫星地面直收站原始接收数据、加工处理产品等多种卫星数据入湖集中管理,并提供统一的数据共享服务,解决了海量多源异构数据的存储、管理和共享服务等技术难题。通过数据湖统一权限控制,实现对用户访问数据的分级管理,保障了数据应用的稳定性和安全性。通过数据湖统一文件目录服务,实现长时间序列文件的便捷快速获取,有效支撑卫星数据的服务应用和挖掘分析。     

气象网格数据的快速渲染研究与应用

随着更高精度的气象网格数据在气象业务中的广泛应用,使用高精度网格数据为社会公众提供精细化气象服务的需求越来越旺盛。针对气象网格数据文件大,网页前端动态渲染效率低等问题,提出基于瓦片金字塔模型的网格数据快速传输和渲染技术的研究及应用。采用服务器端的金字塔模型的瓦片动态切割、压缩传输以及浏览器终端的插值和渲染等技术,实现基于B/S框架下HTML5的气象网格数据快速展示的流程。同时,利用中国区域1 km分辨率多源融合实况分析产品,基于微信小程序终端进行检验发布,试验结果表明,百兆级气象网格数据可视化更新时间达毫秒量级,可以广泛应用于各类空间网格数据高效可视化的页面渲染。     

青藏高原地气系统气象科学数据集成和共享

观测资料匮乏是制约青藏高原地球科学问题深入研究的关键因素。中国气象局国家气象信息中心联合中国气象科学研究院、中国科学院青藏高原研究所和西北生态环境资源研究院对近几十年来我国青藏高原区域的地气系统的大气和陆面观测资料及相关分析产品进行了整合集成,获得了高原区域长年代、多要素的地气系统综合气象数据,研发了综合气象数据库及其数据共享平台。本文系统介绍了相关科学数据的观测及数据情况,包括中国气象局长期业务观测数据、历次青藏高原大气科学试验数据、中国科学院部分野外台站长期观测试验数据和一些科学研究项目的产出数据成果,描述了多种数据的标准化集成技术和成果,设计并发布了青藏高原地气系统多源信息共享平台,为研究和解决青藏高原地球科学问题提供宝贵的数据资源。     

MICAPS4网络平台设计与实现

针对多源、海量、实时气象数据的特点和高交互天气预报预警的业务需求,设计开发了MICAPS4网络平台,该平台包括服务器和网络前端结构,该平台可以实现网络气象数据叠加显示和交互分析等功能。该平台基于统一气象数据模型和分布式实时计算处理框架对多源海量、实时气象数据进行快速处理、计算分析、网络传输和发布,基于HTML5渲染绘制技术实现了浏览器端气象数据的标准实时渲染绘制和交互操作等。MICAPS4网络平台及基于该平台搭建的国家级、省级专业气象网络应用业务系统运行稳定,实现了海量气象数据的网络快速处理分析、高效渲染绘制、预报预警制作交互操作等功能,对建设国家级和省级气象网络应用系统具有重要意义。     

通用气象数据格式转换工具METPAD设计与实现

气象数据是现代天气预报和气候预测业务的重要基础支撑，种类众多格式复杂，针对气象数据应用研究中缺乏便捷通用的格式转换处理工具的问题，设计开发了一种通用气象数据格式转换工具，采用Python开发算法工厂并调用第三方气象数据处理库集成实现气象数据的解读分析和格式转换，支持多种主要气象数据的处理，面向应用场景，提供命令行和可视化应用终端。该工具已在北京高性能计算机应用中心网站发布，并在数值预报模式中试支撑环境中部署应用。     

基于消息中间件技术的分布式气象数据同步系统设计和实现

本文针对新的资料传输流程建立后江苏省气象数据实时共享需求,基于消息中间件技术,设计并实现了一种省市气象数据同步系统。提出数据同步系统的总体架构和实现方案,基于业务需求设计了数据库表和消息模型,开发了数据同步状态信息查询Web页面。目前系统已在全省多个地市部署应用,为省市县3级气象业务提供稳定、及时有效的数据支撑,取得较好的应用效果。     

基于智慧气象的数据接口的实现

物联网、云计算、移动互联、大数据等新一代智能技术的迅猛发展,为智慧气象产品提供了技术支撑。由于气象信息系统数据类型多种多样,且来自多个部门、跨越多个系统平台,数据结构和格式也不相同,因此数据读取与处理是一项异常复杂的工程。为了解决该问题,开发了基于智慧气象的气象服务数据接口。基于智慧气象的数据接口,具有跨平台性、良好的响应速度、通用的数据交换格式,可使各种应用之间相互通信,并能创建新的应用。基于智慧气象的气象服务数据接口为RESTful风格,返回格式为JSON。数据接口的开发采用JAVA语言,基于Spring MVC+Spring Security Oauth2开发框架实现。数据存储采用Oracle数据库,分为冷、热两种数据。客户端对数据接口的访问,采用HTTP GET的方式发出数据请求,访问服务资源地址,获得JSON格式的数据返回结果。为加强数据接口访问的安全性,采用HTTPS POST方式访问授权接口获取访问令牌。基于智慧气象的数据接口,已为微信、微博、手机APP、网站等多个系统及保险公司、市政等多个单位提供数据支撑,且气象服务数据接口系统安全性高,具有较好的用户体验和兼容性。     

省级公共气象服务产品集成技术研究

采用B/S和C/S相结合的结构方式、多接口松耦合的设计模式,利用数据库和文件存储技术和数据库、文本文档和图表信息接口,建立公共气象服务产品基础数据库、产品集成仓库和气象服务产品存储管理系统,实现公共气象服务产品数据的自动规整、规范化存储和多源气象服务数据的高效集成。     

专业气象服务业务工作平台实现

根据省级专业气象服务的需求和业务工作流程的需要,设计开发了业务系统工作平台,平台针对专业气象服务产品制作数据来源的多元化,进行了资料采集的实时数据监测及分类处理,具有专业用户分类管理和用户权限相结合的统一集成的专业气象服务产品多功能制作界面,能动态生成每天专业气象服务产品制作流程,系统可对用户制作的产品进行产品预览、存储、发布和系统用户日志管理等操作,实现了集数据信息采集处理、产品加工制作、产品分类发布、业务功能管理等功能的省级专业气象服务业务工作平台.     

基于数据湖的智能网格气象预报业务产品服务模式初探——以江西省为例

随着智能网格业务不断发展,智能网格气象预报业务产品种类、数量日益增长,给产品的存储管理带来挑战。针对江西省智能网格气象预报业务产品收集及存储现状,采用PostgreSQL、Kibana、Elasticsearch等开源技术,提出了基于气象大数据云平台的气象数据湖建设思路,实现产品集中存储和管理,并提供统一共享服务,解决了海量多源数据产品存储、管理和共享等技术难题,为业务用户能够高效共享和应用数据产品提供数据环境支撑。     

运维数据可视化展示平台的设计与实现

运维数据可视化展示是基于HTML5技术和可视化技术,通过对运行监控、资源状况、气象数据全流程等多维数据实时展示,形成可视化展示大屏,实现多源异构数据整合和实时呈现运维数据,增强基础资源利用效率,为决策分析提供不同维度的运维数据关系。     

基于插件技术的湖南气象服务平台设计与实现

为达到整合省级气象服务数据资源、统一气象服务出口的目标,推动气象数据产品在防灾减灾和公共服务中的高效应用,基于Spring Cloud云架构,采用软件插件(Plugin)、WEB服务(WebService)等技术研发了湖南气象服务平台。本文详细介绍了此平台的分层模型和功能结构,以及所采用的多源气象数据融合处理、基于微服务的气象数据并行处理、基于可缩放矢量图形(Scalable Vector Graphics, SVG)的气象数据矢量化和数据安全交互等关键技术方法。此平台通过天擎获取气象数据产品,统一加工处理后封装为数据插件、图形插件和行业插件,通过标准接口提供观测资料、预报预警、卫星云图、雷达拼图等产品,基于气象数字对象标识符(Meteorological Digital Object Identifier, MOID)保障气象数据产品服务过程的安全性。此平台的气象服务插件已应用于湖南省应急管理厅、自然资源厅、水利厅等单位的业务系统。应用结果表明：此平台的插件服务模式适应C/S客户端、WEB网站、移动APP等不同类型的气象服务需求,实现了气象数据服务的统一管理、高效加工和规范应用,提升...     

主客观融合定量降水预报方法及平台实现

随着天气预报业务现代化的发展,预报员面临气象数据爆发增长、服务前端需求不断提高以及客观预报技术广泛应用带来的挑战。传统以手工绘制降水落区为主的定量降水预报(QPF)技术流程已经不能帮助预报员在更高层面体现附加值。为支撑预报员在QPF流程中的核心作用,设计和开发了主客观融合QPF平台。该平台从海量预报数据选取、多源QPF集成、QPF调整和订正、格点化处理和服务产品制作五个方面帮助预报员控制数字化预报全流程。发展了多项关键技术支持平台的智能化,包括多模式QPF数据集构建技术、多模式QPF集成技术、QPF预报场调整和订正技术以及格点场后处理技术。基于MICAPS4系统,实现了主客观融合QPF平台的主要功能,发布了"QPF Master Blender 1.0"版本,并在2017年5月投入业务应用,取得良好反馈和效果。最后,对平台的未来发展进行了展望,包括发展数值模式检验评估工具支持预报员做出最优判断,研究多尺度模式信息的融合技术等。     

基于Web Service的气象预警短信发布系统设计与实现

昆明市气象预警信息发布系统是以提高预警信息及时性和发布效率为出发点,整合了不同种类自动气象站的数据资源,与气象业务平台无缝集成,实时监控数据并生成满足需求的气象预警短信,通过预警号码管理数据库,确定预警信息受众范围,实现了预警短信服务的自动化、标准化、规范化。信息编辑不再需要人工干预,信息发布摒弃了原有的GPRS通信、GSMModem通信、运营商提供短信发布平台等方式,基于Web Service技术直接接入电信短信网关,实现了气象预警信息的高效发布,提高了气象服务的整体质量和效率。     

新型台风海洋网络气象信息系统的设计与实现

该文将时空数据模型的概念引入台风海洋网络气象信息系统,旨在构建一个多源、异构气象服务产品与数据按照统一的时空数据模型进行组织、集成和融合,并在互联网上实时展现的信息系统平台。介绍了该系统的设计思路和技术框架,同时分析了该系统中引入时空数据模型的技术难点和关键技术,重点展示了系统构建成型后能实现的主要功能,包括台风路径信息与卫星云图、天气形势场等多种气象信息的叠加显示;多功能历史台风路径信息查询;台风实况路径信息与城市风雨监测实况、卫星云图、雷达图的同步动画显示;气象灾害预警信息、气象资讯、城市天气实况及预报等内容的集成发布等。该研究成果已在中国天气台风网（typhoon.weather.com.cn）得到实际应用。     

气象综合指挥平台建设与应用北大核心CSCD

在重大活动、突发气象灾害以及汛期会商服务等特定时空气象保障过程中,采用各单位逐一汇报及展示专业产品或系统等传统方式,形成的产品及系统深度专业,但无法互动且运行协同不足,影响实时保障服务效益。气象综合指挥平台充分利用现有气象业务数字化成果,面向气象保障服务的时空及可视化需求,采用混合存储、接口服务以及图层组件发布等技术,实现多源数据的标准化处理、功能集约建设以及图层渲染等组件松耦合发布,首次在气象保障服务中接入空间天气、风云四号气象卫星高分辨率数据、秒级观测以及百米融合实况等数据及产品,实现气象产品全在线服务与中国气象局电视会商、云会商系统音视频信号的同步实时调度,为实时气象保障调度指挥提供服务支撑。该平台集成113种气象产品,发布1106个图层服务,成功完成2022年北京冬奥会和冬残奥会等国家重大气象保障工作,未来可为各类气象保障系统开发及专题气象保障服务提供支撑应用。     

基于地理信息服务的海量气象信息网络发布

针对WebGIS在海量气象数据发布中的诸多不足,通过对地理信息服务的研究,结合气象数据本身所具有的特点,对栅格气象数据的发布采用了一种灵活高效的影像金字塔模型构建算法,结合服务器端动态生成切片的方式,有效减少了I/O操作和重采样计算,从而提高了系统的处理速度。在完成矢量气象数据发布的基础上实现了各区站气象信息的多级显示,实现了气象信息资料的共享和网络发布。实践证明,采用该方式能够实现在改变缩放级别时,地图数据的快速加载以及无缝拼接,为后续气象GIS平台的开发以及高效运行奠定了基础。     

气象数据云数据存储技术及应用

针对气象数据种类多、信息量大、精度高等特点,传统的关系型数据库系统在存储处理、数据读取等方面存在负载饱和、读写性能不理想等问题,利用云数据存储技术,结合气象数据特征,设计了基于云数据存储平台的气象数据存储和处理方法。通过分析气象数据的结构化、半/非结构化特征,采用云关系型数据库存储结构气象数据;采用NoSQL对象库存储半/非结构化气象数据;在数据的存储过程中,应用了气象数据分块压缩技术,进行气象数据存储和传输。结果表明,所讨论的方法具有很好的存储传输效率,能够满足大规模气象数据在业务应用中对存储查询和处理速度的要求。     

气象因子相关系数矩阵的计算及应用

在建立包含基本气象资料、区域自动站降水资料、高空环流指数和数值预报产品格点资料等多源信息的Access数据库基础上,应用VB6.0编程,通过计算气象因子之间的相关系数矩阵等方法,研究应用于强降水一致区的划分、建立关键气象因子的预报方程并开展集成预报。结果表明,在专业气象预报服务中准确率达75%,实现从预报因子普查-预报模型建立-气象信息发布的自动化,提高气象预报科技服务的效率。     

我国气象科学数据发布策略初步研究

气象科学数据发布策略的研究是气象科学数据共享工作有效展开的重要保障.该文在国内外气象科学数据发布政策分析和制订气象科学数据共享发布策略原则的基础上,就气象科学数据发布方式和影响因子从气象科学数据发布方式、气象科学数据发布方式的影响因子、气象科学数据发布模式和发布策略概念模型、气象科学数据共享分类分级、共享用户分级、气象科学数据共享发布技术方式和途径等诸方面简明地介绍了我国气象科学数据发布策略研究的主要观点和意见,使读者对我国气象科学数据发布策略有一个比较全面的了解.