融合架构的分布式数据库技术在气象大数据平台上的应用实践

随着信息技术的发展和应用,气象发展已融入到政治、经济、民生等各领域的发展中,气象数据呈现数据体量大、实时性要求高、数据种类丰富的大数据特征,数据的应用效果随时间呈断崖式下降的趋势非常明显,是区别其他行业数据应用的明显差异点。传统关系型数据库暴露出长序列数据访问效率低、软硬件架构成本高、性能扩展能力弱等缺陷,已无法满足业务发展的需要,该文通过融合架构的分布式数据库在气象业务中的应用效果分析,从技术原理和实践两个角度,为气象大数据的应用提供技术借鉴。     

大数据助力分析气象与消费那些事儿

<正>为了更好地推进气象数据的整合、共享、开放和利用,贵州省气象局与浪潮集团共建大数据开放应用实验室,充分利用实验室,广泛开展基于气象数据与各行业数据的融合、挖掘气象大数据潜在价值,在"气象与消费"、气象与旅游等行业领域广泛开展合作及创新应用。"气象与消费"研究课题深挖气象大数据的深层价值,结合天气信息及互联网消费数据,深度挖掘气象变     

深圳市气象行业资源现状及加强行业管理的对策

为了制定深圳市十一.五气象行业发展规划,摸清深圳市气象行业发展水平及现状,为政府决策提供客观依据,2006年,深圳市气象局对全市专业气象台(站、点)进行了行业现状调查。从调查情况分析看,各行业部门的气象观测自成体系,缺乏重要气象设施建设的统一规划和科学布局,气象设施重复建设问题比较突出;各单位观测数据大多以自用为主,交流共享少,部分单位的气象观测仍以人工为主,自动化程度不高,业务技术能力弱;与此同时,有一些受气象因素影响较大的部门、区域又明显缺少气象观测设施。     

公共气象服务空间信息系统的研究与应用

气象空间信息系统能够对气象数据进行高效的存储、管理、分析、显示和共享,可以大大提高公共气象服务的信息化水平。随着大数据、云计算技术的发展,分析了气象信息系统存在的问题和面临的挑战,讨论了公共气象服务空间信息系统建设总体技术架构和功能组成,详细介绍了该系统的关键技术,并以行业实例进行了验证。     

融入智慧行业的专业气象服务平台应用研究

正融入智慧行业的专业气象服务平台应用研究在客观数值预报的基础上,结合观测数据与行业的预报经验,进行主观订正,实现预报服务产品的集中制作、一键式发布和多渠道多用户共享展示,实现融入智慧行业的专业气象服务价值。本文从专业气象服务技术架构、平台特点、行业应用等方面展开,对专业气象在各行业的应用进行全面介绍,为智慧行业赋能,促进专业气象服务产业化发展。平台架构建立气象信息化标准规范体系,完成基础设施资源池的规划与整合,打造HXGIS气象大数据可视化云服     

面向服务的气象大数据

依据国家大数据发展战略和大数据特性,对气象大数据特征、面临问题和技术创新进行阐述,深入分析气象大数据服务方式和跨领域服务的发展方向。提出以标准先行为前提,集约整合为手段,通过数据层、逻辑层和界面层的整合来搭建面向服务的气象大数据环境,借助大数据发展机遇加快推动气象大数据发展步伐。
 

     

数值预报云

<正>数据值预报云是一个基于国家级业务系统体系,结合全国最强的数值预报研发和业务能力的多家单位的研究成果,采用互联网络为传输途径,爱用大数据以及云技术等先进技术进行共享;同时创建众创平台,实现对数值预报模式以及应用提供持续不断的技术创新力量,气象行业技术创新,行业与行业之间的技术碰撞,大数据之间的技术碰撞,促     

省级外网气象大数据服务平台研究与实现

随着社会经济发展，气象大数据已成为国家大数据基础性战略资源的重要组成部分。然而各省市集约化气象大数据环境均建设于气象业务内网，面向社会的气象数据服务则存在集约化程度低、时效性差、数据量少、安全隐患多等问题，因此，建立外网环境的统一、高效、安全的气象大数据中心是气象业务社会化服务发展的迫切需求。本文建立了外网气象大数据服务平台,采用GoldenGate和sersync+rsync技术实现内网与DMZ区(Demilitarized Zone,两个防火墙之间区域)实时稳定的触发式秒级数据同步；跨平台、多语言开发，标准化调用的统一访问接口设计，可实现高并发、稳定的数据响应请求；分时分类的用户数据访问控制，可实现数据权限的安全控制。该平台通过防火墙双网段控制，向互联网环境用户提供高效、安全、权威的气象大数据服务。     

基于分布式和微服务架构的华信气象服务云平台

正华信气象服务云平台应用数据库、通信、并行计算等传统技术结合新兴的云计算、大数据技术进行建设。基于Hadoop分布式处理框架与应用Spring Cloud框架搭建、Docker容器封装、RESTful API作为服务接口的微服务架构,平台实现了各服务模块的高内聚、低耦合、灵活可扩展,为气象服务产品开发和实时服务提供数据环境和基础资源支撑,以实现面向航空、电力、保险等不同行业提供定制化的气象信息服务。     

基于RS和GIS天津市津南区气象灾害风险区划研究

利用2014年7月Landsat 8数据,基于RS和GIS技术对天津市津南区气象灾害进行了风险区划。结果表明:基于RS技术提取的天津市津南区高精度土地利用分类,为气象灾害评价提供了重要的基础数据;运用GIS技术将2004—2014年天津市津南区的气象观测数据、地理环境和历史灾情等基础数据整合,采用层次分析法、风险指数法及综合加权法等方法建立了二级评价指标体系,分别从致灾因子、孕灾环境、承载体脆弱性和灾害防御措施4个一级指标展开,建立了津南区各种气象灾害的风险评估模型,绘制了天津市津南区气象灾害综合风险区划图。天津市津南区气象灾害高风险区主要集中分布在人口密度大、工业产业密集及灾害防御能力薄弱的区域,如城区和大片农业种植区;而人口少和经济密度低的区域对各种气象灾害反应不敏感,属于气象灾害低风险区。     

基于超融合架构的虚拟化技术在气象行业的应用效果对比

随着当前气象行业的硬件、数据、系统的集约化程度越来越高,气象基础设施资源云平台已经成为省级最重要的两个基础平台之一,为了让省级基础设施资源池在气象行业得到更好的应用,本文对传统虚拟化技术与超融合架构两种不同技术构建的资源池开展架构灵活性、扩展性、技术特点、差异性等方面的对比,重点分析在气象行业场景中的实际应用效果,得出超融合架构在虚拟化存储和安全方面优势明显,为省级基础设施资源池的技术选型提供参考。     

佛山市南海区智慧气象平台的架构和关键技术

南海区智慧气象平台主要是依托数据平台,构建智慧气象数据中心,利用大数据技术,为服务平台提供精细化预报数据。该平台设计采用模块化、结构化、分层化和标准化的设计理念;技术采用多层的技术架构来搭建,即用户层、服务层、应用层、支撑层、模型库、大数据中心和基础设施层。该平台功能主要包括智慧气象大数据中心、基于GIS智慧气象综合业务系统、智慧气象服务系统、智慧气象动态决策支持系统、突发事件预警信息发布统一系统、智慧气象管理门户及支撑系统等。     

内蒙古自治区气象大数据管理云平台设计与实现

文章介绍了内蒙古自治区气象大数据管理云平台利用分布式存储与计算架构,构建数据采集子系统、数据加工处理子系统、数据存储管理子系统、业务监视子系统、数据共享服务子系统和数据展示子系统,实现部门内外常规气象观测资料、服务产品、行业部门相关数据的集约化、标准化、统一存储管理,对接内蒙古自治区政府“云上北疆大数据平台”和“政务资源共享平台”,完成了行业的互补和延伸,开辟了气象信息化发展的新舞台。     

基于智能网格产品的广西行业气象服务集约化系统的设计与实现

依据广西公众气象服务产品、行业气象服务产品精细化、集约化及智能化业务发展需求,基于智能网格产品及CIMISS基础数据平台,实现气象数据的汇聚、分发、共享及存储。依托J2EE、GIS及分布式技术,对现有的电力气象、旅游气象、交通气象等业务系统进行整合,构建基于B/S与C/S混合架构的广西行业气象服务集约化系统,形成基于广域网络、上下一体、统筹集约的气象服务业务系统布局,为公众、行业用户提供更精细、更实时的预报、实况和预警信息产品。     

面向服务的气象大数据

依据国家大数据发展战略和大数据特性,对气象大数据特征、面临问题和技术创新进行阐述,深入分析气象大数据服务方式和跨领域服务的发展方向。提出以标准先行为前提,集约整合为手段,通过数据层、逻辑层和界面层的整合来搭建面向服务的气象大数据环境,借助大数据发展机遇加快推动气象大数据发展步伐。     

刍议省级气象大数据

针对气象数据文章,用大数据的4V特征标准逐一做了分析,并思考了气象数据是否无法用传统方法分析的问题,给出气象大数据较为理性的认识。根据大数据技术和气象数据的特点,列出了如何利用大数据技术与气象数据结合,发挥积极作用的几个方向。     

多模式无线气象数据采集终端设计

目前在自动气象站中,气象数据的采集大多采用串口服务器或4G通信模块将数据上传到电脑端。气象要素传感器多种多样,现在业务上使用的气象数据采集终端接口繁多、布线复杂、体积过大,且存在可靠性低、功耗高、数据传输方式单一等问题。随着物联网技术的迅速发展,各类传感器通过连接到基于因特网协议(IP)的网络中进行数据交互。通过将物联网技术与地面气象数据采集相结合,设计出一种多模式无线气象数据采集终端,既能满足常规的地面气象数据采集,又能拓展传输方式,不同地区采用不同的模式进行数据上传,可以很好地解决地面气象数据传输中存在的问题。     

新中国气象信息传播服务发展及未来趋势分析

分析了电视、广播、报刊、电话、电子显示屏等传统媒体及微信、微博、气象网站、手机app等新媒体在气象信息传播服务中的发展变化。分析发现,近十年传统气象信息传播方式所占份额出现下降趋势,而微信、微博、手机app等新媒体发展迅速,社会力量开始参与气象信息传播服务。新时期,气象信息服务呈现新特征,气象信息产品内容更加丰富、形式更加多样、提供主体更加多元,气象在国民经济中的地位更加突出。气象信息传播方式更新迭代,反映出7大趋势:发布主体与传播主体渐相分离;气象信息附加值将被深度挖掘;创新力量加入气象服务市场,民营气象公司发展势头强劲;气象事业单位重在提供基础性、公益性气象数据服务以及平台服务和技术支撑,其核心任务是提高预报预测准确率和精细化水平;以用户需求为导向的精细化气象服务是气象事业立根之本;气象信息服务多技术融合发展及全球一体化发展趋势。随着经济社会的发展和技术的进步,社会对气象服务的需求越来越大,气象服务解决的将不仅仅是气象信息传播的问题,更是解决如何提供更具针对性的气象服务、发挥气象信息更大社会价值的问题。新技术的发展使气象与其他行业融合成为可能,借助国家"互联网+"战略,气象服务市场将大有可为。     

气象数据挖掘与可视化——展现数据之美

随着互联网技术的发展,"大数据"已成为研究、应用等领域的关键。气象数据作为"大数据"的一种,其价值需要通过数据挖掘和可视化来体现。结合案例阐述了气象数据挖掘的以下要点:1)对公众气象服务而言,数据挖掘从人们的认知、感知或身边的事、物切入,更能引发阅读兴趣。2)数据挖掘的目的在于呈现数据背后的规律,而不是简单的数据罗列。3)可视化是数据规律的表达方式,多样化的图表结合能够更好的诠释数据规律。     

敏感性行业气象服务效益评估研究与业务进展

介绍了国内外敏感性行业气象服务效益评估发展概况。总结了行业气象敏感性评价、行业气象服务效益评估和评估系统的研究成果,特别是从理论、技术和方法应用的角度分别介绍了行业气象服务社会、经济和环境效益评估的研究进展。给出了近三年我国敏感性行业气象服务效益评估领域的业务成果,并对未来一段时期我国行业气象服务效益评估的工作提出一些展望。