第三讲 数据的压缩和加密

气象资料数据量十分庞大。(?)份地面气表—1有1万个字符左右,一个有30年资料的气象站仪气表—1就有360万字符。北京气象中心制作的数值预报 B 模式,每天有150个场,每个场有2601个数据,全天共有390150个数据。随着时间推移,这些资料量不断增加。当前,气象科学技术发展迅速,     

应用数据库技术实现气象电子数据资料的快速存储与检索

随着数据库应用技术的发展,伴随气象业务领域的不断拓宽,对气象资料存储和查询实效的要求越来越高,仅凭传统翻阅原始凭证查询气象资料已远远不能满足现实需要,该文应用数据库技术,实现电子数据资料的存储、检索和一键调阅,实践表明有效地提高了气象资料的检索效果。     

内蒙古气象资料的质量控制体系及发展方向

气象观测资料是气象业务和气象研究的基础资源,各种数据序列质量的优劣直接影响着气象业务和气象研究的应用效果、准确性和可靠性。随着内蒙古气象局气象业务技术体制改革的不断深入,各种气象观测资料信息量不断增长,资料采集、数据传输、数据加工处理、信息服务和数据存储各个环节的质量控制必须进一步加强。文章系统地阐述了内蒙古气象资料质量控制体系的现状和资料观测、数据传输、统计处理等各个环节的质量控制方法,并描述了气象资料质量控制体系的发展方向。     

基于OpenStack Swift的雷达产品存储研究

简要介绍分布式对象存储系统OpenStack Swift,包括安装部署及其在雷达产品存储方面的应用,研究证明,OpenStack Swift能较好的支持雷达产品存储,也适用于其它气象资料存储管理。     

解病毒时应注意的一个问题

在计算机比较普及的今天，计算机时时被病毒困扰着，由于病毒经常攻击计算机，所以需要对计算机解病毒。在解病毒的过程中，产生一个免疫程序，如cpav．rpt，chklist．cps等等，这类程序占存储空间不大，一般几十bit到几kbit.在一般情况下，这么小的存储空间对程序无多大影响。但在一些存储满了的磁盘上，就会出现问题。如存储了较大字库的软磁盘，因一张软盘存储不下，需多张软盘存放，用backuP到几张软盘上。在这些软盘上，除最后一张软盘可能不满外，其余软盘都满的（0bitesfree）。在这种情况下，如果对这个软盘解病毒，就会在软盘后面…     

全国地面气象资料自动收集处理系统的研制

全国地面气象资料自动收集处理系统的研制周尚河吴迅英（国家气象中心,北京１０００８１）全国地面气象信息化资料（国家基本站简称Ａ０文件,基准气候站简称Ａ１文件）报送,多年来采用邮寄数据磁带、软盘的方式,资料收集速度慢、周期长,已不能适应地面资料快速处理...     

Hadoop环境下基于SparkSQL海量自动站数据查询统计初探

在Hadoop分布式计算和存储架构下,自定义ETL数据清洗规则将海量自动站小时单站文件按所属年和站号合并为大文件流转存储至HDFS中,并运用SparkSQL并行计算框架进行统计处理生成常用气象要素日统计值。结果表明,数据处理和获取时效较关系型数据库方式有显著提升。采用SparkSQL并行计算框架对多气象要素多站点和长时间序列进行数据统计处理查询均能达到秒级别响应,并随着统计站点数的不断增加和时间跨度的延长其优势更为明显,能更高效地支撑此类气象数据服务,为海量气象数据处理从关系型数据库到大数据分布式架构的转换处理提供了新思路。     

信息化气象数据存档后备和服务后援磁性载体配置的优化设计

一、前言我国绝大多数省份自七十年代末期开展气象资料信息化工作以来,各自积累了几百兆甚至上千兆字节的气象数据。由于受我国计算机发展过程的限制,目前这一珍贵的资料大都存放在8英寸软盘和“1600”BPI磁带载体上,与省一级气象业务大都使用的IBM系列微机不兼容,给省级气象资料服务、开发和管理带来了许多困难。另外以往支撑这些磁性载体的硬件设备多数是70年代末80年代初的,技术都比较落后。随着气象事业的发展,这些设备与气象资料工作的现代化要求相差甚远,不能满足应用的需要。省一级气象资料处理业务有双重任务:     

第七讲 软盘知识及应用技术

软磁盘(FLOPPY DISK)简称软盘,是微型计算机可靠的外存工具。它是人机联系的纽带。它能给用户的工作带来许多方便和良好的效果。气象系统现有的近五百台微机,虽然机种有七、八种之多,用途也比较广,但其外存手段主要是软盘。近年来陆续装备的CCS400和IBM-PC等机种,10兆以上的硬盘虽使微型机的应用锦上添花,而软盘却仍以其容量大、体积小、价格低廉、     

数据挖掘技术在气象信息存储中的应用

随着气象数据信息的不断增加,数据存储问题亟待解决。数据挖掘技术经过十几年的研究与应用,已经建立了较扎实的理论基础,目前正在向应用领域结合,对现有技术进一步向改造方面发展。文章从挖掘对象、任务、步骤等处理技术在气象信息处理方面的应用,为下一步研究数据挖掘技术在气象领域的应用奠定基础。     

基本气象资料共享系统建设

基本气象资料共享系统是中国气象科学数据共享服务网的一个重要组成部分.该文简要介绍了系统架构和基本功能,着重阐述了元数据、数据表结构和数据文件存储结构的设计思想,并概述了基本气象资料共享系统在数据管理及安全管理方面的技术特点.     

内蒙古气象影视编导业务系统设计与建立

文章主要介绍了内蒙古气象影视编导业务系统的结构和功能,该系统为气象节目编导提供了一个集气象资料查询、图形分析、文稿编写、文档保存、科普知识查阅等一体的综合性业务平台,为编导制作节目提供了极大的便利,同时,提高了节目的制作效率,增加了节目的信息量。该系统建设采用C/S结构,数据资料以数据库的形式存储,编导通过系统界面可以自动查询气象资料。     

新疆省级气象数据库建设及其管理系统软件设计

新疆气象数据库不仅是新疆气候业务的基础,而且是新疆新一代气象预报业务系统建设的支撑和基础。新疆自90年代起,随着地面、高空资料信息业务化,已有106个站的地面资料、18个站的高空资料完成了信息化。这些信息化资料已在预报、科研、气候服务等方面起到了很大的作用。但是由于这些信息化资料以文件形式存储,很多的用户查询还需临时编程,给预报、气候决策业务的应用带来了许多不便,甚至已经影响到气象现代化业务的发展。另外随着气象服务领域的不断扩展,数值预报技术、卫星遥感技术和计算机技术飞速发展,特别是9210工程的实施,提供了海量的…     

新型机载气象雷达

美国最近研制成一种用于轻型或中型双发动机飞机上的新型气象雷达——RDR130。该雷达采用数字信息存储和显示来代替实时模拟显示,能将雷达反射进行数字化、积分和存储。存储的信息以60周的速度在荧光屏上闪现完整图象,防止了闪烁。其它气象装置则是使用高余辉阴极射线管存储图象。     

宁夏气象资料自动归档管理系统设计与实现

气象探测资料种类多、数据量大,早期宁夏实时气象探测资料主要存储在各类服务器中,如何便捷高效地使用气象探测资料是困扰业务人员的难题。本文首先分析了宁夏气象资料归档业务需求,制定了气象资料自动归档策略;其次,介绍了系统的总体架构,阐明了各功能模块的设计思路;再次,采用了MySQL、NAS和Bootstrap等关键技术,设计开发了“宁夏气象资料自动归档管理系统”;最后,统计了宁夏气象资料的自动归档情况和展示了资料查询下载效果。经试运行,该系统可以实时自动归档宁夏气象探测资料和基础预报资料,能够查询下载数值模式产品、雷达数据和天气图等归档资料。     

乌兰察布市气象资料应用处理与共享技术分析

乌兰察布市气象资料应用处理与共享系统,以该市已经建成的自动气象站实时监测数据为信息资源,充分利用信息网络通讯技术和数据库存储与查询、分析、统计技术,实现全市气象部门自动气象站资料的整合与管理。通过气象资料应用处理与共享平台的建设,实现了气象资料在全市气象部门内的高效共享,并提高了气象资料在业务领域和服务领域的使用率和共享率。     

应用分布式存储技术优化省级CIMISS数据服务能力

随着气象数据量的不断增长,进一步提升CIMISS数据管理和服务能力的需求变得日益迫切。为解决存储系统动态扩展能力不足、并行计算与吞吐效率低下等限制CIMISS继续发展的问题,采用分布式文件系统和NAS技术替代GPFS建设共享文件系统,实现非结构化气象数据的存储功能;采用分布式数据库替代Oracle RAC建设关系数据库管理系统,实现结构化气象数据的存储功能和非结构化气象数据的索引功能。实践证明,该方案能够有效地改善CIMISS的数据存储能力、并发响应能力,适应未来气象业务对数据存储和应用的需求。     

海量气象站点数据分布式存储测试及其应用

站点数据是气象观测数据的主要组成部分,每日检索量大,且时效要求高。为了更好地管理与服务气象资料,国家气象信息中心从2013年开始致力于新存储技术在气象领域的探索。为了更好地兼容目前的存储与服务方式,选择了分布式关系型数据库作为技术方案,并开展了一系列仿真气象业务场景的测试。测试结果表明,分布式数据库无论在数据插入还是在检索方面都具有较好的性能,同时具有较好的可靠性、灵活性和扩展性。根据测试结论,搭建了分布式存储试验系统,导入了CIMISS地面、高空等建站以来的历史数据,并接入了站点数据的实时流程。实现了海量站点资料的完全在线,同时也满足了气象业务对资料高时效性的需求。     

异种机型微机局部网络的开发与使用

计算机网络是计算机技术与通信技术相结合的产物,它使计算机既各自具备独立的计算机系统之功能,又可以快速地传输数据信息,相互共享资源。 微型计算机已伴随着气象科学技术的发展广泛地使用在其各个领域中,气象资料处理的特点是信息量大、实时性强、资料的存储和调用方便,并且有大量的气象数据需要作为历史资料长期保存、相互交换和供微机随时调用。由于微机的更新换代和在气象业务上处理任务的不同,我省气象部门使用的微机种类也比较     

实时气象资料归档与检索系统

实时气象资料归档与检索系统是沈阳中心气象台根据实际工作的需要,研制开发的气象资料应用管理系统。系统以磁盘阵列和DVD光盘为主要存储介质,利用自动分类、光盘刻录的自动控制和多样化的检索技术,实现了气象资料的自动存储与管理。介绍了系统的功能特点和自动控制光盘刻录技术,为其他资料存储系统的开发提供了可借鉴的设计思路。