服务器的RAID冗余磁盘阵列技术

本文详细介绍了RAID（独立冗余磁盘阵列）技术，并给出了一些选择适合系统应用的RAID解决方案。RAID技术正在变成支持文件共享、邮件交换和Web服务器等关键性服务的计算机系统所必备的一项标准功能。RAID可为这些关键性的系统提供两种好处：增强I/O性能和数据存储的故障安全性。目前RAID已经成为应付激增的数据存储空间需求的低成本解决方案。     

一个实现大规模存储的方案

基于廉价磁盘冗余阵列（RAID）方法和逻辑卷管理（LVM）工具,将一台机架式服务器和五台磁盘阵列进行连接管理,实现了一种单一逻辑磁盘容量达90 TB的大规模存储空间。该方案注重了系统的稳定性和数据的安全性。磁盘阵列采用串联方式,增强了可扩展性,理论上可以无限扩展。实际应用表明,该方案方便了数值预报业务数据的安全、快速存取,并具有容量的可扩展性。满足了省级气象部门对科研数据存储的需求,尤其是数值预报结果检验工作对大规模存储的需求。     

RAID磁盘容错技术简介

近年来，计算机系统处理器速度、内存速度及内存容量发展极快，每2～3年翻一番，而磁盘I／O速度却受盘片旋转和动臂机械性质的限制，增长缓慢，影响了计算机整体性能，急需提高磁盘存储系统的I／O，（响应速度和数据传输速率。另一方面，当今信息时代信息量呈指数增长，并且随着影像、文字、图形及声音等多媒体数据资料在计算机中的广泛应用，资料储存的成本及安全性要求愈来愈重要，急需廉价、高可靠性、大容量的存储系统。廉价冗余磁盘阵列（RedundantArrayofInexpensiveDisks简称RAID）以其数据传输率高、存储容量大、可靠性高及价…     

自动气象站中心站数据服务器高效备份方案

在自动气象站网络中，中心站系统是数据收集、存储和转发的核心，尤其是中心站系统结构中的中心站数据服务器，作为数据核心在整个网络中起着举足轻重的作用。如何保障它的稳定运行和高效备份，也是决定着整个网络运行安全可靠的关键。为此，在我区中心站系统的选型和建设过程中，我们设计了多种备份方案，最终，选定了双服务器做CLUSTER群集＋磁盘阵列（RAID5）的工作方式。     

基于Hadoop的数值预报产品服务平台设计与实现

数值预报产品数据与日俱增,采用传统的关系型数据库对其进行存储和管理存在效率低和存储能力不足的问题。另外,基于文件的存储方式在数据存储处理、数据读取和算法计算等方面存在性能瓶颈。针对这一问题,基于Hadoop技术体系设计了分布式的数据存储模型,实现了数值预报产品数据的分布式存储和处理,开发了数值预报产品数据接入处理模块;并实现了基于Rest Web Service的获取数值预报产品要素场数据访问接口、时间序列数据访问接口、数据下载接口等业务应用接口。多业务用户的实际业务测试表明, 该平台在诸如数值预报产品气象数据处理和业务应用方面较传统技术架构具有一定优势。     

一种基于NoSQL的气象非结构化数据产品存储方法

基于一种面向气象非结构化数据产品的NoSQL存储方法,综合气象网格化数据产品的结构及其应用场景,设计了NoSQL中的列存储数据库,并通过优化表格存储方式提高存储、访问效率。根据数据产品的类型、时间、预报时效等信息,制定主键列,属性列和数据列,设计数据存储模型。对数据列大网格进行切分,用网格点序号标记数据列名,并制定数据压缩策略,从而提高数据访问的整体效率。以气象数值预报产品为例,利用阿里云的OTS产品进行模拟测试,结果表明,基于NoSQL技术的列存储数据库可以满足产品服务平台的数据支撑要求,为分布式数据、云计算等技术的推广应用提供参考。     

降水格点数据的无损压缩方法

在大气科学领域,格点资料是资料存储和交换的主要形式。为了提高存储和传输效率,设计快速高效的压缩格式对数据进行压缩具有重要意义。由于气象资料要求较高,压缩必须是无损的。降水量是一种特殊的气象要素,它的空间分布是不连续性的,不宜采用连续要素的无损压缩方法。分析降水格点数据的基本特点,采用行程编码（RLE）思想,结合洗牌技术和熵编码,设计了降水格点数据的无损压缩方案。结果表明：该方案具有较高的压缩比,可以应用于各种空间分布不连续的气象要素的无损压缩,在大气科学领域具有很好的应用前景。     

基于区块链的医疗数据云存储共享方案

云服务可提供大量的存储空间,但是单一的云环境无法提供安全的数据存储和共享.而医疗数据的安全存储和共享是保证医疗数据安全的重要内容.公开审计技术保护存储在云中的数据不被篡改,从而实现医疗数据的安全存储.区块链的可公开访问及其上数据不可篡改,实现了医疗数据的安全共享.本文使用公开审计技术,提出基于区块链的医疗数据云存储共享方案,为医疗数据提供安全有效的存储和共享服务.     

基于气象业务零中断的存储数据迁移探讨研究

在广东省气象局2015年建设高性能存储设备逐渐老化,厂商即将停止设备技术支持服务背景下,针对存储所承载的气象业务系统面临着数据丢失或业务中断的风险问题,结合气象业务具有时效性、连续性等特点,通过运用异构迁移技术,对新存储建设要求、数据迁移原则、存储规划、风险评估、回退方案、数据迁移进行探讨研究,实现50多个核心关键业务系统的430TB数据在82小时完成平稳迁移,数据迁移速度最高达2.1GB/秒,平均速度1.5GB/秒,相比在应用层上做数据迁移的传统方法,异构虚拟化迁移技术具有迁移速度快、时间短、工作量少、业务无中断和可集中迁移的特点。     

基于Fabric区块链的智能合约协同开发系统

针对传统协同开发系统普遍采用"中心化"存储架构带来的单点故障、数据不可信、故障难以追责等安全问题,以及传统协同办公系统仅支持单一企业内部办公的问题,本文借助超级账本Fabric区块链技术以及业务流程管理和服务组合技术实现了一款基于Fabric区块链的智能合约协同开发系统.系统架构中首先结合传统中心化存储技术和区块链去中心化存储技术,通过将系统核心业务数据信息存储在区块链分布式账本中而把业务流程管理等不重要的数据存储在传统数据库中解决了"中心化"存储管理带来的安全信任问题.其次系统通过结合超级账本联盟链技术提供的企业联盟的特点使得系统可以应用于企业联盟办公中,解决了单一办公的问题.     

气象影视素材数字化存储系统的设计及应用

介绍了利用非线性编辑系统和磁盘阵列等相关设备,对河南省气象影视中心保存的视音频素材进行数字化处理的方法,以及利用SQL数据库技术和ASP.NET编程语言,实现气象影视素材的数字化采集、信息标引编目、存储及管理、检索及共享等功能,建立河南省气象影视素材存储系统的关键技术。     

实时气象资料归档与检索系统

实时气象资料归档与检索系统是沈阳中心气象台根据实际工作的需要,研制开发的气象资料应用管理系统。系统以磁盘阵列和DVD光盘为主要存储介质,利用自动分类、光盘刻录的自动控制和多样化的检索技术,实现了气象资料的自动存储与管理。介绍了系统的功能特点和自动控制光盘刻录技术,为其他资料存储系统的开发提供了可借鉴的设计思路。     

青海省气象科学数据共享服务系统的设计与实现

本文对气象科学数据共享服务系统建设所涉及到的系统集成和数据安全保障技术进行了深入研究,提出了“逻辑集中分布存储“数据组织模式和信息安全保障体系框架,并采用分布式数据库技术、XML的WEB服务技术和数据安全技术分别解决了跨地区跨部门数据的共享、异构信息系统集成和数据共享安全等难点问题。     

中尺度区域加密自动站建设初探

1引言中尺度区域加密自动站建设是自治区气象业务技术体制改革“三站四网”建设的重要组成部分。如何建立稳定的中尺度区域加密自动站,获取高质量、稳定、连续的区域性天气、气候资料,提高区域灾害性天气的监测能力是我们建站的最终目标。中尺度区域加密自动站是集数据采集、数据处理、数据存储、数据通讯为一体的气象观测设备。数据采集部分包括雨量、温度和风速风向等传感器;数据处理部分对采集到的气象数据按照气象要求进行运算与分析;数据存储部分采用动态链表方式存储小时气象数据,最多可以存贮3个半月的气象数据;数据通讯部分一般采用…     

基于虚拟化云网盘的气象数据共享和交换应用实现

从气象数据共享和交换应用的现状和需求、基于虚拟化云网盘的气象数据交换共享应用实现的技术体现和应用部署中,体现应用特点和实施效果:达到提高现有资源的利用效率和可用性,高效实现市级气象资源的动态利用,气象共享和交换数据的集中存储、应用和灾备恢复功能等目的。提供多平台、多手段数据交换共享支持,在对各用户访问权限安全控制的前提下,开辟气象办公、气象数据共享和交换新途径,达到提升市-县气象局间和市级气象局-市防灾减灾决策部门、气象用户间数据交换与共享效率的有效尝试。     

统一检索界面技术初探

气象信息存储检索系统是将实时气象资料和历史气象资料进行统一的组织和管理，并提供检索服务的系统。由于数据量大，不可能都放在存取速度快但价格较高的磁盘上，因此必须将数据根据其访问频率分别存储在一级磁盘、二级自动磁带库和三级脱机磁带上，并结合使用商用数据库管理系统、数据迁移软件和存档软件对分布在各级存储设备上的数据进行管理。但由于这些软件之间存在的不衔接，不能对三级存储没备上的数据进行统一管理，也带来了用户检索界面不统一的问题。针对这个问题，本文对基于商用数据库技术的磁盘磁带数据的统一检索界面技术进行了探讨和研究，提出了统一检索界面的解决方案并在一定条件下，实现部分关键技术。     

气象影视素材数字化存储系统的设计及应用

介绍了利用非线性编辑系统和磁盘阵列等相关设备，对河南省气象影视中心保存的视音频素材进行数字化处理的方法，以及利用SQL数据库技术和ASP．NET编程语言，实现气象影视素材的数字化采集、信息标引编目、存储及管理、检索及共享等功能，建立河南省气象影视素材存储系统的关键技术。     

气象数据云数据存储技术及应用

针对气象数据种类多、信息量大、精度高等特点,传统的关系型数据库系统在存储处理、数据读取等方面存在负载饱和、读写性能不理想等问题,利用云数据存储技术,结合气象数据特征,设计了基于云数据存储平台的气象数据存储和处理方法。通过分析气象数据的结构化、半/非结构化特征,采用云关系型数据库存储结构气象数据;采用NoSQL对象库存储半/非结构化气象数据;在数据的存储过程中,应用了气象数据分块压缩技术,进行气象数据存储和传输。结果表明,所讨论的方法具有很好的存储传输效率,能够满足大规模气象数据在业务应用中对存储查询和处理速度的要求。     

通过X．25专线实现市局与县局通信

河南省市、县级气象局都申请了X .2 5分组交换业务 ,通过X .2 5专线将全省气象局连成一个大的广域网。只要通过相关的设置 ,广域网内就可以进行通信。本文结合气象部门的业务 ,介绍实现地市局与县气象局X .2 5分组通信的配置过程。1　X .2 5分组交换X .2 5网是采用X .2 5标准建立的网。X .2 5是联网技术的标准和一组通信协议 ,它是所有分组交换技术的鼻祖。分组交换又称包交换。分组交换机客户传送的数据按一定的长度分割成若干个数据段 ,这些数据段叫做“分组 (或包 )”。传输过程中 ,需要在每个分组前加上控制信息和地址标识 (即分组头…     

初探云计算对气象领域的影响

云计算是在分布式计算、并行计算、网格计算的基础上提出的一种新型计算模型,它提供了可靠安全的数据存储、强大的计算能力和方便快捷的互联网服务。云计算将给依托信息处理交换的各行各业带来巨大变革,同样将对气象领域产生重大而深远的影响。介绍了云计算的含义、基本原理和发展现状,分析了云计算对气象领域将产生的影响和可能出现的问题,并结合单位的实际对浙江气象的云计算发展提出建议。