国土资源部数据中心数据管理平台

正国土资源部数据中心数据管理平台是国土资源部数据中心的核心组成。数据管理平台解决了海量数据存储管理的技术难题,开发了从数据接收、检査、配置入库,到数据管理、展示、分析和服务发布的一系列功能,实现了数据中心数据的统一管理与应用服务。     

基于HBase的矢量空间数据存储与查询方法及其应用

研究了HBase存储机制,针对现有存储查询方法效率低等缺陷,设计了HBase矢量空间数据存储表模式,如行键、过滤列族、几何列族及非几何列族等,以MapReduce算法为基础改进了原有的区域查询方法,上述改进有效提高了HBase中矢量空间数据查询效率。以某地近100 a地质灾害数据进行实验,结果表明：设计的存储模型可行,查询算法与传统查询算法相比效率更高;由于MapReduce运行过程中的通信等原因,当数据量小于5万级时,算法优势并不明显;当数据量大于10万级时,算法查询时间低于原来的1/2,而数据量达到100万级时,算法查询时间仅为算法改进前查询时间的1/20。数据量越大,并行化处理优势越明显。     

房地统一登记的数据纽织与存储模型研究

从物权法出发,分析了房地统一登记的实体对象,建立了实体对象之间逻辑关系模型.由逻辑关系模型导出房地统一登记的数据关系模型,并将该关系模型与现有的房屋和土地登记关系模型进行了比较.结果表明:房地统一登记数据关系模型既与现有的登记数据关系模型保持着紧密的联系,又满足了房地统一登记的要求.文中最后讨论了房地统一登记数据的存储模式.即采用水平分片技术将变更实行逻辑存放,可有效提高数据的存储和访问效率.     

一个实现大规模存储的方案

基于廉价磁盘冗余阵列（RAID）方法和逻辑卷管理（LVM）工具,将一台机架式服务器和五台磁盘阵列进行连接管理,实现了一种单一逻辑磁盘容量达90 TB的大规模存储空间。该方案注重了系统的稳定性和数据的安全性。磁盘阵列采用串联方式,增强了可扩展性,理论上可以无限扩展。实际应用表明,该方案方便了数值预报业务数据的安全、快速存取,并具有容量的可扩展性。满足了省级气象部门对科研数据存储的需求,尤其是数值预报结果检验工作对大规模存储的需求。     

基于Qt的空间数据存储格式检查软件的设计与实现

面对日益增长的空间数据,网络环境较差的地图、地理信息应用服务系统面临着存储容量有限、地理空间数据格式不开放的挑战。而现有的许多地理空间数据存储依赖于平台,还需要克服跨平台带来的问题,亟需研究设计统一的数据存储标准来解决空间数据格式不一致、不同GIS平台数据转换过程复杂等问题。考虑到不同系统GIS平台、GIS应用程序间数据格式的差异,本研究基于GeoPackage（GPKG）数据容器存储标准,采用Qt 5.2.0+VS2010开发平台,C++编程语言,通过三层架构编程模式研发了GIS数据存储格式的检查软件,以解决数据格式不统一的问题。该软件利用批量数据库查询,快速地实现了核心功能项、可选功能项、注册扩展功能三大类等超过百项功能文件格式的检查,并输出详细的检查结果,为GIS数据格式存储标准化提供支持和帮助,可有效解决不同GIS平台、不同GIS应用程序数据共享时面临的格式不一致问题,简化了数据转换的步骤。     

统一检索界面技术初探

气象信息存储检索系统是将实时气象资料和历史气象资料进行统一的组织和管理，并提供检索服务的系统。由于数据量大，不可能都放在存取速度快但价格较高的磁盘上，因此必须将数据根据其访问频率分别存储在一级磁盘、二级自动磁带库和三级脱机磁带上，并结合使用商用数据库管理系统、数据迁移软件和存档软件对分布在各级存储设备上的数据进行管理。但由于这些软件之间存在的不衔接，不能对三级存储没备上的数据进行统一管理，也带来了用户检索界面不统一的问题。针对这个问题，本文对基于商用数据库技术的磁盘磁带数据的统一检索界面技术进行了探讨和研究，提出了统一检索界面的解决方案并在一定条件下，实现部分关键技术。     

基于ORACLE数据库的自动气象站资料存储与检索方案

基于 ORACLE数据库管理系统建立了自动气象站定时观测数据库 ,实现了资料收集、传输、入库等业务化流程 ,开发了基于客户 /服务器模式的资料检索程序 ,实现了资料的图形显示、表格显示和曲线图显示     

CIMISS数据存储管理系统结构优化及应用

针对CIMISS数据存储管理系统在业务运行中出现的性能瓶颈问题,在分析该系统流程的基础上,根据性能瓶颈出现的不同环节开展相应的优化工作,针对数据存储性能问题,分析了传统Share Disk和最新Share Nothing架构的差异,设计了分布式数据库的部署方案和嵌入CIMISS技术方案。针对业务调度进程的性能瓶颈,优化了相应的调度记录项。数据分析表明,上述优化措施实施后,数据存储管理系统的服务性能和运行稳定性提升明显,数据服务接口皆有数倍的性能提升,非结构化数据平均入库及时率高于98%,为各类气象业务应用提供了稳定可靠的数据环境支撑。     

地理空间数据存储管理系统设计与实现

大数据时代,我们常会面临海量的数据信息,数据类型复杂多样、数据量大且存储分散、空间特性明显。如何实现对海量数据的高效存储与可视化应用,同时保证数据的安全性,是物联网大数据时代数据存储与管理面临的主要难题之一。基于此思想,本文设计并开发了基于Oracle Spatial的大地测量成果管理系统,利用现代空间数据库技术实现了对大地测量成果数据的高效存储与管理,借助数据泵实现数据库迁移备份,有效提升了对地理空间数据的管理效率与管理水平,保障了数据安全。     

Detecting the storage and change on topsoil organic carbon in grasslands of Inner Mongolia from 1980s to 2010s

Soil carbon sequestration and potential has been a focal issue in global carbon research. Under the background of global change, the estimation of the size as well as its change of soil organic carbon（SOC） storage is of great importance. Based on soil data from the second national soil survey and field survey during 2011–2012, by using the regression method between sampling soil data and remote sensing data, this paper aimed to investigate spatial distribution and changes of topsoil（0–20 cm） organic carbon storage in grasslands of Inner Mongolia between the 1980 s and 2010 s. The results showed that：（1） the SOC storage in grasslands of Inner Mongolia between the 1980 s and 2010 s was estimated to be 2.05 and 2.17 Pg C, with an average density of 3.48 and 3.69 kg C·m–2, respectively. The SOC storage was mainly distributed in the typical steppe and meadow steppe, which accounted for over 98% of the total SOC storage. The spatial distribution showed a decreased trend from the meadow steppe, typical steppe to the desert steppe, corresponding to the temperature and precipitation gradient.（2） SOC changes during 1982–2012 were estimated to be 0.12 Pg C, at 7.00 g C·m–2·yr–1, which didn＇t show a significant change, indicating that SOC storage in grasslands of Inner Mongolia remained relatively stable over this period. However, topsoil organic carbon showed different trends of carbon source/sink during the past three decades. Meadow steppe and typical steppe had sequestered 0.15 and 0.03 Pg C, respectively, served as a carbon sink; while desert steppe lost 0.06 Pg C, served as a carbon source. It appears that SOC storage in grassland ecosystem may respond differently to climate change, related to vegetation type, regional climate type and grazing intensity. These results might give advice to decision makers on adopting suitable countermeasures for sustainable grassland utilization and protection.