基于NoSQL的海量空间数据云存储与服务方法

近年来,实现海量空间数据高效地存储管理和在线服务,成为地学信息科学领域日益关注的热点问题。本文根据矢量和栅格空间数据的不同特点,提出并实现了矢量栅格数据一体化的海量空间数据分布式云存储管理与访问服务方案,在海量矢量数据存储和处理中创新性引入分布式图数据库Neo4J和并行图计算框架。在三层式空间数据云存储架构基础上,给出NoSQL数据库技术的栅格和矢量数据云存储的实现策略与方法,并开展了通用数据访问接口的设计。采用分布式文件系统HDFS存储栅格数据,并使用列族数据库HBase对其建立分布式空间索引,及采用满足ACID约束的分布式图数据库Neo4J来存储矢量数据,并使用R树建立空间索引。在自主研发的地理知识云平台GeoKSCloud框架下,初步实现了核心组件-空间数据聚合中心(GeoDAC)软件,可为各类用户提供空间数据分布式存储管理和访问服务。通过搭建试验床,开展GeoDAC与开源GIS软件PostGIS在矢量数据读写访问性能方面的对比测试。结果表明,虽然GeoDAC没有获得写入性能的加速作用,但其具有PostGIS无法比拟的强大读取性能。GeoDAC将海量数据经过空间分割后分布在集群上,能够并行处理查询请求,极大地提高空间查询速度,具有广阔的应用前景。     

国家基础多源数字正射影像数据库的设计与建立

数字正射影像直观而详细地记录了地表的自然现象,具有良好的可判读性和可测量性,从而成为现代GIS应用越来越重要的数据源。本文针对国家基础数字正射影像数据库安全存储、集成管理、分发服务和提供应用的技术要求,通过对海量数字正射影像数据建库的数据源分析与探讨,提出了适合多源数字正射影像建库的数据组织方式和数据存储模式,最后设计建立了国家基础多源数字正射影像数据库系统．实现了国家级海量多源数字正射影像数据的存储管理和数据服务。     

基于MongoDB的矢量空间数据云存储与处理系统

近年来,海量空间数据存储与处理日益成为地理信息科学领域的研究热点。其中,矢量空间数据更因其较高的复杂性,成为该类研究的重点问题。本文基于文档数据库,探究了多用户数据存储、矢量空间数据存储、海量矢量空间数据并行处理等问题,给出了存储和处理矢量空间数据的方法。在三层式云存储架构基础上,设计并实现了矢量空间数据云存储与处理系统VectorDB,达到了海量矢量空间数据的高效存储与处理要求。系统采用文档数据库MongoDB存储矢量空间数据,使用OGR库实现不同格式矢量空间数据的转换与存储,并用Hadoop对数据库中的数据进行并行计算,以及用mongo-hadoop作为MongoDB与Hadoop之间的连接器。通过实验对比了VectorDB与PostGIS的矢量空间数据读写性能,并分析了VectorDB与MongoDB在海量数据并行处理性能方面的差异。结果表明:VectorDB具有更好的读取性能和海量数据处理性能,适合多用户不同格式、不同属性矢量空间数据存储,对海量矢量数据存储与处理问题具有参考价值。     

大规模地理视频数据管理工具的设计与实现

海量地理视频实时接入与关联查询应用日益广泛,大规模地理视频数据的高效管理成为热点前沿技术。论文设计了实时接入的视频流数据内存数据库Redis管理方法,有效解决多路视频并发接入的性能瓶颈,并利用分布式数据库Mongo DB存储管理历史数据,实现海量历史视频数据的可扩展存储及分布式高效调度,采用Arc Engine组件扩展实现了可视化的地理交互查询功能。应用实践证明,地理视频数据管理工具可以实现地理视频数据的时空管理与高效存取。     

分布式环境下矢栅一体化数据组织模型设计

随着地理信息技术与计算机网络技术的结合和发展,基于全球框架的地理信息服务对海量数据管理的要求越来越高,传统的单中心的关系数据库的管理模式已经不能满足要求。分布式文件系统、半结构化数据库和关系数据库技术优势互补,为海量数据高效管理提供了新的技术思路。本文提出了分布式环境下空间数据一体化存储管理架构,设计了矢量和栅格数据的数据逻辑组织和物理存储模型,通过统一的分层+分块的数据划分规则,实现了矢、栅数据分布式环境下的一体化管理。在该模型中,利用关系数据库和半结构化数据库的特点,对空间索引和实体数据分开管理,有效地提高了数据处理和访问效率。实验表明,该模型具有更高的数据管理能力,可为分布式环境下数据服务中心构建提供一个有效的解决方案。     

基于MongoDB数据库的多时态地形数据存储管理优化方法

针对传统多时态地形数据采用磁盘存储,导致高频存取的现势性数据读取效率低的问题,提出了MongoDB数据库支持下内外存结合的多时态海量地形数据存储管理的优化方法。该方法根据用户对现势性地形数据的高频访问需求,设计MongoDB支持的时态数据分片和索引的优化策略,通过将最新地形数据常驻于内存中,将历史数据存储于磁盘中,保证了最新的地形数据在内存中快速命中并传输给用户,可提高调度效率和绘制的流畅性。     

表分区技术在自动气象站数据存储中的应用

针对大数据量的自动气象站观测数据访问性能低和维护成本高的问题,通过利用SQL Server 2005表分区技术,选取观测时间字段作为分区依据列,分别创建文件组、分区函数和分区方案,建立分区表和分区索引,解决了自动气象站海量数据存储和高效访问的问题。实践表明采用水平方式表分区技术,能够显著提高用户对大型表读写性能和降低系统管理员对数据库表的维护成本,提高数据库系统运行效率。     

大数据架构的遥感资源存储管理方法

随着遥感数据获取能力的日益增强,一方面导致遥感数据的多元化和海量化,使“存不起”的问题日益突出,另一方面由于缺少有效和高效的存储管理方法,难以及时发现终端应用所需的数据,使结果“存而无用”。本文围绕巨量、高吞吐、空间结构化的遥感影像数据及其基础土地信息产品的存储与管理问题,提出采用大数据架构的遥感资源存储管理方法,并基于MongoDB数据库实现了原型系统;通过使用PB量级数据进行试验,证明了该方法满足大数据时代对遥感矢栅数据的存储管理需求。     

国家基础地理信息中心数据存储网格建设

在较为全面介绍存储网格技术的基础上,结合国家基础地理信息中心海量数据存储管理的特点和用户需求,提出了可行的数据存储网格设计,着重对元数据管理、存储虚拟化和资源调度优化等方面进行了讨论,并对具体实施提出了建议。     

一种大文件多版本遥感影像数据组织管理方法

近年来,遥感技术的飞速发展使得影像数据的使用也越来越广泛和深入,而影像分辨率的增加,使得数据量急剧增长,对数据的存储和管理提出了很高的要求。针对传统遥感影像数据组织存储的不足,本文提出了一种大文件金字塔数据存储结构,用来高效存储管理影像数据;同时针对多时相遥感影像数据,提出了基于版本机制的影像数据管理模式。实验表明这种方法具有更高的存储检索效率。     

PDM的工作流管理技术研究

介绍了PDM系统的基本功能，详细论述了工作流管理模块对产品开发过程中项目管理和工程更改业务的支持。工作流管理是PDM的核心功能之一，不仅与系统的其它模块联系紧密，而且在很大程度上决定整个PDM系统能否在企业成功的实施应用。     

利用信息技术 实现科学管理——浅谈企业管理中的数字化管理

基于企业管理中数字化管理的重要性以及推行数字化管理存在的问题 ,引入项目管理的观点 ,并从项目管理的角度促进企业生产管理系统的完善     

项目管理系统在1∶50000更新工程建设中的设计与实现

1∶50 000数据库更新工程是一项浩大的工程,历时五年多时间,参加单位多,对项目管理的要求极高。为了提高项目管理的科学化、系统化、规范化,提高信息化与自动化水平,研究设计并实现了1∶50 000数据库更新工程项目管理系统,在工程管理中发挥了巨大作用。本文重点介绍了项目管理系统的目标、设计及其主要功能以及所发挥的作用。     

努力开创全省国土资源工作新局面

对“十五”计划开局之年的全省国土资源工作取得的新进展作了回顾。面对 2 0 0 2年新的形势和任务 ,要求国土资源系统全体干部职工做到 :认清形势 ,统一思想 ,进一步坚定做好国土资源管理工作的信心 ;明确任务 ,突出重点 ,全面提高国土资源管理水平 ;与时俱进 ,团结奋斗 ,努力开创国土资源管理工作新局面。     

渔业参与型管理的概念发展及其实施的必要性和可行性分析

早在20世纪40年代就已经有学者将参与型管理作为一种独立的管理理念进行概括分析,但将其应用到渔业中进行渔业参与型管理的学术性研究尚处于初步探索阶段.我国渔政发展环境为渔业参与型管理奠定了稳固的平台,渔业参与型管理立足于渔民自身利益,能够加强渔民归属感,提升政府工作效率     

开拓创新业 迎接新世纪

提出了 2 0 0 0年山东省地矿工作改革与发展的目标任务 ,部署了需要重点做好的各项工作。面对历史新纪元 ,全省地矿系统干部职工要继续发扬团结奋斗、开拓创新的精神 ,以更加优异的业绩 ,为山东经济的持续、快速、健康发展和社会全面进步做出新的贡献。     

浅析传统人事管理转向现代人力资源管理

传统人事管理向现代人力资源管理转变 ,从人力资源规划、开发到人力资源的流动管理 ,是一项现代化的系统工程 ,它需要在实践中不断完善、不断改进     

基于SNMP分布式网络管理软件的开发

气象信息网络是气象部门进行信息传输的基础保障,结合气象信息与技术保障体系业务实际,开发适合市、县两级气象信息网络的全网监控系统是市级网管人员急需解决的一个问题.由于SNMP简单、易于实现、功能强大等特点,近年来得到了广泛的应用和发展.在简要介绍了SNMP的基本概念和代理模式后,对基于SNMP分布式网络管理系统的设计思路、开发方法进行了讨论.     

地勘单位实行两个转变中的设备管理

在实行“两个转变”中，地勘单位的设备管理要适应市场经济需要，紧密结合地勘单位在开发新产品、新工艺以及生产装备更新的需求，实现管理科学化、现代化、集约化，步入良性循环。     

资源与环境元数据网络一体化管理模式与应用研究

资源与环境数据由于涉及的范围广、种类多、多语义、数据量大等特点 ,而给资源与环境信息的共享带来了很大的困难。元数据机制是实现资源与环境数据管理和共享的重要方法和手段。本文分析了现有的资源与环境元数据的管理模式 ,探讨建立一个基于网络的资源与环境数据的开放、可扩展的元数据库 ,在管理上实现数据用户、元数据、数据集三位一体的管理模式 ,并采用当前一些先进的开发技术实现了该模式.设计、开发和完成了国家资源与环境数据库元数据管理工具软件MMT-1,得到了成功的应用。