多源海量统计遥感数据集成管理技术研究

统计遥感业务是国家统计局基于统计业务对空间信息的发展和应用需求,将GIS、Rs和GPS空间信息技术全面应用于统计数据的获取、管理与分析中,从而提高统计效率和统计科技含量,构建新型国家统计业务体系。统计遥感业务数据具有多源、海量的特点,实现统计遥感数据的集成与管理是新型统计遥感业务成功运转的基础。针对统计遥感业务及数据应用需求,通过对各类空间数据集成与管理技术进行研究,提出在建立统计遥感空间数据库基础上,将影像以县级为单位进行拼接、然后压缩存储到统计遥感空间数据库,同时结合影像编目技术实现海量遥感影像的管理;提出将元数据管理和数据转换、数据直接访问以及数据互操作方式,实现多源统计遥感数据的集成与管理。通过多种方式,从应用层面较好地解决了海量、多源统计遥感数据的集成与管理,提升了统计遥感数据的应用范围。     

基于GIS的综合交通空间数据管理系统研究

为解决综合交通运输空间数据海量存储、时空一体化、高效共享、实时更新等管理问题,探讨GIS在标准化、自动化和可视化的空间数据管理和应用系统构建中的独特优势,提升交通运输空间数据管理、应用和工作效率,首先从数据的组织和分类、数据库总体结构设计等方面探讨了综合交通运输空间数据库的设计思路和关键技术;然后针对传统空间数据管理系统只注重独立的业务环节,忽略数据管理与应用的结合,导致数据来源有限、数据监测与更新不及时等问题,开发了集传统空间数据管理与融合数据应用于一体的系统,与综合交通运输空间数据库形成了动态循环更新生态链,实现了综合交通运输空间数据管理、数据浏览、数据检索、数据服务、实时更新和安全维护等功能,为广东省交通运输行业各交通应用平台以及交通规划专业研究工作提供了一体化的数据支撑平台.研究结果表明,构建基于GIS的综合交通空间数据管理系统,实现了综合交通运输空间数据与属性数据标准化、自动化、可视化的海量存储和统一管理,增强了数据质量的全面监测和数据实时更新能力,提高了综合交通运输空间数据管理和规划研究的工作效率.     

线性参照模型在铁路空间数据库中的应用

线性参照模型是以线性参考系统为基础,以动态分段技术为核心的一维空间数据模型。本文针对铁路空间数据的一维线性分布特征与铁路部门以一维线路为主体的运维管理模式,探讨了铁路空间数据的线性建模方法,利用空间数据库技术实现铁路空间数据、属性数据及业务数据的一维线性存储与管理,并提出了基于一套多尺度线性参照模型的铁路空间数据库的设计方案。试验表明,该方案能够为全路提供一套统一的一维管理基准,在动态数据管理、数据更新和共享等方面具有较大优势。     

基于MongoDB的海量空间数据存储和并行

目前在分布式环境下对于海量空间数据的存储和处理大部分是基于传统关系数据库的,对于二三维的海量空间数据存储效果不理想,其独有的关系模型制约了对海量空间数据快速访问和处理的能力。因此,分布式环境下如何利用非关系数据库和并行处理技术实现海量空间数据的高效存储和快速处理具有重要的研究意义。     

基于 MongoDB 的海量空间数据存储和并行简

目前在分布式环境下对于海量空间数据的存储和处理大部分是基于传统关系数据库的,对于二三维的海量空间数据存储效果不理想,其独有的关系模型制约了对海量空间数据快速访问和处理的能力.因此,分布式环境下如何利用非关系数据库和并行处理技术实现海量空间数据的高效存储和快速处理具有重要的研究意义.     

资源环境遥感海量空间数据存储、检索和访问方法

为了有效管理和利用资源环境遥感研究过程中积累的海量空间数据,设计资源环境遥感海量空间数据存储、检索及访问方法.针对不同数据类型和特点的海量空间数据,采用空间数据库、文件目录方式和Web Service等方法实现数据存储和发布.在空间查询二步算法的基础上,设计了基于空间位置的海量空间数据检索方法,可以检索以Mapping和Web Service等方式发布的数据,解决用户快速查找数据的问题.利用分层分块和可视区域格网索引等方法优化空间数据的传输、加载和显示等性能,并进行了相关性能测试.所设计的方法通过探讨数据的存储策略、数据的检索策略以及数据的访问展现策略,解决了海量空间数据应用中的数据有效管理、数据的精确定位以及数据快速传输呈现的问题.并基于此方法构建了资源环境遥感应急监测基础设施的基本框架.     

基于时序数据库的CGSsafety系统设计与实现

地质调查安全保障(CGSsafety)系统对提升地质调查单位的安全生产管理和安全保障技术水平具有重要意义,然而传统的CGSsafety系统采用的关系型数据库受海量数据存储和高频次数据访问问题的制约,难以满足日益增加的北斗数据的存储和管理需求,也难以适应持久的、高性能负荷的数据存储、处理和快速读写需求.分析了CGSsafety系统对海量时空监测数据的存储和访问需求,基于时序数据库技术,阐述了CGSsafety系统的总体设计、功能实现和应用效果,从而解决了传统数据库在处理海量时空监测数据时遇到的存储容量和访问效率问题.     

基于MapReduce的空间数据并行划分算法

针对海量空间数据分布式存储中存在的不顾及空间邻近性、分布不均和数据倾斜的问题,基于MapReduce并行编程模型,对Hilbert空间曲线层次分解的思想和节点容量感知的方法进行了研究,提出了一种层次分解的空间数据并行划分策略,并通过临界值判定实现空间数据的均衡存储。最后通过实例分析说明该方法可以在保证空间数据邻近特性的同时,解决海量空间数据分布式存储不均和数据倾斜的问题。     

基于BIM的高速铁路监测数据可视化研究

高速铁路变形监测项目有着数据量大、数据类型丰富、工程庞大复杂等特点,BIM技术可以用数字化的方式表达铁路工程沿线监测点、线路构筑物、基本设施设备等实体信息。本文在对高速铁路轨道检测数据和沉降监测数据可视化研究中,验证了BIM技术可用于高速铁路监测数据可视化分析、管理,并在Microstation平台下初步建立了高速铁路沉降监测BIM建模流程,可用于高铁沉降监测点成果录入、表达和管理,并在工程实例中进行了验证。     

面向服务架构的城市三维规划决策平台构建

针对目前城市建设部门所管理的数据量大、管理应用方式落后的问题,该文以唐山市为例,采用面向服务架构技术、海量空间数据网格化管理技术、三维空间数据模型组织技术、大数据可视化等关键技术,设计并实现了唐山市三维城市规划决策系统平台。该系统充分考虑城市建设中海量数据的管理及应用,以数字正射影像图、数字高程模型、城市三维模型、地形图等基础地理数据为基础,结合地下管线、规划等行业信息建立地理信息数据库,在此基础上进行系统开发,实现了海量三维数据浏览、管理、三维空间分析与辅助决策等功能。