基于Hadoop的地质大数据融合与挖掘技术框架

地质领域数据量大,且种类多样。实现高效的多源异构地质数据的融合与挖掘,是研究地质作用机理,展开地质考察研究的重要手段。然而目前普遍存在着数据条块分割,格式各异,难以实现有效的共享与互操作。为此,本文提出了一种基于Hadoop的地质大数据融合与挖掘技术框架,该框架包括统一的地质大数据采集与预处理方法,基于元数据索引的存储与管理平台,基于Map/Reduce的地质大数据并行化计算模式与系统,面向可重用的地质大数据挖掘服务,以及支持在线三维展示的地质大数据分析结果可视化系统。该框架具有良好的实用性与可扩展性。本文在5个节点的测试系统上实现了多元素关联性分析,并取得了相对应单台机器3部的加速可比性。     

大数据处理技术在地理信息档案管理中的应用

分析了当前地理信息档案管理的现状及面临的问题,介绍了HDFS文件管理系统、云存储、Elastic Search检索、非结构化数据库、知识图谱5种大数据处理技术,并对其在省级地理信息档案资源大数据处理平台构建、地理信息档案数据挖掘与知识发现两方面的应用进行了论述。     

基于Hadoop的土地时空大数据集成框架设计研究

本文提出了基于Hadoop集群计算的土地时空大数据集成平台框架,并初步实现了原型系统,对关键技术进行了验证.实例验证结果显示,利用本研究提出的技术路线和框架,可以极大地提升海量土地时空数据的管理水平、处理能力和服务效率.     

地理国情大数据研究框架

地理国情监测作为大数据时代测绘地理信息领域一个新的、重要战略方向,其发展迫切需要顶层设计与新型技术的支撑,需要建立一种灵活、高效、低成本的大数据处理模式与服务方式。本文以地理国情监测与大数据研究相结合为切入点,阐述了地理国情大数据的分类及特点,提出了云计算环境下地理国情大数据研究架构,并从地理国情大数据存储、处理、挖掘、应用服务4个方面探讨了地理国情大数据云平台建设思路。本文将有助于地理国情监测的生产方式与服务模式变革,推动地理国情监测的广泛应用与产业化发展。     

大数据环境下地理信息产业发展的几点思考

大数据背景下地理信息产业的发展有了新的驱动力,通过思考这种驱动力对产业发展可能产生的影响,分析指出了大数据在地理信息产业中的中心地位和重要价值,综述了大数据给地理信息产业的涵盖范围、关键技术和服务模式所带来的重大变革,探讨了大数据技术对于GIS传统技术优化升级的几个着力点,并剖析了大数据技术在地理信息产业的相关应用中所面临的制约因素。     

浅谈大数据处理在油田GIS系统中的应用研究

在油田GIS系统中,"大数据"将信息集成与数据挖掘应用提升到一个全新的水平。通过分析油田数据库的特点,对油田GIS系统的架构进行了设计和分析。最后通过对海量数据的存储和管理、分布式并行计算的应用方法、基于SOA架构的信息共享、分片数据存储和发布等关键技术的原理和应用方式进行分析,提出了大数据处理在油田GIS系统中应用的方式和方法。     

基于MAPGIS下基础地理信息数据采集的实现

地理信息数据的采集是GIS应用的基础和前提,MAPGIS提供了多种方法的数据输入与采集手段。通过对MAPGIS平台下获取地理信息系统数据方法的研究,进一步对各种数据采集方法进行分析,得出各种采集方法的优缺点和实际工作中方法选择的一般规律,为GIS的数据获取提供指导。     

基于Hadoop的地理实体对象化存储方法

基于Hadoop平台及其核心技术,结合面向对象技术,将地理实体在Hadoop环境下进行对象化封装,并将构成时空对象的最小单元——元对象作为最小存储单元,构建基于Hadoop的时空数据存储模型,并提出了Hadoop环境下的时空数据并行化查询算法.     

Hadoop框架下海量影像数据库管理系统的研究与实现

针对传统影像管理方式不能进行T级及以上量级影像数据管理的难题,基于开源分布式云平台Hadoop框架,研究设计了云计算环境下的遥感影像数据组织模型（RSC-DOM）,利用镶嵌数据集技术、影像无缝集成技术等多种新技术,构建了海量影像数据库管理系统,实现了海量影像数据的高效组织、管理及应用。     

大数据GIS

目的 大数据不仅使世界认识到数据的重要性,更引发了许多行业从根本上的变革。大数据时代也对GIS提出了诸多挑战,如海量、多源、异构数据的存储与管理以及面对大量噪音的价值挖掘等。作为空间数据管理、分析以及可视化的重要工具,为适应大数据的需求,GIS必须在大数据时代做出改变和调整。针对大数据的几个“V”特性分析了传统GIS所受到的挑战,在前期相关研究的基础上,从GIS空间数据管理、空间数据分析以及可视化三方面进一步阐述了大数据GIS应具有的特征。     

矢量大数据管理关键技术研究

正在大数据时代,数据已成为国家基础性战略资源的重要组成部分。随着空间信息技术的飞速发展,空间数据的采集手段日趋多元化,地理信息技术在各行各业当中的应用也更加广泛和深入,由此也促使GIS大数据时代的到来。大数据是一把"双刃剑",高精度、广覆盖的矢量数据爆炸式地增长,在提升国家级宏观科学决策、社会     

城市地理空间大数据建设的关键技术研究

随着城市化进程的加快,城市地理空间数据呈现爆炸式的增长,且城市地理空间数据来源多样、数据标准不一,提取和整合城市空间数据是当前迫切需要解决的问题.本文从数据基准、基础框架数据的制作、数据库设计等方面进行了研究,并就关键技术的实现方式列举出相关应用实例,拟为大数据的挖掘和分析提供一些思路和方法.     

大数据与广义GIS

目的 普适计算基础设施和数据处理技术的发展催生了大数据概念,而大数据时空粒度的不断细化加速了地理空间信息的泛化过程。阐述了大数据时代地理空间信息泛化的显著特征,进而提出GIS概念广义化的迫切需求,从数据采集与整理、数据管理与集成、数据分析与计算三个方面分析了广义GIS所面临的技术挑战,重点探讨了互联网蕴含地理空间数据采集、移动对象数据库和异构动态数据管理、移动对象轨迹数据挖掘、复杂网络分析等方面的研究进展与存在的问题,并展望了广义GIS时代地理计算与城市计算、社会计算的融合趋势。     

空间大数据支持下的城市区域评估及其关键技术

针对人口拥挤、交通拥堵、环境污染、住房困难等一系列"城市病"问题,为了客观、定量评估城市现状,找到"城市病"根源,本文面向城市区域评估,利用空间大数据全面、客观、准确的特点,对城市进行全方位的评估,从人口、资源、环境、住房、公共设施、道路交通、经济发展及城市安全等多方面为治理"城市病"提供基础数据。本文从城市区域评估的内涵入手,设计了城市区域评估的总体流程,建立了全面的评估体系,并对实现城市区域评估的关键技术进行了阐述。通过城市区域评估的方式,对城市现状客观扫描,将使"城市病"的病重程度得到客观度量,是根治"城市病"的首要条件。     

基于FME的GIS数据格式转换研究

通过语义转换的转换理念,利用FME转换平台实现GIS空间数据转换,以厦门市公交路线的MIF数据格式转换成SHP和Coveage格式,分析语义转换的原理和数据质量,最后阐述FME在GIS空间数据转换、海量数据存取及Web共享的前景。     

基于大数据的省级国土空间基础信息平台关键技术研究及应用

围绕生态文明建设总体布局和建立国土空间规划体系并监督实施的部署要求,基于大数据技术,以自然资源、测绘地理信息等各类数据资源为基础,研究省级国土空间基础信息平台关键技术,并搭建省级国土空间基础信息平台原型,以黑龙江省国土空间规划监测评估预警系统为例,阐述省级国土空间基础信息平台具体应用,旨在为省级国土空间基础信息平台建设...     

基于云计算的政务GIS平台研究

随着“数字地球”时代的到来,政务GIS已进入一个新的发展阶段,出现了重复建设、资金浪费等现象.本文将云计算引入政务GIS领域,在简要介绍云计算概念、特征和服务分类的基础上,提出了建设基于云计算的政务GIS平台,统一管理和动态分配各种计算资源,并将基础设施和GIS开发环境作为服务提供给用户使用.文章阐述了基于云计算的政务GIS框架体系和功能设计,并以原型系统为例,介绍云环境的搭建过程和GIS云服务的技术流程.     

ArcGIS Server平台下地图瓦片存储关键技术研究

研究了基于ArcGIS Server的2种瓦片存储方式——松散型和紧凑型,并从原理和使用性能上对两者进行了比较。     

基于移动GIS的规划数据应用系统研究

随着移动GIS技术的发展,移动办公已逐渐成为行业应用的新趋势,本文面向规划业务的核心需求,结合移动GIS技术,应用ArcServer、 ArcGIS for iOS、WebService等技术框架、设计并开发了基于移动GIS的规划数据系统,实现基于移动端的规划数据浏览查询和分析等功能,对于提高规划业务效率具有积极作用。