基于Spark的分布式空间数据存储结构设计与实现

Apache Spark分布式计算框架可用于空间大数据的管理与计算,为实现云GIS提供基础平台。针对Apache Spark的数据组织与计算模型,结合Apache HBase分布式数据库,从分布式GIS内核的理念出发,设计并实现了分布式空间数据存储结构与对象接口,并基于某国产GIS平台软件内核进行了实现。针对点、线、面数据的存储与查询,与传统空间数据库系统PostGIS进行了一系列对比实验,验证了提出的分布式空间数据存储架构的可行性与高效性。     

佛山市税源地图大数据展示系统的设计与实现

在智慧时空大数据与云平台建设工作中,如何进一步挖掘分析海量空间数据是实现高效应用的一项关键任务。针对佛山市税务机关的业务需求,研究了基于Hadoop框架的大数据技术,结合GIS数据,利用互联网云平台对海量税务数据进行存储、计算、分析的佛山市税源地图大数据展示系统的设计与实现。     

地质大数据轻量化集成展示与专题应用

地质大数据是智慧地矿工程建设的基础。长期以来地质工作形成了海量多源异构数据,有效地将地质大数据进行整合、集成并加以应用,已成为智慧地矿工程建设的关键环节。本文分别对地质大数据集成面临的主要问题与解决思路,大数据集成平台的设计及项目应用等方面展开阐述。构建了多维动态可视化平台,在Web页面绘制了虚拟仿真地理场景并叠加了丰富的地理空间数据,对多维数据进行了可视化展示,采用B/S架构实现了无插件、轻量级的Web可视化页面展示,并实现了场景展示、地理数据处理、三维分析等功能。     

基于GIS的综合交通空间数据管理系统研究

为解决综合交通运输空间数据海量存储、时空一体化、高效共享、实时更新等管理问题,探讨GIS在标准化、自动化和可视化的空间数据管理和应用系统构建中的独特优势,提升交通运输空间数据管理、应用和工作效率,首先从数据的组织和分类、数据库总体结构设计等方面探讨了综合交通运输空间数据库的设计思路和关键技术;然后针对传统空间数据管理系统只注重独立的业务环节,忽略数据管理与应用的结合,导致数据来源有限、数据监测与更新不及时等问题,开发了集传统空间数据管理与融合数据应用于一体的系统,与综合交通运输空间数据库形成了动态循环更新生态链,实现了综合交通运输空间数据管理、数据浏览、数据检索、数据服务、实时更新和安全维护等功能,为广东省交通运输行业各交通应用平台以及交通规划专业研究工作提供了一体化的数据支撑平台.研究结果表明,构建基于GIS的综合交通空间数据管理系统,实现了综合交通运输空间数据与属性数据标准化、自动化、可视化的海量存储和统一管理,增强了数据质量的全面监测和数据实时更新能力,提高了综合交通运输空间数据管理和规划研究的工作效率.     

浅谈大数据处理在油田GIS系统中的应用研究

在油田GIS系统中,"大数据"将信息集成与数据挖掘应用提升到一个全新的水平。通过分析油田数据库的特点,对油田GIS系统的架构进行了设计和分析。最后通过对海量数据的存储和管理、分布式并行计算的应用方法、基于SOA架构的信息共享、分片数据存储和发布等关键技术的原理和应用方式进行分析,提出了大数据处理在油田GIS系统中应用的方式和方法。     

福建省多源遥感影像云服务平台设计与实现

基于云计算、大数据、对象存储、免切片等技术,依托数字福建云计算中心政务云环境搭建多源遥感影像云服务平台。在分析用户需求和云平台研究现状的基础上,结合福建省陆海卫星遥感影像统筹业务需求,设计了平台总体架构、数据架构和功能模块,探讨了平台关键技术。平台构建了多源遥感影像自动识别、实时处理、动态发布、主动推送等一体化在线服务链路,实现了遥感影像数据“即收、即处、即发布”的一站式服务,对福建省卫星影像数据和遥感技术的应用和推广具有重要意义。     

BIM及空间大数据技术支持下的铁路隧道施工数据管理

针对铁路隧道施工项目海量异构数据存储困难、信息不共享、展示不直观、数据价值利用不充分等问题,本文利用BIM及空间大数据技术,研究探讨了隧道施工项目海量异构数据的分布式存储、网络共享、三维查询、智能分析决策等技术,实现了隧道施工项目高效的信息化管理;提出了铁路隧道BIM三维模型动态建立的技术方案,设计了隧道施工管理空间大数据的云平台框架,研发了一套铁路隧道施工空间大数据管理应用云平台;通过对平台的成功开发与应用,验证了框架体系的可行性,提高了隧道施工项目管理的信息化水平。     

大数据在自然资源中的应用

针对自然资源数据中数据来源丰富、种类多样、监管困难、数据共享等问题,提出了自然资源大数据建设,分析了自然资源大数据的可行性,设计了自然资源大数据平台的整体架构和分析模块,并对自然资源大数据的数据挖掘进行了探索.     

利用Hilbert曲线与Cassandra技术实现时空大数据存储与索引

随着越来越多的轨迹数据被记载,各种应用场景下的海量、复杂数据需要高效的存储与索引。传统的关系型数据库难以满足海量轨迹数据的存储、扩展及特定的查询需求,而具有扩展简单、读写快速、成本低廉特点的非关系型数据库为此提供了一种可行的解决方案。设计并实现了一种基于Cassandra数据库的数据降维及键值存储、索引方法,可对时空轨迹数据进行高效管理。为进一步提高效率,融合了Hilbert曲线编码技术将空间分割成小单元,并将轨迹数据映射到不同单元中。充分利用时空局部性原理,为不同应用场景下的轨迹数据设计并实现了对应的分区键与聚簇键,实现轨迹对象时空近邻存储,令数据查询更为有效。基于实际应用场景的实验结果表明,所提出的方法能有效支撑海量轨迹数据的存储与索引,并在数据的插入、查询及存储结构可扩展性等方面优于其他时空大数据索引和查询方法。     

面向时空信息数据的大数据平台设计

设计了面向时空信息数据的大数据平台,以GISCloud的云计算框架作为基础资源平台,通过两层服务架构为平台提供计算和存储资源的管理。以数据融合思想构建大数据平台的基础数据支持,依托GISCloud建立各种资源池,对数据进行抽取和分析,建立核心数据集与共享数据集,实现数据资源的差异化共享。通过面向时空信息数据的大数据平台设计,构建时空信息数据中心,利用公共服务时空信息和共享交换平台提供数据服务,实现海量时空信息数据的高效管理和服务。     

面向大数据的时空信息云平台建设研究

在大数据时代来临的背景下,传统数据处理和分析方法已无法满足时空大数据高效存取、实时处理、分析挖掘等需求。本文结合智慧广东时空信息云平台的项目建设案例,探讨了面向大数据的时空信息云平台的建设目标、总体架构、关键技术、应用情况等内容,为解决海量时空大数据处理与分析性能问题,推动地理信息服务高质量发展做了积极探索。     

面向地理信息企业的时空大数据服务平台设计与实现

针对地理信息企业内部拥有的地理信息资源呈爆炸式增长态势,以及公有云在地理信息企业推广中面临的安全性与可靠性问题,本文设计了一个采用混合云模式搭建基于Hadoop技术的时空大数据服务平台的方案,并依据方案建设了集数据存储、管理、共享和分发利用的图、属一体化空间数据管理平台,为企业不同场景提供服务。     

基于Autonomy的国土资源档案知识挖掘与应用平台研究

本文在分析大数据背景下国土资源信息化面临的挑战及国土资源档案数据现状的基础上,提出基于Autonomy知识与服务架构,重点阐述架构的三个组成部分：数据采集平台、本体构建与分析平台、数据处理平台,介绍了基于Autonomy Idol的应用功能设计实例。探讨海量国土资源档案数据管理与应用的新方式,为国土资源数据档案的管理提供大数据支持的理论基础。     

基于WebGIS的环境监管云平台设计与建设

针对环保空间信息平台用户的需求,设计实现了基于WebGIS的环保监管云系统平台。该平台的建设以贵州省委、省政府制定的大数据产业战略,面向贵州经济社会跨越式发展的需求,以贵州省"环境监管"云平台为核心内容,综合运用大数据技术、并行云计算技术、WebGIS技术和高效网络传输技术等当前先进的信息化技术手段,整合和迁移各类地理信息资源和环境保护业务资源,建立统一的环境信息资源数据库,统一的地理信息数据应用标准规范,建成依托贵州省基础地理空间数据库,结合贵州省环境数据中心及其他环境业务信息系统,创新构建全国领先的环境保护工作,实现政府监管、企业自律、公众参与的社会管理"贵州模式",为贵州省环境管理工作提供强大且完备的技术支撑。     

智慧嘉兴时空大数据与云平台设计与实现

在数字嘉兴建设成果的基础上,本文结合“智慧嘉兴”时空大数据与云平台试点项目建设,探讨构建全市统一的智慧城市时空大数据与云平台,介绍了平台总体架构、技术路线设计、系统实现、示范应用及关键技术分析,根据运行实践证明,该平台能够为全市政府部门、企事业单位及社会公众提供权威、统一、可靠的智慧时空信息服务。     

基于Google Earth Engine的遥感大数据分析研究进展与应用

随着地理信息数据规模不断增长,传统的空间分析模式受限于软硬件的性能已经不能对大数据多尺度研究提供较好的支持。以GEE平台为基础,通过算法原理阐述平台架构体系以及分析GEE的技术特点,论述其在遥感大数据分析领域的研究进展、人工智能技术在地理信息分析领域的应用,探索地理空间数据分析的智能化方向。最后,结合交叉学科前沿探索GEE在未来的热点研究领域中的应用模式,并展望GEE作为云端空间信息服务平台的未来发展以及和下一代互联网技术的协同演进。     

地质大数据支持下的智慧地矿业务支撑平台构建

为探索“互联网+地质工作”新模式，更好地服务于生态文明建设，地矿部门积极推进智慧地矿工程建设。地质大数据已在城市地质、海洋地质、农业地质、生态环境地质等领域得到广泛应用。因此，为了地矿业务系统的开发、全业务网上运行和监管提供统一的基础技术平台和运行环境，实现各部门之间的业务协作与地矿信息共享，亟须构建基于地质大数据的智慧地矿业务系统应用支撑平台。本文详细阐述了该平台的构建。     

建设黄河“智能大脑”服务流域生态保护和高质量发展

本文首先介绍了黄河流域水文、地理景观和地貌特征,下游河道变迁和河口变迁历史及生态治理,流域历史水旱灾害等基本背景,分析了黄河流域生态保护和高质量发展面临的主要问题和具有的优势。然后重点论述黄河“智能大脑”如何服务流域保护和发展,提出黄河“智能大脑”三要素,即感知系统（天地一体智能感知网）、存储管理系统（资源池）和操作系统（时空大数据平台）;论述了流域一体化时空大数据中心的构成及其基本功能,时空大数据平台及其目标要求,分析并提出了基于网格集成与弹性云的混合式时空大数据平台技术体制和构建技术,提出采用“共用时空大数据平台+”应用概念模型及其具体应用模式。最后讨论了时空大数据平台服务黄河流域城市数字化、网络化和智能化,加强流域上中下游7大城市群的新型智慧城市建设,推动流域生态保护和社会经济发展,提出基于流域时空大数据平台构建服务保护和发展的综合科技信息咨询服务平台,支撑流域协同创新共同体构建,增强流域整体性和协同性发展。     

智慧城市时空大数据平台下自然资源档案管理系统的升级与改造

随着智慧城市时空大数据平台的建成，依托其时间的可追溯性、空间的全面性、数据类型的多样性，自然资源档案管理系统有了较大的升级改造空间。本文通过对智慧城市大数据平台中时空信息大数据、时空信息云平台、支撑环境、智慧应用示范4个方面建设内容的分析，研究了如何通过对自然资源档案管理系统中的档案数据整理入库功能进行升级、对系统功能模块进行改造，以实现自然资源档案的图、数、档一体化管理，从而满足自然资源部门对档案的管理与使用需求。