经验爬虫应用于网络地图服务获取

网络地图服务已经渗透到国民经济的方方面面,如何从海量的地图服务中获取需要的数据成为当下研究的热点问题。本文针对目前Web地图服务数据在使用爬虫技术获取中,存在效率和准确性低的问题,提出在经典网络爬虫基础上,增加"经验树"环节,实现了"经验爬虫"。将改进后的"经验爬虫"与其他3种经典爬虫爬取的结果对比分析,"经验爬虫"爬取的效率和准确性是其他3种经典爬虫均值的2倍以上。     

基于语义挖掘的应急空间信息采集技术

首先介绍了语义搜索、地名地址匹配、空间分析等技术;然后基于Hadoop搭建了分布式搜索引擎,实现了空间信息的搜索与提取;并将其应用于应急管理领域,获得了福州市由暴雨导致的涝点数据。     

地面地下空间信息采集车及试验结果

介绍地面地下空间信息采集车的原理和结构,给出了利用GPS-RTK辅以全站仪和地下管线探测仪实现地下管线勘、测、管一体化的原理,以及获取管线三维坐标的数学模型。通过试验验证了地面地下空间信息采集车的可行性,其精度满足《城市地下管线探测技术规程》的要求。     

基于网络爬虫的Web服务抓取解析器的设计与实现

随着Web服务和网络技术的发展,越来越多的Web服务得以开发并发布到网络上。由于网络上存在的Web服务相互之间没有内在的必然联系,用户很难快速有效地获取和利用这些服务。本文设计了一种Web服务抓取解析器框架,包括URL抓取器、WSDL文档解析器和用于结构化存储Web服务信息的数据库等。该抓取解析器采用网络爬虫程序对互联网中的URL进行搜索,通过搜索发现分布在网络上的Web服务,并最终建立起一个关于Web服务的信息库,为共享Web服务提供条件。     

基于网络爬虫的导航深度服务信息自动采集

根据近来对地理信息Web服务搜索引擎的研究,设计一种基于网络爬虫自动采集POI(Point Of Interest)深度服务信息的方法。使用网络爬虫与DOM(Document Object Model)技术从发布相关POI深度服务信息的网站抓取实时信息,并通过编辑距离与针对地址匹配的改进最大公共子序列分析页面内容与POI主题相关度,进而将相关度最高的深度服务信息与POI点匹配,生成深度服务信息点特征。实验证明了方法的有效性。     

基于网络的地理信息采集和管理系统

浏览器／服务器是一种新型的计算机工作方式，而浏览器／数据库服务器技术是一种Web计算模式，它集中了大中型系统及文件服务器的优点，并具有良好的系统开放性和可扩展性，本文首先分析了相关技术的特点，然后针对Web动态技术的应用，采用ASP、SQL Server等工具构建了基于网络的地理信息采集和管理系统，并对系统功能进行了验证。     

基于布尔矩阵的空间关联规则提取方法研究

空间关联规则是空间数据挖掘(SDM)中的重要内容之一。由于空间数据的复杂性,传统的空间关联规则挖掘方法主要是将空间数据库变换为非空间数据库,通过挖掘算法挖掘空间关联规则。目前,Apriori算法是关联规则挖掘中使用最为普遍的算法,但是,由于该算法在关联规则提取过程中需要多次扫描数据库,并且产生冗余的候选项集,因此,在执行大型数据库的关联规则挖掘时,具有效率低下的缺陷。本文基于Apriori算法提出了基于布尔矩阵的空间关联规则挖掘算法,并以挖掘福建省厦门市土地覆盖现状与地形特征因子的空间关联关系作为试验案例,对比Apriori算法的提取结果与提取效率,结果表明:该算法不仅减少了扫描数据库的次数,而且减少了冗余候选项集的产生,提高了空间关联规则的提取效率。     

面向网络新闻的爬虫开发与热点新闻事件分析

Python平台开发了网络新闻爬虫,通过实验对比常用的网页数据获取方法,本文提出一种适合新闻网页的解析方式,克服了获取动态网页时源码不完整、单一方法解析网页效率低下等弊端,满足了新闻网页抓取、解析、结构化和入库存储等需求。并将新浪新闻中心作为网络新闻数据采集的目标,分析发现新浪新闻近几年的发展情况。此外,利用词频统计等手段对十九大会议新闻进行分析,直观地反映了十九大的核心人物、关键党派、热点话题变化等重要信息。     

面向精准扶贫的专题地理信息采集方案研究

针对传统测绘地理信息采集方式投入大、周期长,无法满足精准扶贫地理信息采集需求的问题,提出一种测绘转型升级环境下的新型交互式专题地理信息采集方案。该方案基于移动GIS技术,通过简单的技术培训,将地理信息采集主体由测绘专业人员迁移至非测绘专业人员,通过非测绘行业人员的参与协作,建立一套高效可持续的海量专题地理信息数据的获取与更新机制。基于服务于湖北省精准扶贫事业的贫困户专题地理信息采集的案例表明,所提方案不仅可以快速有效地获取贫困户空间位置信息,还能定期或不定期地更新贫困状态。与传统模式相比,本方案在采集效率、采集成本等方面优势明显。     

基于网络的地理信息采集和管理系统

浏览器/服务器是一种新型的计算机工作方式,而浏览器/数据库服务器技术是一种Web计算模式,它集中了大中型系统及文件服务器的优点,并具有良好的系统开放性和可扩展性,本文首先分析了相关技术的特点,然后针对web动态技术的应用,采用ASP、SQL Server等工具构建了基于网络的地理信息采集和管理系统,并对系统功能进行了验证。     

基于Web Service的电子政务空间信息服务系统的探讨

针对目前国内外电子政务的发展状况,作者讨论了采用WebService和.NET技术实现电子政务空间信息服务系统的优势,分析了政府部门电子政务GIS业务模型,研究了基于WebService和.NET技术的空间信息服务系统的总体框架,设计了系统的软件体系结构。最后,作者介绍了实验系统的开发情况。     

检索词优化与空间自适应的深网POI获取方法研究

针对检索词库构建困难、数据请求量受限制等相关问题,该文提出一种基于独立覆盖率排序和空间自适应剖分的深网POI信息搜索方法,通过候选检索词初步构建、贪婪式探测搜索、检索词优化降维、空间自适应剖分爬行等主要流程,利用逐步逼近POI搜索的最大覆盖最优解,实现对深网POI信息的全量获取,大幅度提高深网POI数据的召回率与采集效率,该方法对于丰富地理信息资源、提升空间信息服务与内容管理能力具有重要意义。     

基于Web服务的数字城市空间数据资源共享研究

数据异构、处理复杂、海量管理、部门专有等问题制约了空间数据在数字城市中广泛的共享与应用。本文以Web服务技术为核心,提出了一个包括管理层、数据层、服务层以及应用层的数字城市空间数据资源共享框架。研究了共享数据服务平台层基本服务的实现,以及服务的组合、服务的注册与发布、服务的Qos等关键技术。最后通过共享服务平台支撑下的数字城市应用系统的实现,验证了本文提出的方法在数字城市建设中的实用性和有效性。     

嵌入式Web服务器的Android空间数据离线解决方法

针对移动GIS应用商业开发组件难以进行自由定制与分发的问题,该文提出一种基于嵌入式Web服务器的Android移动端空间数据离线解决方法,该方法通过在Android设备中移植开源的NanoHTTPD服务器实现了地图瓦片服务和矢量要素服务,并通过编码读取bundle切片数据包和扩展Spatialite空间数据库的方式,解决了切片数据和矢量要素数据的存储,然后利用Webview控件内嵌HTML5页面加Leaflet地图库完成了前端功能实现,并进行了实际应用展示。该方案的实现可节省Android端移动GIS应用开发成本,具有推广意义。     

空间信息系统移动终端设计与实现技术

空间信息技术与移动通信技术的有机结合,加快了空间信息社会化的进程,越来越多的传统方法不适用现代信息化进程。本文分析了在LBS社会化服务需求背景下空间信息获取技术的缺陷,探讨了移动GIS环境下移动终端的关键技术、实现的技术路线等,提出了一种利用基于移动GIS方法、遥感栅格影像技术、GPS定位、无线网络互联移动计算技术的移动终端设计思想,并给出其实现的技术路线。     

西南资源环境空间信息网格研究

在空间信息科学领域,人们提出了空间信息网格(SIG)的概念,为空间数据的信息获取、共享、访问、分析和处理提供技术支持,以实现网格环境下的空间资源共享与协同。本文着重于网格技术与移动代理技术在地理信息共享领域的应用研究,结合空间信息网格技术,探讨了区域资源环境信息共享技术。在此基础上,本文设计了基于网格的地理信息共享与服务体系框架,并初步实现了基于该框架的西南地区资源环境信息共享与服务平台的原型系统。在原型系统中实现了网格环境下的WMS服务、WFS服务、服务资源注册服务、服务状态监测服务以及安全方面的访问控制服务。     

基于Web Services的三维空间数据表达与传输研究

随着地理信息系统应用的日益普及,它已渗入各个领域,人们对其技术需求也不断提高。以往单机版的2DGIS不能满足人们应用的要求,而3D的网络GIS成为大众关注的焦点。目前,3DGIS和WebGIS都得到了广泛的研究,形成了一定的理论研究成果。但是,这两种技术相结合的研究还很少。本文在以往形成的WebGIS理论基础之上,将之与3DGIS相结合,探讨了一种基于Web Services实现网络三维空间数据的表达与传输服务的方法,并通过实验来验证了这种方法的可行性。     

基于地图信息传输理论的数据采集与处理模型研究

传统的地图信息传输理论仅仅是在宏观上研究了地图信息传输和控制的一般过程,而对于数字条件下地图信息传输的体系结构研究甚少,理论与实践结合不是很紧密。本文提出了数字条件下地图信息传输的体系结构,将地图信息的传输过程分为物理层、逻辑层、概念层和现实层,探讨了层次之间的协议、接口和服务。最后将理论运用于实践,建立了地图数据采集与处理系统的参考模型和信息传输过程中的各种控制协议,给出了信息损失和失真的具体解决方案。该参考模型在实际的数据采集与处理系统中取得了较好的效果。     

空间信息可视化挖掘研究

空间信息的可视化挖掘是数据挖掘领域的热点 ,具有很强的应用前景。本文从数据挖掘的基本概念入手 ,详细介绍了可视化数据挖掘的两种分类体系 :Keim分类体系和Card分类体系 ,同时分析了这两种分类体系中各种可视化数据挖掘方法的基本思路 ,探讨了可视化数据挖掘技术与空间信息领域应用相结合的各种途径 ,并给出了空间信息可视化挖掘的常用方法