共查询到20条相似文献,搜索用时 140 毫秒
1.
针对水下地形测量仿真器中的多波束测深结果仿真环节中,对海量已知水深点云数据进行处理时存在的检索效率低、内存占用大的问题,设计了一种基于四叉树的数据处理方案。以四叉树数据结构并采用序列化方式存储索引文件,提高点云数据的检索效率;通过内存映射的方法读取海量点云数据,减少内存占用。数据实验表明:相对于常见的遍历检索,在检索点云数不超过总点云数的约四分之三时,四叉树水深点云检索效率提高了1倍以上;在检索点云数越少,总点数云越多时,四叉树水深点云检索的效率最多可提升30倍以上。基于四叉树的数据处理算法可有效地提高点云数据的检索效率,适合于多波束测深结果仿真过程中的海量点云数据的处理。 相似文献
2.
物理海洋数据具有多维、时空和海量等特征,主要以NetCDF结构化文件格式进行存储。然而,在分布式环境中,结构化文件存在数据块寻址困难、边界不易判定等问题,制约着大数据场景下的存储及应用。论文设计基于HDFS+Spark的NetCDF物理海洋数据云存储方案,首先采用HDFS分布式存储技术存储和管理物理海洋数据;并设计基于Spark并行计算框架的数据分片方案,复写读取接口获取分布式环境下的NetCDF文件数据块地址,实现了物理海洋数据的高效率存储与查询分析。选取中国海域100 a时长的物理海洋数据进行波高-周期散布图统计实验。结果表明:在数亿级记录数条件下,文中方法可将查询分析耗时由集中式文件存储方式的2 300 s缩短至50 s内,效率较集中式文件存储方式提升95%以上,验证了该方法的正确性和有效性。 相似文献
3.
大数据量遥感影像的快速调度与显示 总被引:9,自引:0,他引:9
随着遥感技术的飞速发展,特别是传感器分辨率的提高,遥感影像的数据量急剧增加,如何有效地从这些庞大的影像数据中获取用户感兴趣的信息已成为当前的研究热点。针对大数据量影像的快速调度与显示问题,提出了一种基于文件的数据组织与管理方法,实现了单幅和多幅大数据量影像的实时调度与快速显示。经过与当前几种常用的商用软件进行对比发现:提出的方法占用计算机资源少,预处理后的影像浏览速度基本与数据量大小无关,可以在任意一台普通配置的计算机上无缝、平滑地快速显示大数据量影像。 相似文献
4.
5.
6.
在对海洋观测数据进行大规模集成时,需要对现有数据源的观测要素与集成系统的观测要素之间建立匹配映射关系,由于海洋观测数据源存储结构复杂,数据转换计算量大,造成海洋观测要素匹配耗时长、错误率高等问题,阻碍了异构海洋观测系统的大规模集成。文中提出了一种新的海洋观测要素自匹配方法,采用边缘计算降低网络传输数据量;采用分组快速搜索算法和ω-KNN算法提高要素匹配准确性和效率。利用实际的海洋观测数据集搭建原型系统,对海洋观测要素自匹配方法进行验证,结果表明该方法执行效率提高2.67倍,准确率达到96%,在保证海洋观测要素匹配准确性的同时,进一步提高了要素匹配效率。 相似文献
7.
8.
9.
10.
海洋数据的多源性、多态性和多样性以及数据量庞大等特点决定了其不同于其它数据,如何更加合理有效地存储和管理海洋数据,为海洋综合管理信息系统和"数字海洋"原型系统建设提供有力的数据支撑,是一个紧迫需要解决的问题。本文对各类海洋资源、海洋环境、海洋经济、海洋管理等数据进行统一的体系规划,构建统一标准的海洋数据体系框架,以实现国家、省(市)等各级海洋数据的有效管理,满足"数字海洋"海洋信息基础平台建设需要。 相似文献
11.
随着海洋仪器在海洋调查、海洋监测、海洋科研等领域的广泛应用,开展海洋仪器的计量检定校准工作成为了国家海洋计量站最基本的业务工作之一。“海洋仪器计量检定校准数据处理系统”是专门为海洋仪器计量检定、校准数据的处理而设计的软件系统,文章详细介绍了该系统的结构和功能。 相似文献
12.
13.
14.
15.
16.
RS与GIS在海洋地质调查中的应用 总被引:2,自引:0,他引:2
近几十年来,海洋的重要性愈来愈明显,海洋地质调查作为获取海洋数据的重要手段逐渐受到关注。海洋数据与陆地数据相比,具有多样性和时空复杂性的特点。近年来遥感技术和地理信息系统技术发展迅速,遥感的实时性、大面积监测性的特点以及地理信息系统对空间数据的有序管理及支持辅助决策的功能为海洋地质调查开辟了新的前景。笔者结合遥感和地理信息系统的特点、发展趋势,介绍了其在海洋地质调查领域中的应用,并对其应用前景做出展望。 相似文献
17.
18.
19.