数据预处理技术在地学大数据中应用

大数据时代随着数据的爆发式增长,在带来可供研究的海量数据的同时,也带来巨量的噪声和冗余数据。在地学领域,由于研究方向和技术方法手段的多样化,产生了数据量巨大和类型众多的地学数据集合。在地学信息的研究过程中,经常碰到地学信息孤岛,分图幅地学数据边界系统误差和地学文档的非结构化问题。在对地学数据进行信息的提取和挖掘之前,必须根据研究目的对地学大数据进行预处理,使冗余、复杂的大数据转为结构化、准确、可用的数据。本文以地学大数据的预处理技术为切入点,从地学数据交互标准与语义、数据调平、地质图接边和文本结构化等四个研究方面,分析阐述目前地学大数据挖掘方面存在的问题及主要的解决手段,同时也对多元数据融合在大数据中的应用进行了阐述。希望通过本文对地学大数据预处理技术的探讨,能对地学大数据的挖掘有所帮助。     

预处理方法对重庆地区考古遗址粒度分析结果的影响

选取重庆石牛寺和大石洞考古遗址剖面,对比不同预处理方法对粒度测试结果的影响。研究表明：1)加蒸馏水浸泡或0.05 mol/L的(NaPO₃)₆分散剂,并用超声波震荡,分散效果均不明显,主要粒度参数与无预处理实验结果接近,表明物理性预处理方法既不能去除碳酸盐、有机质等杂质,也不能使样品中潜在的胶结团粒分散开。2)加H₂O₂可有效除去地层样品中的有机碎屑物,达到提纯无机颗粒物的目的。该方法预处理后,石牛寺考古遗址沉积物平均中值粒径最小,黏土体积分数最高,相比无预处理测试结果,砂体积分数降低50%左右,且在整个剖面中表现非常稳定;但对于大石洞遗址某些碳酸盐胶结物含量丰富的样品而言,该预处理方法作用有限。3)加10%稀HCl预处理后,石牛寺遗址样品中值粒径有所增大,砂体积分数基本持平,黏土体积分数显著降低,大石洞遗址黏土和砂体积分数同步减少,揭示黏土矿物可能在酸性环境下发生絮凝,从而导致体积分数减少。4)对于碳酸盐胶结物含量较低的环境考古样品,只需加H₂O₂除去有...     

GDP32瞬变电磁法数据转换方法及实现

瞬变电磁法在矿产资源等勘查领域已广泛应用,成为寻找铜多金属硫化物矿床的重要方法。GDP32作为多功能电法工作站,现已普遍应用于地质勘查工作。但其数据处理软件功能较少,用户界面单调,操作性不强,无法满足干扰区数据的选择和调整,本文就其数据转换原理及实现方法进行介绍,方便大家自行编写数据预处理程序。     

深海拖缆勘探导航数据预处理方法

深海拖缆勘探导航测量的数据质量差,出现粗差的可能性大,数据预处理过程(主要包括粗差探测、滤波平滑和数据历元化等)是数据处理的重点和难点之一。文中探讨并设计了一种预处理方法:首先通过稳健估计拟合曲线的方法探测粗差;然后滤波平滑削弱观测噪声的影响,同时进一步处理残留粗差得到较"干净"的观测值;最后进行历元化内插得到各历元时刻的观测值,为数据处理做好准备工作。     

钙质碎屑对热带海滩砂粒度参数的影响分析

钙质碳酸盐碎屑是热带海滩沉积物的重要组成部分,其物理特性与海滩中的石英颗粒差异明显。对海南岛东部文昌铜鼓角两侧海湾海滩砂样采用除钙和不除钙两种预处理方法,使用Mastersizer 2000激光粒度仪和筛析法进行粒度分析,结果表明:除钙以后粒度频率曲线主体朝细偏,但在粒度频率曲线细尾(4~9)会新增一小峰;去钙前后粒度参数存在明显的线性相关,平均粒径、分选系数和偏态的相关系数依次降低;粒度参数的组合变化以“平均粒径变细、分选系数变好、偏态朝细偏”为主,但仍存在其他的组合变化;在对类似于铜鼓岭周边环境的海滩进行沉积物粒度分析及动力环境研究时,需要了解钙质碎屑含量和颗粒组成。     

复杂环境电梯试验塔定向控制爆破拆除技术

介绍了采用控制爆破技术拆除复杂环境下的钢筋混凝土电梯试验塔的设计及施工过程,对爆破效果进行了分析总结。针对剪力墙结构电梯井特点,对非承重结构剪力墙、柱梁以及部分承重剪力墙进行预拆除,确定合理的爆破高度、切口形式和倾倒角度;采用合理半秒延期时间增加了结构物作用时间,保证了电梯试验塔按照设计失稳定向倾倒。对安全防护设计进行校核,爆破后未对周围环境和设施造成影响,达到了预期的爆破拆除效果。     

海洋可控源电磁数据的畸变校正与合成孔径源信号增强方法

我国对海洋可控源电磁勘探方法的研究起步较晚,目前海洋采集数据的处理流程较为单一。在经典的数据处理流程中,仍缺乏针对由存储设备读写、船速和长线源源距变化等造成的畸变电磁响应的数据处理方法。本文针对存储设备运行造成的规则干扰提出一种基于功率谱分析的自动压制方法;对于船速和长线源源距变化的干扰建立了分时窗畸变校正流程;最后,结合合成孔径源技术进一步增强了有效信号的强度。实测数据处理结果表明,文中提出的畸变校正与信号增强方法,在提高电磁数据信噪比的同时,增强了来自海底地层的有效信号幅度。     

电子航道图数据预处理功能的完善与实现

以长江电子航道图为例,提出一种数据预处理平台的升级与实现方法,对原有的EPS内业处理平台和电子航道图生成编辑系统边界进行重构,整合并升级部分功能,优化数据生产与质检流程,使得完善后的系统在功能及性能有一个质的提升,减轻数据生产编辑系统的负荷,进一步提高数据生产效率,以满足内河航道综合信息服务对电子航道图数据高质量快速更...     

福尔马林固定白鲟(Psephurus gladius)标本的DNA提取及其相近种微卫星引物的适用性

白鲟是是世界上最大的淡水鱼之一,为我国独有,被誉为"长江中的活化石".目前白鲟群体已极度濒危,获取其新鲜材料非常困难,因此本文以保存于中科院水生所标本馆的福尔马林固定白鲟标本为研究材料,尝试从其肌肉、心脏、鳍条和肝脏组织提取白鲟基因组DNA,并检验相近种匙吻鲟和中华鲟微卫星引物对白鲟有无适用性.实验包括福尔马林固定白鲟标本从组织预处理到消化、抽提等步骤的整体优化过程;通过一系列对比试验分析在不同条件下提取到基因组DNA片段大小的差异,最终实现了福尔马林固定白鲟标本基因组DNA的稳定提取,并提出后续实验的延伸设想加以完善.