《电子测量技术杂志》发表论文赏析

一种基于深度学习的数据无损压缩方法及在测井大规模数据存储中的应用

来源:电子测量技术杂志2021年第5期北京时间:

作者:陈建华,高虎,苏治俭,樊举

单位:1.中国石油集团测井有限公司长庆分公司 陕西 西安 710201 2.中国石油集团测井有限公司辽河分公司 辽宁 盘锦 124000

摘要:为解决海量测井数据归档存储场景中出现的存储硬件和数据库存储容量限制等问题,本文提出了一种基于深度学习的数据无损压缩方法,采用循环神经网络RNN作为概率预测器,输出数据流的条件概率分布,结合当前字节值,使用自适应算术编码器对数据流进行压缩;解压过程中,使用保存的RNN网络权重和算术解码器,对数据流进行解压。本文方法较传统无损压缩方法,在一维测井数据的实际压缩测试中压缩率平均提升约23%,在二维阵列测井数据上,平均提升约21%。同时,本文结合数据无损压缩方法,提出一种基于多维特征索引查询树结构的测井大型存储数据库的构建方法,在多条件组合查询时,较传统数据库查询方法检索效率平均提升约45%。结果表明,本文方法可有效减少测井数据的存储空间,降低数据的检索时间,为大规模测井数据的存储和利用提供了技术基础,节约数据归档的硬件成本和人力成本。

关键词:测井数据归档 无损压缩 循环神经网络

2021年5期其他文献查阅:

基于多超球SVM的电机转子断条故障诊断

PECT在铁磁性材料测厚中传感器参数分析

基于多传感器的火灾监测及小型灭火系统研究

雷电低频磁场探测天线关键参数敏感性分析

基于蒙特卡洛法的外径千分尺测量误差校准

面向集群风电的运行断面自适应控制方法

基于超宽带步进频GPR和EMI的钢筋检测

5G移动通信下无人机高速公路巡检防碰撞技术研究

基于视觉识别的无线通信物流机器人设计

迈克尔逊干涉条纹位移信息提取研究

基于Inception-ResNet模型的轴承故障分类

互相关渡越时间超声波流量计精度补偿

基于IFSVR和PSO算法的转炉炼钢终点预测

基于循环神经网络的低复杂度最小和译码算法

侧向仪器主屏流比和剩余电位电路测量理论算法研究

一种基于深度学习的数据无损压缩方法及在测井大规模数据存储中的应用

基于单纯形搜索的扫描图像自动色彩照明

基于卡方差异性和t-SNE的定性数据分类研究

改进的压缩感知红外图像去噪算法

基于激光雷达和相机融合的目标检测

模糊神经网络在城市轨道交通行车组织管理中的应用

基于FSSD的微光烟雾检测方法

基于多特征选择的膝关节骨关节炎SVM自动分级研究

知识图谱中基于多关系路径的链路预测方法

紫外光通信FDPSPIM调制原理与实现

基于旋转永磁体的机械天线研究

一种脉冲中子氧活化测井仪数据采集电路

电容式超声换能器小信号等效电路建模与仿真

时频分析与VGG19迁移学习的轴承故障检测

基于NDIR的高精密氢浓度测控系统关键技术研究

基于瞬变场激励传感器设计及仿真研究

横波测厚电磁超声换能器的优化设计及试验研究

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!