基于行键的HBase大数据文件存储转换与快速检索研究

来源：计算机应用研究杂志2019年第12期北京时间：

作者：圣文顺,徐爱萍,

单位：1.南京工业大学浦江学院,南京211200；2.武汉大学计算机学院,武汉430072；

摘要：针对传统关系型数据库很难满足数据的快速存储与检索的问题，研究了基于数据文件字段映射表、文件对象字段、HBase列映射表和存储转换执行方案映射表解决文件对象的异构性和存储转换的通用性问题。提出了自定义RowKey行键的规则与生成算法，给出了基于映射表与行键的数据转换与存储流程及算法；最后基于行键前缀匹配或关键字匹配方式实现了不同需求的数据快速访问与检索，且具有较强的通用性。

关键词：大数据,文件存储,行键,特征值,快速检索,

基金资助：国家重点研发计划重点专项资助项目(2017YFC0803700)；江苏省高校自然科学研究面上项目(19KJD520005)；；