基于协处理器的HBase内存索引机制的研究

来源：计算机工程与应用杂志2020年第1期北京时间：

作者：朱松杰，娄渊胜，叶枫，李凌，陈勇

单位：1.河海大学 计算机与信息学院，南京 211100；2.南京龙渊微电子科技有限公司 博后工作站，南京 211106

摘要：为了实现对海量数据的高效存储和查询，众多NoSQL数据库被开发出来，HBase是其中之一。但原生的HBase数据库在进行数据查询时只支持主键索引，对非主键数据只能通过全表扫描的方式进行查询，极大降低了HBase的多条件查询速度。为此，提出了基于协处理器的HBase内存索引构建方案，通过协处理器实现对二级索引的快速构建并可根据HBase表的变化自动更新索引。同时，将建立的索引进行持久化操作，在使用时通过内存计算，极大地提高了索引数据检索速度，保证了索引的可用性和容错性。实验结果表明，该方案相比原生数据库的条件检索速度有了极大提升，相比于基于Solr和HiBase的二级索引方案检索速度也有所提升。

关键词：HBase,内存索引,HT树,持久化