重庆理工大学学报(自然科学) ›› 2021, Vol. 35 ›› Issue (4): 142-151.doi: 10.3969/j.issn.1674-8425(z).2021.04.019

• 信息·计算机 • 上一篇    下一篇

基于协处理器的 HBase分类二级索引设计

陈顺举1,邹 ?2,刘 锐1,陶 涛1,汪 超1,郑林江2   

  1. 1.重庆市公安局渝北区分局 交通巡逻警察支队,重庆 401120; 2.重庆大学 计算机学院,重庆 400044
  • 收稿日期:2020-01-02 出版日期:2021-05-10 发布日期:2021-05-10
  • 作者简介:陈顺举,男,硕士研究生,高级工程师,主要从事交通信息化研究,Email:1823833055@qq.com;通讯作者 郑林 江,男,博士研究生,副教授,主要从事交通大数据研究,Email:zlj_cqu@cqu.edu.cn。
  • 基金资助:
    国家重点研究计划课题(2017YFC0805200);国家重点研究计划课题(2016YFC0801707)

  • Received:2020-01-02 Online:2021-05-10 Published:2021-05-10

摘要: 针对 HBase仅在行键上进行索引优化而非行键列查询的问题,提出一种基于协处 理器的 HBase分类二级索引方案?设计基于协处理器的索引管理和并行查询机制:利用 Ob server在内存中建立并维护索引,同时利用 Endpoint设计并行查询算法,进而提升非行键列的查 询性能?由于数据特征和查询需求决定了构建索引的类型,进一步设计分类内存索引模型,用 以平衡查询性能和索引性能?在出租车 GPS数据集上的实验结果表明:相较于基于 Solr和 HBase的二级索引方案具有更好的整体性能?

关键词: HBase, 二级索引, 协处理器, 内存索引

中图分类号: 

  • TP39