一种基于HBase与Phoenix的低成本海量结构化数据快速检索方法与流程

文档序号:24123271发布日期:2021-03-02 12:23阅读:来源:国知局

技术特征:
1.一种基于hbase与phoenix的低成本海量结构化数据快速检索方法,其步骤如下:步骤1. 将hdfs异构存储策略引入数据表,数据表存储在固态硬盘上,将数据表存储策略修改为one_ssd;步骤2. 将hdfs异构存储策略引入索引表,索引表存储在机械硬盘上,将索引表存储策略修改为hot;步骤3:phoenix适配hbase异构存储策略,修改phoenix的sql解析接口,将新建数据表实现对接为one_ssd存储策略建表接口;新建索引表实现对接为hot存储策略建表接口。2.根据权利要求1所述的基于hbase与phoenix的低成本海量结构化数据快速检索方法,其特征在于:所述将数据表存储策略修改为one_ssd,其步骤如下步骤1.1. 重载hbase的建表接口htabledescriptor(tablename)为htabledescriptor(tablename,type),其中type为存储策略,数据表的存储策略为ssd;并将该参数加入到序列化/反序列结构中;步骤1.2. 改写hbase建表的实现接口,修改实现接口中新建hdfs文件目录的方式,如果反序列化中有type参数,就将该hbase表对应的hdfs目录设置为对应存储策略,数据表的存储策略为one_ssd。3.根据权利要求1所述的基于hbase与phoenix的低成本海量结构化数据快速检索方法,其特征在于:所述索引表存储策略修改为hot的具体步骤如下步骤2.1. 重载hbase的建表接口htabledescriptor(tablename)为htabledescriptor(tablename,type),其中type为存储策略,索引表的存储策略为hot;并将该参数加入到序列化/反序列结构中;步骤2.2. 改写hbase建表的实现接口,修改实现接口中新建hdfs文件目录的方式,如果反序列化中有type参数,就将该hbase表对应的hdfs目录设置为对应存储策略,数据表的存储策略为hot。
当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1