一种基于Hbase二级索引的数据统计方法与流程

文档序号:13707822阅读:来源:国知局
技术总结
本发明提供一种基于Hbase二级索引的数据统计方法,涉及一种大数据统计的技术,1)通过Coprocessor的Observer模式,在Hbase新增数据时,实时创建该表的二级索引数据,格式为Date_TableName_RowKey;2)将时间作为StartRow与StartRow,书写MR任务,进行数据统计,并删除7日之前的所有索引数据;3)通过crontab设置定时任务,每日自动执行进行数据统计。本方法有着环境易搭建、数据统计及时、准确并且拥有良好的可扩展性。

技术研发人员:牛硕;周正德;
受保护的技术使用者:浪潮电子信息产业股份有限公司;
文档号码:201610062000
技术研发日:2016.01.29
技术公布日:2016.07.06

当前第3页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1