数据存储查询方法、装置、计算机设备及存储介质与流程

文档序号:19680453发布日期:2020-01-14 17:16阅读:来源:国知局
技术总结
本发明涉及数据存储查询方法、装置、计算机设备及存储介质,该方法包括获取需存储的数据;暂存需存储的数据至kafka队列服务器,以得到暂存数据;采用spark streaming消费暂存数据,以得到中间数据;获取中间数据在HBase表内的真正HRegion位置,以得到存储位置;将中间数据写入存储位置内,以得到写入结果;根据写入结果建立二级索引;反馈二级索引以及写入结果;获取查询请求;根据查询请求获取查询结果;反馈查询结果。本发明实现针对大文件数据的写入时,不影响写入性能,在进行查询时,查询效率高,且有效满足真实场景中复杂多样的业务存储查询需求。

技术研发人员:谷国栋;耿伟;周起如;王英明;胡进贤
受保护的技术使用者:深圳市赛为智能股份有限公司
技术研发日:2019.09.25
技术公布日:2020.01.14

当前第3页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1