一种应用于数据仓库的数据处理方法和装置与流程

文档序号:15615825发布日期:2018-10-09 21:21阅读:来源:国知局

技术特征:

技术总结
本发明公开了一种应用于数据仓库的数据处理方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:接收实时数据,确定与实时数据相关联的历史数据;确定历史数据所处文件,传输实时数据至文件中的实时数据层;分别获取实时数据以及历史数据的版本,提取最新版本的实时数据或历史数据,作为文件的最新数据记录,并写入历史数据层中进行记录更新。该实施方式实现了传统数据仓库与实时计算技术的结合,提升了数据仓库的ETL时效性,满足了用户进行实时数据的查询分析需求;另外,基于现有离线数据的基础上,可降低对数据仓库实时计算的开发成本,更加符合数据仓库的业务需求。

技术研发人员:安金龙;刘业辉;张飞;张宁;王淼鑫;张增
受保护的技术使用者:北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司
技术研发日:2018.05.09
技术公布日:2018.10.09
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1