一种数据处理方法和设备与流程

文档序号:11133963阅读:来源:国知局

技术特征:

1.一种数据处理方法,其特征在于,包括:

获取第一数据表中存储的与目标业务相关联的多组数据信息,其中,每一组所述数据信息中包含所述目标业务的业务数据的产生时间以及所述业务数据的第一数据内容;

在确定所述目标业务的业务数据在所述第一数据表中发生数据漂移时,从第二数据表中获取发生数据漂移的与所述目标业务的所述业务数据相关联的第二数据内容,其中,所述第一数据表与所述第二数据表不同;

将获取的所述业务数据的第一数据内容与所述业务数据的第二数据内容进行合并,对合并后的数据内容执行数据清洗操作。

2.如权利要求1所述的数据处理方法,其特征在于,确定所述目标业务的业务数据在所述第一数据表中发生数据漂移,包括:

针对其中一组数据信息,根据所述数据信息中包含的所述目标业务的业务数据的产生时间,判断所述目标业务的业务数据的产生时间是否包含在预设第一时间范围之内,其中,所述预设第一时间范围根据数据仓库从不同的系统数据库中抽取业务数据的时间确定;

若判断结果是所述目标业务的业务数据的产生时间包含在预设第一时间范围之内,则确定所述目标业务的业务数据在所述第一数据表中发生数据漂移。

3.如权利要求2所述的数据处理方法,其特征在于,从第二数据表中获取发生数据漂移的与所述目标业务的所述业务数据相关联的第二数据内容,包括:

从第二数据表中查找在预设第二时间范围内产生的,且与所述目标业务相关联的数据内容,其中,所述预设第二时间范围用于表征数据仓库从不同的系统数据库中抽取业务数据;

在确定查找的数据内容与所述目标业务的所述业务数据相关联时,将查找 到的数据内容作为发生数据漂移的与所述目标业务的所述业务数据相关联的第二数据内容。

4.如权利要求1至3任一项所述的数据处理方法,其特征在于,将获取的所述业务数据的第一数据内容与所述业务数据的第二数据内容进行合并,包括:

获取所述目标业务的所述业务数据的历史数据内容;

将所述历史数据内容、获取的所述业务数据的第一数据内容以及所述业务数据的第二数据内容进行合并。

5.一种数据处理设备,其特征在于,包括:

获取单元,用于获取第一数据表中存储的与目标业务相关联的多组数据信息,其中,每一组所述数据信息中包含所述目标业务的业务数据的产生时间以及所述业务数据的第一数据内容;

所述获取单元,还用于在确定所述目标业务的业务数据在所述第一数据表中发生数据漂移时,从第二数据表中获取发生数据漂移的与所述目标业务的所述业务数据相关联的第二数据内容,其中,所述第一数据表与所述第二数据表不同;

处理单元,用于将获取的所述业务数据的第一数据内容与所述业务数据的第二数据内容进行合并,对合并后的数据内容执行数据清洗操作。

6.如权利要求5所述的数据处理设备,其特征在于,所述获取单元确定所述目标业务的业务数据在所述第一数据表中发生数据漂移,包括:

针对其中一组数据信息,根据所述数据信息中包含的所述目标业务的业务数据的产生时间,判断所述目标业务的业务数据的产生时间是否包含在预设第一时间范围之内,其中,所述预设第一时间范围根据数据仓库从不同的系统数据库中抽取业务数据的时间确定;

若判断结果是所述目标业务的业务数据的产生时间包含在预设第一时间范围之内,则确定所述目标业务的业务数据在所述第一数据表中发生数据漂 移。

7.如权利要求6所述的数据处理设备,其特征在于,所述获取单元从第二数据表中获取发生数据漂移的与所述目标业务的所述业务数据相关联的第二数据内容,包括:

从第二数据表中查找在预设第二时间范围内产生的,且与所述目标业务相关联的数据内容,其中,所述预设第二时间范围用于表征数据仓库从不同的系统数据库中抽取业务数据;

在确定查找的数据内容与所述目标业务的所述业务数据相关联时,将查找到的数据内容作为发生数据漂移的与所述目标业务的所述业务数据相关联的第二数据内容。

8.如权利要求5至7任一项所述的数据处理设备,其特征在于,所述处理单元将获取的所述业务数据的第一数据内容与所述业务数据的第二数据内容进行合并,包括:

获取所述目标业务的所述业务数据的历史数据内容;

将所述历史数据内容、获取的所述业务数据的第一数据内容以及所述业务数据的第二数据内容进行合并。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1