数据对接方法和装置与流程

文档序号:12121124阅读:763来源:国知局
数据对接方法和装置与流程
本申请涉及数据处理领域,具体而言,涉及一种数据对接方法和装置。
背景技术
:在多个系统的数据表中分别存放了不同的数据且两份数据之间存在一些共有维度字段,多个数据表之间可以依据这些共有维度字段,将数据表中的数据进行对接,进而进行后续的数据分析工作。当其中某个系统的数据表的共有维度字段的值随着时间变动时,那么该系统与其它系统的数据表进行对接时就会存在问题。例如,广告管理系统A和网站监测系统B存在共有维度字段,即广告的来源渠道(例如,广告的来源渠道名称为搜狐或者新浪等)和广告的内容(例如广告标题),系统A用于实时统计每一个广告的点击量等数据,系统B用于实时监测每一个广告产生的订单量等数据。但是,在系统A中,与系统B的共有维度字段的值会随着广告投放列表的值随时发生变化,该广告投放列表中至少记载了广告的来源渠道和广告的内容(与上述的共有维度字段相同),也即:只要广告投放列表发生变化,在系统A的数据表中,相应共有维度字段的值会全部随之发生改变,包括在广告投放列表发生变化之前的历史数据。而在系统B中,只有广告投放列表发生变化时和变化之后记载在数据表中相应的共有维度字段的值会随之改变,而并不会改变广告投放列表发生变化之前记载在数据表中相应的共有维度字段的值。因此,在将系统A和系统B进行数据对接时,由于二者共有维度字段的值发生变化,导致二者的数据无法进行对接。针对相关技术中数据表中共有维度字段的值发生变化,导致数据表中的数据无法进行对接的问题,目前尚未提出有效的解决方案。技术实现要素:本申请的主要目的在于提供一种数据对接方法和装置,以解决相关技术中数据表中共有维度字段的值发生变化,导致数据表中的数据无法进行对接的问题。为了实现上述目的,根据本申请的一个方面,提供了一种数据对接方法。该方法包括:确定第一数据表、第二数据表和共有维度字段,其中,第一数据表和第二数据表为需要进行数据对接的数据表,共有维度字段为第一数据表和第二数据表中相同的维度字段;根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每 条快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每条快照记录对应的唯一标识符不会发生变化;检测第一数据表中共有维度字段的值是否发生变化;当检测出第一数据表中共有维度字段的值发生变化时,更新快照表;以及基于更新后的快照表对第一数据表和第二数据表进行数据对接。进一步地,当检测出第一数据表中共有维度字段的值发生变化时,更新快照表包括:确定第一数据表中共有维度字段的值发生变化的时间和变化后的共有维度字段的值;根据第一数据表中值发生变化的共有维度字段对应的唯一标识符、共有维度字段的值的值发生变化的时间和变化后的共有维度字段的值生成快照记录,其中,快照记录包括的生成快照记录时间为第一数据表中共有维度字段的值发生变化的时间;以及将快照记录添加至快照表中以更新快照表。进一步地,基于更新后的快照表对第一数据表和第二数据表进行数据对接包括:确定数据对接时间,其中,数据对接时间为第一数据表和第二数据表需要进行数据对接的时间;在更新后的快照表中,分别获取每一个唯一标识符对应的至少一条快照记录;分别在获取到的每一个唯一标识符对应的至少一条快照记录中,根据生成快照记录的时间查询在数据对接时间与每一个唯一标识符对应的目标快照记录,并获取目标快照记录中的共有维度字段的值;根据数据对接时间、每一个唯一标识符、与每一个唯一标识符对应的目标快照记录中的共有维度字段的值生成第一数据表的目标数据表;以及根据第一数据表的目标数据表与第二数据表的共有维度字段进行数据对接。进一步地,根据生成快照记录的时间查询在数据对接时间与每一个唯一标识符对应的目标快照记录包括:分别判断每一个唯一标识符对应的至少一条快照记录中,是否存在生成快照记录的时间为数据对接时间的快照记录;如果存在生成快照记录的时间为数据对接时间的快照记录,则将该快照记录作为目标快照记录;以及如果不存在生成快照记录的时间为数据对接时间的快照记录,则分别在每一个唯一标识符对应的至少一条快照记录中,将生成快照记录的时间满足如下条件的快照记录作为目标快照记录:在数据对接时间之前,并且与数据对接时间间隔满足预设条件。进一步地,检测第一数据表中共有维度字段的值是否发生变化包括:检测第一数据表中是否存在新建共有维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况;当第一数据表中存在新建共有维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值发生变化;以及当第一数据表中不存在新建共有维度字段的值的情况、且不存在编辑共有维度字段的值的情况、且不存在删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值没有发生变化。为了实现上述目的,根据本申请的另一方面,提供了一种数据对接装置。该装置包括:确定单元,用于确定第一数据表、第二数据表和共有维度字段,其中,第一数据表和第二数据表为需要进行数据对接的数据表,共有维度字段为第一数据表和第二数据表中相同的维度字段;生成单元,用于根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每条快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每条快照记录对应的唯一标识符不会发生变化;检测单元,用于检测第一数据表中共有维度字段的值是否发生变化;更新单元,用于当检测出第一数据表中共有维度字段的值发生变化时,更新快照表;以及数据对接单元,用于基于更新后的快照表对第一数据表和第二数据表进行数据对接。进一步地,更新单元包括:第一确定模块,用于确定第一数据表中共有维度字段的值发生变化的时间和变化后的共有维度字段的值;第一生成模块,用于根据第一数据表中值发生变化的共有维度字段对应的唯一标识符、共有维度字段的值的值发生变化的时间和变化后的共有维度字段的值生成快照记录,其中,快照记录包括的生成快照记录时间为第一数据表中共有维度字段的值发生变化的时间;以及更新模块,用于将快照记录添加至快照表中以更新快照表。进一步地,数据对接单元包括:第二确定模块,用于确定数据对接时间,其中,数据对接时间为第一数据表和第二数据表需要进行数据对接的时间;第一获取模块,用于在更新后的快照表中,分别获取每一个唯一标识符对应的至少一条快照记录;第二获取模块,用于分别在获取到的每一个唯一标识符对应的至少一条快照记录中,根据生成快照记录的时间查询在数据对接时间与每一个唯一标识符对应的目标快照记录,并获取目标快照记录中的共有维度字段的值;第二生成模块,用于根据数据对接时间、每一个唯一标识符、与每一个唯一标识符对应的目标快照记录中的共有维度字段的值生成第一数据表的目标数据表;以及数据对接模块,用于根据第一数据表的目标数据表与第二数据表的共有维度字段进行数据对接。进一步地,第二获取模块包括:判断子模块,用于分别判断每一个唯一标识符对应的至少一条快照记录中,是否存在生成快照记录的时间为数据对接时间的快照记录;第一确定子模块,用于在存在生成快照记录的时间为数据对接时间的快照记录的情况下,则将该快照记录作为目标快照记录;以及第二确定子模块,用于在不存在生成快照记录的时间为数据对接时间的快照记录的情况下,则分别在每一个唯一标识符对应的至少一条快照记录中,将生成快照记录的时间满足如下条件的快照记录作为目标快照记录:在数据对接时间之前,并且与数据对接时间间隔满足预设条件。进一步地,检测单元包括:检测模块,用于检测第一数据表中是否存在新建共有 维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况;第三确定模块,用于当第一数据表中存在新建共有维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值发生变化;以及第四确定模块,用于当第一数据表中不存在新建共有维度字段的值的情况、且不存在编辑共有维度字段的值的情况、且不存在删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值没有发生变化。通过本申请,采用以下步骤:确定第一数据表、第二数据表和共有维度字段;根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每条快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每条快照记录对应的唯一标识符不会发生变化;检测第一数据表中共有维度字段的值是否发生变化;当检测出第一数据表中共有维度字段的值发生变化时,更新快照表;以及基于更新后的快照表对第一数据表和第二数据表进行数据对接,解决了相关技术中数据表中共有维度字段的值发生变化,导致数据表中的数据无法进行对接的问题,基于更新后的快照表对第一数据表和第二数据表进行数据对接,进而达到了提升数据对接准确性的效果。附图说明构成本申请的一部分的附图用来提供对本申请的进一步理解,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:图1是根据本申请实施例的数据对接方法的流程图;以及图2是根据本申请实施例的数据对接装置的示意图。具体实施方式需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。为了使本
技术领域
的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这 样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。根据本申请的实施例,提供了一种数据对接方法。图1是根据本申请实施例的数据对接方法的流程图。如图1所示,该方法包括以下步骤:步骤S101,确定第一数据表、第二数据表和共有维度字段,其中,第一数据表和第二数据表为需要进行数据对接的数据表,共有维度字段为第一数据表和第二数据表中相同的维度字段。一个数据表可以包含多个维度字段,维度字段是数据的描述信息,是将数据分类的属性,维度字段的值即为该条数据信息该属性的具体内容。例如,在一个广告管理系统中,当前的广告投放列表如下表1所示:表1广告ID投放媒体广告名称广告描述创建时间101百度酒店广告酒店广告2015.2.102:00:00102百度订床广告订床广告2015.2.20:00:00103新浪酒店预订广告酒店预订广告2015.2.810:00:00104搜狐旅游酒店广告旅游酒店广告2015.2.116:00:00105搜狐机票广告机票广告2015.2.820:00:00在这个广告投放列表中,投放媒体和广告名称是其中的两个维度字段,其中,每条数据都包含上述的两个维度字段,所有的数据都可以根据这两个维度字段之一对数据进行分类。还需要说明的是,在本实施例中,上述的第一数据表为广告管理系统统计每一个广告的点击量等数据的数据表,在该数据表中,至少包括上述广告投放列表表1中列出的维度字段,还可以包括点击量等维度字段,在此不一一列出。若一个数据表的某些维度字段与另一个数据表内的某些维度字段相同,则这些维度字段称为两个数据表之间的共有维度字段。具体的判断过程可以是,确定出两个需要进行数据对接的数据表之后,对比两个需要进行数据对接的数据表的维度字段名称,将名称相同的维度字段识别出来,即为两个数据表的共有维度字段。在本实施例中,假设第二数据表为网站监测系统的数据表,在该数据表中也存在投放媒体和广告名称两个维度字段,那么,投放媒体和广告名称即为广告管理系统的数据表与网站监测系统的数据表之间的共有维度字段。步骤S102,根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每条快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每条快照记录对应的唯一标识符不会发生变化。例如,根据表1生成快照表,得到表1的快照表如下表2所示:表2快照ID快照时间快照广告ID快照投放媒体快照广告名称12015.2.102:00:00101百度酒店广告22015.2.20:00:00102百度订床广告32015.2.810:00:00103新浪酒店预订广告42015.2.116:00:00104搜狐旅游酒店广告52015.2.820:00:00105搜狐机票广告在表2中,快照ID为1的快照记录中投放媒体为百度,广告名称为酒店广告,投放媒体和广告名称均为与第二数据表的共有维度字段,生成快照记录的时间为2015.2.102:00:00;该条快照记录对应的唯一标识符为广告ID=101,对该条快照记录起到唯一标识的作用,而且不论投放媒体和广告名称字段的值是否发生改变,该唯一标示符都不会发生变化。快照ID2-5与之相似,不再一一描述。需要说明的是,步骤S102根据第一数据表生成快照表并不一定要在步骤S103检测第一数据表中共有维度字段的值是否发生变化之前,也可以在步骤S103之后且步骤S104之前,也可以与步骤S103同时进行,因此,本申请实施例的数据对接方法中提供的根据第一数据表生成快照表的执行顺序,并不局限于此。步骤S103,检测第一数据表中共有维度字段的值是否发生变化。按照预设周期,检测第一数据表中共有维度字段的值是否发生了变化。具体实现 方式有多种方式,例如,在甲骨文(Oracle)数据库管理系统中,可以使用一个触发器,监测选定维度字段的值是否发生变化。令共有维度字段为选定的维度字段,当选定的维度字段的值发生变化时,触发器响应于该变化,会发出信号,通知系统该选定字段的值已修改。可选地,在本申请实施例的数据对接方法中,检测第一数据表中共有维度字段的值是否发生变化还可以通过以下步骤实现:检测第一数据表中是否存在新建共有维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况;当第一数据表中存在新建共有维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值发生变化;以及当第一数据表中不存在新建共有维度字段的值的情况、且不存在编辑共有维度字段的值的情况、且不存在删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值没有发生变化。例如,共有维度字段为广告名称,在新建广告名称的值或编辑广告名称的值或删除广告名称的值时,即认为共有维度字段的值发生了变化。步骤S104,当检测出第一数据表中共有维度字段的值发生变化时,更新快照表。优选地,在本申请实施例的数据对接方法中,当检测出第一数据表中共有维度字段的值发生变化时,更新快照表还可以通过以下步骤实现:确定第一数据表中共有维度字段的值发生变化的时间和变化后的共有维度字段的值;根据第一数据表中值发生变化的共有维度字段对应的唯一标识符、共有维度字段的值发生变化的时间和变化后的共有维度字段的值生成快照记录,其中,快照记录包括的生成快照记录时间为第一数据表中共有维度字段的值发生变化的时间;以及将快照记录添加至快照表中以更新快照表。以步骤S101中的广告投放列表为例,仍然假设表1中的投放媒体和广告名称是共有维度字段,并假设在2015.2.282:00:00,广告ID=101的广告名称对应的值做了一次修改,将广告名称对应的酒店广告修改为订酒店广告,那么生成对应的快照记录如下表3所示:表3快照ID快照时间快照广告ID快照投放媒体快照广告名称62015.2.282:00:00101百度订酒店广告将表3中的快照记录添加至快照表(表2)中以更新快照表,得到更新后的表2,如下表4所示:表4快照ID快照时间快照广告ID快照投放媒体快照广告名称12015.2.102:00:00101百度酒店广告22015.2.20:00:00102百度订床广告32015.2.810:00:00103新浪酒店预订广告42015.2.116:00:00104搜狐旅游酒店广告52015.2.820:00:00105搜狐机票广告62015.2.282:00:00101百度订酒店广告步骤S105,基于更新后的快照表对第一数据表和第二数据表进行数据对接。优选地,在本申请实施例的数据对接方法中,基于更新后的快照表对第一数据表和第二数据表进行数据对接还可以通过以下步骤实现:确定数据对接时间,其中,数据对接时间为第一数据表和第二数据表需要进行数据对接的时间;在更新后的快照表中,分别获取每一个唯一标识符对应的至少一条快照记录;分别在获取到的每一个唯一标识符对应的至少一条快照记录中,根据生成快照记录的时间查询在数据对接时间与每一个唯一标识符对应的目标快照记录,并获取目标快照记录中的共有维度字段的值;根据数据对接时间、每一个唯一标识符、与每一个唯一标识符对应的目标快照记录中的共有维度字段的值生成第一数据表的目标数据表;以及根据第一数据表的目标数据表与第二数据表的共有维度字段进行数据对接。例如,数据对接时间为2015年2月27日,在表4中分别获取每一个唯一标识符对应的至少一条快照记录,如,唯一标识符为广告ID=101对应的快照记录为表5和表6中的2条快照记录。表5快照ID快照时间快照广告ID快照投放媒体快照广告名称12015.2.102:00:00101百度酒店广告表6快照ID快照时间快照广告ID快照投放媒体快照广告名称62015.2.282:00:00101百度订酒店广告唯一标识符为广告ID=102对应的快照记录如表7所示:表7快照ID快照时间快照广告ID快照投放媒体快照广告名称22015.2.20:00:00102百度订床广告获取到多个唯一标识符对应的至少一条快照记录,在此不一一列举。分别在获取到的每一个唯一标识符对应的至少一条快照记录中,根据生成快照记录的时间查询在数据对接时间(2015年2月27日)与每一个唯一标识符对应的目标快照记录,并获取目标快照记录中的共有维度字段的值。可选地,根据生成快照记录的时间查询在数据对接时间(2015年2月27日)与每一个唯一标识符对应的目标快照记录包括:分别判断每一个唯一标识符对应的至少一条快照记录中,是否存在生成快照记录的时间为数据对接时间的快照记录;如果存在生成快照记录的时间为数据对接时间的快照记录,则将该快照记录作为目标快照记录;以及如果不存在生成快照记录的时间为数据对接时间的快照记录,则分别在每一个唯一标识符对应的至少一条快照记录中,将生成快照记录的时间满足如下条件的快照记录作为目标快照记录:在数据对接时间之前,并且与数据对接时间间隔满足预设条件。例如,分别判断每一个唯一标识符对应的至少一条快照记录中,是否存在生成快照记录的时间为2015年2月27日的快照记录;经过判断,广告ID=101至广告ID=105对应的快照记录中均没有生成快照记录的时间为2015年2月27日的快照记录,将在2015年2月27日之前,并且与2015年2月27日距离最近时间的,唯一标识符对应的快照记录作为目标快照记录。如,将唯一标识符为广告ID=101对应的快照记录为表5的快照记录作为广告ID=101的目标快照记录;将唯一标识符为广告ID=102对应的快照记录为表7的快照记录为广告ID=102的目标快照记录,等等,得到的目标数据表如下表8所示,其中,点击量维度字段为广告管理系统统计得到的每一个广告的点击量:表8日期广告ID点击量投放媒体广告名称2015.2.2710110百度酒店广告2015.2.2710220百度订床广告2015.2.2710330新浪酒店预订广告2015.2.2710440搜狐旅游酒店广告2015.2.2710550搜狐机票广告在本实施例中,获取网站监测系统的数据表(即第二数据表)如下表9所示:表9日期投放媒体广告名称订单量2015.2.27百度酒店广告12015.2.27百度订床广告22015.2.27新浪酒店预订广告22015.2.27搜狐旅游酒店广告32015.2.27搜狐机票广告3对第一数据表和第二数据表进行数据对接,即将目标数据表表8和第二数据表表9进行数据对接,而由于表8和表9存在共有维度字段投放媒体和广告名称,因此可以顺利进行数据对接,对接后得到表10,如下所示:表10日期广告ID点击量投放媒体广告名称订单量2015.2.2710110百度酒店广告12015.2.2710220百度订床广告22015.2.2710330新浪酒店预订广告22015.2.2710440搜狐旅游酒店广告32015.2.2710550搜狐机票广告3在表10中,数据已经对接完成,从表10中可以直接获知2015年2月27日每个广告的点击量以及分别带来了多少订单量,从而解决了相关技术中当两个数据表中共有维度字段的值发生变化时,导致这两个数据表中的数据无法进行对接的问题。通过本申请实施例提供的数据对接方法,用户可以在历史数据中选择各个时间段的数据进行数据对接,查看各个时间段的数据,从而也提升了用户的体验度。本申请实施例提供的数据对接方法,通过确定第一数据表、第二数据表和共有维度字段;根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每条 快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每条快照记录对应的唯一标识符不会发生变化;检测第一数据表中共有维度字段的值是否发生变化;当检测出第一数据表中共有维度字段的值发生变化时,更新快照表;以及基于更新后的快照表对第一数据表和第二数据表进行数据对接,解决了相关技术中数据表中共有维度字段的值发生变化,导致数据表中的数据无法进行对接的问题,基于更新后的快照表对第一数据表和第二数据表进行数据对接,进而达到了提升数据对接准确性的效果。需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。本申请实施例还提供了一种数据对接装置,需要说明的是,本申请实施例的数据对接装置可以用于执行本申请实施例所提供的用于数据对接方法。以下对本申请实施例提供的数据对接装置进行介绍。图2是根据本申请实施例的数据对接装置的示意图。如图2所示,该装置包括:确定单元10、生成单元20、检测单元30、更新单元40以及数据对接单元50。确定单元10,用于确定第一数据表、第二数据表和共有维度字段,其中,第一数据表和第二数据表为需要进行数据对接的数据表,共有维度字段为第一数据表和第二数据表中相同的维度字段。生成单元20,用于根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每条快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每条快照记录对应的唯一标识符不会发生变化。检测单元30,用于检测第一数据表中共有维度字段的值是否发生变化。更新单元40,用于当检测出第一数据表中共有维度字段的值发生变化时,更新快照表。数据对接单元50,用于基于更新后的快照表对第一数据表和第二数据表进行数据对接。本申请实施例提供的数据对接装置,通过确定单元10确定第一数据表、第二数据表和共有维度字段,其中,第一数据表和第二数据表为需要进行数据对接的数据表,共有维度字段为第一数据表和第二数据表中相同的维度字段;生成单元20根据第一数据表生成快照表,其中,快照表中包括至少一条快照记录,每条快照记录中至少包括与该条快照记录对应的唯一标识符、共有维度字段的值和生成快照记录的时间,且每 条快照记录对应的唯一标识符不会发生变化;检测单元30检测第一数据表中共有维度字段的值是否发生变化;更新单元40当检测出第一数据表中共有维度字段的值发生变化时,更新快照表;以及数据对接单元50基于更新后的快照表对第一数据表和第二数据表进行数据对接。解决了相关技术中数据表中共有维度字段的值发生变化,导致数据表中的数据无法进行对接的问题,通过数据对接单元50基于更新后的快照表对第一数据表和第二数据表进行数据对接,进而达到了提升数据对接准确性的效果。可选地,在本申请实施例提供的数据对接装置中,更新单元40包括:第一确定模块,用于确定第一数据表中共有维度字段的值发生变化的时间和变化后的共有维度字段的值;第一生成模块,用于根据第一数据表中值发生变化的共有维度字段对应的唯一标识符、共有维度字段的值发生变化的时间和变化后的共有维度字段的值生成快照记录,其中,快照记录包括的生成快照记录时间为第一数据表中共有维度字段的值发生变化的时间;以及更新模块,用于将快照记录添加至快照表中以更新快照表。可选地,在本申请实施例提供的数据对接装置中,数据对接单元50包括:第二确定模块,用于确定数据对接时间,其中,数据对接时间为第一数据表和第二数据表需要进行数据对接的时间;第一获取模块,用于在更新后的快照表中,分别获取每一个唯一标识符对应的至少一条快照记录;第二获取模块,用于分别在获取到的每一个唯一标识符对应的至少一条快照记录中,根据生成快照记录的时间查询在数据对接时间与每一个唯一标识符对应的目标快照记录,并获取目标快照记录中的共有维度字段的值;第二生成模块,用于根据数据对接时间、每一个唯一标识符、与每一个唯一标识符对应的目标快照记录中的共有维度字段的值生成第一数据表的目标数据表;以及数据对接模块,用于根据第一数据表的目标数据表与第二数据表的共有维度字段进行数据对接。可选地,在本申请实施例提供的数据对接装置中,第二获取模块包括:判断子模块,用于分别判断每一个唯一标识符对应的至少一条快照记录中,是否存在生成快照记录的时间为数据对接时间的快照记录;第一确定子模块,用于在存在生成快照记录的时间为数据对接时间的快照记录的情况下,则将该快照记录作为目标快照记录;以及第二确定子模块,用于在不存在生成快照记录的时间为数据对接时间的快照记录的情况下,则分别在每一个唯一标识符对应的至少一条快照记录中,将生成快照记录的时间满足如下条件的快照记录作为目标快照记录:在数据对接时间之前,并且与数据对接时间间隔满足预设条件。可选地,在本申请实施例提供的数据对接装置中,检测单元30包括:检测模块,用于检测第一数据表中是否存在新建共有维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况;第三确定模块,用于当第一数据表中存在新建共有 维度字段的值、或编辑共有维度字段的值、或删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值发生变化;以及第四确定模块,用于当第一数据表中不存在新建共有维度字段的值的情况、且不存在编辑共有维度字段的值的情况、且不存在删除共有维度字段的值的情况,确定第一数据表中共有维度字段的值没有发生变化。需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。显然,本领域的技术人员应该明白,上述的本申请的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本申请不限制于任何特定的硬件和软件结合。以上所述仅为本申请的优选实施例,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。当前第1页1 2 3 
当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1