数据处理方法、装置、设备和存储介质与流程

文档序号:34864581发布日期:2023-07-23 16:53阅读:20来源:国知局
数据处理方法、装置、设备和存储介质与流程

本申请涉及数据处理领域,尤其涉及一种数据处理方法、装置、设备和存储介质。


背景技术:

1、随着数字化的发展,企业对员工的绩效数据的处理通常基于所设置的绩效系统。绩效系统是一个公司管理人员的相关绩效数据的入口之一,而绩效规则是绩效系统的管理依据,对绩效系统的迭代更新即是基于系统需求,对绩效系统中的绩效规则的更新。因此,相关规则的制定都需要严谨的前期调研和测算过程,同时规则的变更也需要很长时间的博弈。

2、现有的绩效系统的更新过程中,根据系统变更需求,执行变更任务以相应更新各项数据源,进而实现绩效系统及其绩效规则的迭代更新。而在更新多项数据源的过程中,因为各数据源之间的关联性难以直接显现,使得难以直接根据系统需求对各个数据源中与需求变更任务相关的数据进行同步更新,而是需要根据系统迭代更新的生命周期进程,逐一对各个数据源中与系统变更需求相关的数据依次查找和更新,从而导致数据更新效率和数据管理效率低。


技术实现思路

1、有鉴于此,为了解决现有技术存在的不足,本申请提供了一种可应用于如金融科技等领域或其他领域的数据处理方法、装置、设备和存储介质。

2、第一方面,本申请提供一种数据处理方法,包括:

3、获取绩效系统执行变更任务时对应的系统需求数据,构建所述系统需求数据与所述变更任务、变更任务完成时间之间的映射关系,生成第一时间线;

4、分析所述系统需求数据的血缘关系;其中,所述血缘关系用于表征上游数据和下游数据之间的关联关系,所述系统需求数据作为所述血缘关系中的上游数据;

5、根据所述血缘关系和所述系统需求数据,变更所述血缘关系中的下游数据,并记录数据变更完成时间;

6、构建变更后的下游数据与所述变更任务、所述数据变更完成时间之间的映射关系,生成第二时间线;

7、根据所述第一时间线和所述第二时间线,生成所述变更任务对应的事件记录。

8、在可选的实施方式中,所述分析所述系统需求数据的血缘关系,包括:

9、识别所述系统需求数据对应的数据维度,获取所述数据维度与预设的多个数据维度之间的关联关系;

10、从所述绩效系统中获取隶属于所述关联关系对应的各个数据维度下的目标数据,确定所述目标数据与所述系统需求数据之间的关联信息,将所述关联信息作为血缘关系。

11、在可选的实施方式中,所述识别所述系统需求数据对应的数据维度,获取所述数据维度与预设的多个数据维度之间的关联关系,包括:

12、对所述系统需求数据进行分词处理,得到第一关键词;

13、识别各个所述第一关键词的语义,根据所述语义确定所述第一关键词对应的数据维度;

14、根据预设的数据维度关联表,确定所述数据维度与预设的多个数据维度之间的关联关系。

15、在可选的实施方式中,所述识别各个所述第一关键词的语义,根据所述语义确定所述第一关键词对应的数据维度,包括:

16、根据预设的各所述数据维度的语义标签,计算各所述第一关键词的语义与各所述数据维度的语义标签之间的语义相似度;

17、若所述语义相似度大于等于预设相似度阈值,则确定所述第一关键词隶属于相应的数据维度;

18、若所述语义相似度小于所述预设相似度阈值,则确定所述第一关键词不隶属于相应的数据维度。

19、在可选的实施方式中,所述从所述绩效系统中获取隶属于所述关联关系对应的各个数据维度下的目标数据,确定所述目标数据与所述系统需求数据之间的关联信息,将所述关联信息作为血缘关系,包括:

20、对所述系统需求数据进行分词处理,得到第二关键词;

21、从预设的字段映射表中对应查找与各所述第二关键词之间存在映射关系的目标字段;所述目标字段为隶属于各所述数据维度的各个数据对应的第二关键词;

22、根据所述目标字段及其映射关系,确定所述目标数据与所述系统需求数据之间的血缘关系。

23、在可选的实施方式中,所述根据所述第一时间线和所述第二时间线,生成所述变更任务对应的事件记录,包括:

24、将所述第一时间线和所述第二时间线中包含的各个数据,按照对应映射的时间先后顺序呈瀑布流形式排序,对应绘制生成所述变更任务对应的事件记录。

25、在可选的实施方式中,在所述根据所述第一时间线和所述第二时间线,生成所述变更任务对应的事件记录之后,还包括:

26、更新所述绩效系统的当前版本号;

27、构建所述当前版本号与所述事件记录之间的关联关系,根据所述关联关系,生成所述绩效系统的更新日志。

28、第二方面,本申请提供一种数据处理装置,包括:

29、获取模块,用于获取绩效系统执行变更任务时对应的系统需求数据,构建所述系统需求数据与所述变更任务、变更任务完成时间之间的映射关系,生成第一时间线;

30、分析模块,用于分析所述系统需求数据的血缘关系;其中,所述血缘关系用于表征上游数据和下游数据之间的关联关系,所述系统需求数据作为所述血缘关系中的上游数据;

31、变更模块,用于根据所述血缘关系和所述系统需求数据,变更所述血缘关系中的下游数据,并记录数据变更完成时间;

32、构建模块,用于构建变更后的下游数据与所述变更任务、所述数据变更完成时间之间的映射关系,生成第二时间线;

33、生成模块,用于根据所述第一时间线和所述第二时间线,生成所述变更任务对应的事件记录。

34、第三方面,本申请提供一种计算机设备,所述计算机设备包括存储器和至少一个处理器,所述存储器存储有计算机程序,所述处理器用于执行所述计算机程序以实施前述的数据处理方法。

35、第四方面,本申请提供一种计算机存储介质,其存储有计算机程序,所述计算机程序被执行时,实施根据前述的数据处理方法。

36、本申请实施例具有如下有益效果:

37、本申请提供了一种数据处理方法,包括获取绩效系统执行变更任务时对应的系统需求数据,构建系统需求数据与变更任务、变更任务完成时间之间的映射关系,生成第一时间线;分析系统需求数据的血缘关系;其中,血缘关系用于表征上游数据和下游数据之间的关联关系,系统需求数据作为血缘关系中的上游数据;根据血缘关系和系统需求数据,变更血缘关系中的下游数据,并记录数据变更完成时间;构建变更后的下游数据与变更任务、数据变更完成时间之间的映射关系,生成第二时间线;根据第一时间线和第二时间线,生成变更任务对应的事件记录。本申请通过分析系统需求数据的血缘关系,基于该血缘关系同步且快速更新绩效系统的下游数据源中所需变更的数据,提高了数据及其系统更新效率。



技术特征:

1.一种数据处理方法,其特征在于,包括:

2.根据权利要求1所述的数据处理方法,其特征在于,所述分析所述系统需求数据的血缘关系,包括:

3.根据权利要求2所述的数据处理方法,其特征在于,所述识别所述系统需求数据对应的数据维度,获取所述数据维度与预设的多个数据维度之间的关联关系,包括:

4.根据权利要求3所述的数据处理方法,其特征在于,所述识别各个所述第一关键词的语义,根据所述语义确定所述第一关键词对应的数据维度,包括:

5.根据权利要求2所述的数据处理方法,其特征在于,所述从所述绩效系统中获取隶属于所述关联关系对应的各个数据维度下的目标数据,确定所述目标数据与所述系统需求数据之间的关联信息,将所述关联信息作为血缘关系,包括:

6.根据权利要求1所述的数据处理方法,其特征在于,所述根据所述第一时间线和所述第二时间线,生成所述变更任务对应的事件记录,包括:

7.根据权利要求1所述的数据处理方法,其特征在于,在所述根据所述第一时间线和所述第二时间线,生成所述变更任务对应的事件记录之后,还包括:

8.一种数据处理装置,其特征在于,包括:

9.一种计算机设备,其特征在于,所述计算机设备包括存储器和至少一个处理器,所述存储器存储有计算机程序,所述处理器用于执行所述计算机程序以实施权利要求1-7中任一项所述的数据处理方法。

10.一种计算机存储介质,其特征在于,其存储有计算机程序,所述计算机程序被执行时,实施根据权利要求1-7中任一项所述的数据处理方法。


技术总结
本申请涉及数据处理领域,公开了一种数据处理方法、装置、设备和存储介质,该方法包括:获取绩效系统执行变更任务时对应的系统需求数据,构建系统需求数据与变更任务、变更任务完成时间之间的映射关系,生成第一时间线;分析系统需求数据的血缘关系;根据血缘关系和系统需求数据,变更血缘关系中的下游数据,并记录数据变更完成时间;构建变更后的下游数据与变更任务、数据变更完成时间之间的映射关系,生成第二时间线;根据第一时间线和第二时间线,生成变更任务对应的事件记录。本申请通过分析系统需求数据的血缘关系,基于该血缘关系同步且快速更新绩效系统的下游数据源中所需变更的数据,提高了数据及其系统更新效率。

技术研发人员:谢智杰
受保护的技术使用者:平安银行股份有限公司
技术研发日:
技术公布日:2024/1/13
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1