一种数据整合方法、装置、计算机设备、存储介质及产品与流程

文档序号:35959912发布日期:2023-11-08 22:07阅读:31来源:国知局
一种数据整合方法、装置、计算机设备、存储介质及产品与流程

本技术涉及大数据,及涉及金融科技领域或其他相关领域,尤其涉及一种数据整合方法、装置、计算机设备、存储介质及产品。


背景技术:

1、业务产品是指能够提供给市场,被人们使用和消费,并能满足人们某种需求的任何东西,包括有形的物品、无形的服务、组织、观念或它们的组合。银行的业务产品多数无形的,分为负债业务产品、资产业务产品、中间业务产品三类,对产品的设计和管理大多由业务部门在产品管理系统维护。

2、然而,发明人发现,当前的业务产品的属性参数,通常是采用“竖表”进行存储,导致若需要获取业务产品的属性参数中的一个属性值,需要根据属性参数中的取值逻辑从“竖表”中获取,造成数据提取效率低下,易用性差的情况发生。


技术实现思路

1、本技术提供一种数据整合方法、装置、计算机设备、存储介质及产品,用以解决当前的业务产品的属性参数,在获取业务产品的属性参数中的一个属性值时,需要根据属性参数中的取值逻辑从“竖表”中获取,造成数据提取效率低下,易用性差的情况发生的问题。

2、第一方面,本技术提供一种数据整合方法,包括:

3、获取业务对象;其中,所述业务对象对应至少一个业务产品;所述至少一个业务产品对应同一使用场景;

4、根据与所述业务对象对应的产品模板,对所述业务对象进行特征提取,得到业务特征;其中,所述产品模板中具有至少一个产品属性;所述产品属性是用于进行特征提取的元数据;所述业务特征包括至少一个属性参数;所述属性参数用于描述所述业务对象;所述属性参数中具有至少一个用于描述属性参数的属性值;

5、根据至少一个业务特征创建特征聚合表;其中,所述特征聚合表包括至少一个所述业务特征;所述特征聚合表还包括产品编号和约束条件;所述产品编号是特征聚合表对应的业务对象的业务产品的唯一性标识;所述约束条件用于定义特征聚合表中属性参数的范围;

6、对特征聚合表中的字段命名进行结构化处理,得到结构特征表;其中,所述字段命名是属性参数的名称。

7、上述方案中,根据与所述业务对象对应的产品模板,对所述业务对象进行特征提取,得到业务特征,包括:

8、获取所述业务对象的属性参数名称;其中,所述属性参数名称是业务产品下的一个属性参数的名称;

9、根据所述属性参数名称和所述产品属性在产品基本信息表中进行特征提取得到基本字段值,以及根据属性参数名称和所述产品属性在产品条件信息表中进行特征提取得到条件字段值;其中,所述产品基本信息表中记载有至少一个业务产品的基本属性的字段值;所述基本字段值用于描述属性参数名称对应属性参数的基本属性;所述产品条件信息表中记载有至少一个业务产品的条件信息的字段值;所述条件信息用于描述属性参数名称的取值的约束信息;所述条件字段值用于描述属性参数名称对应属性参数的条件信息;

10、将所述基本字段值和所述条件字段值录入所述产品模板中,得到所述属性参数名称的字段特征表;

11、对所述字段特征表中的条件值进行拆分得到至少一个取值条件,根据所述取值条件在复合条件构造信息表中进行特征提取,得到所述属性参数名称的至少一个属性值;其中,所述条件值是由至少一个取值条件的代码;所述取值条件用于约束属性参数名称的属性值的取值;所述复合条件构造信息中记载有至少一个业务产品的至少一个属性参数的参数值;所述参数值是用于描述一个业务产品下的至少一个属性参数的数据;所述属性值是复合条件构造信息表中用于描述属性参数名称对应属性参数的参数值;

12、汇总所述属性参数名称及所述属性参数名称的至少一个属性值得到属性参数,汇总至少一个所述属性参数,得到所述业务对象对应的业务特征。

13、上述方案中,所述约束条件包括:数据范围、统计口径和数据保留周期中的一个或几个;

14、其中,所述数据范围用于描述特征聚合表对应的业务产品涉及的业务范围;所述统计口径用于确定数据范围中符合预置的统计规则的业务产品,统计规则定义了纳入到数据范围的统计对象;所述数据保留周期用于定义特征聚合表中属性参数的保留时间。

15、上述方案中,对特征聚合表中的字段命名进行结构化处理,得到结构特征表,包括:

16、若确定第一字段命名对应的字段内容是由数据字典组成,则在所述第一字段命名的尾部插入第一字符;其中,所述第一字符用于表征所述第一字段命名的字段内容为数据字典;所述数据字典是用于访问数据库和应用程序元数据的目录;

17、若确定第二字段命名对应的字段内容包括是和非,则在所述第二字段命名的尾部插入第二字符;其中,所述第二字符用于表征所述第二字段命名的字段内容为是非判断。

18、上述方案中,对特征聚合表中的字段命名进行结构化处理,得到结构特征表之后,所述方法还包括:

19、将所述结构特征表录入预置的数据档案中,并在所述数据档案中插入档案属性信息;其中,所述档案属性信息用于描述所述数据档案中的结构特征表。

20、上述方案中,在所述数据档案中插入档案属性信息之后,所述方法还包括:

21、接收分析属性信息,根据所述分析属性信息获取结构特征表;其中,所述分析属性信息用于描述需要获取的结构特征表。

22、上述方案中,根据所述分析属性信息获取结构特征表,包括:

23、若确定所述分析属性信息为分析属性名称,则根据数据档案中的基本属性信息,获取与所述分析名称对应的结构特征表;其中,所述分析属性名称是属性参数名称;所述基本属性信息记载有结构特征表中的属性参数名称。

24、若确定所述分析属性信息为分析数值信息,则根据所述数据档案中的字段属性信息,获取与所述分析数值信息对应的结构特征表;其中,所述分析数值信息是属性参数中属性值的数值信息;所述字段属性信息记载有结构特征表的中所有属性参数中属性值的数值信息。

25、若确定所述分析属性信息为分析对象名称,则根据所述数据档案中的管理属性信息,获取与所述分析对象名称对应的结构特征表;其中,所述分析对象名称是业务对象的名称和/或业务对象对应的产品;所述管理属性信息记载有结构特征表对应的业务对象的名称,以及业务对象的业务产品。

26、第二方面,本技术提供一种数据整合装置,包括:

27、数据输入模块,用于获取业务对象;其中,所述业务对象对应至少一个业务产品;所述至少一个业务产品对应同一使用场景;

28、特征提取模块,用于根据与所述业务对象对应的产品模板,对所述业务对象进行特征提取,得到业务特征;其中,所述产品模板中具有至少一个产品属性;所述产品属性是用于进行特征提取的元数据;所述业务特征包括至少一个属性参数;所述属性参数用于描述所述业务对象;所述属性参数中具有至少一个用于描述属性参数的属性值;

29、特征聚合模块,用于根据至少一个业务特征创建特征聚合表;其中,所述特征聚合表包括至少一个所述业务特征;所述特征聚合表还包括产品编号和约束条件;所述产品编号是特征聚合表对应的业务对象的业务产品的唯一性标识;所述约束条件用于定义特征聚合表中属性参数的范围;

30、结构处理模块,用于对特征聚合表中的字段命名进行结构化处理,得到结构特征表;其中,所述字段命名是属性参数的名称。

31、第三方面,本技术提供一种计算机设备,包括:处理器以及与所述处理器通信连接的存储器;

32、所述存储器存储计算机执行指令;

33、所述处理器执行所述存储器存储的计算机执行指令,以实现如权利要求上述的数据整合方法。

34、第四方面,本技术提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现上述的数据整合方法。

35、第五方面,本技术提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现上述的数据整合方法。

36、本技术提供的一种数据整合方法、装置、计算机设备、存储介质及产品,通过获取业务对象,实现采用一个业务对象获得至少一个业务产品的属性参数,以提高数据集中度,以便于后续仅需访问一个结构特征表,即可获得多个业务产品的属性参数。

37、通过根据与所述业务对象对应的产品模板,对所述业务对象进行特征提取得到业务特征,业务特征中记载有属性参数的方式,以便于使用者仅需通过业务特征即可获取属性参数及其属性值,因此,无需根据属性参数中的取值逻辑从“竖表”中获取的方式得到属性参数,提高了数据提取效率,避免了数据提取操作易用性差的情况发生。

38、通过根据至少一个业务特征创建特征聚合表的方式,将业务对象中所有业务产品中,具有共性的属性参数(也就是通过产品模板属性参数名称对应属性参数的和属性值)整合为一体,以便于用户仅需通过一个特征聚合表,即可获得多种业务产品的属性参数,提高了数据提取效率。通过设置产品编号,以便于用户获取特征聚合表;通过设置约束条件,以定义特征聚合表中属性参数的保存范围和更新规则,确保特征聚合表中的数据能够根据不同的规则进行更新,以降低存储负担。

39、通过对特征聚合表中的字段命名进行结构化处理得到结构特征表,使得所有的业务对象的结构特征表的字段命名均为统一标准,以便于不同的系统均能根据该统一命名标准获得其所需的属性参数,确保了数据提取的准确度。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1