用于多源异构数据资产的联管方法及系统与流程

文档序号:37586470发布日期:2024-04-18 12:14阅读:13来源:国知局
用于多源异构数据资产的联管方法及系统与流程

本发明涉及数据处理领域,尤其涉及用于多源异构数据资产的联管方法及系统。


背景技术:

1、数据资产是能够为企业带来经济收益的一种数据资源资产,通常以电子储存的方式记录数据资源。然而,在现有技术中数据资产来源广泛且构成复杂,数据资产的存储负荷较大,并且当数据泄露后数据资产可以被直接获取,数据资产安全性较差。

2、因此,在现有技术中多源异构数据资产存在存储负荷大,数据资产安全性差的技术问题。


技术实现思路

1、本申请通过提供用于多源异构数据资产的联管方法及系统,解决了在现有技术中多源异构数据资产存在存储负荷大,数据资产安全性差的技术问题。

2、本申请提供用于多源异构数据资产的联管方法,所述方法包括:获得多源异构数据资产基础信息,其中,所述多源异构数据资产基础信息至少包括数据资产来源、数据资产结构、数据资产类型和数据资产时间戳;根据所述数据资产来源、所述数据资产类型和所述数据资产结构对多源异构数据资产进行三级聚类,生成数据资产聚类结果;

3、通过数据分布映射算法,调取所述数据资产时间戳,遍历所述数据资产聚类结果进行降维映射,生成数据资产低维映射信息,其中,所述数据资产低维映射信息具有索引时间戳;接收用户端对所述数据资产聚类结果的数据访问请求,其中,所述数据访问请求包括目标时间戳;根据所述目标时间戳和所述索引时间戳在所述数据资产低维映射信息进行映射信息匹配,获得目标低维映射信息;将所述目标低维映射信息进行升维还原,生成目标数据资产发送至用户端。

4、本申请还提供了用于多源异构数据资产的联管系统,所述系统包括:数据获取模块,用于获得多源异构数据资产基础信息,其中,所述多源异构数据资产基础信息至少包括数据资产来源、数据资产结构、数据资产类型和数据资产时间戳;聚类模块,用于根据所述数据资产来源、所述数据资产类型和所述数据资产结构对多源异构数据资产进行三级聚类,生成数据资产聚类结果;降维映射模块,用于通过数据分布映射算法,调取所述数据资产时间戳,遍历所述数据资产聚类结果进行降维映射,生成数据资产低维映射信息,其中,所述数据资产低维映射信息具有索引时间戳;访问请求接收模块,用于接收用户端对所述数据资产聚类结果的数据访问请求,其中,所述数据访问请求包括目标时间戳;映射匹配模块,用于根据所述目标时间戳和所述索引时间戳在所述数据资产低维映射信息进行映射信息匹配,获得目标低维映射信息;数据还原模块,用于将所述目标低维映射信息进行升维还原,生成目标数据资产发送至用户端。

5、本申请还提供了一种电子设备,包括:

6、存储器,用于存储可执行指令;

7、处理器,用于执行所述存储器中存储的可执行指令时,实现本申请提供的用于多源异构数据资产的联管方法。

8、本申请提供一种计算机可读存储介质,存储有计算机程序,该程序被处理器执行时,实现本申请提供的用于多源异构数据资产的联管方法。

9、拟通过本申请提出的用于多源异构数据资产的联管方法及系统,通过获得多源异构数据资产基础信息进行三级聚类,生成数据资产聚类结果。通过数据分布映射算法,调取数据资产时间戳,遍历数据资产聚类结果进行降维映射,生成数据资产低维映射信息。接收用户端对数据资产聚类结果的数据访问请求,其中,数据访问请求包括目标时间戳。根据目标时间戳和索引时间戳在数据资产低维映射信息进行映射信息匹配,获得目标低维映射信息。将目标低维映射信息进行升维还原,生成目标数据资产发送至用户端。实现了对多源异构数据资产的降维储存,降低了存储负荷,同时即便是数据泄漏,也无法直接提取数据内容,提高了数据的安全性。解决了在现有技术中多源异构数据资产存在存储负荷大,数据资产安全性差的技术问题。

10、上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。



技术特征:

1.用于多源异构数据资产的联管方法,其特征在于,包括:

2.如权利要求1所述的方法,其特征在于,根据所述数据资产来源、所述数据资产类型和所述数据资产结构对多源异构数据资产进行三级聚类,生成数据资产聚类结果,包括:

3.如权利要求1所述的方法,其特征在于,通过数据分布映射算法,调取所述数据资产时间戳,遍历所述数据资产聚类结果进行降维映射,生成数据资产低维映射信息,其中,所述数据资产低维映射信息具有索引时间戳,包括:

4.如权利要求3所述的方法,其特征在于,计算所述基准特征值到所述比对特征值的语义映射向量,包括:

5.如权利要求1所述的方法,其特征在于,根据所述目标时间戳和所述索引时间戳在所述数据资产低维映射信息进行映射信息匹配,获得目标低维映射信息,包括:

6.如权利要求1所述的方法,其特征在于,还包括:

7.如权利要求6所述的方法,其特征在于,通过数据分布映射算法,调取所述待调数据资产基础信息标签、所述任务编号标签集和所述数据资产时间戳,遍历所述数据资产聚类结果进行降维映射,生成数据资产低维映射信息,包括:

8.用于多源异构数据资产的联管系统,其特征在于,包括:

9.一种电子设备,其特征在于,所述电子设备包括:

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的用于多源异构数据资产的联管方法。


技术总结
本发明公开了用于多源异构数据资产的联管方法及系统,应用于数据处理技术领域,该方法包括:通过获得多源异构数据资产基础信息进行三级聚类,生成数据资产聚类结果。通过数据分布映射算法,调取数据资产时间戳,遍历数据资产聚类结果进行降维映射,生成数据资产低维映射信息。接收用户端对数据资产聚类结果的数据访问请求,其中,数据访问请求包括目标时间戳。根据目标时间戳和索引时间戳在数据资产低维映射信息进行映射信息匹配,获得目标低维映射信息。将目标低维映射信息进行升维还原,生成目标数据资产发送至用户端。解决了在现有技术中多源异构数据资产存在存储负荷大,数据资产安全性差的技术问题。

技术研发人员:霍绥力,张春红,张尧
受保护的技术使用者:北京华档致远科技有限公司
技术研发日:
技术公布日:2024/4/17
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1