数据处理方法、装置、设备以及存储介质与流程

文档序号:35389992发布日期:2023-09-09 13:53阅读:23来源:国知局
数据处理方法、装置、设备以及存储介质与流程

本公开涉及人工智能领域,尤其涉及自动驾驶、智能交通等。


背景技术:

1、目前,在各种业务系统运行过程中,系统的日志数据以及数据库数据中通常会涉及到大量的敏感数据,如车辆交通业务系统中,可能包括车主和乘客的相关敏感数据,需要对这些数据进行保护,避免发生泄漏。


技术实现思路

1、本公开提供了一种数据处理方法、装置、设备以及存储介质。

2、根据本公开的一方面,提供了一种数据处理方法,包括:

3、对目标业务系统的原始日志数据进行用户实体转化处理,得到实体数据和非实体数据;

4、利用预设字段脱敏规则,对所述实体数据中对应的预设敏感字段进行脱敏处理;

5、对所述非实体数据进行分词处理,利用预设分类模型确定所得到的分词对应的类别标签,其中,所述类别标签包括非敏感标签和多种不同的敏感标签;

6、针对对应所述敏感标签的目标分词,采用所述敏感标签对应的预设分词脱敏规则进行脱敏处理,其中,不同所述敏感标签对应的所述预设分词脱敏规则不同。

7、根据本公开的另一方面,提供了一种数据处理装置,包括:

8、实体转化模块,用于对目标业务系统的原始日志数据进行用户实体转化处理,得到实体数据和非实体数据;

9、第一脱敏模块,用于利用预设字段脱敏规则,对所述实体数据中对应的预设敏感字段进行脱敏处理;

10、分词处理模块,用于对所述非实体数据进行分词处理;

11、类别标签确定模块,用于利用预设分类模型确定所得到的分词对应的类别标签,其中,所述类别标签包括非敏感标签和多种不同的敏感标签;

12、第二脱敏模块,用于针对对应所述敏感标签的目标分词,采用所述敏感标签对应的预设分词脱敏规则进行脱敏处理,其中,不同所述敏感标签对应的所述预设分词脱敏规则不同。

13、根据本公开的另一方面,提供了一种电子设备,包括:

14、至少一个处理器;以及

15、与所述至少一个处理器通信连接的存储器;其中,

16、所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行本公开实施例所述的方法。

17、根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行本公开实施例所述的方法。

18、根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现本公开任意实施例所述的方法。

19、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。



技术特征:

1.一种数据处理方法,包括:

2.根据权利要求1所述的方法,其中,所述敏感标签包括敏感关键字标签,所述敏感关键字标签对应的预设分词脱敏规则中包括第一字符数量和第二字符数量;

3.根据权利要求1所述的方法,其中,所述实体数据的数据结构包括类中类结构,所述类中类结构中包括父实体类和子实体类,所述原始日志数据中包括所述父实体类对应的用户与所述子实体类对应的用户的关联关系信息;

4.根据权利要求1所述的方法,还包括:

5.根据权利要求4所述的方法,其中,所述根据所述原始请求的请求类型对所述原始请求进行改写,得到目标请求,包括:

6.根据权利要求4所述的方法,其中,所述根据所述原始请求的请求类型对所述原始请求进行改写,得到目标请求,包括:

7.根据权利要求6所述的方法,在所述接收所述目标数据库针对所述目标查询请求返回的响应数据之后,还包括:

8.根据权利要求7所述的方法,还包括:

9.一种数据处理装置,包括:

10.根据权利要求9所述的装置,其中,所述敏感标签包括敏感关键字标签,所述敏感关键字标签对应的预设分词脱敏规则中包括第一字符数量和第二字符数量;

11.根据权利要求9所述的装置,其中,所述实体数据的数据结构包括类中类结构,所述类中类结构中包括父实体类和子实体类,所述原始日志数据中包括所述父实体类对应的用户与所述子实体类对应的用户的关联关系信息;

12.根据权利要求9所述的装置,还包括:

13.根据权利要求12所述的装置,其中,所述请求改写模块,包括:

14.根据权利要求12所述的装置,其中,所述请求改写模块,包括:

15.根据权利要求14所述的装置,还包括:

16.根据权利要求15所述的装置,还包括:

17.一种电子设备,包括:

18.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1-8中任一项所述的方法。


技术总结
本公开提供了数据处理方法、装置、设备以及存储介质,涉及人工智能领域,尤其涉及自动驾驶、智能交通等技术领域。具体实现方案为:对目标业务系统的原始日志数据进行用户实体转化处理,得到实体数据和非实体数据,利用预设字段脱敏规则,对实体数据中对应的预设敏感字段进行脱敏处理,对非实体数据进行分词处理,利用预设分类模型确定所得到的分词对应的类别标签,类别标签包括非敏感标签和多种不同的敏感标签,针对对应敏感标签的目标分词,采用敏感标签对应的预设分词脱敏规则进行脱敏处理,不同敏感标签对应的预设分词脱敏规则不同。通过采用上述技术方案,可保证对日志数据进行脱敏的效率、准确性和全面性。

技术研发人员:陈君豪,李志亮,任龙
受保护的技术使用者:阿波罗智联(北京)科技有限公司
技术研发日:
技术公布日:2024/1/15
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1