一种数据处理方法、装置及介质与流程

本公开涉及数据处理领域，尤其涉及一种数据处理方法、装置及介质。

背景技术：

1、随着大数据处理技术的发展，用户侧种类繁多的大数据被实时采集并应用于多种场景，而种类繁多的大数据冗杂严重，需要一种高准确度的方法对大数据进行处理。

技术实现思路

1、本公开提供了一种数据处理方法、装置及介质。

2、根据本公开的第一方面，提供了一种数据处理方法，所述方法包括：

3、获取待检测的第一数据；

4、根据所述第一数据，基于智能引擎，确定所述第一数据的分布信息；

5、所述智能引擎至少包括，根据所述第一数据，基于正向传播与反向传播，确定第一特征，所述第一特征用于确定所述分布信息。

6、在本申请一实施中，所述智能引擎还包括：根据反向传播结果和所述第一数据确定第一参数；所述第一参数表征所述反向传播结果和所述第一数据的相似程度。

7、在本申请一实施中，根据所述第一数据，基于正向传播与反向传播，确定第一特征，包括：

8、确定所述第一数据的正向传播结果；

9、基于所述正向传播结果确定所述第一数据的反向传播结果；

10、确定所述第一参数是否小于预设参数阈值；

11、如果是，将所述正向传播结果确定为第一特征。

12、在本申请一实施中，所述智能引擎还包括：通过对所述第一数据进行降维处理，得到第二特征。

13、在本申请一实施中，根据所述第一数据，基于智能引擎，确定所述第一数据的分布信息，包括：

14、根据所述第一特征、所述第二特征和第二参数，通过智能引擎，确定所述第一数据的分布信息，所述第二参数为基于所述第一参数和第三参数确定的参数，所述第三参数为所述智能引擎的分布信息确定模块根据智能引擎的输出结果和所述第一数据确定的参数。

15、在本申请一实施中，所述第二参数至少包括调参系数，所述调参系数用于控制在基于所述第二参数对所述智能引擎进行调整时所述智能引擎的空间扭曲程度。

16、在本申请一实施中，所述方法还包括：

17、对待检测数据进行预处理，得到待检测的第一数据；

18、所述预处理至少包括聚合所述待检测数据。

19、在本申请一实施中，所述方法还包括：

20、根据所述第一数据的分布信息确定异常数据；

21、根据所述异常数据生成告警。

22、根据本公开的第二方面，提供了一种数据处理装置，所述装置包括：

23、数据获取模块，用于获取待检测的第一数据；

24、分布信息确定模块，用于根据所述第一数据，基于智能引擎，确定所述第一数据的分布信息；所述智能引擎至少包括，根据所述第一数据，基于正向传播与反向传播，确定第一特征，所述第一特征用于确定所述分布信息。

25、根据本公开的第三方面，提供了一种电子设备，包括：

26、至少一个处理器；以及

27、与所述至少一个处理器通信连接的存储器；其中，

28、所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开所述的方法。

29、根据本公开的第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行本公开所述的方法。

30、本公开的数据处理方法，获取待检测的第一数据；根据第一数据，基于智能引擎，确定第一数据的分布信息；智能引擎至少包括，根据第一数据，基于正向传播与反向传播，确定第一特征，第一特征用于确定所述分布信息。

31、应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

技术特征：

1.一种数据处理方法，所述方法包括：

2.根据权利要求1所述的方法，所述智能引擎还包括：根据反向传播结果和所述第一数据确定第一参数；所述第一参数表征所述反向传播结果和所述第一数据的相似程度。

3.根据权利要求2所述的方法，根据所述第一数据，基于正向传播与反向传播，确定第一特征，包括：

4.根据权利要求1所述的方法，所述智能引擎还包括：通过对所述第一数据进行降维处理，得到第二特征。

5.根据权利要求4所述的方法，根据所述第一数据，基于智能引擎，确定所述第一数据的分布信息，包括：

6.根据权利要求5所述的方法，所述第二参数至少包括调参系数，所述调参系数用于控制在基于所述第二参数对所述智能引擎进行调整时所述智能引擎的空间扭曲程度。

7.根据权利要求1所述的方法，所述方法还包括：

8.根据权利要求1所述的方法，所述方法还包括：

9.一种数据处理装置，所述装置包括：

10.一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使计算机执行根据权利要求1-8中任一项所述的方法。

技术总结
本公开提供了一种数据处理方法、装置及介质，所述方法包括：获取待检测的第一数据；根据第一数据，基于智能引擎，确定第一数据的分布信息；智能引擎至少包括，根据第一数据，基于正向传播与反向传播，确定第一特征，第一特征用于确定所述分布信息。

技术研发人员：唐豫川,刘成
受保护的技术使用者：联想（北京）有限公司
技术研发日：
技术公布日：2024/1/15