数据处理方法及装置与流程

本申请涉及数据处理领域，特别涉及一种数据处理方法、装置、计算机设备及存储介质。

背景技术：

1、在视频平台中，up主可以发布动态，发布的动态会发送到关注该up主的用户客户端，用户通过客户端浏览up主发布的动态，产生浏览量数据。

2、随着视频平台的发展，活跃用户数量越来越多，up主发布的动态也越来越多，动态的浏览量也在频繁变化，客户端会上报海量的动态的浏览量数据。由于客户端无法检测浏览量数据的合法性，而浏览量数据中可能存在非法数据，因此数据库存在被插入大量非法的动态浏览量数据的风险，对数据库的完整性和性能构成威胁。

技术实现思路

1、本申请的目的在于提供一种数据处理方法、装置、计算机设备及存储介质，用于解决以下技术问题：目前数据库存在被插入大量非法的动态浏览量数据的风险，对数据库的完整性和性能构成威胁。

2、本申请实施例的一个方面提供了一种数据处理方法，包括：在接收到新发布的动态的情况下，根据所述动态生成初始化的互动数据；在预设过滤器中将所述初始化的互动数据设置为符合数据写入规则，所述预设过滤器通过满足规则的数据训练得到；在接收到客户端对所述动态的目标互动数据的情况下，利用所述预设过滤器确定所述目标互动数据是否符合数据写入规则；在所述目标互动数据符合数据写入规则的情况下，将所述目标互动数据写入数据库。

3、可选地，所述预设过滤器为布隆过滤器，所述在预设过滤器中将所述初始化的互动数据设置为符合数据写入规则，包括：在所述布隆过滤器中根据所述初始化的互动数据生成规则符合标识；所述利用所述预设过滤器确定所述目标互动数据是否合法，包括：在所述布隆过滤器中根据所述目标互动数据生成目标标识，所述目标标识包括多个子标识；确定每一个所述子标识是否为所述布隆过滤器中已有的规则符合标识；在所有所述子标识均为所述布隆过滤器中已有的规则符合标识的情况下，确定所述目标互动数据符合数据写入规则。

4、可选地，所述利用所述预设过滤器确定所述目标互动数据是否符合数据写入规则，还包括：在任一个所述子标识不属于所述布隆过滤器已有的规则符合标识的情况下，确定所述目标互动数据不符合数据写入规则。

5、可选地，所述将所述目标互动数据写入数据库，包括：通过更新命令将所述目标互动数据写入至所述数据库中。

6、可选地，在所述确定所述目标互动数据不符合数据写入规则之后，所述方法还包括：将所述目标互动数据删除。

7、可选地，在所述根据所述动态生成初始化的互动数据之后，所述方法还包括：将所述初始化的互动数据写入所述数据库，其中，所述初始化的互动数据包括浏览量数据。

8、可选地，所述方法还包括：获取所述数据库中的存量互动数据，其中，所述存量互动数据包括浏览量数据；初始化所述存量互动数据；在所述预设过滤器中将所述初始化的存量互动数据设置为符合数据写入规则。

9、本申请实施例的一个方面又提供了一种数据处理装置，包括：生成模块，用于在接收到新发布的动态的情况下，根据所述动态生成初始化的互动数据；设置模块，用于在预设过滤器中将所述初始化的互动数据设置为符合数据写入规则，预设过滤器通过满足规则的数据训练得到；确定模块，用于在接收到客户端对所述动态的目标互动数据的情况下，利用所述预设过滤器确定所述目标互动数据是否符合数据写入规则；写入模块，用于在所述浏览数据符合数据写入规则的情况下，将所述浏览数据写入数据库。

10、本申请实施例的一个方面又提供了一种计算机设备，所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时用于实现上述的数据处理方法的步骤。

11、本申请实施例的一个方面又提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序可被至少一个处理器所执行，以使所述至少一个处理器执行上述的数据处理方法的步骤。

12、本申请实施例提供的数据处理方法、装置、计算机设备及存储介质，包括以下优点：

13、通过在接收到新发布的动态的情况下，根据动态生成初始化的互动数据，在预设过滤器中将初始化的互动数据设置为符合数据写入规则，在接收到客户端对动态的目标互动数据的情况下，利用预设过滤器确定目标互动数据是否符合数据写入规则，在目标互动数据符合数据写入规则的情况下，将目标互动数据写入数据库，可以在过滤器中设置动态对应的初始化互动数据来确定客户端产生的目标互动数据的合法性，减少数据库被写入非法数据的风险，避免大量非法的动态浏览量数据写入数据库，从而保证数据库的完整性和性能。

技术特征：

1.一种数据处理方法，其特征在于，包括：

2.根据权利要求1所述的数据处理方法，其特征在于，所述预设过滤器为布隆过滤器，所述在预设过滤器中将所述初始化的互动数据设置为符合数据写入规则，包括：

3.根据权利要求2所述的数据处理方法，其特征在于，所述利用所述预设过滤器确定所述目标互动数据是否符合数据写入规则，还包括：

4.根据权利要求3所述的数据处理方法，其特征在于，所述将所述目标互动数据写入数据库，包括：

5.根据权利要求3所述的数据处理方法，其特征在于，在所述确定所述目标互动数据不符合数据写入规则之后，所述方法还包括：

6.根据权利要求1-5任一项所述的数据处理方法，其特征在于，在所述根据所述动态生成初始化的互动数据之后，所述方法还包括：

7.根据权利要求1-5任一项所述的数据处理方法，其特征在于，所述方法还包括：

8.一种数据处理装置，其特征在于，包括：

9.一种计算机设备，所述计算机设备包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时用于实现权利要求1至7中任一项所述的数据处理方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序可被至少一个处理器所执行，以使所述至少一个处理器执行权利要求1至7中任一项所述的数据处理方法的步骤。

技术总结
本申请实施例提供一种数据处理方法，所述方法包括：在接收到新发布的动态的情况下，根据所述动态生成初始化的互动数据；在预设过滤器中将所述初始化的互动数据设置为符合数据写入规则，所述预设过滤器通过满足规则的数据训练得到；在接收到客户端对所述动态的目标互动数据的情况下，利用所述预设过滤器确定所述目标互动数据是否符合数据写入规则；在所述目标互动数据符合数据写入规则的情况下，将所述目标互动数据写入数据库。本申请实施例提供的数据处理方法，可以减少服务端的数据库被插入非法的浏览量数据的风险，保证数据库的完整性和性能。

技术研发人员：黄涛,蔡路,闵庆豪,金斌武,欧阳思培,井鑫,吕同斌
受保护的技术使用者：上海幻电信息科技有限公司
技术研发日：
技术公布日：2024/3/24