数据处理方法、装置、设备及存储介质与流程

本申请属于数据处理，尤其涉及一种数据识别方法、装置、设备及存储介质。

背景技术：

1、随着大数据技术的快速发展，数据量呈现爆发性增长。为了提高数据查询速度，数据库通常会存储维护索引和数据的一对一映射关系，这样，可以通过映射关系快速查询与索引对应的数据。

2、然而，存储映射关系需要浪费大量的存储空间，且当对数据库中的数据进行改写时，与其对应的索引也需要适应性调整，增加数据库维护映射关系的资源。

技术实现思路

1、本申请实施例提供一种数据处理方法、装置、设备及存储介质，能够解决相关技术中存储索引和数据的映射关系浪费存储空间，增加数据库维护映射关系的资源的问题。

2、第一方面，本申请实施例提供一种数据处理方法，该方法可以包括：

3、接收请求方发送的数据写入请求，数据写入请求用于请求向存储空间中写入第一数据，存储空间包括n个存储分区，n为大于1的整数；

4、在m个全局索引表达式规则中获取到与第一数据匹配的第一全局索引表达式规则的情况下，将第一数据写入第一存储分区，且不存储第一数据和第一存储分区的关系数据，全局索引表达式规则为划分数据的存储分区的规则，第一存储分区为n个存储分区中与第一全局索引表达式规则对应的存储分区。

5、第二方面，本申请实施例提供一种数据处理装置，该装置可以包括：

6、接收模块，用于接收请求方发送的数据写入请求，数据写入请求用于请求向存储空间中写入第一数据，存储空间包括n个存储分区，n为大于1的整数；

7、处理模块，用于在m个全局索引表达式规则中获取到与第一数据匹配的第一全局索引表达式规则的情况下，将第一数据写入第一存储分区，且不存储第一数据和第一存储分区的关系数据，全局索引表达式规则为划分数据的存储分区的规则，第一存储分区为n个存储分区中与第一全局索引表达式规则对应的存储分区。

8、第三方面，本申请实施例提供了一种计算机设备，该计算机设备包括：处理器以及存储有计算机程序指令的存储器；

9、处理器执行计算机程序指令时实现如第一方面所示的数据处理方法。

10、第四方面，本申请实施例提供了一种计算机存储介质，计算机存储介质上存储有计算机程序指令，计算机程序指令被处理器执行时实现如第一方面所示的数据处理方法。

11、第五方面，本申请实施例提供了一种芯片，芯片包括处理器和通信接口，通信接口和处理器耦合，处理器用于运行程序或指令，实现如第一方面所示的数据处理方法。

12、第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所示的数据处理方法。

13、本申请实施例的数据处理方法、装置、设备及存储介质，通过请求方发送的用于请求向存储空间中写入第一数据的数据写入请求，获取m个用于划分数据的存储分区的全局索引表达式规则中是否包括与第一数据匹配的第一全局索引表达式规则的结果，在从m个全局索引表达式规则中获取到与第一数据匹配的第一全局索引表达式规则的情况下，将第一数据写入n个存储分区中与第一全局索引表达式规则对应的第一存储分区，且不存储第一数据和第一存储分区的关系数据。这样，通过全局索引表达式规则描述划分数据的存储分区的相关性，进而确定数据写入请求中待写入的第一数据是否满足全局索引表达式规则，若第一数据满足m个全局索引表达式规则中的第一全局索引表达式规则，则直接将第一数据写入与第一全局索引表达式规则对应的第一存储分区，不需要存储第一数据和第一存储分区之间映射的关系数据，实现了在多个数据对应同一个全局索引表达式规则时，无需存储符合全局索引表达式规则的数据与其存储分区之间映射的关系数据，节省了大量的存储空间，以及，无需数据库维护符合全局索引表达式规则的数据与其存储分区的关联数据，减少了数据库的维护资源。

技术特征：

1.一种数据处理方法，包括：

2.根据权利要求1所述的方法，其特征在于，所述n个存储分区包括第二存储分区；所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

4.根据权利要求2所述的方法，其特征在于，所述构建第一相关性全局索引，包括：

5.根据权利要求2所述的方法，其特征在于，所述第一数据携带第一函数名，所述第一函数名对应的函数为所述请求方指定的关联函数；所述构建第一相关性全局索引，包括：

6.根据权利要求2所述的方法，其特征在于，所述m个全局索引表达式规则包括第一线性拟合关系表达式规则；所述构建第一相关性全局索引，包括：

7.根据权利要求6所述的方法，其特征在于，所述n个存储分区包括第二存储分区和第三存储分区，所述第二存储分区用于存储未匹配到全局索引表达式规则的数据；所述方法还包括：

8.根据权利要求7所述的方法，其特征在于，所述第二存储分区与第一相关性全局索引之间的关联信息存储在二叉树模型中；所述方法还包括：

9.根据权利要求1所述的方法，其特征在于，所述第一数据包括第一关键字段；所述方法还包括：

10.根据权利要求1所述的方法，其特征在于，所述方法还包括：

11.根据权利要求1所述的方法，其特征在于，所述方法还包括：

12.根据权利要求1所述的方法，其特征在于，所述方法还包括：

13.根据权利要求3所述的方法，其特征在于，所述n个存储分区还包括第四存储分区；所述方法还包括：

14.根据权利要求13所述的方法，其特征在于，所述n个存储分区还包括第五存储分区；所述方法还包括：

15.根据权利要求1所述的方法，其特征在于，所述方法还包括：

16.根据权利要求15所述的方法，其特征在于，所述n个存储分区还包括第五存储分区；所述方法还包括：

17.一种数据处理装置，包括：

18.一种计算机设备，所述设备包括：处理器以及存储有计算机程序指令的存储器；

19.一种存储介质，所述存储介质上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现如权利要求1-17任意一项所述的数据处理方法。

技术总结
本申请公开了一种数据处理方法、装置、设备及存储介质。该方法包括通过请求方发送的用于请求向存储空间中写入第一数据的数据写入请求，获取M个用于划分数据的存储分区的全局索引表达式规则中是否包括与第一数据匹配的第一全局索引表达式规则的结果，在从M个全局索引表达式规则中获取到与第一数据匹配的第一全局索引表达式规则时，将第一数据写入N个存储分区中与第一全局索引表达式规则对应的第一存储分区，且不存储第一数据和第一存储分区的关系数据。这样，不需要存储第一数据和第一存储分区之间映射的关系数据，节省大量的存储空间，减少了数据库维护符合全局索引表达式规则的数据与其存储分区的关联数据，数据库的维护资源。

技术研发人员：罗清顺
受保护的技术使用者：中国银联股份有限公司
技术研发日：
技术公布日：2024/3/27