多层级的数据监测方法、装置、设备及存储介质与流程

本申请涉及数据处理，尤其涉及一种多层级的数据监测方法、装置、设备及存储介质。

背景技术：

1、当前的数据质量检核主要集中在单一层级上，缺乏对不同层级的数据质量的穿透监测。通常情况下，数据质量检核只针对报送层级的数据进行检核，而其他层级的数据质量检核由不同团队独立实现，缺乏穿透关联的监测链路。目前已有的数据质量检核主要针对单一层级进行，缺乏多层级的数据质量穿透监测。

2、因而，如何实现不同层级的数据质量监测，并建立起不同层级之间的链路关联是目前需要解决的问题。

技术实现思路

1、本申请提供一种多层级的数据监测方法、装置、设备及存储介质，旨在至少在一定程度上解决相关技术中的技术问题之一。

2、第一方面，本申请提供一种多层级的数据监测方法，包括：

3、对所述报送层数据、贴源层数据以及源端层数据进行关联，以建立所述报送层数据和所述贴源层数据之间的第一链路以及所述贴源层数据和所述源端层数据之间的第二链路；

4、对所述报送层数据进行监测，以定位所述报送层数据对应的第一异常字段；

5、确定与所述第一异常字段在所述第一链路上关联的第二异常字段，以及所述第二异常字段在所述第二链路上关联的第三异常字段；

6、对所述第一异常字段、所述第二异常字段和所述第三异常字段进行分析，以监测所述报送层数据、贴源层数据以及源端层数据出现的异常。

7、第二方面，本申请提供一种多层级的数据监测装置，包括：

8、构建模块，用于对所述报送层数据、贴源层数据以及源端层数据进行关联，以建立所述报送层数据和所述贴源层数据之间的第一链路以及所述贴源层数据和所述源端层数据之间的第二链路；

9、监测模块，用于对所述报送层数据进行监测，以定位所述报送层数据对应的第一异常字段；

10、确定模块，用于确定与所述第一异常字段在所述第一链路上关联的第二异常字段，以及所述第二异常字段在所述第二链路上关联的第三异常字段；

11、分析模块，用于对所述第一异常字段、所述第二异常字段和所述第三异常字段进行分析，以监测所述报送层数据、贴源层数据以及源端层数据出现的异常。

12、第三方面，本申请提供一种电子设备，包括：处理器；用于存储处理器可执行指令的存储器；其中，处理器被配置为执行指令，以实现多层级的数据监测方法。

13、第四方面，本申请提供一种计算机可读存储介质，当计算机可读存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行多层级的数据监测方法。

14、第五方面，本申请提供一种计算机程序产品，包括计算机程序，计算机程序被处理器执行多层级的数据监测方法。

15、本申请提供的多层级的数据监测方法、装置、设备及存储介质，首先对所述报送层数据、贴源层数据以及源端层数据进行关联，以建立所述报送层数据和所述贴源层数据之间的第一链路以及所述贴源层数据和所述源端层数据之间的第二链路，然后对所述报送层数据进行监测，以定位所述报送层数据对应的第一异常字段，之后确定与所述第一异常字段在所述第一链路上关联的第二异常字段，以及所述第二异常字段在所述第二链路上关联的第三异常字段，最后对所述第一异常字段、所述第二异常字段和所述第三异常字段进行分析，以监测所述报送层数据、贴源层数据以及源端层数据出现的异常。由此，可以实现不同层级的数据质量穿透监测,可以实现报送层-湖仓贴源层-源端层的链路穿透监测，从而实现对数据质量链路的穿透关联监测，可以快速定位是链路中哪个层级的字段出现了错误，进行认责和整改，以及进行下游用数预警。

技术特征：

1.一种多层级的数据监测方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，在所述对所述报送层数据、贴源层数据以及源端层数据进行关联之前，还包括：

3.根据权利要求1所述的方法，其特征在于，还包括：

4.根据权利要求1所述的方法，其特征在在于，其中，

5.根据权利要求1所述的方法，其特征在于，在所述对所述报送层数据、贴源层数据以及源端层数据进行关联，以建立所述报送层数据和所述贴源层数据之间的第一链路以及所述贴源层数据和所述源端层数据之间的第二链路之后，还包括：

6.根据权利要求1所述的方法，其特征在于，所述对所述报送层数据进行监测，以定位所述报送层数据对应的第一异常字段，包括：

7.根据权利要求1所述的方法，其特征在于，所述对所述报送层数据进行监测，以定位所述报送层数据对应的第一异常字段，包括：

8.一种多层级的数据监测装置，其特征在于，包括：

9.一种电子设备，其特征在于，包括：处理器，以及与所述处理器通信连接的存储器；

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1-7中任一项所述的方法。

11.一种计算机程序产品，其特征在于，包括计算机程序，该计算机程序被处理器执行时实现权利要求1-7中任一项所述的方法。

技术总结
本申请提供一种多层级的数据监测方法、装置、设备及存储介质。涉及数据处理技术领域。该方法包括：对报送层数据、贴源层数据以及源端层数据进行关联，以建立报送层数据和贴源层数据之间的第一链路以及贴源层数据和源端层数据之间的第二链路；对报送层数据进行监测，以定位报送层数据对应的第一异常字段；确定与第一异常字段在第一链路上关联的第二异常字段及第二异常字段在第二链路上关联的第三异常字段；对第一异常字段、第二异常字段和第三异常字段进行分析，以监测出现的异常。由此，可以实现不同层级的数据质量穿透监测,可以实现报送层‑湖仓贴源层‑源端层的链路穿透监测，从而实现对数据质量链路的穿透关联监测。

技术研发人员：郭德权
受保护的技术使用者：中国建设银行股份有限公司
技术研发日：
技术公布日：2024/2/8