一种配调运行数据校验及上送程序运行监控方法与系统与流程

本发明属于电力系统自动化，具体涉及一种配调运行数据校验及上送程序运行监控方法，还涉及一种配调运行数据校验及上送程序运行监控系统。

背景技术：

1、配调运行数据是开展配网数字化建设、支撑配调运行管理决策的基础，目前省级配调管理平台从地调采集的数据质量仍然存在值缺失、编码不一致、测量点和图模点位无法关联等数据质量问题。由于维护情况不同，数据传输接口稳定性参差不齐，部分地调传输接口存在中断、漏发、停运的问题。为支撑覆盖省地调度域的运行数据集成与分析，加强对于上述省调数据质量的管理，为全面、准确的掌握配电终端台账信息，加强对台账问题的检测与处理，有必要研究一种配调运行数据校验及上送程序运行监控方法，并设计数字化工具支撑该方法的实现。

技术实现思路

1、本发明的目的是，提供一种配调运行数据校验及上送程序运行监控方法及系统，制定配网运行数据校验规则，根据该规则开展数据校验，并监控上送数据接口运行情况，达到提升配调运行数据质量目的。

2、本发明采用的技术方案是，一种配调运行数据校验及上送程序运行监控方法，包括以下步骤：

3、步骤一、建立配调运行数据质量标准；

4、步骤二、确定配调运行数据质量问题评价方法；

5、步骤三、确定配调运行数据接口运行监控方法。

6、进一步的，上述步骤一，从数据真实性、唯一性、完整性、关联性、及时性几方面开展配调运行数据质量标准。

7、进一步的，上述配调运行数据包含范围：配网终端台账、配网终端在线情况、站外开关遥信变位信息、站外开关遥控信息、自愈馈线组台账、馈线重过载信息、单线图基本信息、自愈馈线台账、自愈执行信息、图模变更信息、计量数据匹配情况、配变停复电信息共计12类。

8、进一步的，上述数据真实性确保数据反应真实业务，识别不准确或无效数据；数据唯一性，识别冗余、重复数据，筛除这些数据对分析的影响；数据完整性，确保数据关键信息不缺失；数据关联性，要求确保有关联的信息保持一致；数据及时性，要求上传的数据及时上传，保障业务分析需要。

9、进一步的，上述配网终端台账、配网终端在线情况、站外开关遥信变位信息、站外开关遥控信息均包含站外开关信息；自愈馈线组台账、馈线重过载信息、单线图基本信息、自愈馈线台账、自愈执行信息均包含变电站、线路信息；自愈馈线组台账、自愈馈线台账、自愈执行信息在包含线路信息基础上，还包含自愈线路信息。

10、进一步的，上述步骤二，应用ahp层次分析方法，对配调运行数据质量问题建立数据问题权重评价，对数据类型重要性进行评分，得出数据类型重要性指标指数，为每类数据的字段继续赋予指标指数，可以计算出每个字段在每类数据中所占权重，数据质量问题总结时即可按照权重计算相应得分。

11、进一步的，上述步骤三，应用prometheus开展数据处理及上送服务监控工作，监控内容包括：

12、基础监控：针对运行服务的基础设施的监控，监控的指标主要有内存、cpu的使用率；

13、运行时监控：运行时监控主要有gc的监控包括gc次数、gc耗时，线程数量的监控；

14、通用监控：主要包括对流量和耗时的监控；

15、错误监控：主要包括请求返回的错误码，如http的错误码5xx、4xx，熔断、限流。

16、一种配调运行数据校验及上送程序运行监控系统，应用于一种配调运行数据校验及上送程序运行监控方法，上述监控系统包括：

17、数据质量校验模块，用于根据内置规则，开展数据质量检查，并展示检查结果；

18、程序运行监控模块，用于监控服务器运行情况、接口服务运行记录、接口异常记录；

19、异常预警模块，展示监视界面，以告警形式提供数据异常、接口服务异常等信息，提醒运行人员及时处理；

20、统计分析模块，运用可视化图表，统计问题数量分布及变化情况。

21、相较现有技术，本发明的有益效果是：本发明提出了配调运行数据质量校验方法及数据质量评价体系，并提出数据上送接口监控方法。为配调运行数据质量提升打下基础，具有较为广泛的应用前景；解决了目前人工审核模式下数据质量管控效果不佳，数据上送不及时，进而影响配调运行管理决策等问题。

22、本发明从数据现状分析、运行数据质台账质量评价体系制定、运行数据质量检查、运行数据上传监控形成业务流程闭环，增加了数据价值及数据应用深度，使配调运行数据更好服务于配调自动化管理决策。首先，分析数据现状及质量管控要求；接下来，运用softmax方法建立配调运行数据质量评估体系及检查方法；最后，设计并研发配调运行数据校验及上送程序运行监控系统，开展配调运行数据质量管理及上送监控。

技术特征：

1.一种配调运行数据校验及上送程序运行监控方法，其特征在于，包括以下步骤：

2.根据权利要求1所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述步骤一，从数据真实性、唯一性、完整性、关联性、及时性几方面开展配调运行数据质量标准。

3.根据权利要求2所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述配调运行数据包含范围：配网终端台账、配网终端在线情况、站外开关遥信变位信息、站外开关遥控信息、自愈馈线组台账、馈线重过载信息、单线图基本信息、自愈馈线台账、自愈执行信息、图模变更信息、计量数据匹配情况、配变停复电信息共计12类。

4.根据权利要求3所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述数据真实性确保数据反应真实业务，识别不准确或无效数据；数据唯一性，识别冗余、重复数据，筛除这些数据对分析的影响；数据完整性，确保数据关键信息不缺失；数据关联性，要求确保有关联的信息保持一致；数据及时性，要求上传的数据及时上传，保障业务分析需要。

5.根据权利要求3所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述配网终端台账、配网终端在线情况、站外开关遥信变位信息、站外开关遥控信息均包含站外开关信息；自愈馈线组台账、馈线重过载信息、单线图基本信息、自愈馈线台账、自愈执行信息均包含变电站、线路信息；自愈馈线组台账、自愈馈线台账、自愈执行信息在包含线路信息基础上，还包含自愈线路信息。

6.根据权利要求1所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述步骤二，应用ahp层次分析方法，对配调运行数据质量问题建立数据问题权重评价，对数据类型重要性进行评分，得出数据类型重要性指标指数，为每类数据的字段继续赋予指标指数，可以计算出每个字段在每类数据中所占权重，数据质量问题总结时即可按照权重计算相应得分。

7.根据权利要求1所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述步骤三，应用prometheus开展数据处理及上送服务监控工作，监控内容包括：

8.一种配调运行数据校验及上送程序运行监控系统，应用于如权利要求1-6任一所述的一种配调运行数据校验及上送程序运行监控方法，其特征在于，所述监控系统包括：

技术总结
本发明公开了一种配调运行数据校验及上送程序运行监控方法与系统，该方法包括以下步骤：建立配调运行数据质量标准；确定配调运行数据质量问题评价方法；确定配调运行数据接口运行监控方法。该系统包括数据质量校验模块、程序运行监控模块、异常预警模块和统计分析模块。本发明从数据现状分析、运行数据质台账质量评价体系制定、运行数据质量检查、运行数据上传监控形成业务流程闭环，增加了数据价值及数据应用深度，使配调运行数据更好服务于配调自动化管理决策，解决了目前人工审核模式下数据质量管控效果不佳，数据上送不及时，进而影响配调运行管理决策等问题。

技术研发人员：姜丹,黄磊,梅嘉馨,刘颖,吴鹏,韩璐,田翰霖,方曦,谢菲,汪适,武玮,刘君,杨崇品,覃杨,龙小惠,冯业,张显文,黎婧,杨陈,唐畅,滕鑫,罗波,邓封毅,陈晖,戴湘岳,刘雪莹,付义洲,胡惠,罗纯燕,吴雨秦,张亚
受保护的技术使用者：贵州电网有限责任公司
技术研发日：
技术公布日：2024/2/19