一种电力系统营配调贯通数据的处理方法及装置与流程

文档序号:12158908阅读:来源:国知局

技术特征:

1.一种电力系统营配调贯通数据的处理方法,其特征在于,应用于电力系统的营配调贯通数据系统,所述营配调贯通数据系统包括PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统;所述PMS2.0系统与数据中心系统连接,所述数据中心系统还与所述营销业务应用系统连接,所述营销业务应用系统还与所述基础数据平台系统连接,所述基础数据平台系统还与所述PMS2.0系统连接;

所述电力系统营配调贯通数据的处理方法,包括:

对所述PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统以及PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程进行实时监控,生成数据流转监控成果数据;

根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位;

对所述数据流转监控成果数据的异常问题进行基量数据分析、完整性分析、一致性分析以及业务规约分析,对所述数据流转监控成果数据的异常问题进行问题分类,生成异常问题归因分类结果;

根据所述异常问题归因分类结果以及预先设置的问题处理对应关系,确定各数据流转监控成果数据的异常问题的处理对象。

2.根据权利要求1所述的电力系统营配调贯通数据的处理方法,其特征在于,所述对所述PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统以及PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程进行实时监控,生成数据流转监控成果数据,包括:

根据kettle工具,采用日频度的方式,从PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统中抽取待监控主题相关的基础数据信息到营配调贯通数据流转监控数据库中,并根据数据抽取源和抽取系统的标准代码表,对所述标准代码表的类别代码进行数据解析处理;

将所述基础数据信息根据各统计维度进行轻量汇总数据加工;所述各统计维度包括:统计时间、数据库节点、数据单位、数据同步读取状态、数据同步异常类别;

将进行轻量汇总数据加工后的基础数据信息,根据webservice与J2EE三层体系架构技术进行数据展示,生成PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程的数据流转监控成果数据。

3.根据权利要求2所述的电力系统营配调贯通数据的处理方法,其特征在于,根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位,包括:

根据所述数据流转监控成果数据,判断在同一待监控主题的统计条件下,在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值是否一致;

若在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值不一致,则所述数据流转监控成果数据在所述待监控主题的统计条件下存在数据流转异常。

4.根据权利要求3所述的电力系统营配调贯通数据的处理方法,其特征在于,根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位,还包括:

定位电力系统中的公网设备的数据流转监控成果数据出现异常问题的数据节点;所述公网设备包括公网变电站、公线设备、公变设备、公网表箱接入点设备;

定位电力系统中的用户设备的数据流转监控成果数据出现异常问题的数据节点;所述用户设备包括专线设备、专变设备。

5.根据权利要求4所述的电力系统营配调贯通数据的处理方法,其特征在于,所述定位电力系统中的公网设备的数据流转监控成果数据出现异常问题的数据节点,包括:

依次确认PMS2.0系统、数据中心系统、营销业务应用系统的数据流转监控成果数据的数据量;

若PMS2.0系统的数据流转监控成果数据的数据量小于数据中心系统的数据流转监控成果数据的数据量,则确定PMS2.0系统的数据流转异常;

若数据中心系统的数据流转监控成果数据的数据量小于PMS2.0系统的数据流转监控成果数据的数据量,则确定数据中心系统的数据流转异常;

若营销业务应用系统的数据流转监控成果数据的数据量小于数据中心系统的数据流转监控成果数据的数据量,则确定营销业务应用系统的数据流转异常。

6.根据权利要求5所述的电力系统营配调贯通数据的处理方法,其特征在于,所述定位电力系统中的用户设备的数据流转监控成果数据出现异常问题的数据节点,包括:

依次确认营销业务应用系统、基础数据平台系统以及PMS2.0系统的数据流转监控成果数据的数据量;

若PMS2.0系统的数据流转监控成果数据的数据量小于基础数据平台系统的数据流转监控成果数据的数据量,则确定PMS2.0系统的数据流转异常;

若基础数据平台系统的数据流转监控成果数据的数据量小于营销业务应用系统的数据流转监控成果数据的数据量,则确定基础数据平台系统的数据流转异常;

若营销业务应用系统的数据流转监控成果数据的数据量小于基础数据平台系统的数据流转监控成果数据的数据量,则确定营销业务应用系统的数据流转异常。

7.根据权利要求6所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行基量数据分析,包括:

判断公网设备的PMS2.0系统的数据流转监控成果数据的数据量是否小于公网设备的数据中心系统的数据流转监控成果数据的数据量;

若公网设备的PMS2.0系统的数据流转监控成果数据的数据量小于公网设备的数据中心系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为PMS2.0系统至数据中心系统ETL异动同步程序异常;

判断用户设备的营销业务应用系统的数据流转监控成果数据的数据量是否小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量;

若用户设备的营销业务应用系统的数据流转监控成果数据的数据量小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为营销业务应用系统至基础数据平台系统OGG程序异常;

判断公网设备的数据中心系统的数据流转监控成果数据的数据量是否小于公网设备的PMS2.0系统的数据流转监控成果数据的数据量;

若公网设备的数据中心系统的数据流转监控成果数据的数据量小于公网设备的PMS2.0系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为PMS2.0系统至数据中心系统ETL异动同步程序异常;

判断用户设备的基础数据平台系统的数据流转监控成果数据的数据量是否小于用户设备的营销业务应用系统的数据流转监控成果数据的数据量;

若用户设备的基础数据平台系统的数据流转监控成果数据的数据量小于用户设备的营销业务应用系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为营销业务应用系统至基础数据平台系统OGG程序数据复制异常;

判断公网设备的营销业务应用系统的数据流转监控成果数据的数据量是否小于公网设备的数据中心系统的数据流转监控成果数据的数据量;

若公网设备的营销业务应用系统的数据流转监控成果数据的数据量小于公网设备的数据中心系统的数据流转监控成果数据的数据量,获取数据中心系统中的第一主题明细过程表信息,确定第一主题明细过程表中的同步状态和同步异常分类信息,确定数据流转监控成果数据的异常问题为数据未推送、数据未读取或数据同步失败;

判断用户设备的PMS2.0系统的数据流转监控成果数据的数据量是否小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量;

若用户设备的PMS2.0系统的数据流转监控成果数据的数据量小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量,获取基础数据平台系统中的第二主题明细过程表信息,确定第二主题明细过程表中的同步状态和同步异常分类信息,确定数据流转监控成果数据的异常问题为数据未推送、数据未读取或数据同步失败。

8.根据权利要求7所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行完整性分析,包括:

根据存储过程技术,对待监控主题在营销业务应用系统和PMS2.0系统的台账关键属性进行比对校验,确定营销业务应用系统数据是否完整以及PMS2.0系统数据是否完整。

9.根据权利要求8所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行一致性分析,包括:

根据营销业务应用系统与PMS2.0系统的公网设备PMSID关联信息、用户设备业务ID关联信息,通过存储过程技术,对营销业务应用系统与PMS2.0系统的台账及关系信息的关键属性比对校验,确定数据流转监控成果数据的异常问题的一致性。

10.根据权利要求9所述的电力系统营配调贯通数据的处理方法,其特征在于,对所述数据流转监控成果数据的异常问题进行业务规约分析,包括:

对所述数据流转监控成果数据的异常问题进行图数关系异常分析、考核户变户关系异常分析以及营销原公变用户分析。

11.一种电力系统营配调贯通数据的处理装置,其特征在于,应用于电力系统的营配调贯通数据系统,所述营配调贯通数据系统包括PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统;所述PMS2.0系统与数据中心系统连接,所述数据中心系统还与所述营销业务应用系统连接,所述营销业务应用系统还与所述基础数据平台系统连接,所述基础数据平台系统还与所述PMS2.0系统连接;

所述电力系统营配调贯通数据的处理装置,包括:

实时监控单元,用于对所述PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统以及PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程进行实时监控,生成数据流转监控成果数据;

异常问题定位单元,用于根据所述数据流转监控成果数据,通过数据仓库技术确定所述数据流转监控成果数据的异常问题,并对所述数据流转监控成果数据的异常问题进行定位;

异常问题归因分类单元,用于对所述数据流转监控成果数据的异常问题进行基量数据分析、完整性分析、一致性分析以及业务规约分析,对所述数据流转监控成果数据的异常问题进行问题分类,生成异常问题归因分类结果;

异常问题处理对象确定单元,用于根据所述异常问题归因分类结果以及预先设置的问题处理对应关系,确定各数据流转监控成果数据的异常问题的处理对象。

12.根据权利要求11所述的电力系统营配调贯通数据的处理装置,其特征在于,所述实时监控单元,具体用于:

根据kettle工具,采用日频度的方式,从PMS2.0系统、数据中心系统、营销业务应用系统以及基础数据平台系统中抽取待监控主题相关的基础数据信息到营配调贯通数据流转监控数据库中,并根据数据抽取源和抽取系统的标准代码表,对所述标准代码表的类别代码进行数据解析处理;

将所述基础数据信息根据各统计维度进行轻量汇总数据加工;所述各统计维度包括:统计时间、数据库节点、数据单位、数据同步读取状态、数据同步异常类别;

将进行轻量汇总数据加工后的基础数据信息,根据webservice与J2EE三层体系架构技术进行数据展示,生成PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统之间的数据流转过程的数据流转监控成果数据。

13.根据权利要求12所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,具体用于:

根据所述数据流转监控成果数据,判断在同一待监控主题的统计条件下,在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值是否一致;

若在PMS2.0系统、数据中心系统、营销业务应用系统、基础数据平台系统上的数据流转监控成果数据的数据值不一致,则所述数据流转监控成果数据在所述待监控主题的统计条件下存在数据流转异常。

14.根据权利要求13所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,还用于:

定位电力系统中的公网设备的数据流转监控成果数据出现异常问题的数据节点;所述公网设备包括公网变电站、公线设备、公变设备、公网表箱接入点设备;

定位电力系统中的用户设备的数据流转监控成果数据出现异常问题的数据节点;所述用户设备包括专线设备、专变设备。

15.根据权利要求14所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,还用于:

依次确认PMS2.0系统、数据中心系统、营销业务应用系统的数据流转监控成果数据的数据量;

若PMS2.0系统的数据流转监控成果数据的数据量小于数据中心系统的数据流转监控成果数据的数据量,则确定PMS2.0系统的数据流转异常;

若数据中心系统的数据流转监控成果数据的数据量小于PMS2.0系统的数据流转监控成果数据的数据量,则确定数据中心系统的数据流转异常;

若营销业务应用系统的数据流转监控成果数据的数据量小于数据中心系统的数据流转监控成果数据的数据量,则确定营销业务应用系统的数据流转异常。

16.根据权利要求15所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题定位单元,还用于:

依次确认营销业务应用系统、基础数据平台系统以及PMS2.0系统的数据流转监控成果数据的数据量;

若PMS2.0系统的数据流转监控成果数据的数据量小于基础数据平台系统的数据流转监控成果数据的数据量,则确定PMS2.0系统的数据流转异常;

若基础数据平台系统的数据流转监控成果数据的数据量小于营销业务应用系统的数据流转监控成果数据的数据量,则确定基础数据平台系统的数据流转异常;

若营销业务应用系统的数据流转监控成果数据的数据量小于基础数据平台系统的数据流转监控成果数据的数据量,则确定营销业务应用系统的数据流转异常。

17.根据权利要求16所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题归因分类单元,具体用于:

判断公网设备的PMS2.0系统的数据流转监控成果数据的数据量是否小于公网设备的数据中心系统的数据流转监控成果数据的数据量;

若公网设备的PMS2.0系统的数据流转监控成果数据的数据量小于公网设备的数据中心系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为PMS2.0系统至数据中心系统ETL异动同步程序异常;

判断用户设备的营销业务应用系统的数据流转监控成果数据的数据量是否小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量;

若用户设备的营销业务应用系统的数据流转监控成果数据的数据量小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为营销业务应用系统至基础数据平台系统OGG程序异常;

判断公网设备的数据中心系统的数据流转监控成果数据的数据量是否小于公网设备的PMS2.0系统的数据流转监控成果数据的数据量;

若公网设备的数据中心系统的数据流转监控成果数据的数据量小于公网设备的PMS2.0系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为PMS2.0系统至数据中心系统ETL异动同步程序异常;

判断用户设备的基础数据平台系统的数据流转监控成果数据的数据量是否小于用户设备的营销业务应用系统的数据流转监控成果数据的数据量;

若用户设备的基础数据平台系统的数据流转监控成果数据的数据量小于用户设备的营销业务应用系统的数据流转监控成果数据的数据量,确定数据流转监控成果数据的异常问题为营销业务应用系统至基础数据平台系统OGG程序数据复制异常;

判断公网设备的营销业务应用系统的数据流转监控成果数据的数据量是否小于公网设备的数据中心系统的数据流转监控成果数据的数据量;

若公网设备的营销业务应用系统的数据流转监控成果数据的数据量小于公网设备的数据中心系统的数据流转监控成果数据的数据量,获取数据中心系统中的第一主题明细过程表信息,确定第一主题明细过程表中的同步状态和同步异常分类信息,确定数据流转监控成果数据的异常问题为数据未推送、数据未读取或数据同步失败;

判断用户设备的PMS2.0系统的数据流转监控成果数据的数据量是否小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量;

若用户设备的PMS2.0系统的数据流转监控成果数据的数据量小于用户设备的基础数据平台系统的数据流转监控成果数据的数据量,获取基础数据平台系统中的第二主题明细过程表信息,确定第二主题明细过程表中的同步状态和同步异常分类信息,确定数据流转监控成果数据的异常问题为数据未推送、数据未读取或数据同步失败。

18.根据权利要求17所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题归因分类单元,还用于:

根据存储过程技术,对待监控主题在营销业务应用系统和PMS2.0系统的台账关键属性进行比对校验,确定营销业务应用系统数据是否完整以及PMS2.0系统数据是否完整。

19.根据权利要求18所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题归因分类单元,还用于:

根据营销业务应用系统与PMS2.0系统的公网设备PMSID关联信息、用户设备业务ID关联信息,通过存储过程技术,对营销业务应用系统与PMS2.0系统的台账及关系信息的关键属性比对校验,确定数据流转监控成果数据的异常问题的一致性。

20.根据权利要求19所述的电力系统营配调贯通数据的处理装置,其特征在于,所述异常问题归因分类单元,还用于:

对所述数据流转监控成果数据的异常问题进行图数关系异常分析、考核户变户关系异常分析以及营销原公变用户分析。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1