专利名称：多维度电力市场交易数据交互统一监控方法
技术领域：
本发明属于数据交互统一监控技术领域，涉及多维度、全过程、可视化的数据交互 统一监控技术，特别涉及一种多维度电力市场交易数据交互统一监控方法。针对电力市场 业务开展所需数据与所提供数据的多类型、多源、多口径、多维度等特性，基于可视化的实 现原则，本发明应用了数据属性抽象建模技术，构建了多维度的可视化数据监控平台，实现 了对模型数据、业务数据、从纵向贯通到横向集成的全过程监控与管理。
背景技术：
电力市场改革有助于打破垄断、解除管制、引入竞争，以更合理地配置资源，提高 资源利用率，促进电力工业与社会、经济、环境的协调发展。电力市场交易是改革的基础，需 要通过“电力市场交易运营系统”进行，而正常的交易业务与系统的运行，均需要与外部数 据或系统进行大量的数据交互，由于电力市场交易所需数据类型多样，数据交互实现技术 不同，并且数据交互建设的周期长，因此就形成了数据交互的多源性、多口径性。多源性是指与电力市场交易形成数据交互的数据源头多；多口径性是指这些多源 头的数据内容有可能会有部分重叠，对于同一类型的业务数据会有不同的统计口径。同时， 数据从交互对象上又存在了纵向贯通与横向集成，因此也就存在了多种维度的交互。原有 的数据交互监控管理技术，仅仅实现了数据交互过程中日志的记录与描述，且日志记录分 散在不同的交互通道中，当面对现今的复杂的数据交互时，原有技术就无法满足对数据交 互的统一监控，且其所记录的数据交互信息也无法实现可视化的监控技术，从而导致无法 从总体上监控数据交换平台的数据交互情况与数据状态。因此需要一种多维度、全过程、 可视化的数据交互统一监控技术来解决这些问题，并实现对数据交互全过程可视化监控管 理。市场交易数据交换分为纵向贯通和横向集成。纵向贯通是指与国家电网公司、省 (市)电力公司的数据交换，通过公司信息交换平台实现。横向集成是指与公司调度通信中 心、科技信息部、发展计划部、生产部等部门的数据交换。通过纵向贯通和集成能实现对市 场交易和能量的全程管理，满足各种业务的数据需求。按照国家电网目前的要求，华东电网公司向国家电网公司报送25种数据，分非周 期性数据、年度数据、季度数据、月度数据、日数据五类，省市电力公司向华东电网公司上报 数据类型全集与华东电网公司向国网公司上报数据类型一致。纵向贯通中，省市电力公司 上报华东电网，通过国电南瑞平台上的触发器实现，当数据进入南瑞平台后，触发器启动， 自动将业务数据同步到电力市场交易系统。华东电网上报国网数据需要经过抽取、校验、发 送环节，发送后通过中电普华平台将数据传输至国家电网交易运营系统。横向数据集成主要的数据来源是华东电网公司信息中心UIP系统，其数据内容来 自调度中心、发展策划部、生产部、科信部、财务部，按数据周期共分为两类月度数据与日 数据，其中日数据中也包含了分钟级的数据。横向集成通过Web Service技术实现，同时也 具备了消息通知机制，即当数据源数据发生变更或者迟到补入时，数据源方会发送相应的消息通知接收方，接收方收到消息通知后，对此条消息进行反馈，已确认消息通知收到。为能尽快适应国家政策、法律法规、市场规则的变化，电力市场交易需要不断地对 自身进行调整，在自身调整中，为了适应这些多源性、多维度、多类型的数据交互，有效地 对数据的交互状态进行监控管理，对数据交互的统一监控平台就显得尤为迫切和重要，因 此，统一的监控平台不但要能够包含数据交互的状态信息，还要能够简便操作，容易理解， 因此，对数据交互统一监控的视图，在模型设计上要尽可能地将所交换的数据进行分类、分 源、分周期。同时对交互数据的监管还要能够清楚地定义数据交互的状态，并对数据内容进 行查看管理，对数据质量做出评价，对数据交互的及时性做出判断。如此种种才能够满足多 维度数据交互的统一监控要求，对电力市场交易的分析，判断给出强有力的支持。有鉴于此，寻求一种多维度电力市场交易数据交互统一监控方法成为该领域技术 人员的追求目标。
发明内容
本发明针对电力市场交易业务中，所需数据与所供数据的交互平台的多维度、多 类型、多源头、多口径的复杂特性，以及决策管理人员对数据交互状态、总体情况和具体到 数据内容上的监控管理需求，提供了一种多维度电力市场交易数据交互统一监控技术进行 解决。本发明目的之一使用数据建模技术对数据交互平台与各个数据源头进行交换的 数据建模，并对数据类型进行分析，从数据方向维度、时间周期维度、数据源维度、口径维度 上对交互的数据进行分类，并建立统一的监控平台。本发明目的之二通过多维度的数据交互统一监控平台对数据交互的及时性、完 整性、准确性做出监管、评价，为业务人员提供数据交互的状态全景图，对其做出正确的判 断和决策提供支持。本发明的技术解决方案如下
一种多维度电力市场交易数据交互统一监控方法，对数据交互平台上交互的数据从交 互方向上、时间周期上、数据类型上进行多维度建模，并对各个方向上的数据交互的状态进 行定义，包括以下步骤
(1)根据数据交互监控的整体结构图，电力市场交易数据交互监控平台中的数据交换 方向按照数据源的级别和数据交互的目的，分为纵向和横向；
所述纵向数据交换为基级单位上报中级单位，中级单位上报高级单位，高级单位下发 中级单位；
所述横向数据交换为信息中心通过webservice接口通信方式，交易运营系统从数据 中心获取自身所需数据；调度中心通过交易运营系统自动触发，从电能计划及合同管理系 统取得双边交易合同信息与双边交易调度执行信息；
(2)实现纵向维度的数据统一监控，数据在发生交互前，先要在系统中经过逻辑处理与 整合，然后通过数据监控平台发送至高级单位，数据监控平台需要对数据从抽取到人工校 验，再到发送的过程进行实时监控；
(3)实现横向维度统一监控，横向维度包括信息中心与调度中心数据，其中信息中心数 据通过webservice实现数据同步，调度中心通过FTP文件读取方式实现数据同步。
所述调度中心还包括备用系统，在数据交互平台与其它数据中心无法通信的情况 下，通过备用功能，将业务数据用Excel的方式导入进交易运营系统，以保证交易运营系统 的正常业务使用。所述交互数据类型有数据周期性、报表名称、时间要求。所述数据周期性中数据包括日数据、月度数据、季度数据、年度数据以及非周期性 数据。所述步骤(2)中，根据高级单位的标准数据表格把交易运营系统里的数据从复杂 的各类业务报表进行整合提炼，最终抽取存入到交易运营系统数据库中与高级单位一致的 数据表即映像表里，等待数据校验；在数据抽取已经存入映像表的同时也做后台记录日志； 其中映像表里储存有每次点击数据获取时的所有“快照”，用户在此时即可进行数据校验操 作；数据校验模块对映像表进行数据质量验证，对不合格的映像表把校验失败原因存入交 易运营系统日志，而对于校验成功的映像表也存入系统日志；用户在页面选择所需要的数 据类型点击发送，如此类数据从日志表里查出在映像表里最新的数据是校验通过的，系统 立即把此类数据存入纵向数据交互平台的实际表，同时插入纵向数据交互平台的历史表; 纵向数据交互平台的实际表等待发送指令发布成功后高级单位会通过服务来取得实际表 里的数据，历史表里的数据是给予用户在页面查询校验成功的历史数据。所述步骤(2)中，所述实时监控包括总体监控模式和明细监控模式。本发明的多维度电力市场交易数据交互统一监控方法的主要特点有
1、通过对数据交互平台中的数据，从数据方向、数据源头、数据周期、数据类型维度出 发，将数据进行梳理、分类监控管理，从而实现了多维度的统一数据监控，使用本发明的技 术，能够将原先无法整体表现、统一监控的数据交互平台的数据交互信息，进行统一的整合 与管理。2、建立多维度电力市场交易数据交互统一监控平台，不但提供了对数据交互状态 的多维度建模，同时对各个维度灵活地提供了数据交互状态的定义，从而使得各个方向上 的数据交互能够统一监视管理。本发明由于采用了以上技术方案，使之与现有技术相比，本发明的多维度电力市 场交易数据交互统一监控方法具有如下优点
(1)除了对数据本身建模之外，创新性地从数据交互方向、源头、时间周期、数据类型等 维度进行建模，在模型复杂的基础之上提供了简单明了的业务决策参考，将原本由于海量 数据交互而无法实现的统一监控管理变成现实。(2)对数据交互的过程进行了详细的定义和记录，从而使得对数据交互不仅能够 实现监控，还能够对以往的历史数据进行分析整理，为当前的和未来的数据交互平台提供 运行与决策支持。
图1为本发明的一种多维度电力市场交易数据交互统一监控方法的数据交互整 体结构图。图2为本发明的实例中华东电网上报国网的业务流程图。图3为本发明的实例中上报国网抽取逻辑示意图。
图4为本发明的实例中华东电网上报国网统一监控示意图。图5为本发明的实例中纵向数据交互流程图。
具体实施例方式下面结合附图和实施例对本发明的多维度电力市场交易数据交互统一监控方法 进行详细说明。参看图1至图5，本发明采用了多维度的建模技术，对数据交互平台上交互的数据 从交互方向上、时间周期上、数据类型上进行了建模，并对各个方向上的数据交互的状态进 行了定义。一、根据数据交互监控的整体结构图(图1所示)，电力市场交易数据交互监控平台 中的数据交换方向按照数据源的级别和数据交互的目的，可以分为纵向和横向，其中，纵向 数据交换包括了省市电力公司上报华东电网、华东电网上报国网、国网下发华东电网。省市电力公司上报华东电网公司，华东交易运营系统数据交换平台自动接收省市 上报的数据，共包括年度数据2个，季度数据2个，月度数据10个(因各省市业务不同数量 不一)，日数据1个，非周期数据5个。华东电网上报国家电网，数据上报实现自动抽取，自动上报，人工校验，其中年度 数据2个，季度数据2个，月度数据7个，日数据2个，非周期数据8个。这两个方向上共包括以下数据类型。
权利要求
1.一种多维度电力市场交易数据交互统一监控方法，其特征在于，对数据交互平台上 交互的数据从交互方向上、时间周期上、数据类型上进行多维度建模，并对各个方向上的数 据交互的状态进行定义，包括以下步骤(1)根据数据交互监控的整体结构图，电力市场交易数据交互监控平台中的数据交换 方向按照数据源的级别和数据交互的目的，分为纵向和横向；所述纵向数据交换为基级单位上报中级单位，中级单位上报高级单位，高级单位下发 中级单位；所述横向数据交换为信息中心通过webservice接口通信方式，交易运营系统从数据 中心获取自身所需数据；调度中心通过交易运营系统自动触发，从电能计划及合同管理系 统取得双边交易合同信息与双边交易调度执行信息；(2)实现纵向维度的数据统一监控，数据在发生交互前，先要在系统中经过逻辑处理与 整合，然后通过数据监控平台发送至高级单位，数据监控平台需要对数据从抽取到人工校 验，再到发送的过程进行实时监控；(3)实现横向维度统一监控，横向维度包括信息中心与调度中心数据，其中信息中心数 据通过webservice实现数据同步，调度中心通过FTP文件读取方式实现数据同步。
2.根据权利要求1所述的多维度电力市场交易数据交互统一监控方法，其特征在于， 所述调度中心还包括备用系统，在数据交互平台与其它数据中心无法通信的情况下，通过 备用功能，将业务数据用Excel的方式导入进交易运营系统，以保证交易运营系统的正常 业务使用。
3.根据权利要求1所述的多维度电力市场交易数据交互统一监控方法，其特征在于， 所述交互数据类型有数据周期性、报表名称、时间要求。
4.根据权利要求3所述的多维度电力市场交易数据交互统一监控方法，其特征在于， 所述数据周期性中数据包括日数据、月度数据、季度数据、年度数据以及非周期性数据。
5.根据权利要求1所述的多维度电力市场交易数据交互统一监控方法，其特征在于， 所述步骤(2)中，根据高级单位的标准数据表格把交易运营系统里的数据从复杂的各类业 务报表进行整合提炼，最终抽取存入到交易运营系统数据库中与高级单位一致的数据表即 映像表里，等待数据校验；在数据抽取已经存入映像表的同时也做后台记录日志；其中映 像表里储存有每次点击数据获取时的所有“快照”，用户在此时即可进行数据校验操作；数 据校验模块对映像表进行数据质量验证，对不合格的映像表把校验失败原因存入交易运营 系统日志，而对于校验成功的映像表也存入系统日志；用户在页面选择所需要的数据类型 点击发送，如此类数据从日志表里查出在映像表里最新的数据是校验通过的，系统立即把 此类数据存入纵向数据交互平台的实际表，同时插入纵向数据交互平台的历史表；纵向数 据交互平台的实际表等待发送指令发布成功后高级单位会通过服务来取得实际表里的数 据，历史表里的数据是给予用户在页面查询校验成功的历史数据。
6.根据权利要求1所述的多维度电力市场交易数据交互统一监控方法，其特征在于， 所述步骤(2)中，所述实时监控包括总体监控模式和明细监控模式。
全文摘要
本发明涉及一种多维度电力市场交易数据交互统一监控方法，对数据交互平台上交互的数据从交互方向上、时间周期上、数据类型上进行多维度建模，并对各个方向上的数据交互的状态进行定义，包括以下步骤根据数据交互监控的整体结构图，电力市场交易数据交互监控平台中的数据交换方向按照数据源的级别和数据交互的目的，分为纵向和横向；实现纵向维度的数据统一监控，数据在发生交互前，先要在系统中经过逻辑处理与整合，然后通过数据监控平台发送至高级单位，数据监控平台需要对数据从抽取到人工校验，再到发送的过程进行实时监控；实现横向维度统一监控。本发明创新性地从数据交互方向、源头、时间周期、数据类型等维度进行建模，实现统一监控管理。
文档编号G06Q30/00GK102129646SQ20111005626
公开日2011年7月20日 申请日期2011年3月9日 优先权日2011年3月9日
发明者刘福斌, 承林, 李 灿, 杨立兵, 洪元瑞, 芦越 申请人:上海华东电集能源信息有限公司, 华东电网有限公司