一种计量资产全寿命周期管理系统数据集成方法
【专利摘要】本发明公开了一种计量资产全寿命周期管理系统数据集成方法，其特征在于：包括以下步骤：[S1]建立统一的数据模型和标准编码；[S2]对源业务系统的数据抽取、清理、转换加载到结构化数据中心；[S3]结合计量资产全寿命周期管理系统具体业务模块形成相应的数据分析主题；[S4]将结构化数据中心的数据进行抽取、转化、加载方式集成到各个数据分析主题。本发明实现了全寿命周期管理系统中对各源业务系统数据的高效集成，提高数据访问集成的效率和质量。
【专利说明】一种计量资产全寿命周期管理系统数据集成方法
【技术领域】
[0001]本发明涉及电力计量领域，特别涉及一种计量资产全寿命管理系统数据集成方法。
【背景技术】
[0002]计量资产全寿命管理系统是以提取资产各环节详细数据，建立精益化的多维度的数学模型、全面量化的指标体系、标准化的评估流程，实现计量资产全寿命周期的质量分析、供应商评价、寿命评估、风险预测、管理评价。
[0003]计量资产全寿命的业务环节数据来自营销系统、用电信息采集系统和计量生产调度系统，由于各系统建设周期较长，为满足自身数据交互要求多采用“点对点”接口的方式实现系统与外部系统的数据集成，导致系统间集成复杂，数据交互效率较低，且数据内容、数据格式和数据质量各异，阻碍了数据在各应用系统中的交互与共享，不利于系统的扩展和维护。
[0004]因此，针对计量资产全寿命周期管理系统进行高效的数据集成，满足快速稳定的数据访问需求，提高数据访问效率，成为亟待解决的一个问题。
【发明内容】
[0005]本发明的目的是针对现有技术存在的不足，解决现有计量资产全寿命周期管理系统与营销系统、用电信息采集系统和计量生产调度系统间“点对点”方式获取数据效率较低、不易于维护的问题，满足全寿命周期管理系统对其他各系统数据的访问需求，使得全寿命周期管理系统能够根据自身需求获取各种相关数据，并且易于维护，操作方便。
[0006]为实现上述发明目的，本发明识可采用如下技术方案:
[0007]—种计量资产全寿命周期管理系统数据集成方法，将包括营销系统、用电信息采集系统和计量生产调度系统的业务系统的数据集成到统一的结构化数据中心，通过访问结构化数据中心集成计量资产全寿命周期管理系统相关业务数据；
[0008]具体包括以下步骤:
[0009][SI]建立统一的数据模型和标准编码；
[0010][S2]对源业务系统的数据抽取、清理、转换加载到结构化数据中心；
[0011][S3]结合目标系统具体业务模块形成相应的数据分析主题；
[0012][S4]将结构化数据中心的数据进行抽取、转化、加载方式集成到各个数据分析主题。
[0013]所述步骤SI中，统一的数据模型设计的内容为:根据IEC-CM模型、SG-CM模型、各业务系统标设模型和需求分析报告，从顶层业务对象中提取逻辑数据模型；数据模型设计分为主数据模型设计和共享事务数据模型设计；主数据模型设计从各业务系统标设中梳理档案类数据及标准代码，并对这些数据进行整合形成；共享事务数据模型设计是从各业务系统之间、各业务系统与外部系统之间有集成需求的数据提取形成。
[0014]进一步的，所述统一的标准编码转换过程包括以下步骤:
[0015]11)通过标设文档提取各业务系统的标准编码；
[0016]12)对属性名称和代码完全相同的进行合并；
[0017]13)提取属性名相同，代码不同的属性；
[0018]14)分析上一步提取到的问题属性；
[0019]15)深入检查，提取属性名不同，代码完全相同的属性进行分析；
[0020]16)分析属性名不同，代码相同的属性；
[0021]17)对各类处理结果进行合并，形成合并属性集合。
[0022]所述步骤S2中，所述源业务系统内容包括:营销系统、用电信息采集系统和省级计量生产调度系统；
[0023]进一步，所述抽取、清洗、转换、加载的内容:抽取是是从数据源中抽取数据的过程；清洗是过滤那些不符合要求的数据，包括不完整的数据、错误的数据、重复的数据；转换是对不一致的数据格式、错误的数据输入、不同的数据粒度进行转换；
[0024]进一步，所述结构化数据中心的组成及数据流转:结构化数据中心包含数据缓存区、公共存储区(ODS)、实时0DS、企业数据仓库；数据缓存区直接从营销系统、用电信息采集系统和计量生产调度系统进行数据复制；公共存储区(ODS)从数据缓存区中抽取、转换、加载数据；实时ODS从数据缓存区实时进行数据复制；企业数据仓库从公共存储区中抽取数据。
[0025]所述步骤S3中，所述目标系统内容:计量资产全寿命周期管理系统；
[0026]进一步，所述数据分析主题的内容:数据分析主题是根据全寿命周期管理的业务将需求划分为对应的主题，每个主题即代表各自业务模块的集成数据。
[0027]所述步骤S4中，所述数据转换内容:数据转换是根据各个数据分析主题的业务规则及相关的数据指标，对数据化结构中心内的数据执行业务相关的逻辑计算和聚合的过程。
[0028]本发明所达的有益效果:本发明通过制定统一的数据模型和标准编码，建立数据化结构中心，以及形成全寿命周期管理业务对应的数据分析主题，实现了营销系统、用电信息采集系统和计量生产调度系统针对全寿命周期管理相应数据分析主题的数据集成，提高数据访问集成的效率和质量。
【专利附图】
【附图说明】
[0029]图1是全寿命周期管理系统数据集成基本流程图；
[0030]图2是结构化数据中心的结构示意图；
[0031]图3是本发明的一种实施例的系统结构图。
【具体实施方式】
[0032]下面结合附图对本发明作进一步说明。
[0033]如图1和图2所示，一种计量资产全寿命周期管理系统数据集成方法的基本流程为:
[0034]11)建立统一的数据模型和标准编码；
[0035]12)将源业务数据从各系统中抽取清洗转换到结构化数据中心；
[0036]13)根据全寿命管理业务执行相应的数抽取转换过程，将数据加载到相应的数据分析主题。
[0037]为使本发明的目的、技术方案、和优点更加清楚，下面结合附图3对本发明的具体实施例进行详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但不作为本发明的限定。
[0038]实施例一
[0039]本实施例是全寿命周期管理系统从营销系统、用电信息采集系统和计量生产调度系统中集成相关业务数据。图3是本发明的实施例系统结构图，其中，图中虚线框的单元是与本方法有关的重要关联部分，但不属于本方法系统。
[0040]以下结合附图对本发明具体实施作进一步详细介绍，数据集成的实施步骤为:
[0041]21)从营销系统、用电信息采集系统和计量生产调度系统经过数据复制方式将各业务源数据加载至数据缓存区；
[0042]22)按照统一设计的数据模型和统一的标准编码将数据缓存区的业务源明细数据进行抽取、清理、转换、加载至公共存储区(ODS)，包含主数据存储区和共享事务性数据存储区；
[0043]23)对营销系统、用电信息采集系统和计量生产调度系统进行实时业务源数据复制，将数据加载至实时公共存储区(实时0DS)；
[0044]24)按照统一设计的数据模型和统一的标准编码将实时业务数据从实时ODS抽取、清理、转换、加载至ODS ；
[0045]25)将公共存储区(ODS)中的主数据和共享事务性数据抽取到数据仓库；
[0046]26)根据全寿命周期管理系统的业务模块，执行对应的业务逻辑通过抽取、转换方式将数据仓库中的数据加载至对应的数据分析主题；
[0047]27)根据全寿命周期管理系统的业务模块，执行对应的业务逻辑通过抽取、转换方式从实时ODS抽取转换加载至对应的数据分析主题；
[0048]28)相应的数据分析主题即代表各自业务模块的集成数据。
【权利要求】
1.一种计量资产全寿命周期管理系统数据集成方法，其特征在于，将包括营销系统、用电信息采集系统和计量生产调度系统的业务系统的数据集成到统一的结构化数据中心，通过访问结构化数据中心集成计量资产全寿命周期管理系统相关业务数据； 具体包括以下步骤: [51]建立统一的数据模型和标准编码； [52]对源业务系统的数据抽取、清理、转换加载到结构化数据中心； [53]结合目标系统具体业务模块形成相应的数据分析主题； [54]将结构化数据中心的数据进行抽取、转化、加载方式集成到各个数据分析主题。
2.根据权利要求1所述的计量资产全寿命周期管理系统数据集成方法，其特征在于，统一的数据模型设计的内容为:根据IEC-CIM模型、SG-CIM模型、各业务系统标设模型和需求分析报告，从顶层业务对象中提取逻辑数据模型；数据模型设计分为主数据模型设计和共享事务数据模型设计；主数据模型设计从各业务系统标设中梳理档案类数据及标准代码，并对这些数据进行整合形成；共享事务数据模型设计是从各业务系统之间、各业务系统与外部系统之间有集成需求的数据提取形成。
3.根据权利要求1所述的计量资产全寿命周期管理系统数据集成方法，其特征在于，所述统一的标准编码转换过程包括以下步骤: 11)通过标设文档提取各业务系统的标准编码； 12)对属性名称和代码完全相同的进行合并； 13)提取属性名相同，代码不同的属性； 14)分析上一步提取到的问题属性； 15)深入检查，提取属性名不同，代码完全相同的属性进行分析； 16)分析属性名不同，代码相同的属性； 17)对各类处理结果进行合并，形成合并属性集合。
4.根据权利要求1所述的计量资产全寿命周期管理系统数据集成方法，其特征在于，所述结构化数据中心的组成及数据流转具体为:结构化数据中心包含数据缓存区、公共存储区、实时公共存储区、企业数据仓库；数据缓存区直接从营销系统、用电信息采集系统和计量生产调度系统进行数据复制；公共存储区从数据缓存区中抽取、转换、加载数据；实时公共存储区从数据缓存区实时进行数据复制；企业数据仓库从公共存储区中抽取数据。
5.根据权利要求1所述的计量资产全寿命周期管理系统数据集成方法，其特征在于，所述数据分析主题的内容为:数据分析主题是根据全寿命周期管理的业务将需求划分为对应的主题，每个主题即代表各自业务系统的集成数据。
【文档编号】G06F17/30GK104361086SQ201410650601
【公开日】2015年2月18日 申请日期:2014年11月14日 优先权日:2014年11月14日
【发明者】李天阳, 叶剑斌, 汪亮, 储鹏飞, 戴睿, 李延满, 高春雷, 侯艳丽 申请人:国电南瑞科技股份有限公司, 国电南瑞南京控制系统有限公司