工程数据仓库的建设方法及电子设备与流程

1.本发明属于企业数据治理技术领域，更具体地，涉及一种工程数据仓库的建设方法及电子设备。


背景技术：

2.数据是企业管理的基础之一，搭建一套数据管理平台对企业来说至关重要。全面而详细的数据，能够让管理层明确企业经营状况，发现业务上的不足，从而以此为依据，做出科学的决策。通过数据化管理，企业可以将管理中的各个要素整理成规范的流程，工作人员按照规范进行数据的填写、统计和分析，长年累月便会形成企业一整套规范运作的流程，从而大幅提升员工的工作效率和企业的管理效能。通过数据统计分析，企业可以科学地分配资源和有效地使用资源，从而获取更多价值。数据化管理能够为企业绩效考核设定一个评价的标准，并提供直观的计量方式，让企业的绩效管理更加客观与公平。
3.生产类企业往往有诸多系统，这些系统涉及到一些共性的数据，传统技术是通过主数据解决。但是当主数据提取的源数据发生变更时，现有技术不能准确的识别有哪些数据可以更改，哪些数据可以保留，从而在数据变更过程中存在数据不一致的问题。


技术实现要素：

4.有鉴于此，本发明实施例提供了一种工程数据仓库的建设方法及电子设备，至少解决现有技术中数据变更过程中存在的数据不一致问题。
5.第一方面，本发明实施例提供了一种工程数据仓库的建设方法，包括：
6.获取各系统的工程属性集及参数数据集，所述工程属性集与参数数据集对应；
7.基于所述工程属性集和参数数据集的对应关系，确定所述工程属性集中的属性与参数数据集中参数值的对应关系，以及系统间属性与参数值之间的换算关系；
8.基于所述属性与参数值的对应关系和换算关系，建立映射规则，从而为每个属性创建专属算子；
9.基于获取工程属性集及参数数据集的数据源和映射规则建立工程数据仓库。
10.可选的，所述建立工程数据仓库的步骤之后，还包括：
11.获取工程数据仓库中数据在文档中的位置和结构；
12.基于所述位置和结构建立数据与文档的关联关系；
13.当所述文档更新时，同步更新工程数据仓库中关联的数据。
14.可选的，所述属性、参数值和的数据源以json字符串格式存储。
15.可选的，所述建立工程数据仓库的步骤之后，还包括：
16.对于数据源中的同类型设备，获取工程属性集为获取数据源中属性的并集。
17.可选的，所述对于数据源中的同类型设备，获取工程属性集为获取数据源中属性的并集，包括：
18.对同类型设备，对数据源中的属性名称进行映射，属性含义和名称皆相同的属性
合并成一个，属性含义相同但名称不同的属性并成一个，并将名称统一；
19.对同类型设备，基于属性名称映射规则，进行数值映射和单位映射，确定不同计量单位下的换算关系。
20.可选的，所述建立工程数据仓库的步骤之后，还包括：
21.基于所述映射规则和工程数据仓库的数据结构，将工程数据仓库中的数据按照系统源格式进导出复用。
22.可选的，所述基于所述属性与参数值的对应关系和换算关系，建立映射规则，从而为每个属性创建专属算子，包括：
23.基于属性名称映射、数值映射和单位映射，建立映射规则，从而为每个属性创建专属算子。
24.可选的，所述专属算子根据数据源的设备类型和属性名称生成；
25.当设备类型和属性名称发生变化时，生成新的专属算子。
26.可选的，所述获取工程属性集及参数数据集的步骤前，还包括：
27.基于实际工程实践，确定数据源。
28.可选的，所述数据源，包括：
29.工厂实体的设备名称、位号、属性、属性值和数据来源。
30.第二方面，本发明实施例还提供了一种电子设备，该电子设备包括：
31.存储器，存储有可执行指令；
32.处理器，所述处理器运行所述存储器中的所述可执行指令，以实现第一方面任一项所述的工程数据仓库的建设方法。
33.本发明通过获取工程属性集及参数数据集，从基于工程属性集和参数数据集的对应关系，确定工程属性集中的属性与参数数据集中参数值的对应关系，以及属性与参数值之间的换算关系；基于属性与参数值的对应关系和换算关系，建立映射规则，从而为每个属性创建专属算子；从而建立工程数据仓库，建立工程数据仓库中的数据与数据源的数据存在映射，因此在修改数据源的数据时，可以根据映射相应修改工程数据仓库中的数据，从而保证数据变更过程中数据一致性。
34.通过建立工程数据仓库，解决了实际工程管理中各数据系统不统一、不规范的问题，避免了同一参数多次录入；同时由于记录了数据与文档的关联关系，可以实现数据的变更管理，实现了文档数据与数据库数据的一致性，同时能将数据按照源系统格式进行导出复用。本发明提出的工程数据仓库的建设方法，可以作为工厂建设过程中的一种技术手段，对于工厂的全生命周期管理和数字化工厂建设具有很好的辅助作用。
35.本发明的其它特征和优点将在随后具体实施方式部分予以详细说明。
附图说明
36.通过结合附图对本发明示例性实施方式进行更详细的描述，本发明的上述以及其它目的、特征和优势将变得更加明显，其中，在本发明示例性实施方式中，相同的参考标号通常代表相同部件。
37.图1示出了本发明实施例一的工程数据仓库的建设方法的流程图；
38.图2示出了本发明的实施例二的工程数据仓库的建设方法的流程图。
具体实施方式
39.下面将更详细地描述本发明的优选实施方式。虽然以下描述了本发明的优选实施方式，然而应该理解，可以以各种形式实现本发明而不应被这里阐述的实施方式所限制。
40.实施例一：
41.一种工程数据仓库的建设方法，包括：
42.步骤s101：获取各数据系统的工程属性集及参数数据集，所述工程属性集与参数数据集对应；
43.建立工程数据仓库，包括工厂实体的设备名称、位号、属性及属性值、数据来源；
44.基于实际工程实践，确定系统数据源，获取各类型设备的工程属性集及对应的参数数据集。
45.步骤s102：基于所述工程属性集和参数数据集的对应关系，确定所述工程属性集中的属性与参数数据集中参数值的对应关系，以及系统间属性与参数值之间的换算关系；
46.步骤s103：基于所述属性与参数值的对应关系和换算关系，建立映射规则，从而为每个属性创建专属算子；
47.步骤s104：基于获取工程属性集及参数数据集的数据源和映射规则建立工程数据仓库。
48.可选的，所述建立工程数据仓库的步骤之后，还包括：
49.获取工程数据仓库中数据在文档中的位置和结构；
50.基于所述位置和结构建立数据与文档的关联关系；
51.当所述文档更新时，同步更新工程数据仓库中关联的数据。
52.可选的，所述属性、参数值和的数据源以json字符串格式存储。
53.工程数据仓库，将设备类型、名称、位号存入数据库，属性、参数值和数据源则以json字符串格式存储，同时建立数据与文档的关联关系。以json字符串存储属性、属性值和数据源，可扩展性强、易用性高，可移植性强，能跨平台使用。
54.基于数据与文档间的关联关系，当文档数据进行更新时，实时同步数据库数据，保证两者的一致性。
55.可选的，所述建立工程数据仓库的步骤之后，还包括：
56.对于数据源中的同类型设备，获取工程属性集为获取数据源中属性的并集。并集即将相同的属性进行合并。
57.基于数据源和映射规则，建立工程数据仓库。对于同类型设备，属性集取到所有数据源的并集。
58.可选的，所述对于数据源中的同类型设备，获取工程属性集为获取数据源中属性的并集，包括：
59.对同类型设备，对数据源中的属性名称进行映射，属性含义和名称皆相同的属性合并成一个，属性含义相同但名称不同的属性并成一个，并将名称统一；
60.对同类型设备，基于属性名称映射规则，进行数值映射和单位映射，确定不同计量单位下的换算关系。
61.针对同类型设备，对各数据源中的属性名称进行映射，含义和名称皆相同的属性合并成一个，含义相同但名称不同的属性统一成同一个；
62.针对同类型设备，在进行属性名称映射的基础上，再进行数值映射和单位映射，确定不同计量单位下的换算关系；
63.可选的，所述建立工程数据仓库的步骤之后，还包括：
64.基于所述映射规则和工程数据仓库的数据结构，将工程数据仓库中的数据按照系统源格式进导出复用。
65.可选的，所述基于所述属性与参数值的对应关系和换算关系，建立映射规则，从而为每个属性创建专属算子，包括：
66.基于属性名称映射、数值映射和单位映射，建立映射规则，从而为每个属性创建专属算子。
67.基于属性名称映射、数值映射和单位映射，为每种设备类型的每个属性创建专属算子。
68.可选的，所述专属算子根据数据源的设备类型和属性名称生成；
69.当设备类型和属性名称发生变化时，生成新的专属算子。
70.工程数据仓库涵盖各数据源的所有设备类型和所有属性，数据集具有很强的完备性；
71.当某个数据源的设备类型和属性名称发生变化时，可根据重新生成新的算子；
72.可选的，所述获取工程属性集及参数数据集的步骤前，还包括：
73.基于实际工程实践，确定数据源。
74.系统数据源可以是一个或多个，可以随时增减，因为算子可在多个数据源间共享，具有很强的通用性。
75.可选的，所述数据源，包括：
76.工厂实体的设备名称、位号、属性、属性值和数据来源。
77.数据来源，即该数据来自哪个文档，或者来自哪个文件等。
78.实施例二：
79.如图2所示，步骤1：基于实际工程实践，确定系统数据源，获取各类型设备的工程属性集及对应的参数数据集；
80.系统数据源是各工程单位自行设计的数据模板或者从各个系统导出的数据集；工程属性集是指从数据源模板中整理出的所有工程属性的集合，以字符串的形式表示；参数数据集是指从数据源模板中整理出的工程属性对应的值、类别等的集合，同样以字符串的形式表示。
81.步骤2：获取各数据源的工程属性集和对应的参数集，明确各个属性的对应关系以及参数值之间的换算关系；
82.通过程序读取，获取各类设备在各数据源中工程属性集和参数数据集；具体地，对于名称相同的属性需要进行去重处理，同时需要对含义相同但名称不同的参数进行手工合并。
83.优选地，通过采取自动化读取处理和人工处理相结合的方式，获取各类设备的工程属性集，同时明确各个属性的对应关系以及参数值之间的换算关系；
84.步骤3：基于步骤2中确定的对应关系，建立映射规则(主要是指名称映射和参数映射)，为每个工程属性创建专属算子；
85.在确定各数据源间的属性对应关系后，建立变换公式，明确属性间的关系矩阵，包括属性名称之间的映射关系，以及各个属性参数值之间的换算关系，由这两者共同组成每个属性的专属算子；
86.当某个数据源的设备类型和属性名称发生变化时，可根据步骤3)的方法重新生成新的算子。
87.步骤4：基于提取的工程属性集、参数数据集和映射规则，建立典型的工程数据仓库；
88.步骤5：基于步骤4创建的工程数据仓库，将设备类型、名称、位号存入数据库，属性、参数值和数据源则以json字符串格式存储；
89.确定数据库结构，在库中记录设备类型、名称、位号等关键信息，同时需记录对应的属性集和参数值，以及数据来源。json字符串格式如下：
[0090][0091]
步骤6：基于步骤3所述映射规则和步骤5所述数据结构，将数据重新按照各系统源格式进行导出复用；
[0092]
如需对数据进行复用，直接从数据仓库读取，对json字符串进行解析，以达到工程级项目应用的需求。由于标注了数据源，在后续数据复用的时候，可以追踪到数据来源，实现了数据可追溯。
[0093]
实施例三：
[0094]
本发明实施例提供一种电子设备包括存储器和处理器,
[0095]
存储器，存储有可执行指令；
[0096]
处理器，处理器运行存储器中的可执行指令，以实现工程数据仓库的建设方法。
[0097]
该存储器用于存储非暂时性计算机可读指令。具体地，存储器可以包括一个或多个计算机程序产品，该计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。该易失性存储器例如可以包括随机存取存储器(ram)和/或高速缓冲存储器(cache)等。该非易失性存储器例如可以包括只读存储器(rom)、硬盘、闪存等。
[0098]
该处理器可以是中央处理单元(cpu)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元，并且可以控制电子设备中的其它组件以执行期望的功能。在本发明的一个实施例中，该处理器用于运行该存储器中存储的该计算机可读指令。
[0099]
本领域技术人员应能理解，为了解决如何获得良好用户体验效果的技术问题，本实施例中也可以包括诸如通信总线、接口等公知的结构，这些公知的结构也应包含在本发明的保护范围之内。
[0100]
有关本实施例的详细说明可以参考前述各实施例中的相应说明，在此不再赘述。
[0101]
实施例四：
[0102]
本发明实施例提供一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现工程数据仓库的建设方法。
[0103]
根据本发明实施例的计算机可读存储介质，其上存储有非暂时性计算机可读指令。当该非暂时性计算机可读指令由处理器运行时，执行前述的本发明各实施例方法的全部或部分步骤。
[0104]
上述计算机可读存储介质包括但不限于：光存储介质(例如：cd－rom和dvd)、磁光存储介质(例如：mo)、磁存储介质(例如：磁带或移动硬盘)、具有内置的可重写非易失性存储器的媒体(例如：存储卡)和具有内置rom的媒体(例如：rom盒)。
[0105]
以上已经描述了本发明的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。