输出和更随机的写入方式，减少了缓存使用和使用存储性能更好的本地磁盘。而数据区可以通过保证顺序读写来提高输入输出的吞吐量。把大量随机写转为一个存储空间上实现顺序写，这样空闲的存储空间实现了休眠，实现了节能。
[0031]存储层同时对索引区进行了优化，使用多个卷索引，且每一个卷索引都是另一个卷索引的备份，进一步提高了索引的可靠性。目录索引和文件索引被分成多个文件。数据区被分成了以分片为单位的数据单元，在存储用户文件时按分片为单位进行分配，减少了文件碎片，提高了文件顺序写入长度。当不足一个分片时，先存储在缓存中，可以使用索引区的信息进行区分，从而可以对多个小文件进行合并，合并后再更新索引区信息，充分利用了磁盘空间。
[0032]对于结构/半结构化的数据，实际分布式数据库本身就存在安全机制，同时对于各级平台的中心数据库，本发明采用了数据库定期备份、双机等保证本发明的数据保存与运行安全。
[0033]对于视频数据，本发明的文件系统采用磁盘阵列技术保证数据的冗余安全，同时对于特别的数据，提供计划和手动的N+M备份方案；比如SAS，本级平台存储一份高清的主码流，上级平台存储一份标清的辅码流；对于不支持SAS的设备，采用备份服务器对已有的视频进行同步备份。
[0034]本发明提出了一种电力数据集成处理系统，为电力系统规划、运维监控等专业提供高效、灵活、高质量的统一信息模型和应用服务平台。
[0035]应当理解的是，本发明的上述【具体实施方式】仅仅用于示例性说明或解释本发明的原理，而不构成对本发明的限制。因此，在不偏离本发明的精神和范围的情况下所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。此外，本发明所附权利要求旨在涵盖落入所附权利要求范围和边界、或者这种范围和边界的等同形式内的全部变化和修改例。
【主权项】
1.一种电力数据集成处理系统，其特征在于，包括: 建模单元，用于将多个电力应用系统中的应用服务整合形成的多个业务流模型进行部署； 多个电力应用系统，在模型整合的基础上，将各自的资源进行整合，实现电力应用系统间的互操作，集成为统一的应用服务系统。2.根据权利要求1所述的系统，其特征在于，所述电力系统按照通用信息模型为标准进行业务流模型整合，形成部署在集成处理系统平台上的统一多个模型；所述业务流模型包括组件级、功能级和平台级3级模型；其中组件级建模包括电力系统相关设备电气特性的模型；功能级模型包括电力系统调度自动化、电力自动化、电网GIS、电力PMS和营销系统功能的建模；平台级模型整合不同功能模型的差异；在构建过程中，采用虚拟化技术，将电力系统底层的计算设备资源进行逻辑化，建立一个共享的运行环境，形成可动态伸缩的、具有存储和计算能力的资源库，实现各软硬件系统信息模型的整合和数据共享； 所述建模单元包括通用信息模型子单元、传输映射子单元以及应用程序访问子单元:通用信息模型子单元，用于按照通用信息模型为标准将电力和配电业务流模型、电力市场业务流模型以及控制中心业务流模型进行整合，并通过虚拟化技术，建立统一的、部署在平台上的多个模型；其次是传输映射子单元，将多个模型之间的各个数据进行映射，实现不同层次、不同业务流模型间的通信；再次是应用程序访问子单元，用于提供标准的应用程序接口，对于用户各自不同的访问请求分别做出对应的响应，并依据各响应向用户提供不同的基本函数，包括请求、响应基本函数，开/关、读/写基本函数以及发送/接收基本函数，所有外界用户及设备只能通过应用程序访问子单元与建模单元进行交互。3.根据权利要求2所述的系统，其特征在于，所述电力数据集成处理系统的架构分为调度层、逻辑层、计算设备层、存储层和网络层；调度层负责划分用户的计算任务和存储任务，并决定实现该计算任务和存储任务所需要的相应设备；还负责整合计算结果，读取数据，并将数据进行输出以及将计算结果向用户进行反馈；逻辑层负责控制计算进程，并返回计算结果；网络层负责部署电力数据集成处理系统平台的网络站点，实现用户与集成处理系统平台的交互；所述电力数据集成处理系统使用存储虚拟化以及专用服务器虚拟化技术，利用网络将各种广域计算资源整合；所述调度层采用动态任务分配方式，按计算处理指令，将待处理任务分配到资源库里的多个计算节点进行同时计算；同时，采用容错机制和任务二次分配机制，当计算节点不能完成计算任务时将此计算节点的任务转移到其他节点继续进行以完成计算；任务完成后，整理结果并通过网络层向用户进行反馈；在所述存储层包括元数据存储区，管理电力数据集成处理系统的元数据，所述元数据包括文件目录树组织、维护的属性、文件操作日志记录、授权访问、检索映射，并管理整个管理电力数据集成处理系统的命名空间，对客户端提供单一的系统映像；所有元数据存储区同时在线提供服务，并且每两个元数据存储区为一组，每组元数据存储区内部相互之间进行交叉备份，在一组内任何一个元数据出现异常，另一台元数据也拥有这组元数据存储区的完整数据，并且接管服务；文件采用以下三部分格式组织:第一部分描述格式化完成后索引区的目录索引个数以及数据区分片个数信息；第二部分描述数据区空间的使用情况以及记录用户目录和文件信息；最后一部分是数据区，数据区分成了若干个分片；索引区和数据区完全分离，索引区的大小根据实际的存储空间的大小来确定，把索引和数据存储到不同的资源上，且对索引数据使用冗余阵列；存储层同时对索引区进行优化，使用多个卷索引，且每一个卷索引都是另一个卷索引的备份，将目录索引和文件索引分成多个文件，将数据区分成以分片为单位的数据单元，在存储用户文件时按分片为单位进行分配；当不足一个分片时，先存储在缓存中，使用索引区的信息进行区分，对多个小文件进行合并，合并后再更新索引区信息；所述电力数据集成处理系统将网调、地调、县调进行资源整合；将电力系统的高级应用服务系统及软件进行整合；在实现省级部署功能时，在任务处理的过程中采用就近访问计算原则。
【专利摘要】本发明提供了一种电力数据集成处理系统，包括：建模单元，用于将多个电力应用系统中的应用服务整合形成的多个业务流模型进行部署；多个电力应用系统，在模型整合的基础上，将各自的资源进行整合，实现电力应用系统间的互操作，集成为统一的应用服务系统。本发明提出了一种电力数据集成处理系统，为电力系统规划、运维监控等专业提供高效、灵活、高质量的统一信息模型和应用服务平台。
【IPC分类】G06Q50/06, H04L29/08
【公开号】CN105354757
【申请号】CN201510674394
【发明人】陈相军, 张忠, 赵娜, 崔嵩, 续波, 张秀浩, 赵朋昌, 张亮, 王明, 郭齐微
【申请人】国家电网公司, 国网山东省电力公司泰安供电公司, 国网山东宁阳县供电公司
【公开日】2016年2月24日
【申请日】2015年10月16日