专利名称：数据防丢失处理方法
技术领域：
本发明属于电气工程技术领域，尤其涉及一种适用于数据采集点超四十万个的大容量配电自动化系统的数据防丢失处理方法。
背景技术：
数据采集处理和存储服务是配电自动化系统的基本功能，也是实现馈线故障自动处理、实时拓扑分析和电网动态着色等高级应用的基础。而在大容量情况下进行压力测试， 即短时间内模拟大量遥信和遥测变化，就有可能导致配电自动化系统丢失实时数据，此时要进行计算机节点或通讯链路的切换，切换过程中一般也会丢失实时数据。常见的用于配电自动化系统防止数据丢失的方法是利用数据缓存技术，该技术可在一定程度上缓解计算机节点或通讯链路的切换过程中丢失实时信息的情况，但难点是缓存时间的选择缓存的时间过长，会对系统性能造成较大的影响，而缓存时间过短又可能导致实时信息丢失。另外，用于数据存储的商用数据库异常，也会造成历史数据丢失。
发明内容
本发明要解决的技术问题是，针对已知技术存在的缺陷，提供一种适用于大容量配电自动化系统的数据防丢失处理方法。使用该方法可从根本上解决对配电自动化系统进行压力测试时，计算机节点或通讯链路切换引发数据丢失的问题，并保证系统运行的指标满足电力行业标准的指标要求，同时能够解决因商用数据库异常造成的历史数据丢失的问题。本发明的技术解决方案是，所提供的这种数据防丢失处理方法是为下述步骤(1)、数据采集。用至少两台配电自动化系统前置机分别通过至少一个通道与接入的配电子站或接入的配电终端相连，使用常规方法采集接入的配电子站包括遥测、遥信及 S0E(全称为kquence Of Event的英文缩写，中文译文为“事件顺序记录”)在内的运行数据或接入的配电终端所辖配电网包括遥测、遥信及SOE在内的运行数据；O)、数据处理。按照1991年11月4日中华人民共和国能源部发布的DL451-91 《循环式远动规约》、2002年9月16日中华人民共和国国家经济贸易委员会发布的DL/T 634. 5101-2002《远动设备及系统》第5 101部分记载的传输规约基本远动任务配套标准，或2009年7月22日中华人民共和国国家能源局发布的DL/T 634. 5104-2009《远动设备及系统》第5 104部分记载的传输规约采用标准传输协议子集的IEC 60870-5-101网络访问的要求，使用常规方法，通过上述配电自动化系统前置机对上述步骤(1)采集的包括遥测、遥信及SOE在内的运行数据进行分类解释处理，然后再对经过分类解释处理的运行数据，使用常规方法进行工程化处理得工程数据；(3)、数据缓存。通过上述配电自动化系统前置机，对上述步骤( 所获工程数据按照上述配电子站的通道或上述配电终端的通道进行内存缓存，内存缓存时间控制在 25 35秒钟范围内；
(4)、数据入实时库。将上述步骤( 所获工程数据输入到上述配电自动化系统的主实时库中；(5)、数据比对。在上述配电自动化系统前置机节点进行主备切换或上述通道进行主备切换，然后，使用常规方法比较并核对上述步骤(3)中主前置机缓存的数据与上述步骤(4)输入到上述配电自动化系统主实时库的对应数据是否一致，及时将所述配电自动化系统主实时库中缺少的数据更新到该主实时库中；(6)、数据存本地文件。将经过步骤⑷或步骤(5)更新到所述配电自动化系统主实时库中的数据，采用文件方式存储到该配电自动化系统的服务器的本地硬盘上；(7)、数据入历史库。将步骤(6)以文件方式存储到配电自动化系统的服务器本地硬盘上的数据，使用常规方法导入该配电自动化系统的历史库中永久储存。本发明的有益效果是1、采用最佳缓存时间进行数据缓存，保证了数据的不丢失，同时又保证了系统运行指标，满足了电力行业标准的要求；2、配电自动化系统前置机切换或通道切换后，进行数据比对，可保证数据不丢失， 同时避免将相同的数据重复更新进入实时库；3、先将数据存本地文件再导入历史库的两级存储方式的使用，避免了商用数据库出现连接失败或连接错误等异常情况造成的数据丢失，进一步提高了系统的数据安全性和系统可靠性。
具体实施例方式实施例1 (1)、用至少两台配电自动化系统前置机分别通过至少一个通道与接入的配电子站，使用常规方法采集接入的配电子站包括遥测、遥信及SOE在内的运行数据；O)、按照1991年11月4日中华人民共和国能源部发布的DL451-91《循环式远动规约》、2002年9月16日中华人民共和国国家经济贸易委员会发布的DL/T 634. 5101-2002 《远动设备及系统》第5 101部分记载的传输规约基本远动任务配套标准，使用常规方法， 通过上述配电自动化系统前置机对上述步骤(1)采集的包括遥测、遥信及SOE在内的运行数据进行分类解释处理，然后再对经过分类解释处理的运行数据，使用常规方法进行工程化处理得工程数据；(3)、通过上述配电自动化系统前置机，对上述步骤( 所获工程数据按照上述配电子站的通道进行内存缓存，内存缓存时间控制在25 35秒钟范围内；(4)、将上述步骤( 所获工程数据输入到上述配电自动化系统的主实时库中；(5)、在上述配电自动化系统前置机节点进行主备切换，然后，使用常规方法比较并核对上述步骤C3)中配电自动化系统前置机缓存的数据与上述步骤(4)输入到上述配电自动化系统主实时库的对应数据是否一致，及时将所述配电自动化系统主实时库中缺少的数据更新到该主实时库中；(6)、将经过步骤(4)更新到所述配电自动化系统主实时库中的数据，采用文件方式存储到该配电自动化系统的服务器的本地硬盘上；(7)、将步骤(6)以文件方式存储到配电自动化系统的服务器本地硬盘上的数据，使用常规方法导入该配电自动化系统的历史库中永久储存。实施例2 (1)、用至少两台配电自动化系统前置机分别通过至少一个通道与接入的配电终端相连，使用常规方法采集接入的配电终端所辖配电网包括遥测、遥信及SOE在内的运行数据；(2)、按照2009年7月22日中华人民共和国国家能源局发布的DL/ T634. 5104-2009《远动设备及系统》第5 104部分记载的传输规约采用标准传输协议子集的IEC 60870-5-101网络访问的要求，使用常规方法，通过上述配电自动化系统前置机对上述步骤(1)采集的包括遥测、遥信及SOE在内的运行数据进行分类解释处理，然后再对经过分类解释处理的运行数据，使用常规方法进行工程化处理得工程数据；(3)、通过上述配电自动化系统前置机，对上述步骤( 所获工程数据按照上述配电终端的通道进行内存缓存，内存缓存时间控制在25 35秒钟范围内；步骤⑷同实施例1 ；(5)、在上述通道进行主备切换，然后，使用常规方法比较并核对上述步骤(3)中配电自动化系统前置机缓存的数据与上述步骤(4)输入到上述配电自动化系统主实时库的对应数据是否一致，及时将所述配电自动化系统主实时库中缺少的数据更新到该主实时库中；(6)、将经过步骤( 更新到所述配电自动化系统主实时库中的数据，采用文件方式存储到该配电自动化系统的服务器的本地硬盘上；步骤(7)同实施例1。
权利要求
1. 一种数据防丢失处理方法，该方法为下述步骤(1)、用至少两台配电自动化系统前置机分别通过至少一个通道与接入的配电子站或接入的配电终端相连，使用常规方法采集接入的配电子站包括遥测、遥信及SOE在内的运行数据或接入的配电终端所辖配电网包括遥测、遥信及SOE在内的运行数据；O)、按照1991年11月4日中华人民共和国能源部发布的DL451-91《循环式远动规约》、2002年9月16日中华人民共和国国家经济贸易委员会发布的DL/T 634. 5101-2002《远动设备及系统》第5 101部分记载的传输规约基本远动任务配套标准，或2009年7月22 日中华人民共和国国家能源局发布的DL/T 634. 5104-2009《远动设备及系统》第5 104 部分记载的传输规约采用标准传输协议子集的IEC 60870-5-101网络访问的要求，使用常规方法，通过上述配电自动化系统前置机对上述步骤(1)采集的包括遥测、遥信及SOE在内的运行数据进行分类解释处理，然后再对经过分类解释处理的运行数据，使用常规方法进行工程化处理得工程数据；(3)、通过上述配电自动化系统前置机，对上述步骤( 所获工程数据按照上述配电子站的通道或上述配电终端的通道进行内存缓存，内存缓存时间控制在25 35秒钟范围内；G)、将上述步骤( 所获工程数据输入到上述配电自动化系统的主实时库中；(5)、在上述配电自动化系统前置机节点进行主备切换或上述通道进行主备切换，然后，使用常规方法比较并核对上述步骤(3)中主前置机缓存的数据与上述步骤(4)输入到上述配电自动化系统主实时库的对应数据是否一致，及时将所述配电自动化系统主实时库中缺少的数据更新到该主实时库中；(6)、将经过步骤(4)或步骤( 更新到所述配电自动化系统主实时库中的数据，采用文件方式存储到该配电自动化系统的服务器的本地硬盘上；(7)、将步骤(6)以文件方式存储到配电自动化系统的服务器本地硬盘上的数据，使用常规方法导入该配电自动化系统的历史库中永久储存。
全文摘要
本发明的一种数据防丢失处理方法为下述步骤(1)数据采集；(2)数据处理；(3)数据缓存；(4)数据入实时库；(5)数据比对；(6)数据存本地文件；(7)数据入历史库。该方法1、采用最佳缓存时间进行数据缓存，保证了数据不丢失，保证了系统运行指标，满足了电力行业标准的要求；2、配电自动化系统前置机切换或通道切换后，进行数据比对，可保证数据不丢失，避免相同数据进入实时库；3、两级存储方式的使用，避免了商用数据库出现连接失败或连接错误等异常情况造成的数据丢失，进一步提高了系统的数据安全性和系统可靠性。
文档编号G06F12/16GK102360341SQ20111031987
公开日2012年2月22日 申请日期2011年10月20日 优先权日2011年10月20日
发明者冷华, 周俊, 彭高辉, 李海燕, 王海力, 葛亮, 赵凤青, 赵玉, 车红卫, 郭庆武 申请人:北京四方继保自动化股份有限公司, 湖南省电力公司科学研究院