监控数据的处理方法及装置的制造方法
【技术领域】
[0001]本发明涉及数据处理领域，具体而言，涉及一种监控数据的处理方法及装置。
【背景技术】
[0002]随着智能化生产的发展，越来越多的工业生产可实现智能控制。为了使智能控制更加精确，需要提高对智能化生产过程的监控的细致程度，因此需要布设成千上万的监控点来实施监控。规模越大的智能化生产，其需要布设的监控点将越多。同时，为了更加及时的了解到每个监控点的数据变化，对每个监控点均以秒为单位并且以固定的时间间隔进行数据采集，由此带来大规模的采集产生的监控数据。传统的数据处理方式一般为直接保存每次采样的监控数据到磁盘上，这种数据处理方式仅能满足于监控点较少的情况，随着智能化生产中需要布设的监控点越来越多，数据处理面临着越来越大的挑战，对数据保存的I/o瓶颈将成为该数据处理方式的最大瓶颈。其中，I/O为input/output的简称，即为输入/输出设备。
[0003]针对上述的保存大规模监控数据时存储效率低的问题，目前尚未提出有效的解决方案。
【发明内容】
[0004]本发明实施例提供了一种监控数据的处理方法及装置，以至少解决保存大规模监控数据时存储效率低的技术问题。
[0005]根据本发明实施例的一个方面，提供了一种监控数据的处理方法，该处理方法包括:获取各个监控点的第一监控数据；分别对各个监控点的第一监控数据进行过滤，得到第二监控数据；保存第二监控数据至数据库。
[0006]进一步地，分别对各个监控点的第一监控数据进行过滤，得到第二监控数据包括:获取各个监控点的预设过滤条件，其中，预设过滤条件基于对应的监控点对应的数据类型而预先设置的；分别使用各个监控点的预设过滤条件对各个监控点的第一监控数据进行过滤，得到第二监控数据。
[0007]进一步地，分别使用各个监控点的预设过滤条件对各个监控点的第一监控数据进行过滤，得到第二监控数据包括:判断监控点的当前时刻的第一监控数据的值与上一时刻的第一监控数据的值是否不同，其中，当前时刻与上一时刻间隔预设时间；若当前时刻的第一监控数据的值与上一时刻的第一监控数据的值不同，判断当前时刻的第一监控数据与上一时刻的第一监控数据的差值是否大于监控点的预设阈值；若当前时刻的第一监控数据与上一时刻的第一监控数据的差值大于预设阈值，判断出当前时刻的第一监控数据满足监控点的预设过滤条件，保留当前时刻的第一监控数据得到第二监控数据。
[0008]进一步地，在获取各个监控点的预设过滤条件之前，处理方法还包括:获取各个监控点对应的数据类型，其中，监控点对应的数据类型用于指示监控点所采集数据的重要级别；基于各个监控点对应的数据类型设置各个监控点的预设过滤条件，其中，数据类型相同的监控点的预设过滤条件相同，若第一监控点对应的数据类型所指示的重要级别高于第二监控点对应的数据类型所指示的重要级别，则设置给第一监控点的预设过滤条件中的预设阈值小于设置给第二监控点的预设过滤条件中的预设阈值，监控点包括第一监控点和第二监te点ο
[0009]进一步地，在基于各个监控点对应的数据类型设置各个监控点的预设过滤条件之前，处理方法包括:设置各个监控点的访问标识；在基于各个监控点对应的数据类型设置各个监控点的预设过滤条件之后，处理方法还包括:记录各个监控点、监控点的访问标识以及监控点的预设过滤条件之间的对应关系。
[0010]进一步地，保存第二监控数据至数据库包括:将第二监控数据保存入内存数据库；每隔预设时间段以事务的方式将内存数据库中存储的数据存入磁盘数据库。
[0011]进一步地，在获取各个监控点的第一监控数据之后，处理方法包括:在接收到第一访问请求之后，输出第一监控数据；在得到第二监控数据之后，处理方法包括:在接收到第二访问请求之后，输出第二监控数据。
[0012]根据本发明实施例的一个方面，提供了一种监控数据的处理装置，该处理装置包括:第一获取模块，用于获取各个监控点的第一监控数据；过滤模块，用于分别对各个监控点的第一监控数据进行过滤，得到第二监控数据；
[0013]保存模块，用于保存第二监控数据至数据库。
[0014]进一步地，过滤模块包括:第二获取模块，用于获取各个监控点的预设过滤条件，其中，预设过滤条件基于对应的监控点对应的数据类型而预先设置的；过滤子模块，用于分别使用各个监控点的预设过滤条件对各个监控点的第一监控数据进行过滤，得到第二监控数据。
[0015]进一步地，过滤子模块包括:第一判断模块，用于判断监控点的当前时刻的第一监控数据的值与上一时刻的第一监控数据的值是否不同，其中，当前时刻与上一时刻间隔预设时间；第二判断模块，用于若当前时刻的第一监控数据的值与上一时刻的第一监控数据的值不同，判断当前时刻的第一监控数据与上一时刻的第一监控数据的差值是否大于监控点的预设阈值；第三判断模块，用于若当前时刻的第一监控数据与上一时刻的第一监控数据的差值大于预设阈值，判断出当前时刻的第一监控数据满足监控点的预设过滤条件，保留当前时刻的第一监控数据得到第二监控数据。
[0016]进一步地，处理装置还包括:第三获取模块，用于在获取各个监控点的预设过滤条件之前，获取各个监控点对应的数据类型，其中，监控点对应的数据类型用于指示监控点所采集数据的重要级别；第一设置模块，用于基于各个监控点对应的数据类型设置各个监控点的预设过滤条件，其中，数据类型相同的监控点的预设过滤条件相同，若第一监控点对应的数据类型所指示的重要级别高于第二监控点对应的数据类型所指示的重要级别，则设置给第一监控点的预设过滤条件中的预设阈值小于设置给第二监控点的预设过滤条件中的预设阈值，监控点包括第一监控点和第二监控点。
[0017]进一步地，处理装置包括:第二设置模块，用于在基于各个监控点对应的数据类型设置各个监控点的预设过滤条件之前，设置各个监控点的访问标识；记录模块，用于在基于各个监控点对应的数据类型设置各个监控点的预设过滤条件之后，记录各个监控点、监控点的访问标识以及监控点的预设过滤条件之间的对应关系。
[0018]进一步地，保存模块包括:第一保存子模块，用于将第二监控数据保存入内存数据库；第二保存子模块，用于每隔预设时间段以事务的方式将内存数据库中存储的数据存入磁盘数据库。
[0019]进一步地，处理装置还包括:第一输出模块，用于在获取各个监控点的第一监控数据之后，在接收到第一访问请求之后，输出第一监控数据；第二输出模块，用于在得到第二监控数据之后，在接收到第二访问请求之后，输出第二监控数据。
[0020]在本发明实施例中，在获取各个监控点的第一监控数据后，分别对各个监控点的第一监控数据进行过滤，得到过滤后的第二监控数据，保存第二监控数据至数据库，避免了将全部的监控数据同时存入数据库导致的存储效率过低的现象，通过上述实施例，解决了保存大规模监控数据时存储效率低的问题，从而实现了对大规模监控数据进行高效存储的效果。
【附图说明】
[0021]此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中:
[0022]图1是根据本发明实施例的一种监控数据的处理方法的流程图；
[0023]图2是根据本发明实施例的一种可选的设置监控数据的过滤条件的原理框图；
[0024]图3是根据本发明实施例的一种可选的监控点设置的原理框图；
[0025]图4是根据本发明实施例的一种可选的监控点和访问标识关系的原理框图；
[0026]图5是根据本发明实施例的一种可选的监控数据的处理方法的流程图；
[0027]图6是根据本发明实施例的一种监控数据的处理装置的示意图。
【具体实施方式】
[0028]为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
[0029]需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括