一种数据类型差异化采集频率确定方法和系统与流程

【】本发明属于数据采集，尤其涉及一种数据类型差异化采集频率确定方法和系统。

背景技术

0、
背景技术：

1、随着世界人口的增长和经济的发展，能源供应的需求量日益增加，城市的能源供应、能耗管理相关数据采集逐渐成为越来越重要的城市管理组成部分，尤其是对于城市中的电能、气能、工业能耗等数据的采集，能源供应管网结构相关方面数据的采集，对可能发生的异常情况的相关数据的采集等，这些数据的采集对于城市发展规划和提高生活质量都具有重要的意义。为了获取这些数据，往往是通过对于能源管网结构创建分布式的采集方式，通过构建以传感器为核心的采集节点的方式构建采集分布式集成系统，由数据采集设备直接连接到传感器、或者直接使得数据采集设备包含传感器的方式，形成一个基于多类型传感器的分布式集成网络系统。从上面的内容可以看出，因为对采集数据的使用方式不同导致需要采集的数据类型，后期可能的处理方式，以及对数据种类数据精度的要求都是不同的，这就涉及的大量类型、巨大数量的传感器，而不同传感器所采用的采集频率是和每种采集数据的类型相对应的，现有技术中往往是按照专家经验，或者是传感器设备本身的工作方式来确定采集频率，传统方式中，虽然不同类型的传感器或者不同采集节点的传感器设置的采集频率是不同的，但是，这显然是一种非常被动的处理方式，往往还是取决于传感器本身的采集能力和设置专家的专家意见和习惯；但是，从传感器采集到的数据本身出发，由于每种采集数据类型因为其内在属性不同，所以其所需要的采集频率是不同的，只有准确的确定合适的采集频率才是一个最高效的处理方式；

2、本发明从数据处理方式以及需要满足目标值出发，针对不同类型的采集数据量化计算能够满足处理需求和目标值的最低采集频率，并最终提高了采集效率。

技术实现思路

0、
技术实现要素：

1、为了解决现有技术中的上述问题，本发明提出了一种数据类型差异化采集频率确定方法，所述方法包含：

2、步骤s1：获取并存储各种类型采集数据的历史采集数据；

3、步骤s2：根据采集数据的处理方式获取和每种采集数据类型关联的第一采集频率；其中：所述第一采集频率是为了满足处理方式的需求，每种类型采集数据需要满足的最低采集频率；

4、步骤s3：根据每种类型采集数据的变化情况确定和采集数据类型相关的第二采集频率；其中：第二采集频率是能够感知所述采样数据类型的采集数据变化情况的最低采集频率；

5、步骤s4：基于第一采集频率和第二采集频率确定和采集类型相关的类型采集频率。

6、进一步的，采集设备中设置有存储设备，用于暂存采集数据。

7、进一步的，所述步骤s2具体包括如下步骤：

8、步骤s21：对于处理方式中每种类型的采集数据单独出现的处理步骤中，从处理步骤中获取采集数据的独立需求频率；

9、步骤s22：对于处理方式中多种类型的采集数据组合出现的处理步骤中，从处理步骤中获取每种采集数据的需求频率之间的关系；

10、步骤s23：基于所述需求频率和需求频率之间的关系，计算每种类型采集数据的第一采集频率；具体为：针对每种待处理类型，从所述待处理类型的独立需求频率，以及根据其他类型采集数据的需求频率和所待处理类型的需求频率之间的关系计算出的所述待处理类型的需求频率中，选择其中的最高者作为和所述待处理类型对应的第一采集频率；

11、所述步骤s3具体包括如下步骤：

12、步骤s31：针对每种类型的采集数据以高频率进行数据采集保持第一样本时间长度以获取样本采集数据；基于样本采集数据计算样本采集数据的变化次数；所述变化次数是指样本采集数据的数值发生有效变化的次数；

13、步骤s32：以第一频率进行数据采集保持第一样本时间长度以获取当前样本采集数据；基于当前样本采集数据计算当前变化次数；当前变化次数是指当前样本采集数据的数值发生有效变化的次数；其中：首次进入该步骤时，设置第一频率等于高频率减去预设减少值；

14、步骤s33：计算当前变化次数和样本变化次数之间的比值，将所述比值作为当前敏感度，判断所述当前敏感度是否大于等于预设敏感度；如果是，则以预设减少值降低第一频率，并返回步骤s32，否则，将第一频率作为和所述类型对应的第二采集频率。

15、进一步的，当需求频率之间的关系存在多组时，依次针对每组关系计算需求频率。

16、进一步的，采集设备通过近距离无线通信或者远距离无线通信的方式提供采集数据。

17、一种数据类型差异化采集频率确定系统，所述系统包含：用户终端、前端分析终端、分析节点；

18、所述用户终端使得用户发送采集频率确定请求给前端分析终端；还用于基于所获取的采集频率设置不同类型采集设备的采集频率；

19、前端分析终端用于执行所述的数据类型差异化采集频率确定方法，并将所述确定的采集频率发送给用户终端；

20、分析节点用于获取采集设备采集到采集数据，并使用所述采集数据根据预设的处理方式进行分析处理。

21、一种数据类型差异化采集频率确定大数据系统，所述系统包含：用户终端、大数据边缘节点、大数据节点；

22、所述用户终端使得用户发送采集频率确定请求给大数据边缘节点；

23、大数据边缘节点用于执行所述的数据类型差异化采集频率确定方法以确定采集频率；并将所述确定的采集频率发送给用户终端；

24、用户终端用于基于所获取的采集频率设置不同类型采集设备的采集频率；

25、大数据节点用于获取采集设备采集到采集数据，并使用所述采集数据根据预设的处理方式进行分析处理。

26、进一步的，所述用户终端为多个。

27、一种计算机可读存储介质，包括程序，当其在计算机上运行时，使得计算机执行所述的数据类型差异化采集频率确定方法。

28、一种计算机设备，包括处理器，所述处理器和存储器耦合，所述存储器存储有程序指令，当所述存储器存储的程序指令被所述处理器执行时实现所述的数据类型差异化采集频率确定方法。

29、本发明的有益效果包括：

30、(1)从数据处理方式以及需要满足目标值出发，针对不同类型的采集数据量化计算能够满足上述方式和目标值的最低采集频率，使得该最低采集频率不仅仅能够满足针对一种独立类型，还能够满足不同数据类型之间的依赖使用关系；(2)在最低采集频率的基础上，通过计算综合增益和增量增益的方式，对每种类型选择最佳采集频率，使得系统整体的采集效率得到有效提高。

技术特征：

1.一种数据类型差异化采集频率确定方法，其特征在于，包括：

2.根据权利要求1所述的数据类型差异化采集频率确定方法，其特征在于，采集设备中设置有存储设备，用于暂存采集数据。

3.根据权利要求2所述的数据类型差异化采集频率确定方法，其特征在于，

4.根据权利要求3所述的数据类型差异化采集频率确定方法，其特征在于，当需求频率之间的关系存在多组时，依次针对每组关系计算需求频率。

5.根据权利要求4所述的数据类型差异化采集频率确定方法，其特征在于，采集设备通过近距离无线通信或者远距离无线通信的方式提供采集数据。

6.一种数据类型差异化采集频率确定系统，其特征在于，所述系统包含：用户终端、前端分析终端、分析节点；

7.一种数据类型差异化采集频率确定大数据系统，其特征在于，所述系统包含：用户终端、大数据边缘节点、大数据节点；

8.根据权利要求7所述的数据类型差异化采集频率确定大数据系统，其特征在于，所述用户终端为多个。

9.一种计算机可读存储介质，其特征在于，包括程序，当其在计算机上运行时，使得计算机执行如权利要求1-5中任一项所述的数据类型差异化采集频率确定方法。

10.一种计算机设备，其特征在于，包括处理器，所述处理器和存储器耦合，所述存储器存储有程序指令，当所述存储器存储的程序指令被所述处理器执行时实现如权利要求1-5中任一项所述的数据类型差异化采集频率确定方法。

技术总结
本发明涉及一种数据类型差异化采集频率确定方法和系统，所述方法包括:步骤S1：获取并存储各种类型采集数据的历史采集数据；步骤S2：根据采集数据的处理方式获取和每种采集数据类型关联的第一采集频率；步骤S3：根据每种类型采集数据的变化情况确定和采集数据类型相关的第二采集频率；步骤S4：基于第一采集频率和第二采集频率确定和采集类型相关的类型采集频率。本发明从数据处理方式以及需要满足目标值出发，针对不同类型的采集数据量化计算能够满足处理需求和目标值的最低采集频率，提高了采集效率。

技术研发人员：王佑强,曹锐
受保护的技术使用者：上海川济管网技术有限公司
技术研发日：
技术公布日：2024/1/12