一种自适应的传感器数据抓取方法及装置制造方法
【专利摘要】本发明涉及一种数据抓取方法及装置，属于传感器数据处理领域，具体涉及一种自适应的传感器数据抓取方法。包括：初始化步骤、数据抓取步骤、间隔调整步骤。因此，本发明具有如下优点：1.数据抓取更加稳定，根据传感器服务的应用程序需求调整传感器数据采集频率，提高了传感器数据抓取的稳定性；2.节省带宽，通过动态调整抓取频率，减少了不必要的传感器数据抓取操作对带宽的占用。
【专利说明】一种自适应的传感器数据抓取方法及装置
【技术领域】
[0001]本发明涉及一种数据抓取方法及装置，属于传感器数据处理领域，具体涉及一种自适应的传感器数据抓取方法。
【背景技术】
[0002]传感器抓取的数据一般来说和传感器的开发者无关，所以传感器所需要抓取的数据源产生数据的频率并不能为开发者所知。如果保持单一的数据抓取频率，开发者将会面对以下问题:如果频率过高，而数据源产生数据频率很低，大量带宽将被浪费；如果频率过低，而数据源产生数据的频率很高，可能会因为传感器缓冲区有限而造成一次获取所取得的数据不能完全被传感器存储的情况。在客观世界中，不同的数据源产生数据的频率差异极大并且单一数据源产生数据的频率也会发生变化，所以传感器应该具备智能地调节数据获取频率的能力。
[0003]而目前，现有技术中并不存在一个能自动调整数据抓取频率的通用方法，导致数据抓取效率低下。因此，开发一种自适应的传感器数据抓取方法是很有必要的。
【发明内容】
[0004]本发明主要是解决现有技术所存的传感器数据抓取不能根据应用程序需要自动调整抓取频率的问题，提供了一种自适应的传感器数据抓取方法及装置，采用该方法及装置提高了传感器抓取数据的稳定性，节省了带宽。
[0005]本发明的上述技术问题主要是通过下述技术方案得以解决的:
[0006]一种自适应的传感器数据抓取方法，包括:
[0007]初始化步骤，针对特定的数据源开发传感器数据抓取模块并开辟用于存取所述数据抓取模块抓取到的数据的缓冲区，初始化所述数据抓取模块的抓取间隔为传感器所支持的最小抓取间隔；根据所述缓冲区大小设置合适的缓冲区因子；其中，缓冲区因子用于预留一定比例的缓冲区容量，即认为当缓冲区达到100*δ %时，缓冲区为满；
[0008]数据抓取步骤，所述数据抓取模块按照设定的抓取频率抓取数据，记录数据抓取模块的本次抓取间隔以及所已抓取数据条数；
[0009]间隔调整步骤，若所述已抓取数据条数不为零，则基于所述实时抓取间隔以及已抓取数据条数调整数据抓取模块的下一次抓取间隔，所述下一次抓取间隔与所述已抓取数据条数呈反比关系。
[0010]优化的，上述的一种自适应的传感器数据抓取方法，所述间隔调整步骤中，所述下一次抓取间隔的调整基于公式(I):
【权利要求】
1.一种自适应的传感器数据抓取方法，其特征在于，包括: 初始化步骤，针对特定的数据源开发传感器数据抓取模块并开辟用于存取所述数据抓取模块抓取到的数据的缓冲区，初始化所述数据抓取模块的抓取间隔为传感器所支持的最小抓取间隔，根据所述缓冲区大小设置合适的用于预留一定比例的缓冲区容量的缓冲区因子; 数据抓取步骤，所述数据抓取模块按照设定的抓取频率抓取数据，记录数据抓取模块的本次抓取间隔以及所已抓取数据条数； 间隔调整步骤，若所述已抓取数据条数不为零，则基于所述实时抓取间隔以及已抓取数据条数调整数据抓取模块的下一次抓取间隔，所述下一次抓取间隔与所述已抓取数据条数呈反比关系。
2.根据权利要求1所述的一种自适应的传感器数据抓取方法，其特征在于，所述间隔调整步骤中，所述下一次抓取间隔的调整基于公式:
，其中:Nnow为
已抓取数据条数，Tnow为本次抓取间隔，buffer_size为缓冲区大小，δ为缓冲区因子，T为下一次抓取间隔。
3.根据权利要求1所述的一种自适应的传感器数据抓取方法，其特征在于，所述间隔调整步骤中，若所述已抓取数据条数为零，则所述下一次抓取间隔的调整基于公式:
，其中:Tnow为本次抓取间隔，Tmin为传感器所支持的最快轮询频率，Tmax为由传感器所服务的应用程序需求的最大抓取间隔，T为下一次抓取间隔。
4.根据权利要求1所述的一种自适应的传感器数据抓取方法，其特征在于，还包括: 边界确定步骤，确定传感器所支持的最快轮询频率的抓取间隔Tmin，并根据传感器所服务的应用程序需求确定传感器最大抓取间隔Tmax ； 边界检测步骤，若间隔调整步骤确定的下一次抓取间隔大于传感器最大抓取间隔Tmax,则将下一次抓取间隔设置为传感器最大抓取间隔Tmax，若间隔调整步骤确定的下一次抓取间隔小于传感器最小抓取间隔Tmin，则将下一次抓取间隔设置为传感器最小抓取间隔Tmin。
5.一种自适应的传感器数据抓取装置，其特征在于，包括: 数据抓取模块，用于为特定的数据源抓取传感器数据； 初始化模块，用于开辟存取所述数据抓取模块抓取到的数据的缓冲区，并将述数据抓取模块的抓取间隔初始化为传感器所支持的最小抓取间隔； 抓取记录模块，记录数据抓取模块的本次抓取间隔以及所已抓取数据条数； 间隔调整模块，若所述已抓取数据条数不为零，则基于所述实时抓取间隔以及已抓取数据条数调整数据抓取模块的下一次抓取间隔，所述下一次抓取间隔与所述已抓取数据条数呈反比关系。
6.根据权利要求5所述的一种自适应的传感器数据抓取装置，其特征在于，所述间隔调整模块中，所述下一次抓取间隔的调整基于公式:
其中:Nnow为已抓取数据条数，Tnow为本次抓取间隔，buffer_size为缓冲区大小，δ为缓冲区因子，T为下一次抓取间隔。
7.根据权利要求5所述的一种自适应的传感器数据抓取装置，其特征在于，所述间隔调整模块中，若所述已抓取数据条数为零，则所述下一次抓取间隔的调整基于公式:
其中:Tnow为本次抓取间隔，Tmin为传感器所支持的最快轮询频率，Tmax为由传感器所服务的应用程序需求的最大抓取间隔，T为下一次抓取间隔。
8.根据权利要求5所述的一种自适应的传感器数据抓取方法，其特征在于，还包括: 边界确定模块，确定传感器所支持的最快轮询频率的抓取间隔Tmin，并根据传感器所服务的应用程序需求确定传感器最大抓取间隔Tmax ； 边界检测模块，若间隔调整步骤确定的下一次抓取间隔大于传感器最大抓取间隔Tmax,则将下一次抓取间隔设置为传感器最大抓取间隔Tmax，若间隔调整步骤确定的下一次抓取间隔小于传感器最小抓取间隔Tmin，则将下一次抓取间隔设置为传感器最小抓取间隔Tmin。
【文档编号】G06F17/40GK104182552SQ201410389516
【公开日】2014年12月3日 申请日期:2014年8月8日 优先权日:2014年8月8日
【发明者】王亚沙, 崔达, 王皓 申请人:北京大学