本发明属于无线电频谱监测数据处理技术领域，特别涉及一种频谱监测台站监测数据处理系统及数据结构化处理方法。
背景技术
随着频谱资源重要性和重视程度的提高，电磁频谱台站数量的急剧扩大，对电磁频谱监测数据处理以获取频谱使用详细状况是合理和高效进行频谱资源利用和频谱管理的基础。尤其是随着频谱网系建设的发展，频谱监测台站及不同频谱管理单位间的数据传输和处理需求不断提高，对频谱监测数据进行深度挖掘，采用大数据方法获取更多信息的要求也非常迫切。传统的电磁频谱监测数据处理方法主要是采用序贯式的关系型数据库来进行存储和处理。由于频谱监测数据具有天然的海量、分散的特点，使得传统频谱监测数据的存储和处理方法渐渐难以适应对电磁频谱数据传输和大数据处理新要求。
实际上，电磁频谱监测数据具有非常鲜明的结构化特征，监测数据的时间、频率和位置等维度的信息具有相关性，因此，针对这种特点，将监测数据的时间、频率、电平(幅度)、位置等信息关联起来，提出新的结构化数据处理系统和方法，将有利于电磁频谱数据的传输、存储和分析。
技术实现要素：
为了克服上述现有技术的缺点，在借鉴和发展方法和理论的基础上，本发明针对电磁频谱监测台站数据处理需求，提供一种频谱监测数据处理系统及方法，利用本发明提出的系统和方法，能够实现频谱监测数据的规范化处理过程，形成符合频谱监测网系要求的数据处理流程，并且给出了一种监测数据的矩阵表示及其数学运算，有利于多台站监测数据被更加合理和高效的利用。
为了实现上述目的，本发明采用的技术方案是：
一种频谱监测数据处理系统，包括：
台站校准与同步模块，用于对频谱监测台站位置校准，同步监测时钟，确定监测时间点，确定监测频谱采样点和频谱带宽要求；
监测数据预处理模块，用于完成对给定采样时刻监测数据离散化和给定时段监测数据结构化处理；
监测数据压缩处理模块，用于完成给定时段监测数据的整体压缩处理；
数据发送模块，用于将压缩后的数据传输给中心台站、数据中心或其他中继台站。
进一步地，所述台站校准与同步模块包括：
频谱监测台站位置校准单元，用于利用卫星导航定位模块获取频谱监测台站自身准确位置信息，该位置信息用来标识频谱监测数据的位置信息；
监测时间校准单元，用于利用网络、原子钟或卫星导航授时模块校准监测台站自身的时钟，经过时间校准的台站，可以实现对台站数据在时间维度上进行准确标识并实现多台站按照统一时间步长进行监测；
监测参数同步单元，用于同步获取中心台站或数据中心发来的频谱监测初始参数，例如采样时间段、监测数据采样间隔、监测的频段、监测频谱采样数等信息，这些监测参数可以用来离散化和规范化监测数据。
进一步地，所述监测数据预处理模块包括：
采样时刻数据离散化单元，用于完成对给定采样时刻监测数据离散化，在给定的频谱带宽内，按照要求的频谱采样点数，获取给定采样时刻的一维频谱监测数列；
时段监测数据结构化处理单元，用于在给定的监测时间段内，按照监测数据时间采样间隔，按照时间先后顺序将不同采样时刻频谱监测数列进行排列，组成二维频谱矩阵。
进一步地，所述监测数据压缩处理模块对给定时段监测数据组成的频谱矩阵进行压缩处理。
本发明同时提供了一种频谱监测数据处理方法，包括以下步骤：
s1：频谱监测台站校准，完成监测台站位置校准v，同步监测时钟t、同步监测时间点tn、监测频谱采样点m以及频谱带宽b，其中n取0、1、2、……、n，n为正整数；
s2：监测数据预处理，完成给定时刻监测数据离散化和给定监测时段监测数据结构化处理，获取给定采样时刻的一维频谱监测数列
s3：监测数据压缩处理，完成给定时段内监测数据w的整体压缩处理；
s4：数据发送，将压缩后的数据传输给中心台站、数据中心或其他中继台站。
进一步地，所述步骤s2中，所述监测数据预处理包括以下步骤：
s2.1：获取采样时刻tn频谱监测数据；
s2.2：在给定的频谱带宽b内，按照要求的频谱采样点数m，对数据进行离散化，获取给定采样时刻的一维频谱监测数列
s2.3：给定的监测时间段，按照监测数据时间采样间隔，获取不同采样时刻频谱监测数列
s2.4：按照时间先后顺序将不同采样时刻频谱监测数列进行排列，组成二维频谱矩阵
s2.5：每个二维频谱矩阵w，额外附带监测信息，包括监测台站位置信息、采样时间及间隔、频带。
进一步地，所述步骤s3中，所述监测数据压缩处理包括以下步骤
s3.1：获取二维频谱矩阵
s3.2：将二维频谱矩阵w映射为一定位数的灰度图g；
s3.3：对灰度图g采用图像压缩方法进行压缩处理。
进一步地，所述步骤s4中，所述数据发送包括以下步内容：
s4.1：压缩后的灰度图g；
s4.2：g对应的二维频谱矩阵w的最大值、最小值；
s4.3：二维频谱矩阵w对应的台站位置、采样时间及间隔、频带信息。
与现有技术相比，本发明的有益效果是：本发明所述一种频谱监测数据处理系统能够统一频谱监测数据的规范化处理过程，形成符合频谱监测网系要求的数据处理流程，并且给出了一种监测数据的矩阵表示及其数学运算，有利于多台站监测数据被更加合理和高效的利用。
附图说明
图1为本发明所述频谱监测数据处理系统应用场景示意图。
图2为本发明所述频谱监测数据处理系统组成的结构框图。
图3为本发明频谱监测数据频谱矩阵示意图。
图4为利用频谱分析仪采集到的监测数据在时间-频率二维空间取值示例。
图5为某台站频谱监测数据频谱矩阵灰度图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和出示的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明主要应用台站频谱监测数据的压缩、传输，有利于多台站监测数据被更加合理和高效的利用。图1为本发明实施例所提供的一种频谱监测数据处理系统应用场景示意图。
图2为本发明所述频谱监测数据处理系统组成的结构框图。
参照图2，本发明频谱监测数据处理系统，包括台站校准模块、监测数据预处理模块、监测数据压缩处理模块、数据发送模块。其中，台站校准模块，用于对频谱监测台站位置校准、同步监测时钟、同步监测时间点、确定监测频谱采样点、频谱带宽要求；监测数据预处理模块，用于完成对给定时刻监测数据离散化和给定监测时段监测数据结构化处理；监测数据压缩处理模块，用于完成给定时段内监测数据的整体压缩处理；数据发送模块，用于将压缩后的数据传输给中心台站、数据中心或其他中继台站。
频谱监测数据处理系统中的台站校准模块包括频谱监测台站位置校准单元、监测时间校准单元、监测参数同步单元。其中，频谱监测台站位置校准单元，用于利用卫星导航定位模块获取频谱监测台站自身准确位置信息，该位置信息用来标识频谱监测数据的位置信息；监测时间校准单元，用于利用网络、原子钟或卫星导航授时模块校准监测台站自身的时钟，经过时间校准的台站，可以实现对台站数据在时间维度上进行准确标识并实现多台站按照统一时间步长进行监测；监测参数同步单元，用于同步获取中心台站或数据中心发来的频谱监测初始参数，例如采样时间段、监测数据采样间隔、监测的频段、监测频谱采样数等信息，这些监测参数可以用来离散化和规范化监测数据。
频谱监测数据处理系统中的监测数据预处理模块包括采样时刻数据离散化单元和时段监测数据结构化处理单元。其中，采样时刻数据离散化单元，用于完成对给定采样时刻监测数据离散化，在给定的频谱带宽内，按照要求的频谱采样点数，获取给定采样时刻的一维频谱监测数列；时段监测数据结构化处理单元，用于在给定的监测时间段内，按照监测数据时间采样间隔，按照时间先后顺序将不同采样时刻频谱监测数列进行排列，组成二维频谱矩阵。
频谱监测数据处理系统中的监测数据压缩处理模块，用于对给定时段监测数据组成的频谱矩阵进行压缩处理。
基于频谱监测数据处理系统，本发明频谱监测数据处理方法，包括以下步骤：
s1：频谱监测台站校准，完成监测台站位置校准v、同步监测时间t、同步监测时间点tn(0…n)、监测频谱采样点m以及频谱带宽b等参数；
s2：监测数据预处理，完成给定时刻监测数据离散化和给定监测时段监测数据结构化处理，获取给定采样时刻的一维频谱监测数列
s3：监测数据压缩处理，完成给定时段内监测数据w的整体压缩处理；
s4：数据发送，将压缩后的数据传输给中心台站、数据中心或其他中继台站。
在上述一种频谱监测数据处理方法的步骤s2监测数据预处理中包括以下步骤：
s2.1：获取采样时刻tn频谱监测数据；
s2.2：在给定的频谱带宽b内，按照要求的频谱采样点数m，对数据进行离散化，获取给定采样时刻的一维频谱监测数列
s2.3：给定的监测时间段，按照监测数据时间采样间隔，获取不同采样时刻频谱监测数列
s2.4：按照时间先后顺序将不同采样时刻频谱监测数列进行排列，组成二维频谱矩阵
s2.5：每个二维频谱矩阵w，额外附带监测信息，包括监测台站位置信息、采样时间及间隔、频带等。
在上述一种频谱监测数据处理方法的步骤s3监测数据压缩处理中包括以下步骤：
s3.1：获取二维频谱矩阵
s3.2：将二维频谱矩阵w映射为一定位数的灰度图g；
s3.3：对灰度图g采用图像压缩方法进行压缩处理。压缩方法可以选择jpeg或jpeg2000。
在上述一种频谱监测数据处理方法的步骤s4数据发送中包括以下步骤：
s4.1：压缩后的灰度图g；
s4.2：g对应的二维频谱矩阵w的最大值、最小值；
s4.3：二维频谱矩阵w对应的台站位置、采样时间及间隔、频带等信息。
图4为利用频谱分析仪在临潼某处获得的频谱监测数据在时间-频率二维空间取值实例，时间域取了50个采样时刻，采样带宽是500mhz，频率域采样点数是501，频谱矩矩阵w为50×501维。
图5为将图4数据映射为8阶灰度得到的频谱矩阵灰度图。