一种复杂监控网络中的数据打包方法及系统与流程

本发明涉及通信技术领域，尤其涉及一种复杂监控网络中的数据打包方法及系统。

背景技术：

在复杂监控网络中，由于测点数量庞大，数据采集中心往往承担着巨大的网络连接与数据解析负担。系统中，利用多个汇集单元，可以对其下属的测点进行有效的组织与管理，如图1所示。通过汇集单元对数据进行组合打包上传，可以有效地减少网络连接与数据发送次数。合适的数据打包方法能够大量减轻上级数据单元的负担，优化系统运行。

对于监控网络中测点数量多、监测数据总量大且上传周期要求各异情况，有以下问题需要考虑：

第一、发送过程中如果产生错误，往往会导致整个数据帧的重发。如果组合而成的数据包字节数过大，则更容易造成误码而导致重发，继而同样增加了发送总次数；如果数据包字节数过短，则直接增加了分组数以及协议头等开支，增加了系统的连接与解析负担。

第二、分组导致了组中数据的上传周期降低到组内的上传周期最小值。减小数据的上传周期，相当于增加整体传输的数据量，也是对系统负担的加大。而测点数据上传周期上限由用户自主设定，且网络中测点的增添也可看作是动态随机的，因而以上传周期为标准的分组边界难以简单界定。

技术实现要素：

本发明为了解决上述问题，提出了一种复杂监控网络中的数据打包方法及系统，本发明针对测点数量多、监测数据总量大、数据上传周期各异的监控网络，利用多尺度组合建模并优化求解方法，使复杂网络中网络连接与数据发送次数达到最小，从而减轻上级数据中心的连接与解析负担，提高了系统的运行效率。

为了实现上述目的，本发明采用如下技术方案：

一种复杂监控网络中的数据打包方法，将信道的误码率与测点数据的上传周期要求作为参数，建立包含时间的多尺度约束的优化模型，利用基于种群的启发式算法求解，以实现网络连接与数据发送次数的最小化。

进一步的，预设多个固定格式与内容的数据帧，将接收到的数据与其预设的数据进行对比，从而计算得出汇集单元与上级数据单元之间的信道误码率。

进一步的，建立优化模型时采集测点的数量、各测点标识名、各测点数据的上传周期上限、各测点每次上传的字节数和传输协议所需要添加的固定字节数。

进一步的，优化模型的目标函数为单位时间内所有测点组的数据传输次数总和最小。

进一步的，优化模型的约束条件包括第j组测点的数据传输时间间隔与第i个测点是否在j组中的布尔变量的乘积小于等于第i个测点的上传周期要求。

具体的，优化模型为：

s.t.kj＝nj/tj(2)

tj·xij≤ii(6)

其中，k表示单位时间内所有测点组的数据传输次数总和，jmax表示求解过程中所得到的j的最大值，kj表示单位时间内第j组测点的数据传输次数，nj表示成功传输第j组数据所对应的实际发送次数期望，tj表示第j组测点的数据传输时间间隔，pj表示第j组测点的数据所打包而成的数据帧的误帧率，w表示求取数学期望过程中的中间变量，lj表示第j组测点的数据包大小，pe表示汇集单元与上级数据单元之间信道的误码率，la表示协议封装所需要的固定字节数，n表示汇集单元下的测点总数，ai表示第i个测点每次发送的数据量，xij表示第i个测点是否在j组中的布尔变量，ii表示第i个测点的上传周期要求。

进一步的，按照上传周期大小，对测点进行排序；通过误码率与最佳帧长的对照表，获得当前误码率下的最佳帧长；按照顺序将测点每次发送的数据量进行累加至接近或首次超过最佳帧长，并将参与该次求和的测点划分为一组，其后此和清零，并继续向后进行累加，重复此过程至结束，由此快速获取一个直观较优组合。

进一步的，在求解过程中，将直观的较优解作为一个初始解，对优化模型进行求解。这样的做法可以明显提高求解的速度与质量。

优选的，利用粒子群算法对优化模型进行求解，得到数据打包的最优组合方案。

一种复杂监控网络中的数据打包系统，包括上级数据单元、汇集单元和建模及求解服务器，其中：

所述上级数据单元向汇集单元发送非校验的预设数据帧，汇集单元将直接接收到的数据与预设的数据帧进行对比，计算汇集单元与上级数据单元之间传输信道的误码率；读取传输协议所需添加的固定字节数、汇集单元下的测点数量、各测点的数据上传周期设置与各测点每次上传的数据量大小；

建模及求解服务器，被配置为根据汇集单元获得的参数，构建含时间多尺度约束、以发送次数最少为优化目标的混合整数规划优化模型；并利用启发式算法对优化模型进行求解，得到数据打包的最优组合方案。

与现有技术相比，本发明的有益效果为：本发明能有效地对数量庞大、种类各异的现场测点进行优化管理，通过减少网络连接与解析次数，减轻上级数据中心的运行负担，提高系统运行效率，应用范围广泛，可应用于企业生产过程、智能建筑系统等复杂监控网络。

附图说明

构成本申请的一部分的说明书附图用来提供对本申请的进一步理解，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。

图1为含汇集单元的监控网络组织结构示意图；

图2为本发明一种复杂监控网络的数据打包方法的流程图。

具体实施方式：

下面结合附图与实施例对本发明作进一步说明。

应该指出，以下详细说明都是例示性的，旨在对本申请提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本申请所属技术领域的普通技术人员通常理解的相同含义。

需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本申请的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。

正如背景技术所介绍的，现有技术中存在对于监控网络中测点数量多、监测数据总量大且上传周期要求各异情况，现有的打包方法存在以上传周期为标准的分组边界难以简单界定、增加系统的连接和解析负担的不足，为了解决如上的技术问题，本申请提出了一种复杂监控网络的数据打包优化方法。本发明的整体思路在于，将信道的误码率与测点数据的上传周期要求作为参数，利用基于种群的启发式算法，求解所建立含时间多尺度约束的优化模型，以实现发送次数的最小化；同时，在求解过程中，将直观的较优解作为一个初始解，可明显提高求解的速度与质量。

本申请的一种典型的实施方式中，如图1所示，提供了一种复杂监控网络中的数据打包优化系统，包括上级数据单元、汇集单元和建模及求解服务器，其中：

汇集单元接收各个现场采集设备采集的相关数据，所述上级数据单元向汇集单元发送非校验的预设数据帧，汇集单元将直接接收到的数据与预设的数据帧进行对比，计算汇集单元与上级数据单元之间传输信道的误码率；读取传输协议所需添加的固定字节数、汇集单元下的测点数量、各测点的数据上传周期设置与各测点每次上传的数据量大小；

建模及求解服务器，被配置为根据汇集单元获得的参数，构建含时间多尺度约束、以发送次数最少为优化目标的混合整数规划优化模型；并利用启发式算法对优化模型进行求解，得到数据打包的最优组合方案。

如图2所示，本发明提供的复杂监控网络中的数据打包方法，包括按顺序执行的下列步骤：

步骤1：获取汇集单元与上级数据单源间的信道误码率与汇集单元下的测点信息，具体包含以下子步骤：

步骤1.1：在汇集单元与上级数据单元中，预设多个固定格式与内容的数据帧；在汇集单元的申请下，上级数据单元将预设的数据帧逐个发送至汇集单元，汇集单元对接受到的数据不进行任何误码校验或请求重发等处理；汇集单元将接收到的数据与其预设的数据进行对比，从而计算得出汇集单元与上级数据单元之间的信道误码率。

步骤1.2：将测点的数量n、各测点标识名ei、各测点数据的上传周期上限ii、各测点每次上传的字节数ai、传输协议所需要添加的固定字节数la，以配置文件的方式批量输入当汇集单元中；汇集单元通过读取该配置文件，获得上述参数。

步骤2：将步骤1中所获得的参数输入到本发明所提出的如下优化模型中：

s.t.kj＝nj/tj(2)

tj·xij≤ii(6)

其中，k表示单位时间内所有测点组的数据传输次数总和，jmax表示求解过程中所得到的j的最大值，kj表示单位时间内第j组测点的数据传输次数，nj表示成功传输第j组数据所对应的实际发送次数期望，tj表示第j组测点的数据传输时间间隔，pj表示第j组测点的数据所打包而成的数据帧的误帧率，w表示求取数学期望过程中的中间变量，lj表示第j组测点的数据包大小，pe表示汇集单元与上级数据单元之间信道的误码率，la表示协议封装所需要的固定字节数，n表示汇集单元下的测点总数，ai表示第i个测点每次发送的数据量，xij表示第i个测点是否在j组中的布尔变量，ii表示第i个测点的上传周期要求。

步骤3：使用改进的启发式算法进行求解，得到数据打包的最优组合方案，具体包含以下子步骤：

步骤3.1：按照上传周期大小，对测点进行排序；通过误码率与最佳帧长的对照表，获得当前误码率下的最佳帧长；按照顺序将测点每次发送的数据量ai进行累加至接近或首次超过最佳帧长，并将参与该次求和的测点划分为一组，其后此和清零，并继续向后进行累加，重复此过程至结束，由此快速获取一个直观较优组合。

步骤3.2：对模型进行简化，并以步骤3.1获得的直观较优组合作为一个初始解，使用粒子群算法等基于种群的启发式算法，对步骤2所述的模型进行求解，得到的xij即为最优分组方案，得到的tj即为各分组的最优上传周期。

以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

上述虽然结合附图对本发明的具体实施方式进行了描述，但并非对本发明保护范围的限制，所属领域技术人员应该明白，在本发明的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。