网络分析设备准确性的检测方法与系统的制作方法
【专利摘要】本发明公开了一种网络分析设备准确性的检测方法与系统。该方法包括：针对LTE网络的特点，定义网络忙闲状态的第一指标与第二指标以及基于两个指标值判定LTE网络处于忙状态的条件。第一指标值与第二指标值分别为小区激活用户个数占小区理论接入用户个数的比例与小区物理资源利用率PRB。通过模拟多个激活用户访问多种业务，设置第一检测环境，根据网络分析设备的分析结果，以及判定LTE网络处于忙状态的条件输出网络分析设备准确性的检测结果。本发明提供的技术方案，在考虑LTE网络忙闲状态时，不仅考虑了物理资源的占用情况，还考虑了用户的业务感受，提供了更符合LTE网络特点的网络分析设备准确性检测。
【专利说明】网络分析设备准确性的检测方法与系统
【技术领域】
[0001]本发明涉及测试领域，特别涉及一种网络分析设备准确性的检测方法与系统。
【背景技术】
[0002]随着移动用户的迅速增长，网络负荷状态分析越来越受到运营商的重视，如何准确测试网络的忙闲状态受到越来越来多的关注。移动蜂窝网络忙闲的标准是多维度的，例如网络的忙碌状态可能是无线资源缺乏造成的拥塞，也可能是核心网或传输资源的不足导致网络的低效率。作为移动通信网络来说，由于频谱资源的紧张，空口资源是端到端资源的瓶颈。
[0003]网络分析设备厂家针对长期演进(LTE,Long Term Evolution)复杂的业务模型特点设计出了多种网络忙闲状态分析设备，由这些设备完成对网络忙闲状态的分析。
[0004]为了检验这些网络分析设备对网络忙闲状态判断的准确性，传统的测试方法包括现网检测方法和实验室检测方法。传统的现网检测方法通常是将网络分析设备部署在现网中，基于现网中的用户和业务进行验证，然而，这种现网测试方法，由于网络中的用户具有移动性和随机性的特点，测试不可控，比较难以构造测试条件，测试场景难以复现。
[0005]传统的实验室检测方法则是采用测试仪表模拟被测网络分析设备的周边网元，但是，这种方法不能同时模拟多用户加载不同的业务类型，用户面仅能按照指定的模型发包，并非真正地访问业务服务器。实际上，当网络发生拥塞的时候，用户和服务器侧均会根据收到的数据报文情况，例如时延、丢包等情况，自适应地调整发包速率。因此，传统的实验室检测方法不能构造出真实的现网环境。
[0006]现有的网络分析设备准确性的检测方法通常是基于单独的物理资源占用情况来进行检测。然而，对于LTE网络这样的信道共享无线网络，由于没有传统的电路域，所有的语音和数据业务均承载在分组域上，业务信道完全共享，能提供的服务带宽也成倍的增长，即使在少量用户占用了大量物理资源的情况下，新接入的用户仍然能够分配到较多的网络资源，享受较好的服务。由此可见，单独利用在2G、3G移动网络中，通过频点、时隙的占用率等单独的物理资源占用情况不能反映出网络资源的实际情况，网络分析设备的分析结果可能不符合LTE网络特点，因此，需要对网络分析设备分析结果的准确性进行更符合网络实际的检测。
【发明内容】
[0007]根据本发明实施例的一个方面，所要解决的一个技术问题是:提供一种网络分析设备准确性的检测方法与系统，以针对LTE网络的特点提供对网络分析设备准确性的检测。
[0008]本发明实施例提供的一种网络分析设备准确性的检测方法，所述检测方法包括:
[0009]设置待检测的网络分析设备监测LTE网络中的设备或接口，所述网络分析设备通过所述信令接口监测所述LTE网络的忙闲状态，其中，当所述网络分析设备满足预设的监测设置条件时，所述网络分析设备判定网络为忙状态，否则所述网络分析设备判定网络为闲状态；
[0010]模拟多个激活用户访问所述LTE网络中的多种业务；
[0011]设置第一检测环境，所述设置第一检测环境包括:控制激活用户的个数，使所述小区的第一指标值小于第一门限值，并且控制所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值小于第二门限值，其中，所述第一指标为小区激活用户个数占小区理论接入用户个数的比例，所述第二指标为小区物理资源块PRB利用率；
[0012]识别在所述第一检测环境下，所述网络分析设备是否判定网络为忙状态；
[0013]响应于在所述第一检测环境下所述网络分析设备判定网络为忙状态，则输出所述网络分析设备准确性有误的第一检测结果。
[0014]优选地，响应于所述第一检测环境下所述网络分析设备判定网络为闲状态，所述方法还包括:
[0015]设置第二检测环境，所述设置第二检测环境包括:增加激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且控制激活用户访问多种业务的业务访问量，使所述小区的第二指标值小于所述第二门限值；
[0016]识别在所述第二检测环境下，所述网络分析设备是否判定网络为忙状态；
[0017]响应于在所述第二检测环境下所述网络分析设备判定网络为忙状态，则输出所述网络分析设备准确性有误的第二检测结果。
[0018]优选地，响应于所述第二检测环境下所述网络分析设备判定网络为闲状态，所述方法还包括:
[0019]设置第三检测环境，所述设置第三检测环境包括:保持所述激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且提高所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值满足所述第二门限值；
[0020]识别在所述第三检测环境下，所述网络分析设备是否判定网络为忙状态；
[0021]响应于在所述第三检测环境下所述网络分析设备判定网络为闲状态，则输出所述网络分析设备准确性有误的第三检测结果；响应于所述第三检测环境下所述网络分析设备判定网络为忙状态，则输出所述网络分析设备准确性无误的第四检测结果。
[0022]优选地，所述控制激活用户访问多种业务的业务访问量，具体包括:通过控制激活用户访问多种业务的业务种类、访问频率、访问次数中的至少一种方式，来控制激活用户访问多种业务的业务访问量；
[0023]对应地，所述提高所述激活用户访问所述多种业务的业务访问量，具体包括:通过改变激活用户访问多种业务的业务种类、提高访问频率、增加访问次数中的至少一种方式，来提高所述激活用户访问所述多种业务的业务访问量。
[0024]优选地，所述模拟多个激活用户访问所述LTE网络中的多种业务，具体包括:
[0025]构造多个激活用户访问业务的控制信令以及访问多种业务的用户业务数据；
[0026]根据所述LTE网络的业务访问分布特点，将所述多个激活用户访问业务的控制信令与所述构造访问多种业务的用户业务数据相关联，生成多个激活用户访问所述LTE网络中的多种业务的数据包。
[0027]优选地，所述方法还包括:[0028]响应于获得所述第一检测结果，或者第二检测结果，或者第三检测结果，对所述网络分析设备的所述预设的监测设置条件进行调整。
[0029]优选地，所述第一指标中的激活用户个数为小区保持上行同步的用户个数，理论接入用户个数为预设的小区最多可接入的用户个数。
[0030]优选地，所述设置待检测的网络分析设备监测LTE网络中的设备或接口，具体包括:
[0031]设置待检测的网络分析设备监测LTE网络中Sl-MME、S1_U、SGi或者S5接口中的任意一种或多种接口 ；或者
[0032]设置待检测的网络分析设备监测LTE网络中基站、MME、SGW、PGW、无线网管中的任意一种或多种设备。无线网管可以是各种对无线侧设备的管理系统。
[0033]本发明实施例提供的一种网络分析设备准确性的检测系统，所述检测系统包括:
[0034]网络分析设备配置单元，用于设置待检测的网络分析设备监测LTE网络中的设备或接口，所述网络分析设备通过所述设备或接口监测所述LTE网络的忙闲状态，其中，当所述网络分析设备满足预设的监测设置条件时，所述网络分析设备判定网络为忙状态，否则所述网络分析设备判定网络为闲状态；
[0035]用户模拟单元，用于模拟多个激活用户访问所述LTE网络中的多种业务；设置第一检测环境，所述设置第一检测环境包括:控制激活用户的个数，使所述小区的第一指标值小于第一门限值，并且控制所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值小于第二门限值，其中，所述第一指标为小区激活用户个数占小区理论接入用户个数的比例；所述第二指标为小区物理资源块PRB利用率；
[0036]网络分析设备识别单元，用于识别在所述第一检测环境下所述网络分析设备是否判定网络为忙状态；
[0037]检测结果输出单元，用于响应于在所述第一检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性有误的第一检测结果。
[0038]优选地，响应于在所述第一检测环境下所述网络分析设备判定网络为闲状态，所述用户模拟单元，还用于设置第二检测环境，所述设置第二检测环境包括:增加激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且控制激活用户访问多种业务的业务访问量，使所述小区的第二指标值小于所述第二门限值；
[0039]所述网络分析设备识别单元，还用于识别在所述第二检测环境下所述网络分析设备是否判定网络为忙状态；
[0040]所述检测结果输出单元，还用于响应于在所述第二检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性有误的第二检测结果。
[0041]优选地，响应于在所述第二检测环境下所述网络分析设备判定网络为闲状态，所述用户模拟单元，还用于设置第三检测环境，所述设置第三检测环境包括:保持所述激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且提高所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值满足所述第二门限值；
[0042]所述网络分析设备识别单元，还用于在识别所述第三检测环境下所述网络分析设备是否判定网络为忙状态；
[0043]所述网络分析设备识别单元，还用于响应于在所述第三检测环境下所述网络分析设备判定网络为闲状态，输出所述网络分析设备准确性有误的第三检测结果；响应于所述第三检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性无误的第四检测结果。
[0044]优选地，所述用户模拟单元，具体用于通过控制激活用户访问多种业务的业务种类、访问频率、访问次数中的至少一种方式，来控制激活用户访问多种业务的业务访问量；通过改变激活用户访问多种业务的业务种类、提高访问频率、增加访问次数中的至少一种方式，来提高所述激活用户访问所述多种业务的业务访问量。
[0045]优选地，所述用户模拟单元，具体包括:
[0046]多用户信令处理模块，用于构造多个激活用户访问业务的控制信令；[0047]业务处理模块，用于构造访问多种业务的用户业务数据；
[0048]业务关联模块，用于根据所述LTE网络的业务访问分布特点，将所述多个激活用户访问业务的控制信令与所述访问多种业务的用户业务数据相进行关联，生成多个激活用户访问所述LTE网络中的多种业务的数据包。
[0049]优选地，所述系统还包括:
[0050]网络分析设备调整单元，用于响应于获得所述第一检测结果，或者第二检测结果，或者第三检测结果，对所述网络分析设备的所述预设的监测设置条件进行调整。
[0051]优选地，所述第一指标中的激活用户个数为小区保持上行同步的用户个数，理论接入用户个数为预设的小区最多可接入的用户个数。
[0052]优选地，所述网络分析设备配置单元，具体用于设置待检测的网络分析设备监测LTE网络中Sl-MME、Sl-U、SGi或者S5接口中的任意一种或多种接口 ；或者设置待检测的网络分析设备监测LTE网络中基站、11^、561、？61、无线网管中的任意一种或多种设备。
[0053]基于本发明上述实施例提供的网络分析设备准确性的检测方法与系统，通过针对LTE网络的特点，定义LTE网络忙闲状态的第一指标与第二指标，以及基于第一指标值与第二指标值判定LTE网络处于忙状态的条件，第一指标值与第二指标值分别为小区激活用户个数占小区理论接入用户个数的比例与小区物理资源利用率PRB，并模拟多个激活用户访问网络中的多种业务，使得在考虑LTE网络忙闲状态时，不仅考虑了物理资源的占用情况，还考虑了用户的业务感受，即每用户实际能够享受到的业务带宽，从而提供更加符合LTE网络特点的网络分析设备准确性检测。
[0054]另外，通过模拟多用户访问LTE网络中的多种业务，以影响网络的忙闲状态，再根据网络分析设备实际的判定结果与定义的判定LTE网络处于忙状态的条件，从而能够在实验室模拟现网业务分布、用户分布，以构造多种网络状态，并且具有实用性强、易于构造测试场景的特定，实现对网络分析设备准确性的检验。
[0055]通过以下参照附图对本发明的示例性实施例的详细描述，本发明的其它特征及其优点将会变得清楚。
【专利附图】
【附图说明】
[0056]为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0057]同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
[0058]构成说明书的一部分的附图描述了本发明的实施例，并且连同说明书一起用于解释本发明的原理。
[0059]参照附图，根据下面的详细描述，可以更加清楚地理解本发明，其中:
[0060]图1示出本发明所提供的网络分析设备准确性的检测方法一种实施例的流程示意图；
[0061]图2示出本发明所提供的网络分析设备准确性的检测方法另一种实施例的流程示意图；
[0062]图3示出本发明所提供的网络分析设备准确性的检测方法又一种实施例的流程示意图；
[0063]图4示出本发明所提供的网络分析设备准确性的检测系统一种实施例的结构示意图；
[0064]图5示出本发明所提供的网络分析设备准确性的检测系统中用户模拟单元一种施例的结构示意图。
【具体实施方式】
[0065]下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。应注意到:除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置不限制本发明的范围。
[0066]以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本发明及其应用或使用的任何限制。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0067]对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为授权说明书的一部分。
[0068]在这里示出和讨论的所有示例中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它示例可以具有不同的值。
[0069]对于LTE网络来说，业务和信令负荷均体现在物理资源块的占用上，因此，通过物理资源块的利用率可以反映空口资源的紧张程度。但是，对于LTE网络这样的信道共享无线系统，即使在少量用户占用了大量物理资源的情况下，新接入的用户仍然能够分配到较多的网络资源，享受较好的服务。因此，单独的物理资源占用不能反映出网络资源的实际情况，在考虑网络拥塞状况判断标准的时候，除了物理资源的占用情况，还要考虑每用户的业务感受，即每个用户实际能够享受到的业务带宽。
[0070]在本发明各个实施例中，定义LTE网络忙闲状态的第一指标与第二指标。第一指标为小区激活用户个数占小区理论接入用户个数的比例，反映用户的业务感受。第二指标为小区物理资源块PRB利用率，反映网络资源的占有情况。由此，提供了对小区忙闲状态检测的两个维度。两个门限值的取值可以根据小区实际情况而设定。
[0071]第一指标中的小区激活用户个数可以通过在本发明提供的模拟多用户进行业务访问的操作中确定，小区理论接入用户个数根据小区具体情况预先可以设定。第二指标为小区物理资源块PRB利用率可以通过小区基站上输出的本小区PRB利用率获取。
[0072]定义当所述第一指标值与第二指标值分别满足预设的第一门限值与第二门限值时，判定所述LTE网络处于忙状态。
[0073]小区两个指标同时满足上述两个设定的门限值，即处于忙状态。基于上述检测标准的设定，在条件满足的情况下，网络分析设备分析结果应该与上述检测标准一致，从而能准确判断出该小区状态的忙闲状态。
[0074]针对上述小区忙闲评价标准，可基于如下实施例所提供的方法与系统对网络分析设备的准确性进行检验:
[0075]参见图1所示，图1示出本发明所提供的网络分析设备准确性的检测方法一种实施例的流程示意图。为便于理解，参见图4中示出的网络分析设备准确性的检测系统，图4中对于的网络单元、网络实体执行图1中对应的操作。该实施例提供的网络分析设备准确性的检测方法包括以下操作:
[0076]101，设置待检测的网络分析设备监测LTE网络中的设备或接口，其中，网络分析设备通过该设备或接口监测LTE网络的忙闲状态，其中，网络分析设备监测的内容可以是信令，也可以是业务，具体的监测方式可能是通过接口监测，也可能是监测设备，当网络分析设备满足预设的监测设置条件时，网络分析设备判定网络为忙状态，否则网络分析设备判定网络为闲状态；
[0077]102，通过模拟多个激活用户访问LTE网络中的多种业务，设置第一检测环境，设置第一检测环境包括:控制激活用户的个数，使小区的第一指标值小于第一门限值，并且控制激活用户访问多种业务的业务访问量，使小区的第二指标值小于第二门限值；
[0078]103，识别在第一检测环境下，网络分析设备是否判定网络为忙状态；
[0079]104，响应于在第一检测环境下网络分析设备判定网络为忙状态，则输出网络分析设备准确性有误的第一检测结果。
[0080]基于上述实施例提供的方法，通过针对LTE网络的特点，定义LTE网络忙闲状态的第一指标与第二指标，以及基于第一指标值与第二指标值判定LTE网络处于忙状态的条件，使得在考虑LTE网络忙闲状态时，不仅考虑了物理资源的占用情况，还考虑了用户的业务感受，即每用户实际能够享受到的业务带宽，从而提供更加符合LTE网络特点的网络分析设备准确性检测。
[0081]在102操作设置的第一检测环境下，小区的第一指标值小于第一门限值，并且小区的第二指标值小于第二门限值，因此，此时网络未到达网络忙的条件，若网络分析设备判定网络为忙状态，则可以识别出判定错误，输出网络分析设备准确性有误的第一检测结果。
[0082]参见图2所示，图2示出本发明所提供的网络分析设备准确性的检测方法另一种实施例的流程示意图。与图1实施例相比，响应于第一检测环境下网络分析设备判定网络为闲状态，该方法还包括:
[0083]201，设置第二检测环境，设置第二检测环境包括:增加激活用户的个数，使小区的第一指标值满足第一门限值，并且控制激活用户访问多种业务的业务访问量，使小区的第二指标值小于第二门限值；
[0084]202，识别在第二检测环境下，网络分析设备是否判定网络为忙状态；
[0085]203，响应于在第二检测环境下网络分析设备判定网络为忙状态，则输出网络分析设备准确性有误的第二检测结果。
[0086]在201操作设置的第二检测环境下，小区的第一指标值满足第一门限值，并且小区的第二指标值小于第二门限值，因此，此时网络仍然未到达网络忙的条件，若网络分析设备判定网络为忙状态，则可以识别出判定错误，输出网络分析设备准确性有误的第二检测结果。
[0087]参见图3所示，图3示出本发明所提供的网络分析设备准确性的检测方法又一种实施例的流程示意图。与图2实施例相比，响应于第二检测环境下网络分析设备判定网络为闲状态，该方法还包括:
[0088]301，设置第三检测环境，设置第三检测环境包括:保持激活用户的个数，使小区的第一指标值满足第一门限值，并且提高激活用户访问多种业务的业务访问量，使小区的第二指标值满足第二门限值；
[0089]302，识别在第三检测环境下，网络分析设备是否判定网络为忙状态，响应于在第三检测环境下网络分析设备判定网络为闲状态，执行303的操作；响应于第三检测环境下网络分析设备判定网络为忙状态，执行304的操作；
[0090]303，输出网络分析设备准确性有误的第三检测结果；
[0091]304，输出网络分析设备准确性无误的第四检测结果。
[0092]在301操作设置的第三检测环境下，小区的第一指标值满足第一门限值，并且小区的第二指标值满足第二门限值，因此，此时网络状态达网络忙的条件，若网络分析设备判定网络为不忙状态，则可以识别出判定错误，输出网络分析设备准确性有误的第三检测结果。若网络分析设备判定网络为忙状态，则可以识别出分析无误，输出网络分析设备准确性无误的第四检测结果。
[0093]根据本发明方法实施例的一个具体示例，控制激活用户访问多种业务的业务访问量，具体可以通过控制激活用户访问多种业务的业务种类、访问频率、访问次数中的至少一种方式来实现。
[0094]对应地，提高所述激活用户访问所述多种业务的业务访问量，具体包括:通过改变激活用户访问多种业务的业务种类、提高访问频率、增加访问次数中的至少一种方式来实现。对于不同的业务种类，激活用户访问不同的业务，对网络物理资源块的占用是不同地。例如，对于文件下载业务与浏览网页的业务相比较，由于需要保证下载文件的完整性，要求连接具有较高的QoS保证，因此需要更多物理资源块，对于下载文件的大小，也可以改变物理资源块的占有。另外，提高激活用户访问业务的访问频率，或者增加访问次数，基于网络建立更多的连接，增加物理资源块的占有。
[0095]根据本发明方法实施例的一个具体示例，模拟多个激活用户访问LTE网络中的多种业务，具体包括:
[0096]构造多个激活用户访问业务的控制信令以及访问多种业务的用户业务数据；
[0097]根据LTE网络的业务访问分布特点，将多个激活用户访问业务的控制信令与构造访问多种业务的用户业务数据相关联，生成多个激活用户访问LTE网络中的多种业务的数据包。
[0098]下面详细描述本发明的一个示例，检测某公司的网络分析设备对网络忙闲状态分析结果的准确性。搭建端到端的LTE网络，采用20M的FDD频谱带宽。该网络分析设备连接到LTE网络上，从无线及核心网侧采集数据，用于做网络忙闲状态的判断。为了构造各种网络状态，可以采用信令发生仪加载模拟多用户业务访问。
[0099]对于20M频谱带宽的小区来说，实验室环境下，小区总的理论带宽可以达到100M以上，用户获得比较好的业务感受，平均带宽需要在500Kbps以上，因此，用户的上限是200，理论用户个数是400个。激活用户个数的比例上限是50%。根据小区情况，本小区物理资源块PRB的利用率超过80%为忙状态，因此，基于上述定义的两个指标，在实验室环境下，设定如下两个门限值:
[0100]本小区激活用户个数占小区可理论接入用户个数的比例>50%;
[0101]本小区物理资源块PRB的利用率>80%。
[0102]当网络同时达到上述两个门限值，网络分析设备判定网络为忙状态，则该网络分析设备的分析结果无误。
[0103]为了提高测试的准确性，在模拟多用户发起多种业务访问，可以尽量参考CDMA等现网数据典型业务的用户个数和流量占比发送对应的数据报文。CDMA的现网数据采集来源于多个省市，现网业务复杂，涉及40多种大类、400多种小类的业务。参照现网数据，确定主要的3类典型业务为HTTP浏览类、下载类、流媒体类业务，使用3种业务的用户个数占比为20%、55%、25%。模拟激活用户的个数从I开始递增至200至超过200，其中，20 %激活用户访问HTTP浏览类业务，55%激活用户访问下载类业务，25%激活用户流媒体类业务。
[0104]通过模拟多用户访问LTE网络中的多种业务，以影响网络的忙闲状态，再根据网络分析设备实际的判定结果与定义的判定LTE网络处于忙状态的条件，从而能够在实验室模拟现网业务分布、用户分布，以构造多种网络状态，并且具有实用性强、易于构造测试场景的特定。
[0105]根据本发明方法实施例的一个具体示例，该方法还可以包括:
[0106]响应于获得第一检测结果，或者第二检测结果，或者第三检测结果，对网络分析设备的预设的监测设置条件进行调整，从而改进网络分析设备检测结果的准确性。
[0107]根据本发明方法实施例的一个具体示例，第一指标中的激活用户个数为小区保持上行同步的用户个数，理论接入用户个数为预设的小区最多可接入的用户个数。激活用户个数也可以为小区下行同步的用户个数，或者具有其他占有网络资源状态下的用户个数。
[0108]根据本发明方法实施例的一个具体示例，设置待检测的网络分析设备监测LTE网络中的设备或接口，具体包括:
[0109]设置待检测的网络分析设备监测LTE网络中Sl-MME、S1_U、SGi或者S5接口中的任意一种或多种接口 ；或者设置待检测的网络分析设备监测LTE网络中基站(eNB)、移动管理实体(MobilityManagement Entity, MME)、服务网关(Service Gateway, SGW)、分组数据节点网关(Packet Data Node Gateway, PGW)、无线网管中的任意一种或多种设备。
[0110]参见图4所示，图4示出本发明所提供的网络分析设备准确性的检测系统一种实施例的结构示意图。关于第一指标与第二指标的定义，以及判定LTE网络处于忙状态的条件，参见前述具体的介绍，这里不再详诉。该检测系统包括:[0111]网络分析设备配置单元401，用于设置待检测的网络分析设备监测LTE网络中的设备或接口，网络分析设备通过设备或接口监测LTE网络的忙闲状态，其中，当网络分析设备满足预设的监测设置条件时，网络分析设备判定网络为忙状态，否则网络分析设备判定网络为闲状态，网络分析设备可以通过连接在策略与计费规则功能(Policy and ChargingRules Function, PCRF)实施监测；
[0112]用户模拟单元402，用于模拟多个激活用户访问LTE网络中的多种业务；设置第一检测环境，设置第一检测环境包括:控制激活用户的个数，使小区的第一指标值小于第一门限值，并且控制激活用户访问多种业务的业务访问量，使小区的第二指标值小于第二门限值；
[0113]网络分析设备识别单元403，用于识别在第一检测环境下网络分析设备是否判定网络为忙状态；
[0114]检测结果输出单元404，用于响应于在第一检测环境下网络分析设备判定网络为忙状态，输出网络分析设备准确性有误的第一检测结果。
[0115]根据本发明系统实施例的一个具体示例，响应于在第一检测环境下网络分析设备判定网络为闲状态，用户模拟单元402，还用于设置第二检测环境，设置第二检测环境包括:增加激活用户的个数，使小区的第一指标值满足第一门限值，并且控制激活用户访问多种业务的业务访问量，使小区的第二指标值小于第二门限值；
[0116]网络分析设备识别单元403，还用于识别在第二检测环境下网络分析设备是否判定网络为忙状态；
[0117]检测结果输出单元404，还用于响应于在第二检测环境下网络分析设备判定网络为忙状态，输出网络分析设备准确性有误的第二检测结果。
[0118]根据本发明系统实施例的一个具体示例，响应于在第二检测环境下网络分析设备判定网络为闲状态，用户模拟单元402还用于设置第三检测环境，设置第三检测环境包括:保持激活用户的个数，使小区的第一指标值满足第一门限值，并且提高激活用户访问多种业务的业务访问量，使小区的第二指标值满足第二门限值；
[0119]网络分析设备识别单元403，还用于在识别第三检测环境下网络分析设备是否判定网络为忙状态；
[0120]网络分析设备识别单元403还用于响应于在第三检测环境下网络分析设备判定网络为闲状态，输出网络分析设备准确性有误的第三检测结果；响应于第三检测环境下网络分析设备判定网络为忙状态，输出网络分析设备准确性无误的第四检测结果。
[0121]根据本发明系统实施例的一个具体示例，所述用户模拟单元，具体用于通过控制激活用户访问多种业务的业务种类、访问频率、访问次数中的至少一种方式，来控制激活用户访问多种业务的业务访问量；通过改变激活用户访问多种业务的业务种类、提高访问频率、增加访问次数中的至少一种方式，来提高所述激活用户访问所述多种业务的业务访问量。
[0122]参见图5所示，根据本发明系统实施例的一个具体示例，用户模拟单元402，具体包括:
[0123]多用户信令处理模块501，用于构造多个激活用户访问业务的控制信令；
[0124]业务处理模块502，用于构造访问多种业务的用户业务数据；[0125]业务关联模块503，用于根据LTE网络的业务访问分布特点，将多个激活用户访问业务的控制信令与访问多种业务的用户业务数据相进行关联，生成多个激活用户访问LTE网络中的多种业务的数据包。
[0126]多用户信令处理模块501处理信令面，能模拟多用户在Uu 口发起信令，模拟多用户发起网络附着。业务处理模块502模拟多用户发起业务，模拟用户面的行为，通过与多用户信令处理模块501关联，能模拟多用户与不同的业务服务器之间的交互，访问多种类型的业务，包括处理下行报文。多用户信令处理模块501可以根据业务层的反馈或者设置动态地调整访问业务的速率。多用户信令处理模块501可以将控制面的如用户标识或IP地址与用户面的业务访问，例如访问网页、下载文件等业务进行关联，从网络侧看就是一个个真实的用户在进行业务。这样组合出来的200个以上的模拟用户能够象真实用户一样访问各种业务服务器，从网络层和应用层来看，和真实的用户的行为一致。
[0127]真实网络中的业务是多样的，且从长期来看各业务占比有一定的规律，业务关联模块503按照业务访问分布特点将多个激活用户访问业务的控制信令与访问多种业务的用户业务数据相进行关联，最大程度地模拟了真实的端到端网络中多用户访问多业务场景。
[0128]根据本发明系统实施例的一个具体示例，系统还包括:
[0129]网络分析设备调整单元401，用于响应于获得第一检测结果，或者第二检测结果，或者第三检测结果，对网络分析设备的预设的监测设置条件进行调整。
[0130]根据本发明方法实施例的一个具体示例，第一指标中的激活用户个数为小区保持上行同步的用户个数，理论接入用户个数为预设的小区最多可接入的用户个数。
[0131]根据本发明系统实施例的一个具体示例，网络分析设备配置单元401，具体用于设置待检测的网络分析设备监测LTE网络中Sl-MME、Sl-U、SGi或者S5接口中的任意一种或多种接口 ；或者设置待检测的网络分析设备监测LTE网络中基站、MME, SGW、PGW、无线网管中的任意一种或多种设备。
[0132]至此，已经详细描述了根据本发明的一种网络分析设备准确性的检测方法与系统。为了避免遮蔽本发明的构思，没有描述本领域所公知的一些细节。本领域技术人员根据上面的描述，完全可以明白如何实施这里公开的技术方案。
[0133]本说明书中各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似的部分相互参见即可。对于系统实施例而言，由于其与方法实施例基本对应，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
[0134]可能以许多方式来实现本发明的网络分析设备准确性的检测方法与系统。例如，可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本发明的网络分析设备准确性的检测方法与系统。用于所述方法的步骤的上述顺序仅是为了进行说明，本发明的方法的步骤不限于以上具体描述的顺序，除非以其它方式特别说明。此外，在一些实施例中，还可将本发明实施为记录在记录介质中的程序，这些程序包括用于实现根据本发明的方法的机器可读指令。因而，本发明还覆盖存储用于执行根据本发明的方法的程序的记录介质。
[0135]虽然已经通过示例对本发明的一些特定实施例进行了详细说明，但是本领域的技术人员应该理解，以上示例仅是为了进行说明，而不是为了限制本发明的范围。本领域的技术人员应该理解，可在不脱离本发明的范围和精神的情况下，对以上实施例进行修改。本发明的范围由所附权利要求来限定。
【权利要求】
1.一种网络分析设备准确性的检测方法，其特征在于，所述检测方法包括: 设置待检测的网络分析设备监测长期演进LTE网络中的设备或接口，所述网络分析设备通过所述设备或接口监测所述LTE网络的忙闲状态，其中，当所述网络分析设备满足预设的监测设置条件时，所述网络分析设备判定网络为忙状态，否则所述网络分析设备判定网络为闲状态； 通过模拟多个激活用户访问所述LTE网络中的多种业务，设置第一检测环境；所述设置第一检测环境包括:控制激活用户的个数，使所述小区的第一指标值小于第一门限值，并且控制所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值小于第二门限值，其中，所述第一指标为小区激活用户个数占小区理论接入用户个数的比例，所述第二指标为小区物理资源块PRB利用率； 识别在所述第一检测环境下，所述网络分析设备是否判定网络为忙状态； 响应于在所述第一检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性有误的第一检测结果。
2.根据权利要求1所述的方法，其特征在于，响应于所述第一检测环境下所述网络分析设备判定网络为闲状态，所述方法还包括: 设置第二检测环境，所述设置第二检测环境包括:增加激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且控制激活用户访问多种业务的业务访问量，使所述小区的第二指标值小于所述第二门限值； 识别在所述第二检测环境下，所述网络分析设备是否判定网络为忙状态； 响应于在所述第二检测环境下所述网络分析设备判定网络为忙状态，则输出所述网络分析设备准确性有误的第·二检测结果。
3.根据权利要求2所述的方法，其特征在于，响应于所述第二检测环境下所述网络分析设备判定网络为闲状态，所述方法还包括: 设置第三检测环境，所述设置第三检测环境包括:保持所述激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且提高所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值满足所述第二门限值； 识别在所述第三检测环境下，所述网络分析设备是否判定网络为忙状态； 响应于在所述第三检测环境下所述网络分析设备判定网络为闲状态，则输出所述网络分析设备准确性有误的第三检测结果；响应于所述第三检测环境下所述网络分析设备判定网络为忙状态，则输出所述网络分析设备准确性无误的第四检测结果。
4.根据权利要求3所述的方法，其特征在于，所述控制激活用户访问多种业务的业务访问量，具体包括:通过控制激活用户访问多种业务的业务种类、访问频率、访问次数中的至少一种方式，来控制激活用户访问多种业务的业务访问量； 对应地，所述提高所述激活用户访问所述多种业务的业务访问量，具体包括:通过改变激活用户访问多种业务的业务种类、提高访问频率、增加访问次数中的至少一种方式，来提高所述激活用户访问所述多种业务的业务访问量。
5.根据权利要求4所述的方法，其特征在于，所述模拟多个激活用户访问所述LTE网络中的多种业务，具体包括: 构造多个激活用户访问业务的控制信令以及访问多种业务的用户业务数据；根据所述LTE网络的业务访问分布特点，将所述多个激活用户访问业务的控制信令与所述构造访问多种业务的用户业务数据相关联，生成多个激活用户访问所述LTE网络中的多种业务的数据包。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括: 响应于获得所述第一检测结果，或者第二检测结果，或者第三检测结果，对所述网络分析设备的所述预设的监测设置条件进行调整。
7.根据权利要求1至6任意一项所述的方法，其特征在于，所述第一指标中的激活用户个数为小区保持上行同步的用户个数，所述第一指标中的理论接入用户个数为预设的小区最多可接入的用户个数。
8.根据权利要求7所述的方法，其特征在于，所述设置待检测的网络分析设备监测LTE网络中的多个接口或设备，具体包括: 设置待检测的网络分析设备监测LTE网络中Sl-MME、Sl-U、SGi或者S5接口中的任意一种或多种接口 ；或者 设置待检测的网络分析设备监测LTE网络 中基站、移动管理实体MME、服务网关SGW、分组数据节点网关PGW、无线网管中的任意一种或多种设备。
9.一种网络分析设备准确性的检测系统，其特征在于，所述检测系统包括: 网络分析设备配置单元，用于设置待检测的网络分析设备监测LTE网络中设备或接口，所述网络分析设备通过所述设备或接口监测所述LTE网络的忙闲状态，其中，当所述网络分析设备满足预设的监测设置条件时，所述网络分析设备判定网络为忙状态，否则所述网络分析设备判定网络为闲状态； 用户模拟单元，用于通过模拟多个激活用户访问所述LTE网络中的多种业务，设置第一检测环境，所述设置第一检测环境包括:控制激活用户的个数，使所述小区的第一指标值小于第一门限值，并且控制所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值小于第二门限值；其中，所述第一指标为小区激活用户个数占小区理论接入用户个数的比例，所述第二指标为小区物理资源块PRB利用率； 网络分析设备识别单元，用于识别在所述第一检测环境下所述网络分析设备是否判定网络为忙状态； 检测结果输出单元，用于响应于在所述第一检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性有误的第一检测结果。
10.根据权利要求11所述的系统，其特征在于，响应于在所述第一检测环境下所述网络分析设备判定网络为闲状态，所述用户模拟单元，还用于设置第二检测环境；所述设置第二检测环境包括:增加激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且控制激活用户访问多种业务的业务访问量，使所述小区的第二指标值小于所述第二门限值； 所述网络分析设备识别单元，还用于识别在所述第二检测环境下所述网络分析设备是否判定网络为忙状态； 所述检测结果输出单元，还用于响应于在所述第二检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性有误的第二检测结果。
11.根据权利要求12所述的系统，其特征在于，响应于在所述第二检测环境下所述网络分析设备判定网络为闲状态，所述用户模拟单元，还用于设置第三检测环境；所述设置第三检测环境包括:保持所述激活用户的个数，使所述小区的第一指标值满足所述第一门限值，并且提高所述激活用户访问所述多种业务的业务访问量，使所述小区的第二指标值满足所述第二门限值； 所述网络分析设备识别单元，还用于在识别所述第三检测环境下所述网络分析设备是否判定网络为忙状态； 所述网络分析设备识别单元，还用于响应于在所述第三检测环境下所述网络分析设备判定网络为闲状态，输出所述网络分析设备准确性有误的第三检测结果；响应于所述第三检测环境下所述网络分析设备判定网络为忙状态，输出所述网络分析设备准确性无误的第四检测结果。
12.根据权利要求11所述的系统，其特征在于，所述用户模拟单元，具体用于通过控制激活用户访问多种业务的业务种类、访问频率、访问次数中的至少一种方式，来控制激活用户访问多种业务的业务访问量；通过改变激活用户访问多种业务的业务种类、提高访问频率、增加访问次数中的至少一种方式，来提高所述激活用户访问所述多种业务的业务访问量。
13.根据权利要求12所述的系统，其特征在于，所述用户模拟单元，具体包括: 多用户信令处理模块，用于构造多个激活用户访问业务的控制信令； 业务处理模块，用于构造访问多种业务的用户业务数据； 业务关联模块，用于根据所述LTE网络的业务访问分布特点，将所述多个激活用户访问业务的控制信令与所述访问多种业务的用户业务数据相进行关联，生成多个激活用户访问所述LTE网络中的多种业务的数据包。·
14.根据权利要求13所述的系统，其特征在于，所述系统还包括: 网络分析设备调整单元，用于响应于获得所述第一检测结果，或者第二检测结果，或者第三检测结果，对所述网络分析设备的所述预设的监测设置条件进行调整。
15.根据权利要求9至14任意一项所述的系统，其特征在于，所述第一指标中的激活用户个数为小区保持上行同步的用户个数，理论接入用户个数为预设的小区最多可接入的用户个数。
16.根据权利要求15所述的系统，其特征在于，所述网络分析设备配置单元，具体用于设置待检测的网络分析设备监测LTE网络中Sl-MME、Sl-U、SGi或者S5接口中的任意一种或多种接口 ；或者设置待检测的网络分析设备监测LTE网络中基站、MME, SGW、PGW、无线网管中的任意一种或多种设备。
【文档编号】H04W24/08GK103856975SQ201210512847
【公开日】2014年6月11日 申请日期:2012年12月4日 优先权日:2012年12月4日
【发明者】李金艳, 梅承力, 谢亮 申请人:中国电信股份有限公司