专利名称：一种电信增值业务综合测试系统和测试方法
技术领域：
本发明涉及一种电信增值业务设备测试的系统和测试方法，属于电信测试领域。
背景技术：
目前，随着电信用户的各种需求不断增加，相应的增值业务应用前景十分广阔。一般来讲，开发增值业务的电信设备商在完成电信设备的安装、调试后交由电信运营商使用，在运行一段时间后，电信运营商开具初验和总验书。但普遍存在一种问题，即缺乏一种有效的测试方法来对设备的性能进行评估。虽然电信设备制造商会在产品出厂前进行测试，但这种测试很难被称为是客观的、全面的。特别是在涉及到多厂商、多种设备的增值业务系统中，出现大量呼损时很难判断到底是哪一部分，哪一厂商的设备出现问题。很有可能出现这种情况，即设备在用户少(呼叫量小)的情况下运行正常，而在用户多(呼叫量大或很大)时出现性能上的急剧下降直至某一设备或系统不可用的情况。而一个新业务的开展时，用户量往往较小，所以在运营商终验时往往不是设备在高负荷情况下运行时。总而言之，目前缺少一种有效的、客观的测试工具来对电信增值业务进行测试。
目前尚未发现有公开的文献介绍电信增值业务综合测试方法。
发明内容
本发明的目的，就是提供一种客观的、有效的测试系统和测试方法来解决目前存在的问题1)通过模拟真实运行环境来测试电信增值业务设备在高负荷下的性能；2)通过国家标准或其它标准(如合同规定的验收标准)来灵活定义测试脚本来解决各种电信增值业务的不同测试要求；3)通过测试数据的统计和记录来反映测试结果，以对被测系统进行性能评估；此外，还可以通过软件探针技术，来迅速定位被测系统中的导致性能下降的设备所在。
本发明中的电信增值业务综合测试系统，包括物理测试平台、物理测试平台控制模块、测试脚本编辑\编译模块、应用模块、测试控制模块；所述物理测试平台能模拟用户的各种呼叫行为和接收被测系统输出，可以采用具有模拟用户各种输入和具有与被测系统交换机E1/T1接口的语音卡或其他硬件来实现；所述物理测试平台控制模块指挥物理测试平台发起测试指令集规定的动作，和从物理测试平台接收到的消息并转发给测试控制模块；所述测试脚本编辑\编译模块完成测试脚本的编写、保存、打开和编译功能；所述应用模块完成人机界面，测试信息的显示、记录和测试数据的分析等功能；所述测试控制模块，完成测试指令集的执行、请求物理测试平台控制模块通过物理测试平台发起测试指令集规定的动作、判断从物理测试平台控制模块接收到的被测系统的输出是否符合测试脚本的规定。
在上述测试系统中，还可以包括软件探针模块，完成接收嵌入被测系统内部设备的软件获取探针发回的信息并发给测试控制模块。
本发明中的测试的方法，包括以下步骤1)将本发明所述的系统与被测系统交换机通过E1/T1连接，并配置所使用的信令；2)被测系统正常运行；3)在测试脚本编辑器中按照测试规范完成测试脚本的编写后，执行测试脚本的编译，如编译报告脚本有误，则修改脚本，直到正确无误为止；4)系统软件加载测试脚本编译生成测试指令集，开始执行测试指令；5)测试进行过程中，系统软件通过物理测试平台发出各种动作，并收集相应的被测系统的输出，自动判断是否与测试脚本规定的一致，并以此判断本次测试的通过与否；6)系统软件显示实时测试结果，并提供统计测试通过次数、失败次数及其比例，对被判定为测试失败的，还能够显示出错的位置及其原因，并能保存测试数据以备离线分析。
如果需要测试被测系统内部的设备，可使用软件探针。如需要设置，则可在上述步骤的步骤2)中将软件探针嵌入需要测试的设备内，并在步骤3)内加入相应的测试指令。这样，系统会在相应的位置等待并比较软件探针发回的信息。
由于本发明所述的方法和系统完全能够模拟被测系统设备在实际运营时的输入，并能接收被测系统的输出。所以采用本发明所述的方法和系统对被测系统来讲是客观的、可信的。解决了目前电信增值业务缺乏客观测试手段的问题。本发明所述的方法和系统完全可以被设备制造商和电信增值业务运营商作为功能性测试、性能测试和互通测试的工具。
图1是采用本发明的测试系统与被测系统连接的示意图；图2是本发明的测试系统内部模块结构图；
图3是采用本发明的测试流程图。
具体实施例方式
图1是运用本发明的测试系统与被测试系统连接的示意图。本发明所述的物理测试平台和交换机可通过E1/T1与交换机连接，其间信令可选择中国一号信令、七号信令或无信令方式，如果需使用软件探针，则需将设置探针的模块(设备)通过局域网与综合测试仪器相连。
图2是本发明的测试系统内部模块结构图。
物理测试平台能模拟用户的各种呼叫行为和接收被测系统输出的物理测试平台，可以采用具有模拟用户各种输入和具有与被测系统交换机E1/T1接口的语音卡或其他硬件来实现，这种物理测试平台需是根据实际使用时的容量要求可灵活扩展的。由应用模块、测试控制模块和物理测试平台控制模块构成软件系统。测试脚本编辑\编译模块与软件系统与物理测试平台可共存于一台计算机内，且按照测试所规定的呼叫量，所述的物理测试平台可以方便地扩充容量，直至达到被测系统标称的最大支持能力。所述的测试脚本的编辑\编译模块能完成测试脚本的输入、修改、打开及保存等功能，并能完成对测试脚本的扫描错误、编译成内部指令的功能。测试脚本中的测试指令为预定义的测试指令，其涵盖了目前所有的可能的用户输入、收集被测系统的输出以及软件探针对应的输出功能。软件系统能完成由加载测试脚本编译生成的指令集和执行测试指令集及对测试指令集所指定的动作的发起、收集测试指令集要求的被测系统的输出、判断被测系统的输出是否符合测试指令的规定、判断本次测试的通过与否及测试总体性能的统计、分析等功能。并能保存测试数据和打开历史测试数据，和对历史测试数据的分析等功能。在软件系统中，应用模块完成人机界面，测试信息的显示、记录和测试数据的分析等功能；物理测试平台控制模块指挥物理测试平台发起测试指令集规定的动作，和从物理测试平台接收到的消息并转发给测试控制模块；测试控制模块是软件系统的核心模块，完成测试指令集的执行、请求物理测试平台控制模块通过物理测试平台发起测试指令集规定的动作、判断从物理测试平台控制模块接收到的被测系统的输出是否符合测试脚本的规定。
作为可选的软件探针模块，完成接收嵌入被测系统内部设备的软件获取探针发回的信息并发给测试控制模块，通过对被测设备模块设置探针和测试脚本的定义，能迅速地定位多模块、多厂商的被测系统中出现性能瓶颈或异常的位置及原因。
图3是本发明的测试过程，体消息流程如下当需要进行测试时，测试人员按照测试规范，用本发明提供的测试语言在测试脚本编辑\编译模块中完成测试脚本的编写工作。编写完成后进行测试脚本的编译，测试脚本编辑\编译模块对测试脚本进行词法、语法分析后，如果测试脚本有误，则提示出错的原因和位置，反之，则生成测试指令集。测试控制模块加载该测试指令集后，就可以开始进行测试。当测试开始后，测试控制模块读取测试指令集，分析出本次测试的具体测试步骤以及测试通过与否的判断标准，把指令集分解并对应到单个的测试动作，并以此通过物理测试平台控制模块来要求物理测试平台模拟用户来发起呼叫动作或用户输入工作，(实际上这动作或输入是通过中继向交换机来发起的，以此对被测系统模拟用户输入)并接收被测系统的输出。当物理测试平台控制模块通过物理测试平台接收到被测系统的输出后，将消息送入测试控制模块，由测试控制模块根据测试指令集来判断所接收的输出是否符合测试脚本的规定，如符合，则进行下一步测试，如不符合，则记录出错的位置、原因等信息，然后进行下一轮测试。如果被测系统设置了软件探针，则会在到达测试脚本规定的步骤或时间范围内等待嵌入被测系统中的软件探针通过通讯平台发回消息，如果在规定时间范围内软件探针模块接收到软件探针发回的消息，则将其送入测试控制模块，由测试控制模块通过比较消息内容是否是测试脚本所规定的内容来判定测试通过与否，如果在测试脚本规定的时间范围内仍没有接收到消息，则认为超时，并按测试脚本所规定的方案进行处理。整个测试流程永远进行下去，直到测试人员中断测试或到达指定终止条件为止。
在测试过程中，测试控制模块还记录各种测试数据，以备离线分析所用。
下面描述本发明在测试工程中测试电信增值业务——语音信箱系统的所有功能的具体实施例子整理语音信箱系统的逻辑流程和验收规范所规定的性能，编写出测试脚本，形成对语音信箱系统的接入、双音多频输入、放音的检测、留言、提取留言、回放等功能的检测，编写完毕后执行编译功能，并编译无误后，开始按照测试脚本规定的步骤进行循环测试。同时，设置不同的测试模式，可对语音信箱系统在正常和突发的大话务量下性能的测试。采用本发明电信增值业务综合测试方案后，大大降低了测试的复杂性，提高了测试结果的客观性、正确性，更便于对语音信箱系统测试和验收。
权利要求
1.一种电信增值业务综合测试系统，包括物理测试平台、物理测试平台控制模块、测试脚本编辑\编译模块、应用模块、测试控制模块；所述物理测试平台能模拟用户的各种呼叫行为和接收被测系统输出，可以采用具有模拟用户各种输入和具有与被测系统交换机E1/T1接口的语音卡或其他硬件来实现；所述物理测试平台控制模块指挥物理测试平台发起测试指令集规定的动作，和从物理测试平台接收到的消息并转发给测试控制模块；所述测试脚本编辑、编译模块完成测试脚本的编写、保存、打开和编译功能；所述应用模块完成人机界面，测试信息的显示、记录和测试数据的分析等功能；所述测试控制模块，完成测试指令集的执行、请求物理测试平台控制模块通过物理测试平台发起测试指令集规定的动作、判断从物理测试平台控制模块接收到的被测系统的输出是否符合测试脚本的规定。
2.权利要求1所述的电信增值业务综合测试系统，其特征在于，还包括软件探针模块，完成接收嵌入被测系统内部设备的软件获取探针发回的信息并发给测试控制模块。
3.运用权利要求1所述的电信增值业务综合测试系统进行测试的方法，包括以下步骤1)将本发明所述的系统与被测系统交换机通过E1/T1连接，并配置所使用的信令；2)被测系统正常运行；3)在测试脚本编辑器中按照测试规范完成测试脚本的编写后，执行测试脚本的编译，如编译报告脚本有误，则修改脚本，直到正确无误为止；4)系统软件加载测试脚本编译生成测试指令集，开始执行测试指令；5)测试进行过程中，系统软件通过物理测试平台发出各种动作，并收集相应的被测系统的输出，自动判断是否与测试脚本规定的一致，并以此判断本次测试的通过与否；6)系统软件显示实时测试结果，并提供统计测试通过次数、失败次数及其比例，对被判定为测试失败的，还能够显示出错的位置及其原因，并能保存测试数据以备离线分析。
4.权利要求3所述的测试方法，其特征在于在被测系统正常运行前，将软件探针嵌入需要测试的设备内，并在编写测试脚本过程中，加入相应的测试指令。
全文摘要
一种电信增值业务综合测试系统和测试方法，属于电信测试领域。测试系统包括物理测试平台、物理测试平台控制模块、测试脚本编辑\编译模块、应用模块、测试控制模块。将本发明所述的系统与被测系统交换机通过E1/T1连接，并配置所使用的信令；在被测系统正常运行中，在测试脚本编辑器中按照测试规范完成测试脚本的编写后，执行测试脚本的编译；系统软件加载测试脚本编译生成测试指令集，开始执行测试指令；测试进行过程中，系统软件判断本次测试的通过与否并显示实时测试结果，并能保存测试数据以备离线分析。本发明能够模拟被测系统设备在实际运营时的输入，并能接收被测系统的输出。
文档编号H04B17/00GK1592232SQ0314045
公开日2005年3月9日 申请日期2003年9月7日 优先权日2003年9月7日
发明者夏险蜂, 梁昕 申请人:中兴通讯股份有限公司