本发明涉及测试领域，特别是涉及应用程序测试方法、装置、计算机设备和存储介质。
背景技术：
随着智能终端以及互联网的发展，人们通常通过在智能终端上安装如即时通讯应用、音乐应用等应用程序进行信息交流和娱乐，为了能够了解或者提高应用程序的质量，需要对应用程序进行测试。
在现有技术中，对应用程序进行测试的通常为测试人员手工的在设备上运行应用程序，然后点击相应的功能按钮进行测试。或者测试人员可以根据需求编写测试脚本，点击开始测试，等待测试完成后点击查看测试结果。
然而，在对现有技术的研究与实践中，本发明的发明人发现，现有技术存在以下问题：现有测试方法依赖于测试人员手工进行操作，测试时间长，而且需要人工记录以及汇总测试结果，导致测试效率低。
技术实现要素：
基于此，有必要针对现有测试方法依赖于测试人员手工操作，测试时间长，而且需要人工去记录以及汇总测试结果，导致测试效率低的问题，提供一种应用程序测试方法、装置、计算机设备和存储介质。
一种应用程序测试方法，所述方法包括：接收应用程序测试请求；根据预设的评测项对所述应用程序进行测试，并获取所述评测项对应的评测项测试结果；根据所述评测项测试结果以及所述评测项对应的评测类型生成评测类型的评测类型测试结果；根据所述评测类型测试结果输出应用程序测试结果。
在一个实施例中，所述评测项测试结果包括评测项评分，所述评测类型测试结果包括评测类型评分，所述根据预设的评测项对所述应用程序进行测试，并获取所述评测项对应的评测项测试结果的步骤包括：根据预设的评测项对所述应用程序进行测试，获取所述评测项的测试输出参数；根据所述评测项对应的评分规则对所述测试输出参数进行评分，得到所述评测项对应的评测项评分，其中，所述评分规则为评测项对应的评分权重与评测项在评测类型中的级别正相关，评测项对应的评分与测试输出参数所属的指标或者指标区间的级别正相关；所述根据所述评测项测试结果以及所评测项对应的评测类型生成评测类型的评测类型测试结果的步骤包括：根据所述评测项的评测类型对属于同一评测类型的所述评测项分数进行求和计算，得到评测类型评分。
在一个实施例中，所述评测类型包括性能测试、安全性测试、稳定性测试和兼容性测试的其中之一或其任意组合。
在一个实施例中，所述根据所述评测类型测试结果输出应用程序测试结果的步骤包括：根据所述评测类型评分以及所述评测类型对应的权值进行加权求和，得到所述应用程序的综合评分；输出所述应用程序测试结果；其中，所述应用程序测试结果包括所述综合评分，或者，所述应用程序测试结果包括所述综合评分以及所述评测类型评分。
在一个实施例中，所述评测项包括所述应用程序的启动时间，所述根据预设的评测项对所述应用程序进行测试，并获取所述评测项对应的评测项测试结果的步骤包括：发送应用程序启动指令，以使所述应用程序开始进行启动；对所述应用程序的页面进行多次截图；获取前一次截图页面和后一次截图页面的相似度；若所述相似度小于预设阈值，将所述后一次截图页面的时间与所述应用程序开始进行启动的时间的时间差，作为所述应用程序的启动时长。
一种应用程序测试装置，所述装置包括：测试请求接收单元，用于接收应用程序测试请求；测试单元，用于根据预设的评测项对所述应用程序进行测试，并获取所述评测项对应的评测项测试结果；评测类型测试结果生成单元，用于根据所述评测项测试结果以及所述评测项对应的评测类型生成评测类型的评测类型测试结果；测试结果输出单元，用于根据所述评测类型测试结果输出应用程序测试结果。
在一个实施例中，所述评测项测试结果包括评测项评分，所述评测类型测试结果包括评测类型评分，所述测试单元包括：参数获取模块，用于根据预设的评测项对所述应用程序进行测试，获取所述评测项的测试输出参数；评测项评分获取模块，用于根据所述评测项对应的评分规则对所述测试输出参数进行评分，得到所述评测项对应的评测项评分，其中，所述评分规则为评测项对应的评分权重与评测项在评测类型中的级别正相关，评测项对应的评分与测试输出参数所属的指标或者指标区间的级别正相关；所述评测类型测试结果生成单元用于：根据所述评测项的评测类型对属于同一评测类型的所述评测项分数进行求和计算，得到评测类型评分。
在一个实施例中，所述评测类型包括性能测试、安全性测试、稳定性测试和兼容性测试的其中之一或其任意组合。。
一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机可读指令，所述计算机可读指令被所述处理器执行时，使得所述处理器执行上述应用程序测试方法的步骤。
一种存储有计算机可读指令的存储介质，所述计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行上述应用程序测试方法的步骤。
上述应用程序测试方法、装置、计算机设备和存储介质，在接收到应用程序测试请求时，根据预测的评测项自动对应用程序进行测试，获取每个评测项对应的评测项测试结果，然后根据评测项测试结果以及评测项对应的评测类型生成评测类型的评测类型测试结果，并根据评测类型测试结果输出应用程序测试结果，因此，由于该方案在输入应用程序测试请求后，就能够对应用程序的预设评测项进行自动测试，且能够根据评测项测试结果以及评测项对应的评测类型汇总得到每个评测类型测试结果，进而根据评测类型测试结果输出应用程序测试结果，故能够减少手动测试操作以及人工统计测试结果的操作，节省测试时间，提高测试效率。
附图说明
图1为一个实施例中计算机设备的内部结构框图；
图2为一个实施例中应用程序测试方法的流程图；
图3为一个实施例中根据预设的评测项对所述应用程序进行测试，并获取所述评测项对应的评测项测试结果的流程图；
图4为一个实施例中根据所述评测类型测试结果输出应用程序测试结果的流程图；
图5为一个实施例中根据预设的评测项对所述应用程序进行测试，并获取所述评测项对应的评测项测试结果的流程图；
图6为一个实施例中应用程序测试装置的结构框图；
图7为一个实施例中测试单元的结构框图；
图8为一个实施例中测试结果输出单元的结构框图；
图9为一个实施例中测试单元的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
图1为一个实施例中计算机设备的内部结构示意图。如图1所示，该计算机设备包括通过系统总线连接的处理器、非易失性存储介质、存储器和网络接口。其中，该计算机设备的非易失性存储介质存储有操作系统、数据库和计算机可读指令，该计算机可读指令被处理器执行时，可使得处理器实现一种应用程序测试方法。该计算机设备的处理器用于提供计算和控制能力，支撑整个计算机设备的运行。该计算机设备的存储器中可存储有计算机可读指令，该计算机可读指令被处理器执行时，可使得处理器执行一种应用程序测试方法。该计算机设备的网络接口用于通信。本领域技术人员可以理解，图1中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
计算机设备可为智能手机、平板电脑、笔记本电脑、台式计算机以及服务器等，但并不局限于此。
如图2所示，在一个实施例中，提出了一种应用程序测试方法，该应用程序测试方法可以应用于上述的计算机设备中，具体可以包括以下步骤：
步骤202，接收应用程序测试请求；
计算机设备上安装有应用程序，当需要对该应用程序进行测试时，接收通过计算机设备或者其他终端发送的应用程序测试请求。
在一些实施例中，若计算机设备上未安装该应用程序，则计算机设备可以先对应用程序进行安装，再进行测试。
在一些实施例中，应用程序测试请求中携带有该应用程序的安装包，当计算机设备接受到应用程序测试请求时，在计算机设备上利用该安装包安装应用程序，再进行测试。
步骤204，根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果；
在本发明实施例中，评测项为应用程序中需要进行测试，获得测试结果的测试项目，例如应用程序的平均cpu占用、内存泄漏、平均内存消耗等。在计算机设备中预先设置需要测试的评测项，当计算机设备接收到应用程序测试请求后，获取预设的评测项执行评测项对应的测试脚本，对应用程序进行测试，获取评测项对应的评测项测试结果。
评测项测试结果可以为对评测项进行测试时直接获取的测试输出参数，例如为平均cpu占用为20％，内存泄漏为有、平均内存消耗为150m等。在一些实施例中，评测项测试结果也可以为根据预先设置的规则对测试输出参数进行评价从而获取的结果，如为评测项的测试输出参数对应的分值，评测项的测试输出参数对应的等级等。
在一些实施例中，为了提高测试的效率，还可以设置评测项的测试顺序，使计算机设备按照该顺序执行测试脚本进行测试，避免评测项之间的测试脚本进行测试时存在冲突。
步骤206，根据评测项测试结果以及所评测项对应的评测类型生成评测类型的评测类型测试结果；
在本发明实施例中，预先设置了每个评测类型对应的评测项，因此，当获取到评测项测试结果后，可以根据评测项对应的评测类型，对属于同一评测类型的评测项测试结果进行汇总，生成评测类型测试结果。
评测类型的个数以及其对应的评测项可以根据需求进行设置。评测类型测试结果可以为评测项测试结果的集合，例如，以表格的形式汇总展示同属于一个评测类型的评测项测试结果。当然，评测类型测试结果也可以为对评测项结果进行汇总计算后得到的一个总的计算结果。例如，当评测项测试结果为分数时，对评测项结果进行求和，得到评测类型分数。
在一些实施例中，应用程序的评测类型包括性能测试、安全性测试、稳定性测试以及兼容性测试的其中之一或者任意组合。可以预先设置这四种评测类型对应的评测项，当获取到评测项结果后，再分别获取性能测试、安全性测试、稳定性测试以及兼容性测试这四个评测类型的测试结果。
性能测试指对应用程序在时间和空间上的特性进行测试。例如可以包括对应用程序中进行各类操作的响应时间进行测试、在用户应用场景下对系统资源的使用情况进行测试等进行测试等。对应的评测项可以包括平均cpu占用、平均内存消耗、每分钟流量消耗、内存泄漏、内存抖动、启动时间以及安装巴片大小等。
安全性测试包括对软件权限、数据安全、通讯安全等安全问题的测试。对应的评测项可以包括计费风险、输入口令次数的限制、隐私泄露风险等级等。
稳定性测试指对应用程序的交互性或者异常状况下的反应进行测试。交互性测试包括在如来电、短信以及低电量等应用程序被打扰的情况下对应用程序的运行情况进行测试，异常性测试指在断网、断电以及服务器异常等情况下对应用程序的运行情况进程测试。例如，多个程序同时运行是否影响正常功能、应用程序运行时切换网络时是否影响正常功能、应用程序运行时插拔充电器是否影响正常功等能。
兼容测试可以包括内部兼容性测试和外部兼容性测试。例如测试应用程序与主流的其他应用程序是否兼容、检验在各种网络连接下数据和运用是否正确、与各种设备是否兼容或者在各系统下各种行为是否一致等。
步骤208，根据评测类型测试结果输出应用程序测试结果。
在本发明实施例中，当获取到评测类型测试结果后，可以根据评测类型测试结果生成应用程序测试结果，进行储存或者展示，供用户查看。
应用程序测试结果可以是评测类型测试结果的集合，也可以是根据评测类型测试结果进行汇总计算获取到的一个总结果。当然也可以是以上两种结果的结合。
例如，当评测类型测试结果为分数时，可以展示每个评测类型测试结果的分数。也可以对每个评测类型的分数进行求和，获取总的分数后输出总的分数。当然，也可以既输出评测类型分数，也输出总的分数。
图3示出了在一个实施例中，当评测项测试结果包括评测项评分，步骤s204即根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果的步骤的实现流程图，具体可以包括以下步骤：
s302，根据预设的评测项对应用程序进行测试，获取评测项的测试输出参数；
评测项是预先设置的，每个评测项对应有要执行的测试脚本。例如，可以设置需要测试的评测项为每分钟流量消耗、内存泄漏、内存抖动以及数据加密等级等，因此，可以获取每分钟流量消耗、内存泄漏、内存抖动以及数据加密等级对应的测试脚本对应用程序进行测试，输出的测试输出参数可以为每分钟流量消耗为512kb、存在内存泄漏、没有内存抖动等、数据加密等级为2级等。
需要说明的是，以上的测试输出参数可以用具体的文字进行表示，但在计算机程序中，也可以利用预先设置用其它标识进行标识。例如，每分钟流量消耗为512kb、存在内存泄漏、没有内存抖动以及数据加密等级为2级可以依次标识为512、0、1以及2，只要根据该标识可以获取到对应的测试结果即可。
s304，根据评测项对应的评分规则对测试输出参数进行评分，得到评测项对应的评测项评分。
在本发明实施例中，预先设置每个评测项对应的评分规则，然后根据该评分规则对测试输出参数进行评分，从而得到每个评测项评分。设置的评分规则可以为评测项对应的评分权重与评测项在评测类型中的级别正相关，评测项对应的评分与测试输出参数所属的指标或者指标区间的级别正相关。即评测项在评测类型中的级别高，则评分权重也高，指标区间的级别高，则对应的评分也高。评测项的级别可以根据实际需要确定。例如，如表一所示，每分钟流量消耗、内存抖动、内存泄漏以及安装包大小为性能测试的评测项，且每分钟流量消耗、内存抖动、内存泄漏以及安装包大小在性能测试的级别依次降低，则它们对应的权值依次为0.125、0.1、0.09以及0.06，评测项在性能评测中占的总分为12.5、109以及6。而每分钟流量消耗的值所在的指标区间小，则级别高，分数也高；无内存泄漏的级别比有内存泄漏的级别高，则分数高；无内存抖动的级别比有内存抖动的的级别，则分数高，安装包大小所在的区间小，则级别高，分数也高。以输出的测试输出参数为每分钟流量消耗为512kb、有内存泄漏、无内存抖动、安装包大小为40m为例，可以得到评测项的分数分别为8分、0分、9分、4分。
在一些实施例中，当评测项测试结果包括评测项评分，评测类型测试结果包括评测类型评分时，步骤s206即当根据评测项测试结果以及所评测项对应的评测类型生成评测类型的评测类型测试结果的步骤包括：根据评测项的评测类型对属于同一评测类型的评测项分数进行求和计算，得到评测类型评分。
以评测类型包括性能测试、安全性测试、稳定性测试以及兼容性测试为例，可以获取属于性能测试评测类型的评测项的分数，进行加权求和，得到性能测试分数。获取属于安全性测试评测类型的评测项的分数，进行加权求和，得到安全性测试分数。获取属于稳定性测试评测类型的评测项的分数，进行加权求和，得到稳定性测试分数。获取属于兼容性测试评测类型的评测项的分数，进行加权求和，得到兼容性测试分数。
表一：
图4示出了一个实施例中，当评测类型测试结果包括评测类型评分时，步骤s208即根据评测类型测试结果输出应用程序测试结果的实现流程图，具体可以包括以下步骤：
s402，根据评测类型评分以及评测类型对应的权值进行加权求和，获取应用程序的综合评分；
评测类型对应的权值可以根据实际预先设置。例如，可以根据评测类型的重要程度设置其对应的权值。当获取到评测类型评分时，根据每个评测类型评分与其对应的权值进行加权求和，获得总的综合评分。
例如，以评测类型包括性能测试、安全性测试、稳定性测试以及兼容性测试，分数依次为80分、60分、100分、90分，且性能测试、安全性测试、稳定性测试以及兼容性对应的权值分别为0.5、0.3、0.1以及0.1为例，则综合评分为：80*0.5+60*0.3+100*0.1+90*0.1＝77分。
s404，输出应用程序测试结果；
在本发明实施例中，应用程序测试结果包括综合评分，或者，应用程序测试结果包括综合评分以及评测类型评分。
例如，以评测类型包括性能测试、安全性测试、稳定性测试以及兼容性测试，且分数依次为80分、60分、100分、90分，综合评分为77分为例，可以在客户端上展示综合评分为77分。也可以在展示综合评分为77分的同时，展示性能测试为80分、安全性测试为60分、稳定性测试为100分以及兼容性为90分的信息。
在一些实施例中，可以通过图表的方式展示应用程序测试结果，以使用户对测试结果有直观的了解。
在一些实施例中，应用程序测试结果还可以包括应用程序测试对比结果，因此，在应用程序测试方法中，还可以包括以下步骤：将应用程序测试结果与其他程序测试结果进行对比，得到应用程序测试对比结果。
例如，可以在测试结果库中存储其他应用程序的测试结果，当获取到应用程序测试结果后，计算机设备将应用程序测试结果与测试结果库中其他程序测试结果进行对比，获取应用程序对比结果。应用程序测试对比结果可以为应用程序测试结果的排名。例如，第五名、前30％等。可以理解，上述的测试结果库可以在计算机设备中，也可以在其他设备上。
在一些实施例中，可以将应用程序测试结果与同一程序类型的程序测试结果进行对比，同一程序类型指同一个行业或者领域，或者主要功能相同。例如，腾讯音乐与网易音乐为同一程序类型。
在一些实施例中，可以根据应用程序测试对比结果对应用程序质量进行分析，并输出分析结果和/或质量提升建议。例如，若发现应用程序的某一评测类型评分排名低，则可以找出评测类型中评分低的评测项，然后在客户端显示该评测项的测试结果以及如何改进的建议。
图5示出了一个实施例中，当评测项包括应用程序的启动时间时，步骤s204即根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果的实现流程图，可以包括以下步骤：
s502，发送应用程序启动指令，以使应用程序开始进行启动；
在本发明实施例中，当评测项包括应用程序的启动时间时，发送应用程序启动指令，以启动应用程序。
s504，对应用程序的页面进行多次截图；
在本发明实施例中，在应用程序开始启动时，可以利用截图工具例如minicap截图工具对应用程序的页面进行多次截图。每次截图的时间可以根据实际需要进行设置。可以理解，为了能够更精确的获取启动时间，每次截图的间隔在一定的范围内越小越好。
s506，获取前一次截图页面和后一次截图页面的相似度；
在本发明实施例中，分别对相邻的截图页面进行对比，并获取相邻截图页面之间的相似度。即将第一次的截图页面与第二次的截图页面进行对比、将第二次的截图页面与第三次的截图页面进行对比、将第三次的截图页面与第四次的截图页面进行对比等等。
s508，若相似度小于预设阈值，将后一次截图页面的时间与应用程序开始进行启动时间的时间差，作为应用程序的启动时长。
预设阈值可以根据根据实际进行设置。相似度表示截图页面的相似程度，相似度越大，表示图片越像。相似度越小，表示图片越不像。
目前对应用程序启动时间的测试均是采用判断应用程序的主程序进程是否出现在cpu中进行的。但是本发明的发明人发现，当主程序进程出现在cpu中时，应用程序往往还停留在启动页，因此现有的启动时间获取方法获取到的启动时间会比实际的启动时间短。故可以从应用程序启动时开始不断截图，同时比较前后两张截图的相似度。如果前后两张图片的相似度小于预设阈值，表示这两张图片不相同，前一张截图页面为启动页，后一张为任务页，即启动页已经展示完毕，应用程序进入任务页，故应用程序启动完成。因此可以将后一次截图页面的时间与应用程序启动时间的时间差，作为应用程序的启动时长。
例如，应用程序开始启动的时间为12点58分58秒，第一张和与第二张截图页面的相似度、第二张和与第三张截图页面的相似度、第三张和与第四张截图页面的相似度、第四张和与第五张截图页面的相似度、第五张截图页面与第六张截图页面进行对比时相似度为依次为0.9、0.85、0.91、0.81、0.3，预设阈值为0.6，第五张截图页面与第六张截图页面进行对比时相似度0.3小于预设阈值，则认为第六张截图页面的截图时间为应用程序启动完成时间。若第六章截图页面的截图时间为12点59分35秒，则应用程序的启动时间为12点59分35秒与12点58分58秒的时间差，为37秒。
如图6所示，在一个实施例中，提供了一种应用程序测试装置，该应用程序测试装置可以集成于上述的计算机设备中，具体可以包括测试请求接收单元602、测试单元604、评测类型测试结果生成单元606以及测试结果输出单元608。
测试请求接收单元602，用于接收应用程序测试请求；
测试单元604，用于根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果；
评测类型测试结果生成单元606，用于根据评测项测试结果以及所评测项对应的评测类型生成评测类型的评测类型测试结果；
测试结果输出单元608，用于根据评测类型测试结果输出应用程序测试结果。
图7示出了在一个实施例中，当评测项测试结果包括评测项评分，测试单元604的结构框图，具体可以包括参数获取模块702以及评测项评分获取模块704。
参数获取模块702，用于根据预设的评测项对应用程序进行测试，获取评测项的测试输出参数；
评测项评分获取模块704，用于根据评测项对应的评分规则对测试输出参数进行评分，得到评测项对应的评测项评分；
在一些实施例中，当评测项测试结果包括评测项评分，评测类型测试结果包括评测类型评分时，评测类型测试结果生成单元606具体用于：根据评测项的评测类型对属于同一评测类型的评测项分数进行求和计算，得到评测类型评分。
图8示出了一个实施例中，当评测类型测试结果608包括评测类型评分时，测试结果输出单元的的结构框图，具体可以包括综合评分获取模块802以及测试结果输出模块804。
综合评分获取模块802，用于根据评测类型评分以及评测类型对应的权值进行加权求和，获取应用程序的综合评分；
测试结果输出模块804，用于输出应用程序测试结果。
应用程序测试结果包括综合评分，或者，应用程序测试结果包括综合评分以及评测类型评分。
图9示出了一个实施例中，当评测项包括应用程序的启动时间时，测试单元604的结构框图，可以包括指令发送单元902、截图单元904、相似度获取单元906以及启动时长获取单元908：
指令发送单元902，用于发送应用程序启动指令，以使应用程序开始进行启动；
截图单元904，用于对应用程序的页面进行多次截图；
相似度获取单元906，用于获取前一次截图页面和后一次截图页面的相似度；
启动时长获取单元908，用于若相似度小于预设阈值，将后一次截图页面的时间与应用开始进行启动时间的时间差，作为应用程序的启动时长。
在一些实施例中，应用程序测试结果还可以包括应用程序测试对比结果，应用程序测试装置还可以包括对比结果生成单元，用于将应用程序测试结果与其他程序测试结果进行对比，得到应用程序测试对比结果。
在一个实施例中，提出了一种计算机设备，计算机设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：接收应用程序测试请求；根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果；根据评测项测试结果以及评测项对应的评测类型生成评测类型的评测类型测试结果；根据评测类型测试结果输出应用程序测试结果。
在一个实施例中，评测项测试结果包括评测项评分，评测类型测试结果包括评测类型评分，处理器所执行的根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果的步骤包括：根据预设的评测项对应用程序进行测试，获取评测项的测试输出参数；根据评测项对应的评分规则对测试输出参数进行评分，得到评测项对应的评测项评分，其中，评分规则为评测项对应的评分权重与评测项在评测类型中的级别正相关，评测项对应的评分与测试输出参数所属的指标或者指标区间的级别正相关；处理器所执行的根据评测项测试结果以及所评测项对应的评测类型生成评测类型的评测类型测试结果的步骤包括：根据评测项的评测类型对属于同一评测类型的评测项分数进行求和计算，得到评测类型评分。
在一个实施例中，评测类型包括性能测试、安全性测试、稳定性测试和兼容性测试的其中之一或其任意组合。
在一个实施例中，处理器所执行的根据评测类型测试结果输出应用程序测试结果的步骤包括：根据评测类型评分以及评测类型对应的权值进行加权求和，得到应用程序的综合评分；输出应用程序测试结果；其中，应用程序测试结果包括综合评分，或者，应用程序测试结果包括综合评分以及评测类型评分。
在一个实施例中，应用程序测试结果还包括应用程序测试对比结果，处理器执行计算机可读指令时还执行以下步骤：将应用程序测试结果与其他程序测试结果进行对比，得到应用程序测试对比结果。
在一个实施例中，评测项包括应用程序的启动时间，处理器所执行的根据评测类型测试结果输出应用程序测试结果的步骤包括：发送应用程序启动指令，以使应用程序开始进行启动；对应用程序的页面进行多次截图；获取前一次截图页面和后一次截图页面的相似度；若相似度小于预设阈值，将后一次截图页面的时间与应用程序开始进行启动的时间的时间差，作为应用程序的启动时长。
在一个实施例中，提出了一种存储有计算机可读指令的存储介质，该计算机可读指令被一个或多个处理器执行时，使得一个或多个处理器执行以下步骤：接收应用程序测试请求；根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果；根据评测项测试结果以及评测项对应的评测类型生成评测类型的评测类型测试结果；根据评测类型测试结果输出应用程序测试结果。
在一个实施例中，评测项测试结果包括评测项评分，评测类型测试结果包括评测类型评分，处理器执行计算机可读指令时所执行的根据预设的评测项对应用程序进行测试，并获取评测项对应的评测项测试结果的步骤包括：根据预设的评测项对应用程序进行测试，获取评测项的测试输出参数；根据评测项对应的评分规则对测试输出参数进行评分，得到评测项对应的评测项评分，其中，评分规则为评测项对应的评分权重与评测项在评测类型中的级别正相关，评测项对应的评分与测试输出参数所属的指标或者指标区间的级别正相关；处理器执行计算机可读指令时所执行的根据评测项测试结果以及所评测项对应的评测类型生成评测类型的评测类型测试结果的步骤包括：根据评测项的评测类型对属于同一评测类型的评测项分数进行求和计算，得到评测类型评分。
在一个实施例中，评测类型包括性能测试、安全性测试、稳定性测试和兼容性测试的其中之一或其任意组合。
在一个实施例中，处理器执行计算机可读指令时所执行的根据评测类型测试结果输出应用程序测试结果的步骤包括：根据评测类型评分以及评测类型对应的权值进行加权求和，得到应用程序的综合评分；输出应用程序测试结果；其中，应用程序测试结果包括综合评分，或者，应用程序测试结果包括综合评分以及评测类型评分。
在一个实施例中，应用程序测试结果还包括应用程序测试对比结果，处理器执行计算机可读指令时还执行以下步骤：将应用程序测试结果与其他程序测试结果进行对比，得到应用程序测试对比结果。
在一个实施例中，评测项包括应用程序的启动时间，处理器所执行的根据评测类型测试结果输出应用程序测试结果的步骤包括：发送应用程序启动指令，以使应用程序开始进行启动；对应用程序的页面进行多次截图；获取前一次截图页面和后一次截图页面的相似度；若相似度小于预设阈值，将后一次截图页面的时间与应用程序开始进行启动的时间的时间差，作为应用程序的启动时长。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储记忆体(read-onlymemory，rom)等非易失性存储介质，或随机存储记忆体(randomaccessmemory，ram)等。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。