直播视频质量评测方法、存储介质以及终端与流程
本发明涉及互联网技术领域，具体而言，本发明涉及一种直播视频质量评测方法、存储介质以及终端。
背景技术：
随着多媒体技术的发展和互联网的普及，观看网络直播已逐渐成为人们日常娱乐消费的一部分，而视频质量直接影响着用户观看体验，因此，对直播视频质量进行评测具有重要的意义。直播视频质量评测分为主观评测和客观评测。主观评测直接以人眼为接收对象，符合人的主观感受，被认为是一种最接近实际情况的评测方法。客观评估是利用一些数学模型来模拟主观评估结果的方法，该方法易操作，可重复性强。在测试直播产品时，有很多测试项目，比如流畅度、画质、视频延迟等都可以通过客观的方式进行评估。但是有些测试项目却不能，比如美颜效果，因为不同的美颜效果给人带来的主观感受不一样，没办法通过客观的方式去评价。因此，主观评测是直播视频质量评测中不可或缺的一部分。
常用的视频质量主观评测就是让评测者先后观看一系列待测视频序列，再对视频序列一一打分，最后求得平均意见分(meanopinionscore，mos)，并对数据进行分析。主要有四种方法：(1)doublestimulusimpairmentscale(dsis)：先后观看源视频和测试视频，然后对测试视频评分；(2)doublestimuluscontinuousqualityscale(dscqs)：随机观看原始视频和测试视频，并对所观看的视频评分(包括源视频)；(3)singlestimulusmethods(ssm)：随机观看测试视频(无源视频)，并对测试视频打分；(4)singlestimuluscontinuousqualityevaluation(sscqe)：与ssm类似，只是该方法采用的视频段持续时间较长(≥5min),评测者可以在观看视频的任意时间内打分，最后的得分不仅考虑分值大小，还要考虑打分的时间。
从上述方法可以看出，现有技术中的视频质量主观评测需要评测者连续观看一系列录制好的待测视频序列，再对视频序列一一打分，从而评判出不同视频质量的好坏。该方法虽然简单，但是存在着弊端：需要一次连续看完所有的测试视频，会导致评测者疲劳，从而不会太专注各视频之间的差异，另外，由于人的记忆力有限，评测者可能会更倾向于后面观看的视频质量，会导致对前后视频评测标准不一致，因此，该种方式无法保证直播视频质量评测结果的可靠性。
技术实现要素：
本发明针对现有方式的缺点，提出一种直播视频质量评测方法、存储介质以及终端，用以解决现有技术中存在的无法保证直播视频质量评测结果的可靠性的问题，以保证直播视频质量评测结果的可靠性。
本发明的实施例根据第一个方面，提供了一种直播视频质量评测方法，包括步骤：
对各个直播应用程序进行分组；
获取每组中各个直播应用程序的直播视频；
分别对每组的各个直播视频进行合成，获得每组的同时显示各个直播视频的画面的合成视频；
向用户提供每组的合成视频，以使用户通过观看每组的合成视频对合成视频同时显示的各个直播视频的质量进行评测。
在一个实施例中，每组的各个直播视频的内容一致。
在一个实施例中，所述向用户提供每组的合成视频，包括：将每组的合成视频上传至服务器。
在一个实施例中，所述将每组的合成视频上传至服务器，包括：
在向服务器上传各组的合成视频时插入测试视频，以根据用户对所述测试视频的评测结果确定用户对各组的合成视频的评测结果是否有效，其中，所述测试视频由一组同步的原始视频和失真视频合成得到。
在一个实施例中，所述分别对每组的各个直播视频进行合成，获得每组的合成视频，包括：
对每组的各个直播视频进行解帧，获得各个直播视频的若干帧图片；
确定每组的各个直播视频的起始帧图片；
根据每组的各个直播视频的起始帧图片以及解帧帧序，将每组的各个直播视频的各帧图片对应进行合成，得到同时显示各帧图片的合成图片；
以解帧帧率对每组的合成图片进行合成，获得每组的合成视频。
在一个实施例中，所述确定每组的各个直播视频的起始帧图片，包括：
确定每组的各个直播视频的各帧图片中用于指示打板结束的第一帧图片；
将所述第一帧图片之后的第n帧图片确定为对应直播视频的起始帧图片，其中，n为大于等于0的整数。
在一个实施例中，所述将所述第一帧图片之后的第n帧图片确定为对应直播视频的起始帧图片之后，还包括：
检测每组的各个直播视频的起始帧图片的内容是否一致；
若不一致，将用户选取的内容一致的对应帧图片确定为该组的各个直播视频的起始帧图片。
在一个实施例中，所述将每组的各个直播视频的各帧图片对应进行合成之前，还包括：
将每组的各个直播视频的各帧图片调整至预设方位；
和/或；
去除各个直播视频的各帧图片中用于表征直播应用程序的水印；
和/或，
对各个直播视频的各帧图片进行切图，以使各帧图片中的主播均处于图片中间位置。
本发明的实施例根据第二个方面，还提供了一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述任意一项所述的直播视频质量评测方法。
本发明的实施例根据第三个方面，还提供了终端，所述终端包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现前述任意一项所述的直播视频质量评测方法。
上述的直播视频质量评测方法、存储介质以及终端，将所需要测试的各个直播应用程序进行分组，并获得每组的各个直播应用程序的直播视频，然后将每组的各个直播视频合成为对应的合成视频，那么用户每次只需观看合成视频就可以同时对合成视频同时显示的各个直播视频分别进行打分，而无需按照先后顺序一次看完所有的直播视频，避免了因疲劳或记忆力有限造成的评测结果偏差，有效保证直播视频质量评测结果的可靠性，开发人员根据该可靠的评测结果可以及时改进直播app的算法或调整直播app的参数，从而使直播的视频效果更符合大众的审美等，带来更好的用户体验。
进一步的，由于每组中各个直播视频的内容的一致性，从而避免了因内容不同而给主观评测带来的干扰，有效保证直播视频质量评测结果的可靠性。
进一步的，通过将合成视频上传至服务器实现了线上测试方式，用户可以直接通过地址的方式参与评测，不仅使评测更加方便，而且支持多个用户同时在线评测，大量的评测结果保证了最终结果的可靠性和普适性。
进一步的，通过在上传合并视频时插入测试视频，根据用户对所述测试视频的评测结果确定用户对各组的合成视频的评测结果是否有效，从而防止某些用户对视频恶意打分而影响最终结果，有效保证直播视频质量评测结果的可靠性。
本发明附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本发明一个实施例的直播视频质量评测方法的流程示意图；
图2为本发明一个具体实施例的录制视频时两个主播机位置的示意图；
图3为本发明一个具体实施例的打板卡的示意图；
图4为本发明一个具体实施例的合成视频的示意图；
图5为本发明一个具体实施例的切图方式的示意图；
图6为本发明一个具体实施例的直播视频质量评测方法的示意图；
图7为本发明一个具体实施例的终端的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能解释为对本发明的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
本技术领域技术人员可以理解，这里所使用的“终端”既包括无线信号接收器的设备，其仅具备无发射能力的无线信号接收器的设备，又包括接收和发射硬件的设备，其具有能够在双向通信链路上，执行双向通信的接收和发射硬件的设备。这种设备可以包括：蜂窝或其他通信设备，其具有单线路显示器或多线路显示器或没有多线路显示器的蜂窝或其他通信设备；pcs(personalcommunicationsservice，个人通信系统)，其可以组合语音、数据处理、传真和/或数据通信能力；pda(personaldigitalassistant，个人数字助理)，其可以包括射频接收器、寻呼机、互联网/内联网访问、网络浏览器、记事本、日历和/或gps(globalpositioningsystem，全球定位系统)接收器；常规膝上型和/或掌上型计算机或其他设备，其具有和/或包括射频接收器的常规膝上型和/或掌上型计算机或其他设备。这里所使用的“终端”可以是便携式、可运输、安装在交通工具(航空、海运和/或陆地)中的，或者适合于和/或配置为在本地运行，和/或以分布形式，运行在地球和/或空间的任何其他位置运行。这里所使用的“终端”还可以是通信终端、上网终端、音乐/视频播放终端，例如可以是pda、mid(mobileinternetdevice，移动互联网设备)和/或具有音乐/视频播放功能的移动电话，也可以是智能电视、机顶盒等设备。
下面结合附图，对本发明直播视频质量评测方法、存储介质以及终端的具体实施方式进行详细介绍。
如图1所示，在一个实施例中，一种直播视频质量评测方法，包括步骤：
s110、对各个直播应用程序进行分组；
s120、获取每组中各个直播应用程序的直播视频；
s130、分别对每组的各个直播视频进行合成，获得每组的同时显示各个直播视频的画面的合成视频；
s140、向用户提供每组的合成视频，以使用户通过观看每组的合成视频对合成视频同时显示的各个直播视频的质量进行评测。
通过上述实施例提供的每组的合成视频，用户每次只需对合成视频同时显示的各个直播视频同步进行打分，而无需按照先后顺序一次看完所有的评测视频，避免了因疲劳或记忆力有限造成的评测结果偏差，有效保证直播视频质量评测结果的可靠性。
在步骤s110中，直播应用程序可以为需要测试的任意直播app(application，应用程序)，例如yy等。用户可以采用本发明实施例提供的方法对不同直播app的测试项目进行主观评测，例如，测试不同直播app的美颜效果等，本发明并不对此作出限定。
对所要测试的各个直播app进行分组有多种实现方式，只要确保每个直播app都能够与其它直播app进行配对即可。例如，在一个实施例中，将所需要测试的各个直播app按照组合的方式两两分组，确保每个直播app都能够与其它直播app进行配对，若存在n个待测直播app，则共有
应当理解，本发明并不限于上述分组的方式，用户还可以采用其它分组方式，例如，将所需要测试的各个直播app按照组合的方式三三分组或者四四分组等。
在步骤s120中，直播视频采集是主观评测的基础。对不同的直播app进行分组后，可以确定每组中各个直播app所在录制设备的位置以及组与组之间的录制顺序，以采集各组中各个直播app的直播视频。
现有技术中在进行直播视频质量评测时，由于不同视频的录制环境、设备、角度、内容可能不同，使录出来的视频效果差异较大，不具有可比性，因此会给主观评测带来的干扰，影响直播视频质量评测结果的可靠性。因此，针对该缺陷，在一个实施例中，每组的各个直播视频的内容一致。内容一致指的是同一组中的各个直播视频在观看端无论在人物大小、居中程度、水平位置等都高度一致，从而避免了因视频内容不同而给主观评测带来的干扰，保证直播视频质量评测结果的可靠性。
为了保证每组中各个直播视频的内容一致，可以采用对同一组内的各个直播视频同步录制的方式。实现直播视频同步录制的方式有很多，下面结合一个两两分组的具体操作实例进行说明。应当理解，下述两两分组的同步视频采集方式还适用于其它分组方式，另外，本发明并不限定于下述同步录制方式，用户还可以采用其它同步录制方式获取每组的内容一致的各个直播视频。
需要的器材如表1所示。
表1器材清单
基于上述器材清单中所列器材，下面详细介绍直播视频同步采集的过程。
a.布置好视频采集所需的网络环境；架设好三脚架、手机固定架、打光灯等设备，其中打光灯置于三脚架的正后方；用镜头清洗液将主播机的摄像头擦洗干净。
b.将两台相同型号的主播机横向固定在手机固定架上，固定时将两台主播机的摄像头均朝向中间方位且尽量紧靠在一起，如图2所示。打开主播机中的水平测量仪，调整横纵角度，使两主播机均处于水平方位且在同一个平面上。
c.打开两台主播机中相同的直播app进行开播，同时采用两台相同型号的手机作为观看机分别观看左右两台主播机；让主播站在手机固定架前的适当位置，使直播视频中的人物大小保持适中；固定一台主播机，微调另一台主播机，直到两台观看机中的人物在大小、居中度上一致为止；标记主播所站位置，以便之后的实验中主播所站的位置能够保持一致。
d.打开流明计，调整打光灯，将流明值调整到适宜的大小(例如400)。
e.按照步骤s110中的分组打开左右主播机中的直播app，并让主播以及打板者就位，可选的，打板卡为4*4黑白棋盘图案，如图3所示。将打板卡置于靠近主播脸部的位置。另外，采用两台电脑分别录制左右两台观看机中的视频，待录制者准备就绪，打板者迅速撤下打板卡，同时主播开始做动作，可选的，录制时间为20～30秒。
f.每组录制完成后需对直播视频进行一一检查，若存在卡顿或花屏的情况则需重新录制，可选的，每组直播视频录3次。
g.重复e、f中的步骤直到步骤s110中所有分组录制完毕为止。
为了保证直播视频质量评测结果的可靠性，还可以对录制好的直播视频进行筛选，选择每组中效果较好的直播视频作为所要评测的视频。若视频效果差别较小，则随机抽取。
在步骤s130中，视频合成是主观评测的关键，通过该过程可以将每组中各个单独的直播视频合并成一个包含各个直播画面的合成视频。例如，每组包括两个直播视频，通过该过程可以将每组中两个单独的直播视频合并成一个包含左右两个画面的合成视频。另外，如果每组直播视频的内容具有一致性，那么合成视频中各个直播视频的画面的动作需要保持同步。
在一个实施例中，所述分别对每组的各个直播视频进行合成，获得每组的合成视频，包括：
s1300、对每组的各个直播视频进行解帧，获得各个直播视频的若干帧图片。
通过对直播视频进行解帧，将直播视频分解成一帧一帧的图片。解帧有多种实现方式，可选的，采用ffmpeg(fastforwardmpeg)工具将直播视频分解成一帧一帧的图片。另外，为了保持画质的原始性，可选的，统一采用bmp(bitmap)格式进行解帧且解帧帧率保持固定(例如60)。
s1302、确定每组的各个直播视频的起始帧图片。
起始帧为直播视频开始的关键帧。在一个实施例中，所述确定每组的各个直播视频的起始帧图片，包括：
s1302a、确定每组的各个直播视频的各帧图片中用于指示打板结束的第一帧图片。
该步骤的本质为确定打板结束桢的图片。确定每个直播视频的打板结束帧有多种实现方式，例如，若采集直播视频时采用棋盘模式的打板卡，则可以通过采用opencv中findchessboardcorners函数检测打板卡中内角点的方式来确定打板桢。该函数试图确定输入图像是否是棋盘模式，并确定角点的位置。如果所有角点都被检测到，函数返回非零值，表示该桢为打板桢；否则返回0。本实施例以打板桢后返回值为0的第一桢作为打板结束桢。
s1302b、将所述第一帧图片之后的第n帧图片确定为对应直播视频的起始帧图片，其中，n为大于等于0的整数。
该步骤的本质为确定起始桢的图片。由于主播可能在打板桢结束时并没有开始做动作，因此，无法判断主播后面的动作是否同步。为确保评测者看到的评测视频(合成视频)的动作同步性，将所述第一帧图片之后的第n帧图片确定为对应直播视频的起始帧图片。n可以根据实际需要进行确定，例如以打板结束后3秒的第一帧图片(如果解帧帧率为60，则3*60＝180，即打板结束帧后第181帧)为起始帧图片。
通过上述方式自动确定的每组中各个直播视频的起始帧的画面动作有可能不一致，即内容不一致。例如，一个组包含两个直播视频a和b，通过上述方式自动确定直播视频a的起始帧图片以及直播视频b的起始帧图片，但是直播视频a的起始帧图片与直播视频b的起始帧图片动作不同步。因此还需要用户手动进行调整。在一个实施例中，所述将所述第一帧图片之后的第n帧图片确定为对应直播视频的起始帧图片之后，还包括：检测每组的各个直播视频的起始帧图片的内容是否一致；若不一致，将用户选取的内容一致的对应帧图片确定为该组的各个直播视频的起始帧图片。
在用户手动调整起始帧图片时，可以固定一个直播视频的起始帧图片不动，调整该组中其余直播视频的起始帧图片，直到其余直播视频的起始帧图片与该固定的直播视频的起始帧图片的内容一致，此时记录每个直播视频的起始帧号。也可以同时对该组中所有直播视频的起始帧图片进行调整，直至所有的起始帧图片的内容一致，此时记录每个直播视频的起始帧号。
应当理解，上述确定各个直播视频起始帧图片的方式主要针对存在打板卡的情形，如果没有打板卡，可以直接将预设帧号的图片确定为起始帧图片，如果某一个组内起始帧图片的内容不一致，则手动进行调整，直至该组内起始帧图片的内容一致。用户也可以采用其它方式确定每个组内各个直播视频的起始帧图片，本发明并不对此作出限定。
s1305、根据每组的各个直播视频的起始帧图片以及解帧帧序，将每组的各个直播视频的各帧图片对应进行合成，得到同时显示各帧图片的合成图片。
为了能够更清楚直观地比较直播视频，需要将每组中的各个单独直播视频合并成一个独立的评测视频(即每组的合成视频)，具体分为图片合成和视频合成两个步骤。步骤s1304为图片合成，步骤s1306为视频合成。
在进行图片合成时，针对一个组，将各个直播视频的起始帧图片进行合成，将各个直播视频的起始帧图片的下一帧图片进行合成，将各个直播视频的起始帧图片的下两帧图片进行合成，依次类推，直至将该分组内各个直播视频的所有帧图片进行了合成。在进行图片合成时，可选的，可以采用ffmpeg工具。
以一个组包括两个直播视频为例，根据每组中左右两个视频的起始帧及解帧帧序，利用ffmpeg工具将两两对应的图片一一合成，就得到了合成的各个图片。
另外，为了保证视频长度的一致性，进而提高评测结果的可靠性，可选的，统一采用固定数量的图片进行合成。固定数量可以根据实际需要进行确定，例如固定数量为600帧，若解帧帧率为60，则600帧即为10秒。
s1306、以解帧帧率对每组的合成图片进行合成，获得每组的合成视频。
在进行视频合成时，针对每一组，将合成好的图片以解帧帧率(例如60)合成一段包含各个同步画面的评测视频，即合成视频，其中，将图片合成视频的方式可以根据现有技术中已有的方式实现。
如图5所示，为一具体实施例的合成视频的示意图，该合成视频由两个直播app的直播视频(左图和右图)合成，由该图可以看出，用户直接观看该合成视频，就可以同时对两个直播app的直播视频进行打分，因而提高了评测最终结果的可靠性。
在一个实施例中，所述将每组的各个直播视频的各帧图片对应进行合成之前，还包括：s1301、将每组的各个直播视频的各帧图片调整至预设方位。
由于某些直播app播出画面可能存在镜像或旋转等问题，因此，需要将这些图片调整至正确的方位。可选的，通过调用opencv中的flip函数和numpy中的rot90函数分别解决镜像和旋转角度问题。
在一个实施例中，所述将每组的各个直播视频的各帧图片对应进行合成之前，还包括：s1303、去除各个直播视频的各帧图片中用于表征直播应用程序的水印。
有些直播视频中带有与app信息相关的水印，为了避免水印给评测者带来影响，需要将这些水印去除。去除水印的方式有很多种，可以将水印提取出来存储到预设位置，后续得到各个直播视频的评测结果后再对应添加，也可以将这些水印遮挡起来，即在水印位置叠加无产品信息的其它图片。在叠加图片时，为了保持图片的简洁性，可选的，在有水印的地方叠加与背景颜色相近的纯色图案，例如rgb为(127，127，127)的灰色矩阵块。
在一个实施例中，所述将每组的各个直播视频的各帧图片对应进行合成之前，还包括：s1304、对各个直播视频的各帧图片进行切图，以使各帧图片中的主播均处于图片中间位置。
有效的切图参数不仅可以去除直播视频中的无关画面，而且可以保证人物居于视频中间位置。对各个直播视频的各帧图片进行切图，以使各帧图片中的主播均处于图片中间位置有多种实现方式，下面结合两个实施例进行说明。
在一个实施例中，通过检测人物左右边缘点的方式确定主播的左边边界和右边边界，然后以左边边界和右边边界向外扩展同样的距离后对图片进行切割，获得切割后的图片。
在另一个实施例中，首先通过人脸识别的方式检测主播脸部中心位置，然后以人脸为中心，以固定长宽为参数对图片进行切割。其中人脸识别可以通过调用face++的在线api得到。
face++是新一代云端视觉服务平台，可以提供整套世界领先的人脸检测技术。先向face++的服务器发起http(hypertexttransferprotocol，超文本传输协议)请求，得到返回的json字符串；再通过关键字“faces”和“face_rectangle”得到人脸的具体位置，从而确定人脸的中心点，然后以人脸中心点为基准，左右各取固定宽度(例如取480)进行切割，切割时高度与原视频保持一致，如图5所示。
应当理解，上述虽然标记有序号s1301～s1306，但是并不对步骤的顺序进行限定，用户可以根据需要自行调整某些步骤的顺序。
在步骤s1306之后，可选的，检查每组的合成视频中各个画面动作是否一致以及视频人物是否居中。若画面不一致，则检查各个起始帧图片的动作是否相同，若不相同，则手动调整起始帧图片，直到各个起始帧图片动作相同为止，若相同，则视频可能存在卡顿，需换取另一组直播视频重新合并；若视频人物不居中，则可以重新调用face++在线api进行人脸识别，并重新切割与合成。
在步骤s140中，现有技术中在进行直播视频质量评测时一般采用线下的测试方式，但是线下的测试方式不便于大量评测者进行评测，而少数人员测出的结果不具有普适性。为了便于大量评测者能够同时参与评测，在一个实施例中，所述向用户提供每组的合成视频，包括：将每组的合成视频上传至服务器。将所有合成好的评测视频(即合成视频)上传至服务器，生成一种线上的主观评测系统，评测者通过打开视频所在的url(uniformresourcelocator，统一资源定位符)便可参与评测，不仅使评测更加方便，而且支持多个评测者同时在线评测，大量的评测结果保证了最终结果的可靠性。
另外，为了防止某些评测者对视频恶意打分而影响最终结果，在一个实施例中，所述将每组的合成视频上传至服务器，包括：在向服务器上传各组的合成视频时插入测试视频，以根据用户对所述测试视频的评测结果确定用户对各组的合成视频的评测结果是否有效，其中，所述测试视频由一组同步的原始视频和失真视频合成得到。
在上传评测视频时，可以随机插入若干组测试视频，也可以按照固定的频率插入若干组测试视频。插入的测试视频的组数可以根据实际需要进行确定。测试视频与评测视频类似，是由一组同步的原始视频和失真视频合成得到，用于检验用户的评测结果是否有效。根据测试视频检测用户的评测结果是否有效的方式有很多。例如，若某组评测结果中，测试视频中的原始视频得分都比失真视频高，则认为该组评测结果是有效的，并将结果录入数据库；否则，舍弃该组结果。又例如，若某组评测结果中，测试视频中的原始视频得分比失真视频高的数目大于预设阈值，则认为该组评测结果是有效的，并将结果录入数据库；否则，舍弃该组结果。
得到各个直播视频的评测结果后，通过计算各直播视频对应得分的平均值得到所有直播视频的优劣排名，开发人员根据该优劣排名可以及时改进对应直播app的算法或调整对应直播app的参数，从而使直播的视频效果更符合大众的审美等，带来更好的用户体验。
为了更好的理解本发明，下面结合一个具体实施例进行介绍。
如图6所示，直播视频质量评测方法旨在保持两两直播视频同步录制的条件下，将各组中两个单独直播视频合并成一个包含左右同步画面的合成视频，将这些合成视频以及若干测试视频上传至服务器生成主观评测任务，评测者可以直接通过该任务的url地址获取不同组合的合成视频，并对视频中的两个左右视频进行优劣判定，给出评分，通过计算每个视频所有得分的期望值得到直播视频质量的最终排名。其具体步骤包括：
1)视频采集：
视频采集是主观评测的基础，主要功能是采集两两分组app的直播视频，并保证每组中两个视频内容的一致性。分为以下三个步骤：
①分组：
将所有待测直播app按照组合的方式两两分组。分完组后确定每组中两个直播app所在录制设备的左右位置以及组与组之间的录制顺序。
②采集：
调节两直播工具的横纵角度、前后距离等使两段直播视频在观看端无论在人物大小、居中程度、水平位置等都高度一致，在录制前使用打板卡打板，按照①中分组的顺序进行各组直播视频的同步采集。
③筛选：
筛选出每组符合要求的直播视频。
2)视频合成：
视频合成是主观评测系统的关键，通过该过程可以将每组中两个单独的直播视频合并成一个包含左右两个画面(或者上下两个画面)的合成视频，且左右两个画面的动作保持同步。分为以下六个步骤：
①视频解帧：
将直播视频分解成一帧一帧的图片。为了保持画质的原始性，统一采用bmp格式进行解帧且解帧帧率保持固定。
②图片调整：
调整方位不正确的图片。
③确定每个直播视频的起始帧：
确定打板结束桢，以打板结束后3秒的第一帧(3*60＝180，即打板结束帧后第181帧)为起始帧。
④遮水印:
在有水印的地方叠加与背景颜色相近的纯色图案，遮盖含有产品信息的水印。
⑤切图：
将各图片裁剪成以人脸为中心，左右固定宽度的图片。
⑥视频合成：
按照每组中两个直播视频的起始帧以及解帧顺序，将两两对应的图片一一拼接，再把所有拼接的图片按照前后顺序逐次合并，这样就得到了一段包含左右两个同步画面的合成视频。
3)视频上传及评测：
将这些合成视频以及若干测试视频上传至服务器，评测者直接通过打开url的方式参与评测。
在一个实施例中，本发明还提供一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现前述任意一项所述的直播视频质量评测方法。其中，所述存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、cd-rom、和磁光盘)、rom(read-onlymemory，只读存储器)、ram(randomaccessmemory，随即存储器)、eprom(erasableprogrammableread-onlymemory，可擦写可编程只读存储器)、eeprom(electricallyerasableprogrammableread-onlymemory，电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是，存储介质包括由设备(例如，计算机)以能够读的形式存储或传输信息的任何介质。可以是只读存储器，磁盘或光盘等。
在一个实施例中，本发明还提供一种终端，所述终端包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现前述任意一项所述的直播视频质量评测方法。
如图7所示，为了便于说明，仅示出了与本发明实施例相关的部分，具体技术细节未揭示的，请参照本发明实施例方法部分。该终端可以为包括手机、平板电脑、pda(personaldigitalassistant，个人数字助理)、pos(pointofsales，销售终端)、车载电脑等任意终端设备，以终端为手机为例：
图7示出的是与本发明实施例提供的终端相关的手机的部分结构的框图。参考图7，手机包括：射频(radiofrequency，rf)电路1510、存储器1520、输入单元1530、显示单元1540、传感器1550、音频电路1560、无线保真(wirelessfidelity，wi-fi)模块1570、处理器1580、以及电源1590等部件。本领域技术人员可以理解，图7中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
下面结合图7对手机的各个构成部件进行具体的介绍：
rf电路1510可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，给处理器1580处理；另外，将设计上行的数据发送给基站。通常，rf电路1510包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier，lna)、双工器等。此外，rf电路1510还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(globalsystemofmobilecommunication，gsm)、通用分组无线服务(generalpacketradioservice，gprs)、码分多址(codedivisionmultipleaccess，cdma)、宽带码分多址(widebandcodedivisionmultipleaccess,wcdma)、长期演进(longtermevolution，lte)、电子邮件、短消息服务(shortmessagingservice，sms)等。
存储器1520可用于存储软件程序以及模块，处理器1580通过运行存储在存储器1520的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器1520可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如直播视频质量评测功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如合成视频等)等。此外，存储器1520可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
输入单元1530可用于接收输入的数字或字符信息，以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地，输入单元1530可包括触控面板1531以及其他输入设备1532。触控面板1531，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1531上或在触控面板1531附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板1531可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1580，并能接收处理器1580发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1531。除了触控面板1531，输入单元1530还可以包括其他输入设备1532。具体地，其他输入设备1532可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元1540可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元1540可包括显示面板1541，可选的，可以采用液晶显示器(liquidcrystaldisplay，lcd)、有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板1541。进一步的，触控面板1531可覆盖显示面板1541，当触控面板1531检测到在其上或附近的触摸操作后，传送给处理器1580以确定触摸事件的类型，随后处理器1580根据触摸事件的类型在显示面板1541上提供相应的视觉输出。虽然在图7中，触控面板1531与显示面板1541是作为两个独立的部件来实现手机的输入和输入功能，但是在某些实施例中，可以将触控面板1531与显示面板1541集成而实现手机的输入和输出功能。
手机还可包括至少一种传感器1550，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1541的亮度，接近传感器可在手机移动到耳边时，关闭显示面板1541和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
音频电路1560、扬声器1561，传声器1562可提供用户与手机之间的音频接口。音频电路1560可将接收到的音频数据转换后的电信号，传输到扬声器1561，由扬声器1561转换为声纹信号输出；另一方面，传声器1562将收集的声纹信号转换为电信号，由音频电路1560接收后转换为音频数据，再将音频数据输出处理器1580处理后，经rf电路1510以发送给比如另一手机，或者将音频数据输出至存储器1520以便进一步处理。
wi-fi属于短距离无线传输技术，手机通过wi-fi模块1570可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图7示出了wi-fi模块1570，但是可以理解的是，其并不属于手机的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
处理器1580是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器1520内的软件程序和/或模块，以及调用存储在存储器1520内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器1580可包括一个或多个处理单元；优选的，处理器1580可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1580中。
手机还包括给各个部件供电的电源1590(比如电池)，优选的，电源可以通过电源管理系统与处理器1580逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
尽管未示出，手机还可以包括摄像头、蓝牙模块等，在此不再赘述。
上述的直播视频质量评测方法、存储介质以及终端，将所需要测试的各个直播应用程序进行分组，并获得每组的各个直播应用程序的直播视频，然后将每组的各个直播视频合成为对应的合成视频，那么用户每次只需观看合成视频就可以同时对合成视频同时显示的各个直播视频分别进行打分，而无需按照先后顺序一次看完所有的直播视频，避免了因疲劳或记忆力有限造成的评测结果偏差，有效保证直播视频质量评测结果的可靠性，开发人员根据该可靠的评测结果可以及时改进直播app的算法或调整直播app的参数，从而使直播的视频效果更符合大众的审美等，带来更好的用户体验。
进一步的，通过分组同步录制的方式，保证了每组中各个直播视频的内容的一致性，从而避免了因内容不同而给主观评测带来的干扰，有效保证直播视频质量评测结果的可靠性。
进一步的，通过将合成视频上传至服务器实现了线上测试方式，用户可以直接通过url地址的方式参与评测，不仅使评测更加方便，而且支持多个用户同时在线评测，大量的评测结果保证了最终结果的可靠性和普适性。
进一步的，通过在上传合并视频时插入测试视频，根据用户对所述测试视频的评测结果确定用户对各组的合成视频的评测结果是否有效，从而防止某些用户对视频恶意打分而影响最终结果，有效保证直播视频质量评测结果的可靠性。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
- 还没有人留言评论。精彩留言会获得点赞！