一种视频传输方法及装置、系统的制作方法

文档序号:7696253阅读:118来源:国知局

专利名称::一种视频传输方法及装置、系统的制作方法
技术领域
:本发明涉及流媒体传输领域,尤其涉及网络中传输^L频的方法及装置、系统。
背景技术
:随着网络技术的不断发展,通过网络传输视频已越来越普及。例如,人们可以在网络上在线观看电影、进行视频通信等。但由于传输视频数据时需要消耗大量的网络带宽,难免会出现网络拥塞的情况,进而导致传输质量下降、影响视频的播放效果。为了解决上述问题,目前采用的技术方案是使用运动活动性描述符来改进网络中视频传输的质量。例如,对原始视频信号进行镜头分割后,利用神经网络模型实现运动活动性特征的提取,并将运动活动性特征量化为5个级别,接着将编码后的原始视频和运动活动性描述符一起传输,在传输过程中根据丢帧策略丢弃部分帧来緩解网络拥塞,以实现拥塞控制,接收端收到传输的视频和运动活动性描述符后对视频进行解码,并通过错误隐藏技术降低丢帧对视频质量的影响。上述传输过程中的丢帧策略,是在网络各个节点丢帧来解决网络拥塞的一种有效方法。在视频中,l帧是关键的帧,对图像质量有很大的影响,P帧和B帧的解码都要依赖于l帧;P帧的重要性仅次于l帧,他的解码依赖于前一个l帧或P帧;相比而言,B帧的重要性又次于P帧,它的解码依赖于相邻的两个l帧或P帧。目前通过丢弃部分或者全部B帧,保留全部I帧和P帧的方法来保证接收端的视频质量。发明人在实现本发明的过程中,发现现有技术中至少存在如下问题利用上述计算方法,可以在传输视频的过程中根据运动活动性等级丢弃视频流中运动活动性等级小的B帧,以满足运动活动性等级越高丢帧率越小的要求。在多路视频流同时传送而网络带宽又有限的情况下,就可以调整各个不同运动活动强度的视频流的丢帧率,保证总的视频质量下降最小。但是,对于具体某个运动活性级别的视频流,有可能质量下降很大,不能保证接收端观看效果;并且,对每个镜头进行运动活动性特征提取,计算复杂且任务繁重。
发明内容本发明的实施例提供了一种视频传输方法和装置,能够有效提高视频播放质量。一种视频传输方法,包括对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;按照所述确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据。一种视频传输装置,包括运动强度提取单元,用于对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;反馈信息接收单元,用于获取接收端反馈的丢包率信息;视频传输控制单元,用于根据所述反馈信息接收单元的丢包率信息,以及所述运动强度提取单元确定的基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;传输单元,用于按照所述视频传输控制单元确定的所述传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据。一种视频传输系统,包括视频传输装置,可被设置成与客户端装置进行视频传输通信;所述视频传输装置,用于对视频数据基于场景提取运动强度特征信息,并确定基于所述场景的视频数据的运动强度;获取接收端反馈的丢包率信息;并7根据接收端反馈的丟包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丟包率,以及丢弃的包的类型;并按照所述确定的传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据;所述客户端装置,用于接收所述视频传输装置传输的视频数据,并反馈丢包率信息。由上述本发明的实施例提供的技术方案可以看出,由于本发明实施例在控制网络拥塞时,根据网络当前的传输情况和视频数据的运动强度等级,在发送端对视频传输质量等级进行自适应调整,不但能够在网络拥塞时对低运动强度的视频数据进行丢包,还可以对高运动强度场景的视频数据进行丢包,使得控制网络拥塞更加有效,同时不同的丢帧策略也保证了当前发送的各^L频流中关键数据帧不会被丢弃,避免了在网络拥塞情况下传输大量数据引起的盲目丢包,即使在多路视频流同时传送时也能对各具体视频流质量进行控制,从而实现了在有效控制网络拥塞的同时提高视频播放质量。图1为本发明实施例提供的方法流程示意图2为本发明实施例提供的丢包率相同情况下不同运动强度的视频的质量损失示意图图3为本发明实施例提供的相同运动强度下视频数据内的l、P、B帧比例示意图图4为本发明实施例提供的相同视频质量下视频数据内的l、P、B帧比例示意图图5为本发明实施例进行了运动强度分级的一段画面示意图;图6为本发明实施例根据自适应传输策略去除马赛克的效果对比示意图;图7为本发明实施例根据自适应传输策略去除马赛克前后的信噪比曲线示意图;图8是本发明实施例根据采用自适应传输和非自适应传输的各10幅画面得到的PSNR曲线示意图9a为本发明实施例提供的视频传输装置的结构示意图;图9b为本发明实施例提供的视频传输控制单元的结构示意图;图10为本发明实施例提供的视频传输系统的结构示意图;图11为本发明实施例提供的客户端装置结构示意图。具体实施例方式在本发明实施例中,为有效提高网络中传输的视频质量,提供一种视频传输方法,具体可以对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度等级;根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度等级,确定传输基于所述场景的^L频数据时的丢包率,以及丢弃的包的类型;并根据所述确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据。为便于对本发明实施例的理解,下面将结合附图对本发明实施例的具体实现方案进^f于详细的描述。图1是本发明实施例提供的方法流程示意图,下面结合图1对本发明实施例提供的方法进行详细描述。如图1所示,具体可以包括11:对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;具体可以包括将连续的一组镜头作为一个场景,提取基于该场景的视频数据中的运动强度特征信息,并根据运动强度等级划分值,确定基于该场景的视频数据的运动强度等级;运动强度特征是运动活动性描述符中的一个子项,运动强度特征可以从基于镜头的视频数据中提取,但由于实际应用中需要对运动强度特征进行量化,而一个场景中相邻镜头之间的运动强度等级相差不大,为了减少存储的信息量以及处理过程中的复杂度,本发明实施例采取基于场景提取视频数据的运动强度特征信息;例如具体实现时,运动强度特征信息的提取可以在Mpeg-1(MovingPictureExpertGroup,运动图像专家组冲各式)的压缩域中进行(以P帧为例)先通过Mpeg-1的木亍准角罕石马器mpeg2decode获^寻Mpeg-1压缩浮见频数据中P帧每个宏块的运动向量,定义活力矩阵C,,,、,cmv,,y)}其中,C表示矩阵,mv表示活力,Cmv为活力矩阵,R(i,j)为(i,j)处的运动活力,xn,yn分别表示(i,j)块在x和y方向上的运动向量;然后计算该P帧的每个宏块的平均向量幅度<formula>formulaseeoriginaldocumentpage10</formula>其中,I、J分别代表一个P帧中的x和y方向上的宏块数目;接着计算该P帧的运动幅度标准差V",=i>i然后计算该P帧的运动幅度标准差的期望值<formula>formulaseeoriginaldocumentpage10</formula>最后,对该P帧运动幅度标准差的期望值进行量化,经过大量数据测试,25帧/秒、CIF(标准化图像格式,CommonIntermediateFormat)分辨率的视频的量化值可以由50、80、100、120划分为5个等级,虽然这与MPEG-7中给定的参考值有区别,但经过实验证明,用上述5个等级衡量场景的激烈程度是可行的;相应的,根据运动强度特征划分运动强度等级的过程可以如下例如,如果该P帧的》值小于50,则将该P帧的运动强度等级设为1级;如果^值大于50且小于80,则将该P帧的运动强度等级设为2级;如果S值大于80且小于100,则将该P帧的运动强度等级设为3级;如果S值大于100且小于120,则将该P帧的运动强度等级设为4级;如果S值大于等于120,则将该P帧的运动强度等级设为5级;需要说明的是,上述基于场景的视频数据的运动强度等级信息可以保存在月良务器端;12:根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度等级,确定基于所述场景的视频数据的视频传输质量等级,视频传输质量等级用于确定传输基于所述场景的视频数据时的丢包率,以及丟弃的包的类型;包括(一)基于所述场景的视频数据的运动强度等级,对应传输基于所述场景的视频数据的丢包率上限值和丢包率下限值;为确定了基于所述场景的运动强度等级的视频数据选择对应传输时的丢包类型和丢包率的视频传输质量等级;其中,视频数据的基于场景的运动强度等级越高,传输时对应的丢包率上限值越低,丟包率下限值越高;基于场景的视频数据的^见频传输质量等级越高,传输时对应的丢包率越低,丢弃的包的重要等级也越低;A、本发明实施例为确定了基于场景的运动强度等级的视频数据,设置传输时的丢包率上限值和丢包率下限值的原理如下假设网络传输时无计划外丢包,视频数据的视频传输质量等级都一致,则按着视频传输质量等级对应的丢包率丟包后,再播;改该丢包后^L频的过程中,视频运动强度越低,内容变化越少,用户能够清晰流畅的观看一见频画面,并且由于视频中帧和帧之间的大背景非常相似,画面一般不会剧烈变化,因此用户看到的画面延续性很强,例如运动强度等级为1的视频即使只播放l帧也可以提供流畅的画面。随着视频的运动强度不断增大,画面的变化程度越来越激烈,视频丢失的帧对播放画面的影响越来越大。若运动强度是第五级,丢包到只剩下l帧时,播放该视频时,基本看到的是一幅幅跳动很大的画面,视频中的一些动作都已经被略过了,因此视频画面跳跃性太大,令用户难以满意。因此,在网络传输视频数据时丢包率相同的情况下,不同运动强度的视频的质量损失也不同,具体如图2所示从图2中可以看出,当网络传输的视频数据的丢包率相同时,则随着视频运动强度的升高,视频质量下降越明显,也就是说,高运动强度的视频质量对丢包率的敏感度远远高于低运动强度的视频质量。鉴于上述结论,本发明实施例将视频的运动强度用于指导丢帧(或丢包),即对于不同运动强度的视频,设置不同的丢包率上限值和下限值,使得不同运动强度的视频场景得到不同的处理具体的,对于高运动强度的视频场景,为该场景的视频数据设置丢包率上限值、下限值时,使该丢包率上限值和下限值对丢包率的变化敏感。对于丢包率上限值,不宜设置过大,以保证网络使用状况为主。因为对于高运动强度视频,相邻若干帧之间信息密度大,对网络的丢包率非常敏感,为了避免由于传输时丢包过多导致画面产生大量的马赛克,丟包率上限不易设置的过大。而对于丢包率下限值,不宜设置过小,以保证视频质量为主。因为网络一旦好转,需要最先提升高运动强度场景的视频数据传输质量等级,因为高运动强度场景的视频数据的丢帧对视频质量的影响相对低运动强度场景的视频质量的影响较大,所以丢包率下限值不能太小。丢包率的下限值不是用于确定是否少丢包,而是用于确定网络状况是否好转,也就是说,一旦当前视频传输的丢包率低于设置的下限值,就认为当前的网络传输状态处于轻载状态。运动强度越高,丢包率下限值越大,那么当网络负载减轻时,也就越先开始调整,这有助于视频平均播放质量的4是高。由于在一般情况下,包括网络在满载状态时,若视频质量损失不超过10%,视频质量不会明显下降,根据上述处理原理,设定的丟包率上限值、下限值可以如下表1所示下限P,上限P2运动强度1级130运动强度2级32512<table>tableseeoriginaldocumentpage13</column></row><table>表1从表1可以看出,当视频场景的运动强度很小时,视频对网络波动并不敏感当网络传输变得很差时,低运动强度场景的视频数据的传输质量等级开始下降,或当网络传输状态很好时,低运动强度场景的视频数据的传输质量等级开始提升。由于运动强度低的视频相邻若干帧之间信息密度很低,而且对网络中由于丢包而产生的视频质量变化也不敏感,因此上表中为低运动强度场景的视频数据设置的丟包率上、下限值符合实际的需要;而当视频场景的运动强度很大时,视频对网络波动非常敏感。如果网络丢包率超过一定范围,产生的视频质量损失将会非常大,而且高运动强度场景的视频数据相邻若干帧之间信息密度很大,因此设置低的网络丢包率上限,可以保证传输过程中的丢包率不会很大。当网络状况转好时,由于高运动强度场景的视频数据的丢包率下限值较大,就会对网络状况的好转最先做出反应,即最先提升的是高运动强度场景的视频数据的传输质量等级。因为视频运动强度越大,传输质量等级提升带来的质量好转越明显。B、本发明实施例为视频数据设置、选裤,视频传输质量等级的原理如下由于在实际应用中传输视频数据时,视频数据通常经过打包形成一个个的RTP(实时传输协议)包,每个RTP信息包被封装在UDP消息段中,然后再封装在IP数据包中。下面的实^r测试以下述设置为例系统设置包的流的包大小限制为1450字节,视频格式选择H.264、帧率选择25、每15帧设置一个关键帧,并且在打包中增加用于实现视频媒体数据传输的HintTrack功能。进行实验测试时,对不同运动强度的视频场景,采用不同的量化方式(例如通过软件进行设置实现),获得不同质量的视频,并进行分析以确定可行的划分视频传输质量等级的方案。1、当视频的运动强度相同时,测试视频数据内的l、P、B帧打包的个数比例,得到结果如图3所示图3中表(a)~(e)分别对应15级运动强度时各帧打包后所占的比例其中,横坐标代表不同质量的视频,从15分别是最低质量、低质量、中等质量、高质量、最佳质量;纵坐标代表数据流中l、P、B数据包的百分比。2、当视频的质量等级相同时,测试各场景视频数据内的l、P、B帧打包的个数比例,得到结果如图4所示图4中表(f)~(j)分别表示视频质量等级相同时,各视频数据内各帧打包后所占的比例,即(f)到(j)分别对应最低质量、低质量、中等质量、高质量、最佳质量的视频;其中,横坐标代表不同的运动强度,从15级依次增加,纵坐标代表数据流中l、P、B数据包的百分比;从图3、图4中可以看出(1)在各场景视频的质量等级相同时,各场景视频数据中的l帧所占的比例基本上不会超过20%,而B帧和P帧则占了数据的大部分,并且P帧占的比例是最大的;(2)在视频质量为低时,各场景视频数据中的B帧与P帧所占的比例相差不大,当视频质量升高时B帧与P帧所占的比例有先增大后减小的趋势;(3)随着视频质量的升高,各场景视频数据中的B帧的包所占比例一般先减少再升高,说明在最低质量或最佳质量时,B帧的比例都会很大;因此,通过上述测试,对于视频数据中l、P、B各巾贞所占的比例,我们可以得出如下结果(1)在多数情况下,视频数据中的1帧所占的比例基本上不会超过20%,而B帧和P帧则占了数据的大部分,并且P帧占.的比例是最大的;(2)在视频质量为低时,视频数据中的B帧与P帧所占的比例相差不大,当视频质量升高时B帧与P帧所占的比例有先增大后减小的趋势;(3)随着视频质量的升高,视频数据中的B帧的包所占比例一般先减少再升高,说明在最低质量或最佳质量时,B帧的比例都会很大;根据上述结论,得出划分视频传输质量等级的原则丟弃B帧可以释放一部分网络带宽,但若B帧丟弃完时网络带宽依然紧张,则可以继续丢弃P帧,这可以更大幅度的释放网络带宽,直到只剩下l帧,鉴于l帧所占的比例不大,故把只剩下l帧的情况作为最后的底限。因此,在实际应用中,可以将视频流的传输质量等级划分为7个等级(1级最高,7级最低),如下表2所示<table>tableseeoriginaldocumentpage15</column></row><table>可以看出,基于场景的视频数据的传输质量等级越高(1级最高,7级最低),传输时对应的丢包率越低,丢弃的包的重要等级也越低;具体应用时,即可根据上述视频传输质量等级,为视频数据可以选择适当的视频传输质量等级;此外当前传输的视频数据的传输质量等级信息可以保存在服务器端。(二)、为基于所述场景的视频数据选择视频传输质量等级,根据基于所述场景的视频数据的运动强度等级对应的所述丢包率上限值和下限值,以及接收端反馈的丢包率信息,调整所述选择的视频传输质量等级由于对视频数据进行实时网络传输时,网络状态会随时变化,于是就会出现按照原本选择的传输质量等级传输视频数据时出现网络拥塞的情况,为了避免这种情况,就需要根据接收端反馈的丟包率信息以及所述场景的视频数据的运动强度等级对以前选择的传输质量等级进行实时调整;而实现实时调整可以进行如下处理(a)获取接收端反馈的丢包率信息对于获取接收端反馈的丢包率信息,本发明实施例可以通过如下方式实15现从RTCP包中提取丢包率信息,例如在DSS(达尔文流服务器,DarwinStreamingServer)中增加一个用于获取RTCP包的丟包率信息的模块,这样,发送方接收到接收方发送来的RTCP包后,即可获取RTCP包中的丢包率信息。每当服务器接收到数据包时,根据RTCP包中的丢包率检测结果来控制视频数据的传输质量等级。本发明实施例可以使用RTP/RTCP协议实现流媒体传输,也可以采用其它的流媒体传输方式;还可以采取其它的获取接收端丢包率信息的方法,只要能够获取接收端的丢包率信息即可。(b)确定当前的网络运行状态本发明实施例将网络的运行状态分为3种轻载、满载、过载。轻载时网络丟包率小于丟包率下限P"过载时网络丢包率大于丢包率上限P2,满载时丢包率处于P广P2之间。当网络状态变为轻载时,可以提高当前传输的视频数据的传输质量等级;当网络状态变为过载时,必须降低当前传输的视频数据的传输质量等级;满载则继续保持当前传输的^L频数据的传输质量等级。而丢包率的上限和下限值则可以通过当前传输的视频数据的运动强度等级来确定。(c)丟包率平滑在网络传输视频数据的实际过程中,需要考虑到网络中出现的一些冲激性质的波动,这时网络的丢包率会瞬时增加,然后立刻恢复原状,在这种情况下不需要改变当前传输的视频数据的传输质量等级,但需要对丢包率进行平滑处理,以防止这种瞬时突变引起的传输速率不必要的大幅变化。本实施例中,采用的平滑处理方法可以采用如下公式4)=《+(1-")》/咖(卜1)也就是使用前一次的丢包率为基准来计算现在的丢包率;其中,"一般取值为1/4或1/8。7k。表示平滑处理过后的丢包率,^^②是检测到的丢包率。通过上述公式计算得到的丢包率依赖于前一次的丢包率,这样如果出现瞬时波动,则丢包率上升的速度决定于未出现波动的丢包率,不会出现丢包率超过丢包界限的情况,当波动结束时,丢包率也恢复正常。在本实施例中,为了平滑丢包率,可以进行如下设置如果连续4次丢包率过大而超过上限值,则实施传输质量降低自适应调节;如果连续6次接收到丢包率过小而低于下限,则实施传输质量等级升高自适应调节。(d)根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度等级对应的丢包率上限值和下限值,调整确定当前传输的视频数据的传输质量等级通过控制视频传输质量等级可以避免网络拥塞,即让传输速率能够根据丢包率加法增加、乘法减少。例如,若接收端反馈的丢包率大于基于所述场景的视频数据的所述丢包率上限值,则降低基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丟包率小于基于所述场景的视频数据的所述丢包率下限值,则提高基于所述场景的视频数据的所述^L频传输质量等级;若接收端反馈的丢包率介于基于所述场景的视频数据的所述丢包率上限值和丢包率下限值之间,以及接收端反馈的丢包率等于所述丢包率上限值或下限值,则保持所述^L频传输质量等级。具体的,在本发明实施例中,如果网络处于过载状态,则大幅下降此时传输的视频数据的传输质量等级,例如当前传输的视频数据的传输质量等级为第1~3级,则可以降至第4级,即丢弃所有B帧;如果当前传输的视频数据的传输质量等级为第46级,则直接降至第7级,即只传输l帧。若网络处于轻载状态,则可以緩慢地一步步提升传输质量等级,使之尽量满足网络传输协议友好,实现自适应调节;具体应用中,调节质量传输等级的公式可以如下所示7;/^々尸2,"24,A^4其中,k表示应调整到的级别,n表示检测到拥塞的次数,P,为网络轻载的下限,P2为网络过载的上限。当然,当前网络满载,则不改变当前传输的视频数据的传输质量级别;13:按照所述视频传输质量等级传输基于所述场景的视频数据;即根据所述视频传输质量等级对应的丢包类型和相应丢包率,在传输基于所述场景的视频数据时进行丢包;具体可以包括根据所述视频传输质量等级对应的丢包类型和相应丢包率,确定传输方式,并在丢包时根据丢帧策略进行丢帧a、根据所述视频传输质量等级确定传输方式(1)当视频数据的传输质量等级是kKeyFramesOnly(第7级)时,则只传输关键帧(l帧);具体应用时,可以先判断当前传输的数据包是否属于一个l帧,如果是则继续传输包括l帧的数据包,如果不是,则直接选取下一个l帧的第一个数据包开始发送。(2)当视频数据的传输质量等级是k30PercentPFrames(第6级)时,则不但传输全部I帧还要传输30。/。的P帧;具体应用时,若当前传输的是l帧,则继续传输帧内的下一个数据包;如果是P帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的p帧占两个l帧中间的p帧的比例,在与30%误差不超过3%时,直接进行下一个l帧的传输;在上述传输过程中,直接丢弃B帧。(3)当视频数据的传输质量等级是k70PercentPFrames(第5级)时,则不但传输全部l帧还要传输70y。的P帧;具体应用时,若当前传输的是l帧,则继续传输帧内的下一个数据包;如果是P帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的p帧占两个l帧中间的p帧的比例,在与70%误差不超过3。/。时,直接进行下一个l帧的传输;在上述传输过程中,直接丢弃B帧。(4)当视频数据的传输质量等级是kNoBFrames(第4级)时,则仅传输全部l、P帧,而丢弃所有的B帧;具体应用时,若当前传输的是I帧或P帧,则继续传输帧内的下一个数据包;若遇到B帧,则直接丢弃B帧。(5)当视频数据的传输质量等级是k30PercentBFrames(第3级)时,则不但传输全部l、P帧,还要传输30。/。的B帧;具体应用时,若当前传输的是l帧或P帧,则继续传输帧内的下一个数据包;如果当前传输的是B帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的B帧占两个l帧中间的B帧的比例,在与30%误差不超过3%时,则在两I帧中再次遇到B帧时直接丢弃B帧。(6)当视频数据的传输质量等级是k70Percen旧Frames(第2级)时,则不但传输全部l、P帧,还要传输70。/。的B帧;具体应用时,若当前传输的是l帧或P帧,则继续传输帧内的下一个数据包;如果当前传输的是B帧,则先获得此时离前一个l顿的距离,计算两个l帧内已经传送的B帧、占两个I巾贞中间的B帧的比例,在与70%误差不超过3%时,则在两I帧中再次遇到B帧时直接丢弃B帧。(7)当视频数据的传输质量等级是kAIIPackets(第1级)时,则传输所有的帧,传输时不丢数据包。b、在丢包时根据丢帧策略进行丢帧丢帧策略指的是在网络中传输视频数据过程中,如何丢帧的策略;本发明实施例中,对l帧、P帧、B帧分别实施不同的丢帧策略(1)l帧的丟帧策略在传输视频数据的过程中,若l帧被丢弃,则随后的P、B巾贞的解码会很困难,使得马赛克现象很严重;因此系统中的丟帧策略的底线是保留l帧,先丢B帧,再丢P帧的顺序,从而保证l帧不会被随意丟弃。(2)B帧的丢帧策略由于B帧是双向预测帧,不作为参考帧使用,故丢弃B帧不会引起解码出错;在系统中,丢弃30%B帧时,丢弃的是相隔比较远的头尾B帧,这样播放画面时基本感觉不到丢帧带来到影响;当保留30。/o的B帧时,则保留相隔比较远的头尾B帧。(3)P帧的丢帧策略由于P帧的解码依赖于其前面的一个I帧或P帧,一旦参考帧丢失,跟随着的P帧都可能解码错误,使得马赛克大量出现;因此随机丢弃P帧可能会造成客户端视频质量的下降。为了避免上述情况,本发明实施例采用的丢弃P帧的策略如下例如,在丟弃P帧的时,可以保留两个I帧之间处于前面的P帧,将数据都集中在两个I帧之间的后半部分P帧丢弃,这样就可以避免因丟帧而产生的马赛克现象。比如丢弃30。/。的P帧时,则先读取I帧和下一个I帧之间的P帧的数目,顺次读取P帧,与70%相差不超过3%时,则直接跳到下一个l帧。这样的处理使得所有的帧都能够正常解码,解决了平常因为丢帧而引起的马赛克现象,这也是有计划的丢帧而产生的优点。由于P帧在^L频传输时占有相当的比例,因此当丢弃部分P帧时就可以立刻緩解网络拥塞,但随即机丢弃P帧与有计划的丢弃P帧的视频效果非常不同,因此在丟弃P帧时采用上述策略对緩解网络带宽有非常重要的意义。上述针对不同帧的丢帧策略,可以应用于多个视频流中运动活动性同等级帧的丢帧,从而保证当前发送的多个视频流中关键数据帧不会被丟弃,避免了在网络拥塞情况下传输大量数据引起的盲目丢包,实现了在有效控制网络拥塞的同时提高视频播放质量。需要说明的是,在根据上述方法传输视频数据时,往往需要对出现传输错误的数据包进行处理,即当传输RTP包时,由于丢包率的存在,可能出现某些帧的信息不完整,如果用这些不完整的数据进行解码,可能导致客户端视频质量的严重下降,因此需要对出现的上述传输错误进行处理。本发明实施例可以采用信息隐藏方法来解决上述问题,即通过拷贝前一个对应的传输帧来处理上述传输错误,例如当前不完整的l帧拷贝前一个l帧,当前不完整的P帧拷贝前一个P帧,当前不完整的B帧拷贝前一个B帧。冲艮据上述方法流程,传输视频数据时由于基于场景提取视频数据中的运动强度特征信息,相比于
背景技术
的基于镜头提取运动活动性特征可以有效降低计算复杂度、减少传输时的数据量;并且在控制网络拥塞时,根据网络当前的传输情况和视频数据的运动强度等级,在发送端对^f见频传输质量等级进行自适应调整,不但能够在网络拥塞时对低运动强度等级的视频数据进行丢包,还可以对高运动强度等级的视频数据进行丢包,使得控制网络拥塞更加有效,同时也保证了当前发送的关键数据帧不会被丢弃,避免了在网络拥塞情况下传输大量数据引起的盲目丢包,即使在多路视频流同时传送时也能对各具体视频流质量进行控制,从而实现了在有效控制网络拥塞的同时提高视频播放质量。下面结合附图,对应用上述方法的本发明实施例进行详细介绍(1)对视频场景进行运动强度分级图5是本发明实施例进行了运动强度分级的一段画面示意图,如图5所示,最上面即第一行的视频序列是一段字母緩緩出现、移动的序幕,根据上述方法流程的21中的计算方法,第一行这三幅画面的运动幅度标准差的期望值为6.86,运动强度等级属于1级;第二行的视频序列中一个人在讲话,画面移动的非常緩慢,根据上述方法流程的21中的计算方法,第二行这三幅画面的运动幅度标准差的期望值为69.50,运动强度等级属于2级;第三行的视频序列中一个人在走动,移动速度较快,背景也随之变化,根据上述方法流程的21中的计算方法,第三行这三幅画面的运动幅度标准差的期望值为80.13,运动强度等级属于3级;第四行的视频序列中一辆车在行驶,移动速度很快,背景也随之变化,根据上述方法流程的21中的计算方法,第四行这三幅画面的运动幅度标准差的期望值为110.56,运动强度等级属于4级;第五行的视频序列中熙熙攘攘的人群在下楼梯,使得整幅画面变化激烈,根据上述方法流程的21中的计算方法,第五行这三幅画面的运动幅度标准差的期望值为126.79,运动强度等级属于5级。(2)根据自适应传输去除马赛克图6是本发明实施例根据自适应传输策略去除马赛克的效果对比示意图,图6中,左侧是没有根据自适应传输策略处理时,即随机丢P帧的画面,右侧是根据自适应传输策略处理时的画面。当以传输质量等级为k30PercentPFrames,对这相同的^L频测试,在保证网络带宽相同的情况下,从图6中可以明显看出,没有经过去除马赛克处理的视频播放时马赛克非常多,而经过处理的视频完全没有任何马赛克,一样的环境与视频,不一样的策略就得到了完全不一样的结果。进一步的,分别测量图6中六幅图相对于原图的信噪比(PSNR,PeakSignalNoiseRatio),左侧三幅从上到下信噪比依次为18.522、18.382、17.864,右侧三幅从上到下信噪比依次为23.274、24.421、22.704,原图使用本地播放截取的同一时刻的图,故有一定误差,但两者趋势却没有变化。上述信噪比曲线具体如图7所示。(3)在未利用运动强度特征信息时,自适应传输与非自适应传输效果比较对于点播的视频质量,虽然主观上即可以看出自适应传输与非自适应传输效果的差别,但客观上用数据描述却比较困难。在实验中,当客户端不断的增加点播服务来消耗网络带宽,则在服务器端分别对视频数据的传输采用自适应处理和非自适应处理以进4亍比较,可以明显i也看出未经过自适应处理的纟见频画面会随着带宽度逐渐减少而不断恶化直至停止,而经过自适应处理的^L频画面随着网络带宽度的减少不会出现明显的马赛克,只是会有些小的停顿,但画面非常清晰,直到网络传输最后一帧时停止。图8是实验中截取采用自适应传输和非自适应传输的各10幅画面得到的PSNR曲线,可以明显对比出采用了自适应传输和非自适应传输的视频质量的差别图8中,位于上面的曲线表示经过自适应传输处理的视频图像序列的质量,它们的画面质量都保持在较高水平,这样的质量是以画面中的短暂停顿为代价的;而位于下面的曲线则表示未经过自适应传输处理的视频图像序列的画面质量,虽然在播放过程中这些画面连续,但屏幕上出现了很多马赛克,非常影响画面效果,令观众难以满意。(4)利用运动强度特征信息的自适应传输与未利用运动强度特征信息的自适应传输效果比较利用视频场景的运动强度等级信息进行自适应传输后,当客户端点播包括了15级运动强度的视频,并且不断的增加点播服务消耗网络带宽时,网络会开始拥塞,第5级视频最先开始反应,即立刻会因为丢帧而出现播放中短暂跳动,但视频质量依然完好,其他运动强度等级的视频仍然正常播放;随着网络带宽的继续被消耗,其它运动强度等级的^f见频依次也开始丢帧,但马赛克只会在网络传输质量等级变化的瞬间出现。在网络好转时,高运动强度等级的视频最先好转,其它视频的质量依次好转。相对于未利用运动强度特征信息的自适应传输,当网络开始拥塞时,大部分视频开始同时降低传输质量等级,即同时丢包,影响了本可以不降低传输质量的视频,并且在网络恢复时,各视频的传输质量等级的提升也没有先后次序,使得高运动强度等级的视频的传输质量不能够得到及时的回升,导致影响播放画面,使得用户难以满意播放质量。从上述描述可以看出,采用本发明实施例的方法后,即使在多路视频流同时传送时也能对各具体视频流质量进行控制,视频播放质量得到明显改善,实现了在有效控制网络拥塞的同时提高视频播放质量。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)或随机存储记忆体(RandomAccessMemory,RAM)等。本发明实施例还提供了相应的视频传输装置,该装置可以作为流媒体服务器,用于实现基于运动强度的自适应传输视频数据,该视频传输装置的结构如图9a所示,具体实现结构可以包括运动强度提取单元91,用于对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;具体可以包括将连续的一组镜头作为一个场景,提取基于该场景的视频数据中的运动强度特征信息,并根据运动强度等级划分值,确定基于该场景的视频数据的运动强度等级;例如,将视频的运动强度等级量化值可以由50、80、100、120划分为5个等级,相应的,根据运动强度特征划分运动强度等级的过程可以如下例如,如果该P帧的^值小于50,则将该P帧的运动强度等级设为1级;如果》值大于50且小于80,则将该P帧的运动强度等级设为2级;如果^值大于80且小于100,则将该P帧的运动强度等级设为3级;如果S值大于100且小于120,则将该P帧的运动强度等级设为4级;如果S值大于等于120,则将该P帧的运动强度等级设为5级;反馈信息接收单元92,用于获取接收端的丟包率信息;例如,使用RTP/RTCP协议进行流媒体的传输时,可以从RTCP包中提取丢包率信息;当然还可以采取其它的获取接收端丢包率信息的方法,只要能够获取接收端的丢包率信息即可;视频传输控制单元93,用于根据反馈信息接收单元92获取的丢包率信息,以及运动强度提取单元91确定的所述运动强度,确定传输基于所述场景的视频数据时的丟包率,以及丢弃的包的类型;视频传输控制单元93具体结构如图9b所示,可以包括设置丟包率上下限单元931,用于根据所述运动强度提取单元91确定的运动强度等级,为基于所述场景的视频数据设置传输时对应的丢包率上限值和丢包率下限值;基于所述场景的视频数据的所述运动强度等级越高,对应的丢包率上限值越低,丢包率下限值越高;例如,对于某一段由若干个场景组成的视频,各个场景对应的视频片断的运动强度等级不同,对丟包率的敏感程度也不同,因此对于该视频各个场景的视频片断需要设置不同的丢包率上下限值;具体实现时,可以根据上述图表5所示的运动强度等级与丟包率上、下限对应关系设置丟包率的上下限;具体的,对于高运动强度场景的视频,为该场景的视频数据设置对丢包率的变化敏感的丢包率上限值、下限值,以保证视频质量;因为网络一旦好转,需要最先提高高运动强度的视频场景的数据发送速率,因为高运动强度场景的视频丢帧对视频质量的影响相对低质量视频场景的影响较大,所以丢包率下限值不能太小,即运动强度越高,丟包率下限值越大,那么当网络负载减轻时,也就越先开始调整,这有助于视频平均播放质量的提高;选择传输质量等级单元932,用于为基于所述场景的视频数据选择视频传输质量等级,视频传输质量等级用于确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;具体的,基于所述场景的视频数据的视频传输质量等级越高,传输时对应的丟包率越低,丢弃的包的重要等级也越低;例如可以根据上述表2所示进行选择;24存储单元933,用于存储所述设置丢包率上下限单元931设置的传输时的丢包率上限值和丢包率下限值,以及所述选择传输质量等级单元932设置的视频传输质量等级,包括对应的丢包类型和丢包率,并存储调整单元934调整后的视频传输质量等级;具体的,例如可以存储例如表1中的对应关系,以及表2中的对应关系;调整单元934,用于根据所述反馈信息接收单元92的所述丢包率信息以及存储单元933存储的所述丢包率上限值和丢包率下限值,调整所述选择传输质量等级单元932设置的所述视频传输质量等级;具体用于若接收端反馈的丢包率大于基于所述场景的视频数据的所述丢包率上限值,则降低基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丢包率小于基于所述场景的视频数据的所述丢包率下限值,则提高基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丢包率介于基于所述场景的视频数据的所述丢包率上限值和丢包率下限值之间,以及接收端反馈的丢包率等于所述丢包率上限值或下限值,则保持所述视频传输质量等级;例如,对于当前传输的是多路视频流时,当网络状况开始好转时,即反馈的丢包率小于下限值时,首先提高高运动强度场景的视频的传输质量等级;具体实施中,若网络处于过载状态,则大幅下降此时传输的视频数据的传输质量等级,假设当前传输的视频数据的传输质量等级为第1~3级,则可以降至第4级,即丢弃所有B帧;如果当前传输的视频数据的传输质量等级为第4~6级,则直接降至第7级,即只传输l帧。若网络处于轻载状态,则可以緩慢地一步步提升传输质量等级,使之尽量满足网络传输协议友好;传输单元94,用于按照所述视频传输控制单元93确定的所迷传输基于所述场景的视频数据时的丟包率,以及丢弃的包的类型,传输基于所述场景的视频数据;具体的可以按照所述调整单元934得出的视频传输质量等级传输基于所述场景的视频数据,即根据所述视频传输质量等级对应的丢包类型和相应丢包率,在传输基于所述场景的视频数据时进行丢包;具体可以包括根据所述视频传输质量等级对应的丢包类型和相应丢包率确定传输方式,并在丢包时根据丢帧策略进行丢帧;例如,根据所述视频传输质量等级确定传输方式当视频数据的传输质量等级是kKeyFramesOnly(第7级)时,则只传输关键帧(l帧);具体应用时,可以先判断当前传输的数据包是否属于一个l帧,如果是则继续传输包括l顿的数据包,如果不是,则直接选取下一个l帧的第一个数据包开始发送;当视频数据的传输质量等级是k30PercentPFrames(第6级)时,则不但传输全部l帧还要传输30Q/o的P帧;具体应用时,若当前传输的是l帧,则继续传输帧内的下一个数据包;如果是P帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的P帧占两个I帧中间的P帧的比例,在与30%误差不超过3%时,直接进行下一个l帧的传输;在上述传输过程中,直接丢弃B帧;当视频数据的传输质量等级是k70PercentPFrames(第5级)时,则不但传输全部1帧还要传输70%的P帧;具体应用时,若当前传输的是l帧,则继续传输帧内的下一个数据包;如果是P帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的P帧占两个l帧中间的P帧的比例,在与70°/0误差不超过3%时,直接进行下一个l帧的传输;在上述传输过程中,直接丢弃B帧;当视频数据的传输质量等级是kNoBFrames(第4级)时,则^l传输全部l、P帧,而丢弃所有的B帧;具体应用时,若当前传输的是I帧或P帧,则继续传输帧内的下一个数据包;若遇到B帧,则直接丢弃B帧;当视频数据的传输质量等级是k30Percen旧Frames(第3级)时,则不但传输全部l、P帧,还要传输30。/。的B帧;具体应用时,若当前传输的是I帧或P帧,则继续传输帧内的下一个数据包;如果当前传输的是B帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的B帧占两个I帧中间的B帧的比例,在与30%误差不超过3%时,则在两I帧中再次遇到B帧时直接丢弃B帧;当视频数据的传输质量等级是k70PercentBFrames(第2级)时,则不但传输全部l、P帧,还要传输70。/o的B帧;具体应用时,若当前传输的是l帧或P帧,则继续传输帧内的下一个数据包;如果当前传输的是B帧,则先获得此时离前一个l帧的距离,计算两个l帧内已经传送的B帧占两个l帧中间的B顿的26比例,在与70%误差不超过3%时,则在两I帧中再次遇到B帧时直接丢弃B帧;当视频数据的传输质量等级是kAIIPackets(第1级)时,则传输所有的帧,传输时不丢数据包;同时,在网络中传输视频数据过程中,丢包时根据丢帧策略进行丢帧本发明实施例中,对l帧、P帧、B帧分别实施不同的丢帧策略l顿不会被随意丢弃;丢弃30。/。B帧时,丢弃的是相隔比较远的头尾B帧;当保留30%的已帧时,则保留相隔比较远的头尾B帧;在丢弃P帧的时,可以保留两个l帧之间处于前面的P帧,将数据都集中在两个l帧之间的后半部分P帧丟弃,丢弃30。/o的P帧时,则先读取I帧和下一个I帧之间的P帧的数目,顺次读取P帧,与70。/。相差不超过3%时,则直接跳到下一个l帧。可选的,在该视频传输装置中还可以包括丟包率平滑单元95,用于在网络中出现冲激性质的波动时,对丢包率进行平滑处理,以防止这种瞬时突变引起的传输质量等级不必要的大幅变化;例如使用前一次的丢包率为基准来计算现在的丢包率,这样如果出现瞬时波动,则丢包率上升的速度决定于未出现波动的丟包率,不会出现丢包率超过丢包界限的情况,当波动结束时,丟包率也恢复正常。本发明实施例中的视频传输装置可以设置于各种网络节点设备中,包括服务器,或其它网络传输设备中。本发明实施例还提供了一种用于实现基于运动强度的自适应传输视频数据的视频传输系统,其结构如图10所示,具体实现结构包括视频传输装置101,用于对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;获取接收端反馈的丢包率信息;并根据接收端反馈的丟包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;根据所述确定的传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据;具体结构如图9a所示,这里不再重复;视频传输装置101,可被设置成与客户端装置进行视频传输通信;27客户端装置102,用于接收视频传输装置传输的视频数据,并反馈丢包率信息,对接收到的视频数据中的错误进行处理后,解码视频数据并播放;客户端装置102具体结构如图11所示,可以包括收发单元111,用于接收视频数据,并发送各种数据信息;丟包率信息单元112,用于提供丢包率信息,并通过收发单元111将丢包率信息反馈给视频传输装置101;例如可以收集客户端的信息,形成RTCP数据包,可以由DSS(DarwinStreamingServer,达尔文流服务器)中的相应模块实现;错误处理单元113,用于对出现传输错误的数据包进行处理,并将处理后的数据送至解码单元114(实际应用中可以为解码器)解码;例如,可以采用信息隐藏方法来进行处理,即通过拷贝前一个对应的帧来处理上述传输错误,例如当前不完整的l帧拷贝前一个l帧,当前不完整的P帧拷贝前一个P帧,当前不完整的B帧拷贝前一个B帧;此外,还可以采用前向纠错编码(ForwardErrorCorrection,FEC),延迟约束的重传、错误弹性编码(error-resilientencoding)以及其它的错误隐藏方法来对出现传输错误的数据包进行处理;解码单元114,用于解码错误处理单元113处理后的视频数据,并播放,具体的,解码单元"可以为解码器。上述系统中,视频传输装置101对视频数据提取基于场景的运动强度特征信息后,将其量化为15级,并将上述视频数据打包,在获取客户端反馈的丟包率信息确定当前的视频数据的传输质量等级,并根据该传输质量等级确定传输该视频数据的方式,在丟包时根据丢帧策略进行丢帧。而客户端装置102,则通过定时反馈丢包率信息给视频传输装置101,并在^"误处理单元113对出现传输错误的数据包进行处理后,将视频数据送至解码单元解码、播放。本发明实施例中用于实现基于运动强度的自适应传输视频数据的^L频传输系统可以设置于各种网络设备中。综上所述,本发明各实施例和现有技术中相比,由于本发明的实施例基于场景提取视频数据中的运动强度特征信息,可以有效降低计算复杂度、减少传输时的数据量;并且在控制网络拥塞时,根据网络当前的传输情况和视频数据的运动强度等级,在发送端对视频传输质量等级进行自适应调整,不但能够在网络拥塞时对低运动强度等级的视频数据进行丢包,还可以对高运动强度等级的视频数据进行丢包,使得控制网络拥塞更加有效,同时不同的丢帧策略也保证了当前发送的关键数据帧不会被丢弃,避免了在网络拥塞情况下传输大量数据引起的盲目丢包,即使在多路视频流同时传送时也能对各具体视频流质量进行控制,从而实现了在有效控制网络拥塞的同时提高视频播放质量。以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本
技术领域
的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。权利要求1、一种视频传输方法,其特征在于,包括对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;按照所述确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据。2、根据权利要求1所述的方法,其特征在于,所述对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度,包括将连续的一组镜头作为一个场景,提取基于该场景的视频数据中的运动强度特征信息,并确定基于该场景的视频数据的运动强度等级。3、根据权利要求1或2所述的方法,其特征在于,所述基于所述场景的视频数据的运动强度等级,用于确定传输基于所述场景的视频数据时对应的丢包率上限值和丢包率下限值。4、根据权利要求1或2或3所述的方法,其特征在于,所述根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,包括根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度,确定基于所述场景的视频数据的视频传输质量等级,所述视频传输质量等级用于确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;具体处理包括为基于所述场景的视频数据选择视频传输质量等级,根据基于所述场景的视频数据的运动强度等级对应的丢包率上限值和下限值,以及接收端反馈的丢包率信息,调整所述选择的视频传输质量等级。5、根据权利要求4所述的方法,其特征在于,所述调整所述选择的所述视频传输质量等级,包括若接收端反馈的丟包率大于基于所述场景的视频数据的所述丢包率上限值,则降低基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丢包率小于基于所述场景的视频数据的所述丢包率下限值,则提高基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丢包率介于基于所述场景的视频数据的所述丢包率上限值和丢包率下限值之间,以及接收端反馈的丢包率等于所述丢包率上限值或下限值,则保持所述视频传输质量等级。6、根据权利要求5所述的方法,其特征在于,所述按照所述视频传输质量等级,传输基于所述场景的视频数据,包括根据所述视频传输质量等级对应的丢包类型和丢包率,在传输基于所述场景的视频数据时进行丢包。7、一种视频传输装置,其特征在于,包括运动强度提取单元,用于对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;反馈信息接收单元,用于获取接收端反馈的丢包率信息;视频传输控制单元,用于根据所述反馈信息接收单元的丢包率信息,以及所述运动强度提取单元确定的基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;传输单元,用于按照所述^L频传输控制单元确定的所述传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据。8、根据权利要求7所述的装置,其特征在于,所述运动强度提取单元,在进行所述对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度时,具体用于将连续的一组镜头作为一个场景,提取基于该场景的视频数据中的运动强度特征信息,并确定基于该场景的视频数据的运动强度等级。9、根据权利要求7或8所述的装置,其特征在于,所述视频传输控制单元包括设置丢包率上下限单元,用于根据所述运动强度提取单元确定的运动强度等级,为基于所述场景的视频数据设置传输时的丢包率上限值和丢包率下限值;选择传输质量等级单元,用于为基于所述场景的视频数据选择视频传输质量等级,所述视频传输质量等级用于确定传输基于所述场景的^L频数据时的丢包率,以及丢弃的包的类型;存储单元,用于存储所述设置丢包率上下限单元设置的传输时的丟包率上限值和丢包率下限值,以及所述选4奪传输质量等级单元选4奪的所述视频传输质量等级,包括对应的丢包类型和丢包率;'调整单元,用于根据所述反馈信息接收单元的所述丢包率信息以及所述存储单元存储的所述丢包率上限值和丢包率下限值,调整所述选择传输质量等级单元选择的所述视频传输质量等级。10、根据权利要求9所述的装置,其特征在于,所述调整单元,进行所述调整所述选择传输质量等级单元选择的所述视频传输质量等级时,具体用于若接收端反馈的丟包率大于基于所述场景的视频数据的所述丢包率上限值,则降低基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丢包率小于基于所述场景的视频数据的所述丢包率下限值,则提高基于所述场景的视频数据的所述视频传输质量等级;若接收端反馈的丟包率介于基于所述场景的视频数据的所述丢包率上限值和丢包率下限值之间,以及接收端反馈的丢包率等于所述丢包率上限值或下限值,则保持所述视频传输质量等级。11、根据权利要求7所述的装置,其特征在于,所述传输单元,进行所述按照确定的所述传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据时,具体用于根据所述视频传输质量等级对应的丢包类型和丢包率,在传输基于所述场景的视频数据时进行丟包。12、一种视频传输系统,其特征在于,包括视频传输装置,可被设置成与客户端装置进行视频传输通信;所述视频传输装置,用于对视频数据基于场景提取运动强度特征信息,并确定基于所述场景的视频数据的运动强度;获取接收端反馈的丢包率信息;并根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;并按照所述确定的传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据;所述客户端装置,用于接收所述视频传输装置传输的视频数据,并反馈丢包率信息。全文摘要一种视频传输方法及装置、系统,方法具体包括对视频数据提取基于场景的运动强度特征信息,并确定基于所述场景的视频数据的运动强度;根据接收端反馈的丢包率信息以及基于所述场景的视频数据的运动强度,确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型;按照所述确定传输基于所述场景的视频数据时的丢包率,以及丢弃的包的类型,传输基于所述场景的视频数据。本发明实施例可以有效降低计算复杂度;并且控制网络拥塞更加有效,避免了在网络拥塞情况下传输大量数据引起的盲目丢包,即使在多路视频流同时传送时也能对各具体视频流质量进行控制,从而实现了在有效控制网络拥塞的同时提高视频播放质量。文档编号H04N7/64GK101656888SQ20081011876公开日2010年2月24日申请日期2008年8月21日优先权日2008年8月21日发明者于俊清,何云峰,冲刘,牛彩卿申请人:华为技术有限公司;华中科技大学
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1