用于视频播放的方法、装置、计算机可读介质及电子设备与流程

文档序号:16889539发布日期:2019-02-15 22:56阅读:152来源:国知局
用于视频播放的方法、装置、计算机可读介质及电子设备与流程

本申请涉及计算机技术领域,具体而言,涉及一种用于视频播放的方法、装置、计算机可读介质及电子设备。



背景技术:

常用的流媒体协议主要有http(hypertexttransferprotocol,超文本传输协议)渐进下载和基于rtsp(实时流传输协议,realtimestreamingprotocol)/rtp(real-timetransportprotocol,实时传输协议)的实时流媒体协议,目前比较方便又好用的是http渐进下载方法。在http渐进下载方法中apple公司的hls(httplivestreaming,动态码率自适应技术)是这个方面的代表,主要用于pc(personalcomputer,个人计算机)和apple终端的音视频服务,其包括一个m3u8索引文件,ts(英文全称为transportstream,中文全称为传输流,ts为mpeg2(movingpictureexpertsgroup2,动态图像专家组2)协议里的一个子协议)媒体分片文件和key加密串文件。

需要说明的是,在上述背景技术部分公开的信息仅用于加强对本发明的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。



技术实现要素:

本发明实施例提供一种用于视频播放的方法、装置、计算机可读介质及电子设备,能够提高即时解码刷新帧的定位精度。

根据本发明实施例的一方面,提供了一种用于视频播放的方法,包括:获取视频文件的当前拖动位置信息;根据所述当前拖动位置信息确定所述视频文件的目标视频片段;根据所述视频文件的索引文件查找所述目标视频片段中与当前拖动位置距离最近的目标即时解码刷新帧;其中,所述索引文件包括所述视频文件中各视频片段内的即时解码刷新帧的时间戳。

在本公开的一种示例性实施例中,根据所述视频文件的索引文件查找所述目标视频片段中与当前拖动位置距离最近的目标即时解码刷新帧,包括:获得所述当前拖动位置在所述目标视频片段内的时间戳;根据所述目标视频片段内的即时解码刷新帧的时间戳和所述当前拖动位置在所述目标视频片段内的时间戳确定所述目标即时解码刷新帧。

在本公开的一种示例性实施例中,所述索引文件还包括所述视频文件中各视频片段内的即时解码刷新帧的偏移位置;其中,所述方法还包括:根据所述索引文件获取所述目标即时解码刷新帧的偏移位置;根据所述目标即时解码刷新帧的偏移位置发送视频继续播放请求;接收响应于所述视频继续播放请求返回的当前视频数据。

在本公开的一种示例性实施例中,还包括:解码所述当前视频数据;播放解码后的当前视频数据。

在本公开的一种示例性实施例中,还包括:遍历所述视频文件中各视频片段内的视频帧,获取各视频帧的帧类型、时间戳和偏移位置,其中所述帧类型包括即时解码刷新帧;将获取的所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置存储至所述索引文件。

在本公开的一种示例性实施例中,所述索引文件还包括各视频片段的标准标签;将所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置存储至所述索引文件,包括:在所述索引文件中各视频片段的标准标签前插入私有标签;其中,所述私有标签包括相应视频片段内的即时解码刷新帧的时间戳和偏移位置。

在本公开的一种示例性实施例中,所述标准标签包括视频片段的时长。

在本公开的一种示例性实施例中,还包括:发送所述视频文件的播放请求;接收响应于所述播放请求返回的索引文件;解析所述索引文件,获得所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置。

根据本公开的一个方面,提供一种用于视频播放的装置,包括:拖动信息获取模块,配置为获取视频文件的当前拖动位置信息;视频片段确定模块,配置为根据所述当前拖动位置信息确定所述视频文件的目标视频片段;目标帧查找模块,配置为根据所述视频文件的索引文件查找所述目标视频片段中与当前拖动位置距离最近的目标即时解码刷新帧;其中,所述索引文件包括所述视频文件中各视频片段内的即时解码刷新帧的时间戳。

在本公开的一种示例性实施例中,所述目标帧查找模块包括:拖动时间戳获得单元,配置为获得所述当前拖动位置在所述目标视频片段内的时间戳;目标帧确定单元,配置为根据所述目标视频片段内的即时解码刷新帧的时间戳和所述当前拖动位置在所述目标视频片段内的时间戳确定所述目标即时解码刷新帧。

在本公开的一种示例性实施例中,所述索引文件还包括所述视频文件中各视频片段内的即时解码刷新帧的偏移位置;其中,所述装置还包括:偏移位置获取模块,配置为根据所述索引文件获取所述目标即时解码刷新帧的偏移位置;播放请求发送模块,配置为根据所述目标即时解码刷新帧的偏移位置发送视频继续播放请求;视频数据接收模块,配置为接收响应于所述视频继续播放请求返回的当前视频数据。

在本公开的一种示例性实施例中,还包括:解码模块,配置为解码所述当前视频数据;播放模块,配置为播放解码后的当前视频数据。

在本公开的一种示例性实施例中,还包括:遍历模块,配置为遍历所述视频文件中各视频片段内的视频帧,获取各视频帧的帧类型、时间戳和偏移位置,其中所述帧类型包括即时解码刷新帧;帧信息存储模块,配置为将获取的所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置存储至所述索引文件。

根据本发明实施例的一方面,提供了一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现如上述实施例中所述的用于视频播放的方法。

根据本发明实施例的一方面,提供了一种电子设备,包括:一个或多个处理器;存储装置,配置为存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如上述实施例中所述的用于视频播放的方法。

在本发明的一些实施例所提供的技术方案中,通过包括视频文件中各视频片段内的即时解码刷新帧的时间戳的索引文件,查找到目标视频片段内当前拖动距离前距离最近的目标即时解码刷新帧,提高了定位精度,能够优化用户的视频观看体验。

应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本发明。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:

图1示出了可以应用本发明实施例的用于视频播放的方法或用于视频播放的装置的示例性系统架构的示意图;

图2示出了适于用来实现本发明实施例的电子设备的计算机系统的结构示意图;

图3示出了相关技术中一种用于视频播放的方法的示意图;

图4示意性示出了根据本发明的一实施例的用于视频播放的方法的流程图;

图5示出了图4中所示的步骤s430在一实施例中的处理过程示意图;

图6示意性示出了根据本发明的又一实施例的用于视频播放的方法的流程图;

图7示意性示出了根据本发明的再一实施例的用于视频播放的方法的流程图;

图8示意性示出了根据本发明的再一实施例的用于视频播放的方法的流程图;

图9示意性示出了根据本发明的一实施例的用于视频播放的装置的框图;

图10示意性示出了视频播放过程中用户拖动进度条的界面示意图;

图11示意性示出了采用图3所示方法定位至目标即时解码刷新帧的界面示意图;

图12示意性示出了采用图4所示方法定位至目标即时解码刷新帧的界面示意图。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本发明将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。

此外,所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中,提供许多具体细节从而给出对本发明的实施例的充分理解。然而,本领域技术人员将意识到,可以实践本发明的技术方案而没有特定细节中的一个或更多,或者可以采用其它的方法、组元、装置、步骤等。在其它情况下,不详细示出或描述公知方法、装置、实现或者操作以避免模糊本发明的各方面。

附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

附图中所示的流程图仅是示例性说明,不是必须包括所有的内容和操作/步骤,也不是必须按所描述的顺序执行。例如,有的操作/步骤还可以分解,而有的操作/步骤可以合并或部分合并,因此实际执行的顺序有可能根据实际情况改变。

图1示出了可以应用本发明实施例的用于视频播放的方法或用于视频播放的装置的示例性系统架构100的示意图。

如图1所示,系统架构100可以包括终端设备101中的一种或多种,网络104和服务器105。网络104用以在终端设备101和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。

应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。比如服务器105可以是多个服务器组成的服务器集群等。

用户可以使用终端设备101通过网络104与服务器105交互,以接收或发送消息等。终端设备101可以是具有显示屏的各种电子设备,包括但不限于智能手机、平板电脑、便携式计算机和台式计算机、数字电影放映机等等。终端设备101上可以安装各种客户端,例如视频播放客户端。

服务器105可以是提供各种服务的服务器。例如用户利用终端设备101向服务器105发送视频播放请求。服务器105可以基于该视频播放请求中携带的相关信息,在数据库中检索到匹配的搜索结果,并将搜索结果例如相应的视频信息反馈给终端设备101,进而用户可以基于终端设备101上显示的内容观看相应的视频。

图2示出了适于用来实现本发明实施例的电子设备的计算机系统的结构示意图。

需要说明的是,图2示出的电子设备的计算机系统200仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。

如图2所示,计算机系统200包括中央处理单元(cpu)201,其可以根据存储在只读存储器(rom)202中的程序或者从存储部分208加载到随机访问存储器(ram)203中的程序而执行各种适当的动作和处理。在ram203中,还存储有系统操作所需的各种程序和数据。cpu201、rom202以及ram203通过总线204彼此相连。输入/输出(i/o)接口205也连接至总线204。

以下部件连接至i/o接口205:包括键盘、鼠标等的输入部分206;包括诸如阴极射线管(crt)、液晶显示器(lcd)等以及扬声器等的输出部分207;包括硬盘等的存储部分208;以及包括诸如lan卡、调制解调器等的网络接口卡的通信部分209。通信部分209经由诸如因特网的网络执行通信处理。驱动器210也根据需要连接至i/o接口205。可拆卸介质211,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器210上,以便于从其上读出的计算机程序根据需要被安装入存储部分208。

特别地,根据本发明的实施例,下文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分209从网络上被下载和安装,和/或从可拆卸介质211被安装。在该计算机程序被中央处理单元(cpu)201执行时,执行本申请的方法和/或装置中限定的各种功能。

需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、rf等等,或者上述的任意合适的组合。

附图中的流程图和框图,图示了按照本发明各种实施例的方法、装置和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的模块和/或单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的模块和/或单元也可以设置在处理器中。其中,这些模块和/或单元的名称在某种情况下并不构成对该模块和/或单元本身的限定。

作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现如下述实施例中所述的方法。例如,所述的电子设备可以实现如图4或图5或图6或图7或图8所示的各个步骤。

图3示出了相关技术中一种用于视频播放的方法的示意图。

相关技术中,首先,获取用户seek的位置,根据hls协议规范找到对应seek(中文译为寻找,本发明实施例中为进度条拖动触发的播放器定位至目标位置的操作。一般播放器通用接口的拖动函数都是用seekto作为函数名称)位置的ts分片。然后,直接获取该ts分片开头的idr帧,解码之后进行播放。

如图3所示,这里假设视频文件包括3个视频片段:1.ts、2.ts、3.ts,其中,1.ts中假设包括两个idr(instantaneousdecodingrefresh,即时解码刷新)帧,2.ts中包括三个idr帧,3.ts中包括两个idr帧,且假设这3个视频片段的时长均为10秒,并假设当前拖动(seek)位置为15秒。

此时假设视频文件的m3u8索引文件的内容如下表1所示:

表1

在图3的实施例中,seek解码后播放位置为2.ts文件的初始位置即视频文件的10秒位置处,但用户实际seek位置为15秒,此时定位的idr帧和实际seek位置之间存在5秒的误差,即采用相关技术中的方案,只能seek至每个ts分片的开头处,无法实现ts分片内seek,真实播放位置与seek位置偏差较大。

图4示意性示出了根据本发明的一实施例的用于视频播放的方法的流程图。本发明实施方式的方法步骤可以由终端设备执行,也可以由服务端执行,或者由终端设备和服务端交互执行,例如,可以由上述图1中的服务器105或者终端设备101执行,也可以由二者共同执行,但本发明并不限定于此。

如图4所示,本发明实施方式提供的用于视频播放的方法可以包括以下步骤。

在步骤s410中,获取视频文件的当前拖动(seek,指用户拖动视频播放进度条到指定位置或者目标位置进行播放)位置信息。

本发明实施例中,所述视频文件的格式可以为hls格式,但本发明并不限定于此,也可以是其他任意合适的视频格式。

在步骤s420中,根据所述当前拖动位置信息确定所述视频文件的目标视频片段(ts分片)。

在步骤s430中,根据所述视频文件的索引文件查找所述目标视频片段中与当前拖动位置距离最近的目标即时解码刷新(idr)帧。

其中,所述索引文件可以包括所述视频文件中各视频片段内的idr帧的时间戳。

本发明实施例中,视频文件中可以包括i帧(帧内编码帧)、p帧(前向预测编码帧)和b帧(双向预测内插编码帧)。

其中,i帧是一种自带全部信息的独立帧,无需参考其它图像便可独立进行解码,视频序列中的第一个帧始终都是i帧。i和idr帧都是使用帧内预测的。在编码和解码中为了方便,需要将首个i帧和其他i帧区别开,把第一个首个i帧叫idr帧,这样就方便控制编码和解码流程。

idr帧的作用是立刻刷新,使错误不致传播。从idr帧开始,重新算一个新的序列开始编码。而i帧不具有随机访问的能力,这个功能是由idr帧承担。idr帧会导致dpb(decodedpicturebuffer参考帧列表)清空,而i帧不会。对于idr帧来说,在idr帧之后的所有帧都不能引用任何idr帧之前的帧的内容,与此相反,对于普通的i帧来说,位于其之后的b和p帧可以引用位于普通i帧之前的i帧。从随机存取的视频流中,播放器永远可以从一个idr帧播放,因为在它之后没有任何帧引用之前的帧。但是,不能在一个没有idr帧的视频中从任意点开始播放,因为后面的帧总是会引用前面的帧。

本发明实施例中,seek时需要定位至idr帧进行解码播放。

本发明实施方式提供的用于视频播放的方法,通过包括视频文件中各视频片段内的idr帧的时间戳的索引文件,查找到目标视频片段内当前拖动距离前距离最近的目标idr帧,提高了定位精度,优化了视频观看体验。

图5示出了图4中所示的步骤s430在一实施例中的处理过程示意图。本发明实施方式的方法步骤可以由终端设备执行,也可以由服务端执行,或者由终端设备和服务端交互执行,例如,可以由上述图1中的服务器105或者终端设备101执行,但本发明并不限定于此。

如图5所示,上述图4所示实施方式中的步骤s430可以进一步包括以下步骤。

在步骤s431中,获得所述当前拖动位置在所述目标视频片段内的时间戳。

在步骤s432中,根据所述目标视频片段内的idr帧的时间戳和所述当前拖动位置在所述目标视频片段内的时间戳确定所述目标idr帧。

图6示意性示出了根据本发明的又一实施例的用于视频播放的方法的流程图。本发明实施方式的方法步骤可以由终端设备执行,也可以由服务端执行,或者由终端设备和服务端交互执行,例如,可以由上述图1中的服务器105或者终端设备101执行,但本发明并不限定于此。

本发明实施例中,所述索引文件还可以包括所述视频文件中各视频片段内的idr帧的偏移位置。

如图6所示,与上述图4所示实施方式相比,本发明实施方式的不同之处在于,还可以包括以下步骤。

在步骤s610中,根据所述索引文件获取所述目标idr帧的偏移位置。

在步骤s620中,根据所述目标idr帧的偏移位置发送视频继续播放请求。

在步骤s630中,接收响应于所述视频继续播放请求返回的当前视频数据。

继续参考图6,所述方法还可以进一步包括以下步骤。

在步骤s640中,解码所述当前视频数据。

在步骤s650中,播放解码后的当前视频数据。

图7示意性示出了根据本发明的再一实施例的用于视频播放的方法的流程图。本发明实施方式的方法步骤可以由终端设备执行,也可以由服务端执行,或者由终端设备和服务端交互执行,例如,可以由上述图1中的服务器105或者终端设备101执行,但本发明并不限定于此。

如图7所示,与上述图4和或图6所示实施方式相比,本发明实施方式的不同之处在于,还可以包括以下步骤。

在步骤s710中,遍历所述视频文件中各视频片段内的视频帧,获取各视频帧的帧类型、时间戳和偏移位置,其中所述帧类型可以包括即时解码刷新帧。

例如,可以使用ffmpeg(fastforwardmpeg)工具等来遍历所述视频文件中各视频片段内的视频帧,获取各视频帧的帧类型、时间戳和偏移位置,并记录其中的idr帧的时间戳和偏移位置。

其中,ffmpeg是一套可以用来记录、转换数字音频、视频,并能将其转化为流的开源计算机程序。它提供了录制、转换以及流化音视频的完整解决方案。

本发明实施例中,视频帧的帧类型可以包括i帧、p帧和b帧,其中idr帧属于i帧中的一种情况。

在步骤s720中,将获取的所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置存储至所述索引文件。

本发明实施例中,所述索引文件可以为m3u8文件,但本发明对此不作限定。当视频文件的格式发生变化时,索引文件可以发生相应的改变。

在示例性实施例中,所述索引文件还可以包括各视频片段的标准标签。

在示例性实施例中,将所述视频文件中各视频片段内的idr帧的时间戳和偏移位置存储至所述索引文件,可以包括:在所述索引文件中各视频片段的标准标签前插入私有标签;其中,所述私有标签包括相应视频片段内的idr帧的时间戳和偏移位置。

在示例性实施例中,所述标准标签可以包括视频片段的时长。

下面通过一个实际的例子进行举例说明。假设在标准m3u8的基础上,每个ts分片前插入私有标签,如下表2所示。

表2

上表2中,#extm3u,#ext-x-targetduration:10,#extinf:10.0等为标准标签,#extinf其后的数值10.0代表对应的ts分片的时长为10s。

其中,#qq-hls-private是私有标签的标识(tag),其后的信息是“idr帧的时间戳|偏移位置”,每个idr帧信息之间可以以“,”隔开。

例如,#qq-hls-private:0.0|376,3.0|368940,7.0|892060表示1.ts这个ts分片中包括三个idr帧,且第一个idr帧的时间戳为0.0秒,偏移位置为376字节;第二个idr帧的时间戳为3.0秒,偏移位置为368940字节;第三个idr帧的时间戳为7.0秒,偏移位置为892060字节。

需要说明的是,上述举例中,各idr帧的时间戳是指每个ts分片中的相对时间,但在其他实施例中,也可以采用绝对时间来记录各个idr帧的时间戳,本发明对此不作限定。

本发明实施例中,idr帧的偏移位置是指相对整个视频文件的初始位置的偏移字节。

需要说明的是,上述举例中是通过更改视频文件已有的m3u8文件来获得所述索引文件,但在其他实施例中,也可以将所述视频文件中各视频片段内的idr帧的时间戳和偏移位置单独记录为一个不同于m3u8的文件中,本发明对此不作限定。

本发明实施例中,若上述步骤s710和步骤s720有后台服务器执行,则所述方法还可以包括:当接收到前端播放器的播放请求时,将上述插入私有标签后的m3u8文件发送给所述前端播放器。

图8示意性示出了根据本发明的再一实施例的用于视频播放的方法的流程图。本发明实施方式的方法步骤可以由终端设备执行,也可以由服务端执行,或者由终端设备和服务端交互执行,例如,可以由上述图1中的终端设备101执行,但本发明并不限定于此。

在步骤s810中,发送所述视频文件的播放请求。

例如,前端播放器向后台服务器发送视频文件的播放请求。其中,所述播放请求可以包括hls视频播放地址。

在步骤s820中,接收响应于所述播放请求返回的索引文件。

例如,后台服务器接收到所述播放请求后,可以根据所述播放请求中的hls视频播放地址检索到相应的索引文件,并返回至所述前端播放器。其中,这里返回的索引文件可以是上述在标准m3u8文件中插入私有标签后的m3u8文件。

在步骤s830中,解析所述索引文件,获得所述视频文件中各视频片段内的idr帧的时间戳和偏移位置。

例如,所述前端播放器接收到所述索引文件后,可以将其解析,从而获得所述视频文件中各视频片段内的idr帧的时间戳和偏移位置,并将其存储至本地。

本发明实施例中,m3u8文件可以是按行解析的,当前待解析的标签若为标准标签就按照标准标签的规范解析,若为私有标签就按照私有标签的规范解析,若为未知标签就可以丢弃或者直接报错,取决于具体的解析策略。

本发明实施例中,所述方法还可以包括:前端播放器例如可以以标准hls支持形式开始播放下载的m3u8文件。

本发明实施例中,所述方法还可以包括:当用户发生seek时,根据seek位置和每个ts分片的时长(#extinf标签后的数字即为每个ts分片的时长),可以根据如下公式(1)定位至相应的ts分片:

前(n-1)个ts分片总时长<=seek位置<前n个ts分片总时长(1)

上述公式(1)中,假设n为目标ts分片的序号,其中,n为大于等于1的正整数。

以上表2中的插入私有标签后的m3u8为例,还是假设seek的位置为15s,代入上述公式(1)可计算出n=2,则seek位置所处的ts分片为2.ts。

本发明实施例中,所述方法还可以包括:查询与该seek位置距离最近的idr帧作为目标idr帧。

例如,查询的方法可以为,假设seek位置所处的ts分片的序号为n,则seek位置在第n个分片内的时间戳timestamp_offset=seek位置-前(n-1)个ts分片总时长,在目标ts分片的私有标签中找到最后一个时间戳不大于该timestamp_offset的idr帧即为目标idr帧,并可以获取其偏移位置。

这里还是以上表2中的插入私有标签后的m3u8为例,假设seek的位置为15秒,则seek位置所处的ts分片为2.ts,seek位置在第n个分片内的时间戳timestamp_offset=15秒-10秒,即为5秒。遍历目标ts分片的idr帧列表,找到最后一个时间戳不大于该timestamp_offset的idr帧,即为4.6秒,其对应的偏移位置为468940。

需要说明的是,上述举例中,是假设当前播放进度小于该seek位置,例如假设当前播放进度为5秒,用户往后拖动进度条至15秒,则采用本发明实施例提供的方法,查询与该seek位置15秒距离最近且位于15秒之前的idr帧即在2.ts中时间戳为4.6秒的idr帧作为所述目标idr帧。但本发明并不限定于此,在其他实施例中,用户也可能往回拖动进度条,即当前播放进度可能大于该seek位置。在另一些实施例中,也可以查询与该seek位置距离最近且位于该seek位置之后的idr帧作为所述目标idr帧。

本发明实施例中,所述方法还可以包括:前端播放器向后台服务器发送http请求时,http请求头带上该目标idr帧的偏移位置。还是依据上述的举例,则:

range:bytes=468940-

表示前端播放器向后台服务器请求所述视频文件468940字节以后的范围。

本发明实施例中,所述方法还可以包括:前端播放器接收到后台服务器根据所述http请求返回该目标idr帧的偏移位置之后的视频数据,即为目标idr帧后的视频数据,前端播放器获得所述视频数据进行解码进行播放,至此实现了hls协议ts分片内快速seek。

本发明实施方式公开的用于视频播放的方法,通过在生成m3u8时,在标准m3u8的基础上,往每个ts分片前面打上私有标签,私有标签中包含了每个ts片中所有idr帧的时间戳和偏移位置;之后,根据seek位置,先定位seek位置的ts分片,再根据私有标签中的idr帧时间戳,查找到需要seek到的idr帧的偏移位置;然后,请求该偏移位置的内容,解码后进行播放,一方面,可以快速实现hls协议ts分片内seek;另一方面,真实播放位置与seek位置之间的偏差较小,提升用户视频观看体验。

图9示意性示出了根据本发明实施例的用于视频播放的装置的框图。本发明实施方式提供的用于视频播放的装置900,可以设置于图1中的终端设备101,也可以设置于图1中的服务器105,或者可以是部分模块设置于终端设备101,部分模块设置于服务器105,本发明对此不作限定。

如图9所示,本发明实施方式提供的用于视频播放的装置900可以包括:拖动信息获取模块910、视频片段确定模块920以及目标帧查找模块930。

其中,拖动信息获取模块910可以配置为获取视频文件的当前拖动位置信息。

视频片段定位模块920可以配置为根据所述当前拖动位置信息确定所述视频文件的目标视频片段。

目标帧查找模块930可以配置为根据所述视频文件的索引文件查找所述目标视频片段中与当前拖动位置距离最近的目标即时解码刷新帧。

其中,所述索引文件包括所述视频文件中各视频片段内的即时解码刷新帧的时间戳。

在示例性实施例中,所述目标帧查找模块可以包括拖动时间戳获得单元和目标帧确定单元。

其中,所述拖动时间戳获得单元可以配置为获得所述当前拖动位置在所述目标视频片段内的时间戳。

所述目标帧确定单元可以配置为根据所述目标视频片段内的即时解码刷新帧的时间戳和所述当前拖动位置在所述目标视频片段内的时间戳确定所述目标即时解码刷新帧。

在示例性实施例中,所述索引文件还可以包括所述视频文件中各视频片段内的即时解码刷新帧的偏移位置。

在示例性实施例中,用于视频播放的装置900还可以包括偏移位置获取模块、播放请求发送模块以及视频数据接收模块。

其中,所述偏移位置获取模块可以配置为根据所述索引文件获取所述目标即时解码刷新帧的偏移位置。

所述播放请求发送模块可以配置为根据所述目标即时解码刷新帧的偏移位置发送视频继续播放请求。

所述视频数据接收模块可以配置为接收响应于所述视频继续播放请求返回的当前视频数据。

在示例性实施例中,用于视频播放的装置900还可以包括解码模块和播放模块。

其中,所述解码模块可以配置为解码所述当前视频数据。

所述播放模块可以配置为播放解码后的当前视频数据。

在示例性实施例中,用于视频播放的装置900还可以包括遍历模块和帧信息存储模块。

其中,所述遍历模块可以配置为遍历所述视频文件中各视频片段内的视频帧,获取各视频帧的帧类型、时间戳和偏移位置,其中所述帧类型包括即时解码刷新帧。

所述帧信息存储模块可以配置为将获取的所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置存储至所述索引文件。

在示例性实施例中,所述索引文件还可以包括各视频片段的标准标签。

在示例性实施例中,所述帧信息存储模块可以包括标签插入单元。

其中,所述标签插入单元可以配置为在所述索引文件中各视频片段的标准标签前插入私有标签。

其中,所述私有标签可以包括相应视频片段内的即时解码刷新帧的时间戳和偏移位置。

在示例性实施例中,所述标准标签可以包括视频片段的时长。

在示例性实施例中,所述播放请求发送模块还可以配置为发送所述视频文件的播放请求。

在示例性实施例中,用于视频播放的装置900还可以包括索引文件接收模块和索引文件解析模块。

其中,所述索引文件接收模块可以配置为接收响应于所述播放请求返回的索引文件。

所述解析所述索引文件可以配置为获得所述视频文件中各视频片段内的即时解码刷新帧的时间戳和偏移位置。

本发明实施例提供的用于视频播放的装置中的各个模块和/或单元的具体实现可以参照上述用于视频播放的方法中的内容,在此不再赘述。

本发明实施方式提供的用于视频播放的装置,通过包括视频文件中各视频片段内的idr帧的时间戳的索引文件,查找到目标视频片段内当前拖动距离前距离最近的目标idr帧,提高了定位精度,优化了视频观看体验。

图10示意性示出了视频播放过程中用户拖动进度条的界面示意图。

如图10所示,终端设备的显示屏幕1000上部分为播放器的播放界面1010,下部分1020可以显示其他图片或者文字信息,例如当前播放的视频文件的一些相关信息,例如用户的评论信息,该视频文件的演员信息或剧本信息等,本发明对此不作限定。

用户可以点击播放按钮1011开始播放该视频文件,显示该视频文件的总时长为44:48分,用户拖动进度条1012至当前拖动位置1013,这里假设当前拖动位置为4:33分。

图11示意性示出了采用图3所示方法定位至目标即时解码刷新帧的界面示意图。

如图11所示,根据上述图10,用户拖动进度条至04:33分后,采用相关技术中的方法,定位至分片起始点04:24分开始继续播放该视频文件,实际播放点04:24分与目标播放点04:33分偏差较大。

图12示意性示出了采用图4所示方法定位至目标即时解码刷新帧的界面示意图。

如图12所示,根据上述图10,同样是用户拖动进度条至04:33分后,采用本发明实施例提供的方法,根据私有标签可以定位至04:30分开始继续播放,实际播放点04:30分与目标播放点04:33分偏差较小。

应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本发明的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本发明实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、触控终端、或者网络设备等)执行根据本发明实施方式的方法。

本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。

应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1