一种字幕的显示方法及显示设备与流程

文档序号:22042925发布日期:2020-08-28 18:21阅读:270来源:国知局
一种字幕的显示方法及显示设备与流程

本申请涉及显示技术领域,尤其涉及一种字幕的显示方法及显示设备。



背景技术:

外部服务器提供的媒体文件包括音频数据、视频数据以及字幕数据。通常,当字幕数据和音频数据、视频数据同属一个url时,称为媒体文件的内嵌字幕;当字幕数据和音频数据、视频数据属不同的url时,称为媒体文件的外挂字幕。基于字幕数据,用户可以随意选择字幕语言。

然而,针对外挂字幕,在播放音视频文件时需要提前导入字幕数据才能够实现字幕显示,从而无法满足用户在播放音视频文件的过程中选择动态加载字幕的需求。



技术实现要素:

本申请实施例提供一种字幕的显示方法及显示设备,用以实现动态加载字幕,进而满足用户需求。

第一方面,提供一种显示设备,包括:

显示器;

用户接口;

网络模块,用于从服务器浏览/或下载媒体文件;

解码器,用于解码媒体文件;

控制器,用于执行:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中存在字幕基本流数据时,在显示器上显示图像内容和字幕内容;

其中,音视频基本流数据与字幕基本流数据分离。

一些实施例中,所述控制器,具体执行:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中存在字幕基本流数据时,断开所述播放器管道中已有的字幕解析元件和通用字幕渲染元件之间的连接并释放所述已有的字幕解析元件,以及在所述播放器管道中创建新的字幕解析元件,所述通用字幕渲染元件用于对文本格式或图片格式的字幕基本流数据进行渲染。

一些实施例中,所述控制器,还用于执行:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中不存在字幕基本流数据时,直接在所述播放器管道中创建字幕解析元件。

一些实施例中,所述控制器,还用于执行:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据未激活时,等待所述音视频基本流数据激活;

在确定当前的播放器管道中音视频基本流数据已激活时,在所述播放器管道中创建字幕解析元件。

一些实施例中,所述字幕解析元件至少包括:字幕下载模块、字幕解析模块以及字幕同步模块;

所述字幕下载模块,用于根据已设置的字幕路径下载字幕数据;

所述字幕解析模块,用于对所述字幕下载模块下载的字幕数据进行解析,得到字幕基本流数据;

所述字幕同步模块,用于从所述字幕解析模块解析得到的字幕基本流数据中确定与所述播放器管道当前播放的音视频基本流数据相匹配的字幕基本流数据,并将所述相匹配的字幕基本流数据输出给所述播放器管道中的通用字幕渲染模块,以由所述通用字幕渲染模块对所述相匹配的字幕基本流数据进行渲染。

第二方面,提供一种字幕的显示方法,包括:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中存在字幕基本流数据时,在显示器上显示图像内容和字幕内容;

其中,音视频基本流数据与字幕基本流数据分离。

一些实施例中,所述方法还包括:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中存在字幕基本流数据时,断开所述播放器管道中已有的字幕解析元件和通用字幕渲染元件之间的连接并释放所述已有的字幕解析元件,以及在所述播放器管道中创建新的字幕解析元件,所述通用字幕渲染元件用于对文本格式或图片格式的字幕基本流数据进行渲染。

一些实施例中,所述方法还包括:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中不存在字幕基本流数据时,直接在所述播放器管道中创建字幕解析元件。

一些实施例中,所述方法还包括:

响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据未激活时,等待所述音视频基本流数据激活;

在确定当前的播放器管道中音视频基本流数据已激活时,在所述播放器管道中创建字幕解析元件。

一些实施例中,所述字幕解析元件至少包括:字幕下载模块、字幕解析模块以及字幕同步模块;

所述字幕下载模块,用于根据已设置的字幕路径下载字幕数据;

所述字幕解析模块,用于对所述字幕下载模块下载的字幕数据进行解析,得到字幕基本流数据;

所述字幕同步模块,用于从所述字幕解析模块解析得到的字幕基本流数据中确定与所述播放器管道当前播放的音视频基本流数据相匹配的字幕基本流数据,并将所述相匹配的字幕基本流数据输出给所述播放器管道中的通用字幕渲染模块,以由所述通用字幕渲染模块对所述相匹配的字幕基本流数据进行渲染。

上述实施例中,通过响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中存在字幕基本流数据时,断开播放器管道中已有的字幕解析元件和通用字幕渲染元件之间的连接并释放已有的字幕解析元件,以及在播放器管道中创建新的字幕解析元件,可以实现在音视频播放过程中动态加载字幕。

附图说明

图1a中示例性示出了显示设备200与控制100之间操作场景的示意图;

图1b中示例性示出了图1a中控制装置100的配置框图;

图1c中示例性示出了图1a中显示设备200的配置框图;

图1d中示例性示出了显示设备200存储器中操作系统的架构配置框图;

图2为相关技术中播放器管道的结构示意图;

图3为本申请实施例提供的播放器管道的结构示意图;

图4a为网页播放器设置菜单的示意图;

图4b为无字幕状态下网页播放器的显示界面400的示意图;

图4c为网页播放器显示界面上设置选项的示意图;

图4d为字幕选择界面的示意图;

图4e为有字幕状态下网页播放器的显示界面400的示意图;

图5为本申请实施例提供的字幕的显示方法的流程示意图。

具体实施方式

为使本申请示例性实施例的目的、技术方案和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施例中的技术方案进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。

基于本申请中示出的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。

本申请中使用的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

本申请中使用的术语“模块”,是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。

本申请中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。

图1a中示例性示出了显示设备200与控制装置100之间操作场景的示意图。如图1a所示,控制装置100和显示设备200之间可以有线或无线方式进行通信。

其中,控制装置100被配置为控制显示设备200,其可接收用户输入的操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起着用户与显示设备200之间交互的中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。

控制装置100可以是遥控器100a,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。

控制装置100也可以是智能设备,如移动终端100b、平板电脑、计算机、笔记本电脑等。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序通过配置可以在与智能设备关联的屏幕上,通过直观的用户界面(ui)为用户提供各种控制。

示例性的,移动终端100b可与显示设备200安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以使移动终端100b与显示设备200建立控制指令协议,通过操作移动终端100b上提供的用户界面的各种功能键或虚拟按钮,来实现如遥控器100a布置的实体按键的功能。也可以将移动终端100b上显示的音视频内容传输到显示设备200上,实现同步显示功能。

显示设备200可被实施为电视,可提供广播接收电视功能以及计算机支持功能的智能网络电视功能。显示设备示例的包括,数字电视、网络电视、智能电视、互联网协议电视(iptv)等。

显示设备200,可以是液晶显示器、有机发光显示器、投影显示设备。具体显示设备类型、尺寸大小和分辨率等不作限定。

显示设备200还与服务器300通过多种通信方式进行数据通信。这里可允许显示设备200通过局域网(lan)、无线局域网(wlan)和其他网络进行通信连接。服务器300可以向显示设备200提供各种内容和互动。示例的,显示设备200可以发送和接收信息,例如:接收电子节目指南(epg)数据、接收软件程序更新、或访问远程储存的数字媒体库。服务器300可以一组,也可以多组,可以一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。

图1b中示例性示出了控制装置100的配置框图。如图1b所示,控制装置100包括控制器110、存储器120、通信器130、用户输入接口140、输出接口150、供电电源160。

控制器110包括随机存取存储器(ram)111、只读存储器(rom)112、处理器113、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间的通信协作、外部和内部的数据处理功能。

示例性的,当检测到用户按压在遥控器100a上布置的按键的交互或触摸在遥控器100a上布置的触摸面板的交互时,控制器110可控制产生与检测到的交互相应的信号,并将该信号发送到显示设备200。

存储器120,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器120,可以存储用户输入的各类控制信号指令。

通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:控制装置100经由通信器130将控制信号(例如触摸信号或按钮信号)发送至显示设备200上,控制装置100可经由通信器130接收由显示设备200发送的信号。通信器130可以包括红外信号接口131和射频信号接口132。例如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。

用户输入接口140,可包括麦克风141、触摸板142、传感器143、按键144等中至少一者,从而用户可以通过语音、触摸、手势、按压等将关于控制显示设备200的用户指令输入到控制装置100。

输出接口150,通过将用户输入接口140接收的用户指令输出至显示设备200,或者,输出由显示设备200接收的图像或语音信号。这里,输出接口150可以包括led接口151、产生振动的振动接口152、输出声音的声音输出接口153和输出图像的显示器154等。例如,遥控器100a可从输出接口150接收音频、视频或数据等输出信号,并且将输出信号在显示器154上显示为图像形式、在声音输出接口153输出为音频形式或在振动接口152输出为振动形式。

供电电源160,用于在控制器110的控制下为控制装置100各元件提供运行电力支持。形式可以为电池及相关控制电路。

图1c中示例性示出了显示设备200的硬件配置框图。如图1c所示,显示设备200中可以进一步包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、存储器260、用户接口265、视频处理器270、显示器275、音频处理器280、音频输入接口285、供电电源290。

调谐解调器210,通过有线或无线方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,用于从多个无线或有线广播电视信号中解调出用户所选择的电视频道的频率中所携带的音视频信号,以及附加信息(例如epg数据)。

调谐解调器210,可根据用户选择,以及由控制器250控制,响应用户选择的电视频道的频率以及该频率所携带的电视信号。

调谐解调器210,根据电视信号的广播制式不同,可以接收信号的途径有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,可以数字调制方式或模拟调制方式;以及根据接收电视信号的种类不同,可以解调模拟信号和数字信号。

在其他一些示例性实施例中,调谐解调器210也可在外部设备中,如外部机顶盒等。这样,机顶盒通过调制解调后输出电视信号,经过外部装置接口240输入至显示设备200中。

通信器220,是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如显示设备200可将内容数据发送至经由通信器220连接的外部设备,或者,从经由通信器220连接的外部设备浏览和下载内容数据。通信器220可以包括wifi模块221、蓝牙通信协议模块222、有线以太网通信协议模块223等网络通信协议模块或近场通信协议模块,从而通信器220可根据控制器250的控制接收控制装置100的控制信号,并将控制信号实现为wifi信号、蓝牙信号、射频信号等。

检测器230,是显示设备200用于采集外部环境或与外部交互的信号的组件。检测器230可以包括图像采集器231,如相机、摄像头等,可以用于采集外部环境场景,以自适应变化显示设备200的显示参数;以及用于采集用户的属性或与用户交互手势,以实现显示设备与用户之间互动的功能。还可以包括光接收器232,用于采集环境光线强度,以自适应显示设备200的显示参数变化等。

在其他一些示例性实施例中,检测器230,还可以包括温度传感器,如通过感测环境温度,显示设备200可自适应调整图像的显示色温。示例性的,当温度偏高的环境时,可调整显示设备200显示图像色温偏冷色调;当温度偏低的环境时,可以调整显示设备200显示图像色温偏暖色调。

在其他一些示例性实施例中,检测器230,还可以包括声音采集器,如麦克风,可以用于接收用户的声音,如用户控制显示设备200的控制指令的语音信号;或者,可以采集用于识别环境场景类型的环境声音,实现显示设备200可以自适应环境噪声。

外部装置接口240,是提供控制器210控制显示设备200与外部设备间数据传输的组件。外部装置接口240可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如epg)等数据。

其中,外部装置接口240可以包括:高清多媒体接口(hdmi)端子241、复合视频消隐同步(cvbs)端子242、模拟或数字分量端子243、通用串行总线(usb)端子244、组件(component)端子(图中未示出)、红绿蓝(rgb)端子(图中未示出)等任一个或多个。

控制器250,通过运行存储在存储器260上的各种软件控制程序(如操作系统和各种应用程序),来控制显示设备200的工作和响应用户的操作。

如图1c所示,控制器250包括随机存取存储器(ram)251、只读存储器(rom)252、图形处理器253、cpu处理器254、通信接口255、以及通信总线256。其中,ram251、rom252以及图形处理器253、cpu处理器254通信接口255通过通信总线256相连接。

rom252,用于存储各种系统启动指令。如在接收到开机信号时,显示设备200电源开始启动,cpu处理器254运行rom252中的系统启动指令,将存储在存储器260的操作系统拷贝至ram251中,以开始运行启动操作系统。当操作系统启动完成后,cpu处理器254再将存储器260中各种应用程序拷贝至ram251中,然后,开始运行启动各种应用程序。

图形处理器253,用于产生各种图形对象的屏幕图像,如图标、图像以及操作菜单等。图形处理器253可以包括运算器,用于通过接收用户输入各种交互指令进行运算,进而根据显示属性显示各种对象;以及包括渲染器,用于产生基于运算器得到的各种对象,将进行渲染的结果显示在显示器275上。

cpu处理器254,用于执行存储在存储器260中的操作系统和应用程序指令。以及根据接收的用户输入指令,来执行各种应用程序、数据和内容的处理,以便最终显示和播放各种音视频内容。

在一些示例性实施例中,cpu处理器254,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在显示设备预加载模式中执行显示设备200的一些初始化操作,和/或,在正常模式下显示画面的操作。多个或一个子处理器,用于执行在显示设备待机模式等状态下的一种操作。

通信接口255,可包括第一接口到第n接口。这些接口可以是经由网络被连接到外部设备的网络接口。

控制器250可以控制显示设备200的整体操作。例如:响应于接收到用于选择在显示器275上显示的gui对象的用户输入命令,控制器250便可以执行与由用户输入命令选择的对象有关的操作。

其中,该对象可以是可选对象中的任何一个,例如超链接或图标。该与所选择的对象有关的操作,例如显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应的程序的操作。该用于选择gui对象的用户输入命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者是与用户说出语音相对应的语音命令。

存储器260,用于存储驱动和控制显示设备200运行的各种类型的数据、软件程序或应用程序。存储器260可以包括易失性和/或非易失性存储器。而术语“存储器”包括存储器260、控制器250的ram251和rom252、或显示设备200中的存储卡。

在一些实施例中,存储器260具体用于存储驱动显示设备200中控制器250的运行程序;存储显示设备200内置的和用户从外部设备下载的各种应用程序;存储用于配置由显示器275提供的各种gui、与gui相关的各种对象及用于选择gui对象的选择器的视觉效果图像等数据。

在一些实施例中,存储器260具体用于存储调谐解调器210、通信器220、检测器230、外部装置接口240、视频处理器270、显示器275、音频处理器280等的驱动程序和相关数据,从外部装置接口接收的外部数据(例如音视频数据)或用户接口接收的用户数据(例如按键信息、语音信息、触摸信息等)。

在一些实施例中,存储器260具体存储用于表示操作系统(os)的软件和/或程序,这些软件和/或程序可包括,例如:内核、中间件、应用编程接口(api)和/或应用程序。示例性的,内核可控制或管理系统资源,以及其它程序所实施的功能(如所述中间件、api或应用程序);同时,内核可以提供接口,以允许中间件、api或应用程序访问控制器,以实现控制或管理系统资源。

图1d中示例性示出了显示设备200存储器中操作系统的架构配置框图。该操作系统架构从上到下依次是应用层、中间件层和内核层。

应用层,系统内置的应用程序以及非系统级的应用程序都属于应用层,其负责与用户进行直接交互。应用层可包括多个应用程序,如netflix应用程序、设置应用程序、媒体中心应用程序等。这些应用程序可被实现为web应用,其基于webkit引擎来执行,具体可基于html、层叠样式表(css)和javascript来开发并执行。

这里,html,全称为超文本标记语言(hypertextmarkuplanguage),是一种用于创建网页的标准标记语言,通过标记标签来描述网页,html标签用以说明文字、图形、动画、声音、表格、链接等,浏览器会读取html文档,解释文档内标签的内容,并以网页的形式显示出来。

css,全称为层叠样式表(cascadingstylesheets),是一种用来表现html文件样式的计算机语言,可以用来定义样式结构,如字体、颜色、位置等的语言。css样式可以直接存储与html网页或者单独的样式文件中,实现对网页中样式的控制。

javascript,是一种应用于web网页编程的语言,可以插入html页面并由浏览器解释执行。其中web应用的交互逻辑都是通过javascript实现。javascript可以通过浏览器,封装javascript扩展接口,实现与内核层的通信,

中间件层,可以提供一些标准化的接口,以支持各种环境和系统的操作。例如,中间件层可以实现为与数据广播相关的中间件的多媒体和超媒体信息编码专家组(mheg),还可以实现为与外部设备通信相关的中间件的dlna中间件,还可以实现为提供显示设备内各应用程序所运行的浏览器环境的中间件等。

内核层,提供核心系统服务,例如:文件管理、内存管理、进程管理、网络管理、系统安全权限管理等服务。内核层可以被实现为基于各种操作系统的内核,例如,基于linux操作系统的内核。

内核层也同时提供系统软件和硬件之间的通信,为各种硬件提供设备驱动服务,例如:为显示器提供显示驱动程序、为摄像头提供摄像头驱动程序、为遥控器提供按键驱动程序、为wifi模块提供wifi驱动程序、为音频输出接口提供音频驱动程序、为电源管理(pm)模块提供电源管理驱动等。

用户接口265,接收各种用户交互。具体的,用于将用户的输入信号发送给控制器250,或者,将从控制器250的输出信号传送给用户。示例性的,遥控器100a可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户接口265,再由用户接口265转送至控制器250;或者,遥控器100a可接收经控制器250处理从用户接口265输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。

在一些实施例中,用户可在显示器275上显示的图形用户界面(gui)输入用户命令,则用户接口265通过gui接收用户输入命令。确切的说,用户接口265可接收用于控制选择器在gui中的位置以选择不同的对象或项目的用户输入命令。

或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户接口265通过传感器识别出声音或手势,来接收用户输入命令。

视频处理器270,用于接收外部的视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器275上显示或播放的视频信号。

示例的,视频处理器270,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。

其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入mpeg-2流(基于数字存储媒体运动图像和语音的压缩标准),则解复用模块将其进行解复用成视频信号和音频信号等。

视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。

图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的gui信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。

帧率转换模块,用于对输入视频的帧率进行转换,如将输入的60hz视频的帧率转换为120hz或240hz的帧率,通常的格式采用如插帧方式实现。

显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出rgb数据信号。

显示器275,用于接收源自视频处理器270输出的图像信号,进行显示视频、图像以及菜单操控界面。例如,显示器可以显示来自调谐解调器210接收的广播信号中的视频,也可以显示来自通信器220或外部装置接口240输入的视频,还可以显示在存储器260中存储的图像。显示器275,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面ui。

以及,显示器275可以包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。或者,倘若显示器275为一种投影显示器,还可以包括一种投影装置和投影屏幕。

音频处理器280,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器286中播放的音频信号。

示例性的,音频处理器280可以支持各种音频格式。例如mpeg-2、mpeg-4、高级音频编码(aac)、高效aac(he-aac)等格式。

音频输出接口285,用于接收源自音频处理器280输出的音频信号。例如,音频输出接口可以输出经由调谐解调器210接收的广播信号中的音频,也可以输出经由通信器220或外部装置接口240输入的音频,还可以输出在存储器260中存储的音频。音频输出接口285可包括扬声器286,或输出至外接设备的发生装置的外接音响输出端子287,如耳机输出端子。

在其他一些示例性实施例中,视频处理器270可以包括一个或多个芯片组成。音频处理器280,也可以包括一个或多个芯片组成。

以及,在其他一些示例性实施例中,视频处理器270和音频处理器280,可以为单独的芯片,也可以与控制器250一起集成在一个或多个芯片中。

供电电源290,用于在控制器250的控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电电源290可以是安装在显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源。

外挂字幕是指媒体文件的字幕数据和音频数据、视频数据(以下简称音视频数据)分离,即字幕数据和音频数据、视频数据属不同的url。目前,在播放包含外挂字幕的媒体文件时,为保证音视频数据和字幕数据能够同步渲染,将待播放的字幕数据和音视频数据划分到同一播放分组中,同时,要求先将字幕数据的路径,即url设置给播放器,播放器在初始化过程中则能够在播放器管道中创建字幕解析元件以实现字幕显示。如图2所示,为相关技术中播放器管道的结构示意图。

图2所示例的播放器管道中包括音视频解析元件、字幕解析元件、码流同步元件、管道输出元件。

其中,音视频解析元件用于解析、缓冲音视频数据,包括:视频下载模块、视频格式探测模块、媒体缓冲模块、音视频解封装模块以及多缓冲队列。视频下载模块用于根据已设置的音视频路径下载音视频数据。视频格式探测模块用于识别音视频数据的格式。媒体缓冲模块用于:缓冲视频下载模块下载的数据,以便于缓存足够的数据进行后续模块的处理。音视频解封装模块用于对音视频数据进行解封装,得到音频基本流数据和视频基本流数据,其可针对不同的媒体格式提供不同的功能,例如,针对hls、mss、dash等格式的媒体提供协议解封装功能、格式解封装功能,而针对普通的网络媒体仅提供格式解封装功能。多缓冲队列模块用于:缓冲音视频解封装模块输出的不同编码格式的基本流数据。

字幕解析元件用于解析字幕数据,包括字幕下载模块、字幕格式探测模块、媒体缓冲模块、字幕解析模块。字幕下载模块用于根据已设置的字幕路径下载字幕数据,支持本地媒体、网络媒体的下载。字幕格式探测模块用于识别字幕数据的格式。媒体缓冲模块用于:缓冲整个外挂字幕文件。字幕解析模块用于对字幕数据进行解析,得到字幕基本流数据,支持不同格式字幕数据的解析,例如支持ttml、webvtt、srt、ass等文本格式字幕数据的解析,还支持dvb-subtitle等图片格式字幕数据的解析。

码流同步元件用于同步字幕基本流数据和音频基本流数据、视频基本流数据(以下简称音视频基本流数据)。需要说明的是,目前只有当音视频解析元件和字幕解析元件都解析得到基本流数据时,才会加载码流同步元件。

管道输出元件则是整个播放器管道的输出端,提供不同类型的码流,例如视频基本流、音频基本流、字幕基本流向平台芯片的同步注入功能,包括视频基本流注入模块、音频基本流注入模块、字幕基本流注入模块。

由上述描述可见,目前,只有在播放器初始化之前,即将字幕数据的路径设置给播放器才能够实现字幕显示。也就是说,若在播放器初始化之前,未向播放器设置字幕数据的路径,将导致播放器在播放视频时无法显示字幕,这也就意味着不支持用户在播放视频的过程中动态加载字幕。

基于此,本申请提供一种字幕的显示方法,用以实现动态加载字幕,进而满足用户需求。以下则对该方法进行说明:

为了便于理解本申请,以下首先对本申请实施例提供的播放器管道进行说明:

请参见图3,为本申请实施例提供的播放器管道的结构示意图。如图3所示,本申请实施例提供的播放器管道中包括音视频解析元件、字幕解析元件以及管道输出元件。

其中,音视频解析元件的构成及应用与图2中音视频解析元件相同,在此不再赘述。

字幕解析元件,与图2中字幕解析元件不同的是,图3所示例的字幕解析元件中还包括字幕同步模块,该字幕同步模块用于从字幕解析模块解析得到的字幕基本流数据中确定与播放管道当前播放的音视频基本流数据相匹配的字幕基本流数据,并将该相匹配的字幕基本流数据输出给管道输出元件中的通用字幕渲染模块。这里所说的“相匹配”是指:音视频基本流数据的显示时间戳处于字幕基本流数据的显示时间范围内,这里的显示时间范围通过字幕基本流数据本身的显示时间戳范围减去字幕渲染时间得到。

管道输出元件,与图2中管道输出元件不同的是:采用通用字幕渲染模块替代了图2中的字幕基本流注入模块,该通用字幕渲染模块包括通用字幕基本流注入模块和字幕渲染模块,其中,通用字幕基本流注入模块提供的字幕接口不仅支持文本格式的字幕,还支持图片格式的字幕,提供向字幕渲染模块注入字幕基本流数据的功能。字幕渲染模块则用于对通用字幕基本流注入模块注入的字幕基本流进行渲染。由此可见,本申请提供的通用字幕渲染模块不仅可以对文本格式的字幕基本流数据进行渲染,还可以对图片格式的字幕基本流数据进行渲染。

在一些实施例中,不论是否已将字幕数据的路径设置给播放器,播放器在初始化时即在播放器管道中创建音视频解析元件和管道输出元件,并在管道输出元件中加载通用字幕渲染模块。通过该种处理可以实现:在播放器播放音视频的过程中,若用户有播放字幕的需求,播放器也无需在播放器管道中重新创建管道输出元件,从而可以避免影响音视频基本码流的注入,影响音视频播放的流畅性。

在一些实施例中,用户可根据实际需求选择播放器是否支持动态加载字幕。例如,如图4a所示,为网页播放器设置菜单的示意图。用户在使用网页播放器观看视频之前,可以首先基于图4a所示例的设置菜单对网页播放器进行初始设置,如勾选“允许动态加载字幕”这一选项框,表示支持网页播放器动态加载字幕。基于此,用户则可以在网页播放器播放视频过程中的任意时刻选择加载字幕。

示例性的,如图4b所示,为无字幕状态下网页播放器的显示界面400的示意图。在网页播放器播放视频的过程中,用户可以通过控制装置,例如遥控器、鼠标等在网页播放器的显示界面上调出设置选项,如图4c所示,为网页播放器显示界面上设置选项的示意图。

基于图4c,用户可以通过控制装置触发图4c上的图标410,该图标410被触发后,则可以在网页播放器显示界面的上层显示图4d所示例的字幕选择界面。由图4d可见,用户可以选择加载本地字幕数据,也可以通过触发图标420选择加载网络字幕数据。

在用户选择好要加载的字幕数据之后,如图5所示流程,应用首先将用户选择的字幕数据的路径设置给播放器,播放器在接收到用户输入的指示显示字幕的控制指令确定需要显示字幕时,首先检查当前的播放器管道中音视频基本流数据是否已激活,这里的音视频基本流数据已激活是指音视频解析元件与管道输出元件已建立连接。如果是,则继续检查当前播放分组中是否已有字幕基本流数据,如果是,则停止字幕渲染,断开图3中字幕解析元件和管道输出元件中通用字幕渲染模块间的连接,并释放字幕解析元件。通过这一处理过程,可以实现在播放器当前播放有字幕的情况下,如果用户有新的字幕加载需求,则停止播放当前的字幕。

之后,则可以依据最新设置的字幕路径将需要加载的字幕加入至当前播放分组,并创建新的字幕解析元件,然后则可以通过新创建的字幕解析元件下载并解析外挂字幕。

字幕解析元件通过字幕解析模块解析得到字幕基本流数据后,由字幕同步模块根据播放器管道当前播放的音视频基本流数据的显示时间戳对字幕解析模块解析得到的字幕基本流数据做丢帧处理,并确定与播放器管道当前播放的音视频基本流数据相匹配的字幕基本流数据。下一步,则建立字幕解析元件与通用字幕渲染模块间的连接,以将该相匹配的字幕基本流数据发送给通用字幕渲染模块,以由通用字幕渲染模块对该字幕基本流数据进行注入和渲染,实现字幕显示。如图4e所示,为有字幕状态下网页播放器的显示界面400的示意图。

在图5所示流程中,如果检查出当前的播放器管道中音视频基本流数据还未激活,则可以等待音视频基本流数据激活。在这里,当应用已将待播放的音视频数据和待加载的字幕数据分入同一组,且已在播放器管道中创建管道输出元件并建立音视频解析元件和管道输出元件的连接时,确定音视频基本流数据已激活。此时,则可以在播放器管道中创建字幕解析元件。在创建字幕解析元件之后,则可以利用已创建的字幕解析元件实现字幕显示。

由上述实施例可见,通过响应于用户输入的指示显示字幕的控制指令,在确定当前的播放器管道中音视频基本流数据已激活以及当前播放分组中存在字幕基本流数据时,断开播放器管道中已有的字幕解析元件和通用字幕渲染元件之间的连接并释放已有的字幕解析元件,以及在播放器管道中创建新的字幕解析元件,可以实现在音视频播放过程中动态加载字幕。

尽管已描述了本申请的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。

显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1