基于直播的内容同步方法、装置、设备及存储介质与流程

文档序号:22506606发布日期:2020-10-13 09:44阅读:217来源:国知局
基于直播的内容同步方法、装置、设备及存储介质与流程

本公开涉及互联网技术领域,特别涉及一种基于直播的内容同步方法、装置、设备及存储介质。



背景技术:

目前,直播答题活动受到越来越多用户的喜爱,因此越来越的直播服务商开启了直播答题活动。直播服务商在开启直播答题活动时,直播用户在提出问题后,可以通过触发题目发布操作来指示观众用户的终端弹出题目和选项,以使观众用户在听到直播用户提出的问题后即可看到弹出的题目和选项,从而进行答题。

上述技术方案存在的问题是,由于观众用户观看到的直播内容通常会有一定的延迟,导致题目和答案弹出的时机与直播用户提出问题的时机存在误差,可能会打断观众用户的答题思路,从而影响用户体验。



技术实现要素:

本公开提供一种基于直播的内容同步方法、装置、设备及存储介质,用于解决观众用户观看到的直播内容通常会有一定的延迟,导致题目和答案弹出的时机与直播用户提出问题的时机存在误差,可能会打断观众用户的答题思路,从而影响用户体验的问题。本公开的技术方案如下:

根据本公开实施例的第一方面,提供一种基于直播的内容同步方法,应用于直播服务器,包括:

接收内容发布请求,所述内容发布请求用于指示在目标直播视频流播放到目标时间时发布目标内容;

响应于所述内容发布请求,向所述目标直播视频流的至少一个观众终端发送所述目标内容;

获取在所述目标时间添加有内容展示信令的所述目标直播视频流,所述内容展示信令用于指示所述至少一个观众终端在播放所述目标直播视频流的过程中解析出所述内容展示信令时展示所述目标内容。

在一种可选的实施方式中,所述获取在所述目标时间添加有内容展示信令的所述目标直播视频流,包括:

获取所述内容发布请求携带的终端标识、所述目标时间以及所述目标内容的内容标识;

生成携带有所述目标内容的内容标识的内容展示信令;

向所述终端标识指示的直播终端发送携带有所述目标时间和所述内容展示信令的信令添加请求,所述信令添加请求用于指示所述直播终端在所述目标直播视频流的所述目标时间添加所述内容展示信令;

接收所述直播终端发送的已添加所述内容展示信令的目标直播视频流。

在一种可选的实施方式中,所述获取在所述目标时间添加有内容展示信令的所述目标直播视频流,包括:

获取所述内容发布请求携带的所述目标时间以及所述目标内容的内容标识;

接收所述直播终端在直播过程中采集的所述目标直播视频流;

在所述目标直播视频流的所述目标时间添加所述内容展示信令,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述目标时间为第一目标时长,所述在所述目标直播视频流的所述目标时间添加所述内容展示信令,包括:

在所述第一目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述目标时间为第一目标时间点,所述在所述目标直播视频流的所述目标时间添加所述内容展示信令之后,所述方法还包括:

在所述第一目标时间点之后的第一目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述向所述目标直播视频流的至少一个观众终端发送所述目标内容之后,所述方法还包括:

向所述至少一个观众终端发送所述目标内容对应的第二目标时间点,所述第二目标时间点用于指示所述至少一个观众终端在未解析出所述内容展示信令时,在所述第二目标时间点展示所述目标内容。

在一种可选的实施方式中,所述接收内容发布请求之前,所述方法还包括:

响应于接收到至少一个观众终端发送的获取所述目标直播视频流的视频流获取请求,向所述至少一个观众终端发送所述目标直播视频流。

根据本公开实施例的第二方面,提供了一种基于直播的内容同步方法,应用于直播终端,所述方法包括:

向直播服务器发送在直播过程中采集的目标直播视频流;

向直播服务器发送携带有所述直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,所述内容发布请求用于指示在所述目标直播视频流播放到目标时间时发布目标内容;

接收所述直播服务器返回的携带有所述目标时间和内容展示信令的信令添加请求,所述内容展示信令由所述直播服务器根据所述内容发布请求生成;

根据所述信令添加请求,在所述目标直播视频流的所述目标时间添加所述内容展示信令,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述目标时间为第二目标时长,所述在所述目标直播视频流的所述目标时间添加所述内容展示信令,包括:

在所述第二目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述目标时间为第三目标时间点,所述在所述目标直播视频流的所述目标时间添加所述内容展示信令之后,所述方法还包括:

在所述第三目标时间点之后的第二目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

根据本公开实施例的第三面,提供一种基于直播的内容同步方法,应用于观众终端,所述方法包括:

向直播服务器发送获取目标直播视频流的视频流获取请求,播放接收到的目标直播视频流;

缓存所述直播服务器发送的目标内容;

响应于在播放所述目标直播视频流的过程中解析出内容展示信令,根据所述内容展示信令,展示所述目标内容,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述根据所述内容展示信令,展示所述目标内容,包括:

获取所述内容展示信令携带的所述目标内容的内容标识;

根据所述内容标识,从缓存的多个内容中获取所述目标内容;

展示所述目标内容。

根据本公开实施例的第四面,提供一种基于直播的内容同步方法,应用于直播系统,所述直播系统包括直播终端、直播服务器以及至少一个观众终端,所述方法包括:

所述直播终端将直播过程中采集的目标直播视频流发送至所述直播服务器;

所述直播服务器响应于所述直播终端发送的内容发布请求,向所述目标直播视频流的至少一个观众终端发送目标内容,所述内容发布请求用于指示在目标直播视频流播放到目标时间时发布所述目标内容;

所述直播服务器获取在所述目标时间添加有内容展示信令的所述目标直播视频流;

所述至少一个观众终端缓存所述目标内容,响应于播放从所述直播服务器获取到的所述目标直播视频流的过程中解析出所述内容展示信令,对所述目标内容进行展示。

在一种可选的实施方式中,所述直播服务器获取在所述目标时间添加有内容展示信令的所述目标直播视频流,包括:

所述直播服务器获取所述直播终端发送的内容发布请求携带的终端标识、所述目标时间以及所述目标内容的内容标识;

所述直播服务器生成携带有所述目标内容的内容标识的内容展示信令;

所述直播服务器向所述终端标识指示的所述直播终端发送携带有所述目标时间和所述内容展示信令的信令添加请求,所述信令添加请求用于指示所述直播终端在所述目标直播视频流的所述目标时间添加所述内容展示信令;

所述直播服务器接收所述直播终端发送的已添加所述内容展示信令的目标直播视频流。

在一种可选的实施方式中,所述直播服务器向所述终端标识指示的所述直播终端发送携带有所述目标时间和所述内容展示信令的信令添加请求之后,所述方法还包括:

所述直播终端接收所述直播服务器返回的携带有所述目标时间和内容展示信令的信令添加请求;

所述直播终端根据所述信令添加请求,在所述目标直播视频流的所述目标时间添加所述内容展示信令;

所述直播终端向所述直播服务器发送已添加所述内容展示信令的所述目标直播视频流。

在一种可选的实施方式中,所述目标时间为第二目标时长,所述直播终端根据所述信令添加请求,在所述目标直播视频流的所述目标时间添加所述内容展示信令,包括:

所述直播终端根据所述信令添加请求,在所述第二目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述目标时间为第三目标时间点,所述直播终端根据所述信令添加请求,在所述目标直播视频流的所述目标时间添加所述内容展示信令之后,所述方法还包括:

所述直播终端根据所述信令添加请求,在所述第三目标时间点之后的第二目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述直播服务器获取在所述目标时间添加有内容展示信令的所述目标直播视频流,包括:

所述直播服务器获取所述内容发布请求携带的所述目标时间以及所述目标内容的内容标识;

所述直播服务器接收所述直播终端在直播过程中采集的所述目标直播视频流;

所述直播服务器在所述目标直播视频流的所述目标时间添加所述内容展示信令,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述目标时间为第一目标时长,所述直播服务器在所述目标直播视频流的所述目标时间添加所述内容展示信令,包括:

所述直播服务器,在所述第一目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述目标时间为第一目标时间点,所述直播服务器在所述目标直播视频流的所述目标时间添加所述内容展示信令之后,所述方法还包括:

所述直播服务器,在所述第一目标时间点之后的第一目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述直播服务器响应于所述直播终端发送的内容发布请求,向所述目标直播视频流的至少一个观众终端发送目标内容之后,所述方法还包括:

所述直播服务器向所述至少一个观众终端发送所述目标内容对应的第二目标时间点,所述第二目标时间点用于指示所述至少一个观众终端在未解析出所述内容展示信令时,在所述第二目标时间点展示所述目标内容。

根据本公开实施例的第五方面,提供一种基于直播的内容同步装置,应用于直播服务器,包括:

第一请求接收单元,被配置为执行接收内容发布请求,所述内容发布请求用于指示在目标直播视频流播放到目标时间时发布目标内容;

内容发送单元,被配置为执行向所述目标直播视频流的至少一个观众终端发送所述目标内容;

视频流获取单元,被配置为执行获取在所述目标时间添加有内容展示信令的所述目标直播视频流,所述内容展示信令用于指示所述至少一个观众终端在播放所述目标直播视频流的过程中解析出所述内容展示信令时展示所述目标内容。

在一种可选的实施方式中,视频流获取单元,被配置为执行获取所述内容发布请求携带的终端标识、所述目标时间以及所述目标内容的内容标识;生成携带有所述目标内容的内容标识的内容展示信令;向所述终端标识指示的直播终端发送携带有所述目标时间和所述内容展示信令的信令添加请求,所述信令添加请求用于指示所述直播终端在所述目标直播视频流的所述目标时间添加所述内容展示信令;接收所述直播终端发送的已添加所述内容展示信令的目标直播视频流。

在一种可选的实施方式中,所述视频流获取单元,包括:

获取子单元,被配置为执行获取所述内容发布请求携带的所述目标时间以及所述目标内容的内容标识;

视频流接收子单元,被配置为执行接收所述直播终端在直播过程中采集的所述目标直播视频流;

信令添加子单元,被配置为执行在所述目标直播视频流的所述目标时间添加所述内容展示信令,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述目标时间为第一目标时长,所述信令添加子单元,被配置为执行在所述第一目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述目标时间为第一目标时间点,信令添加子单元,被配置为执行在所述第一目标时间点之后的第一目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述内容发送单元,还被配置为执行向所述至少一个观众终端发送所述目标内容对应的第二目标时间点,所述第二目标时间点用于指示所述至少一个观众终端在未解析出所述内容展示信令时,在所述第二目标时间点展示所述目标内容。

在一种可选的实施方式中,所述装置还包括:

第一视频流发送单元,被配置为执行响应于接收到至少一个观众终端发送的获取所述目标直播视频流的视频流获取请求,向所述至少一个观众终端发送所述目标直播视频流。

根据本公开实施例的第六方面,提供一种基于直播的内容同步装置,应用于直播终端,所述装置包括:

第二视频流发送单元,被配置为执行向直播服务器发送在直播过程中采集的目标直播视频流;

第一请求发送单元,被配置为执行向直播服务器发送携带有所述直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,所述内容发布请求用于指示在所述目标直播视频流播放到目标时间时发布目标内容;

第二请求接收单元,被配置为执行接收所述直播服务器返回的携带有所述目标时间和内容展示信令的信令添加请求,所述内容展示信令由所述直播服务器根据所述内容发布请求生成;

信令添加单元,被配置为执行根据所述信令添加请求,在所述目标直播视频流的所述目标时间添加所述内容展示信令,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述目标时间为第二目标时长,所述信令添加单元,被配置为执行在所述第二目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

在一种可选的实施方式中,所述目标时间为第三目标时间点,所述信令添加单元,被配置为执行在所述第三目标时间点之后的第二目标时长内,持续在所述目标直播视频流中添加所述内容展示信令。

根据本公开实施例的第七方面,提供一种基于直播的内容同步装置,应用于观众终端,所述装置包括:

第二请求发送单元,被配置为执行向直播服务器发送获取目标直播视频流的视频流获取请求,播放接收到的目标直播视频流;

内容缓存单元,被配置为执行缓存所述直播服务器发送的目标内容;

内容展示单元,被配置为执行响应于在播放所述目标直播视频流的过程中解析出内容展示信令,根据所述内容展示信令,展示所述目标内容,所述内容展示信令携带有所述目标内容的内容标识。

在一种可选的实施方式中,所述内容展示单元,被配置为执行获取所述内容展示信令携带的所述目标内容的内容标识;根据所述内容标识,从缓存的多个内容中获取所述目标内容;展示所述目标内容。

根据本公开实施例的第八方面,提供一种计算机设备,该计算机设备可以配置为服务器,该服务器包括:

一个或多个处理器;

用于存储该处理器可执行程序代码的存储器;

其中,该处理器被配置为执行该程序代码,以实现上述第一方面提供的基于直播的内容同步方法。

根据本公开实施例的第九方面,提供一种存储介质,当该存储介质中的程序代码由服务器的处理器执行时,使得服务器能够执行上述第一方面提供的基于直播的内容同步方法。

根据本公开实施例的第十方面,提供一种计算机设备,该计算机设备可以配置为终端,该终端包括:

一个或多个处理器;

用于存储该处理器可执行程序代码的存储器;

其中,该处理器被配置为执行该程序代码,以实现上述第二方面提供的基于直播的内容同步方法;或者,实现上述第三方面提供的基于直播的内容同步方法。

根据本公开实施例的第十一方面,提供一种存储介质,当该存储介质中的程序代码由终端的处理器执行时,使得终端能够执行上述第二方面提供的基于直播的内容同步方法;或者,实现上述第三方面提供的基于直播的内容同步方法。

根据本公开实施例的第十二方面,提供一种应用程序产品,该应用程序产品存储有一条或多条程序代码,该一条或多条程序代码可以由服务器或终端的处理器执行,以完成上述各方面或各方面的可选实施方式提供的基于直播的内容同步方法。

本公开实施例提供的技术方案至少带来以下有益效果:

通过响应用于指示在目标直播视频流播放到目标时间时发布目标内容的内容发布请求,向目标直播视频流的至少一个观众终端发送目标内容,以及获取在目标时间添加有内容展示信令的目标直播视频流,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。

图1是根据一示例性实施例示出的一种基于直播的内容同步方法的实施环境示意图。

图2是根据一示例性实施例示出的一种基于直播的内容同步方法的流程图。

图3是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图。

图4是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图。

图5是根据一示例性实施例示出的一种基于直播的内容同步方法的交互流程图。

图6是根据一示例性实施例示出的另一种基于直播的内容同步方法的交互流程图。

图7是根据一示例性实施例示出的一种显示答题弹窗控件的示意图。

图8是根据一示例性实施例示出的另一种显示答题弹窗控件的示意图。

图9是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图。

图10是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图。

图11是根据一示例性实施例示出的主播终端、导播终端、源站服务器、直播伴侣服务器、内容发布服务器以及至少一个观众终端之间交互结构图。

图12是根据一示例性实施例示出的一种基于直播的内容同步装置框图。

图13是根据一示例性实施例示出的另一种基于直播的内容同步装置框图。

图14是根据一示例性实施例示出的另一种基于直播的内容同步装置框图。

图15是根据一示例性实施例示出的一种终端框图。

图16是根据一示例性实施例示出的一种直播服务器的框图。

具体实施方式

为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。

需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子

本公开所涉及的用户信息可以为经用户授权或者经过各方充分授权的信息。

下面介绍一下本公开的涉及的一些技术:

avc(audiovideocoding,音视频编解码)技术是指音视频数据通过特定的算法和格式,把音视频数据编码成一份数据以便于在互联网上传递,或者把一份数据解码成音视频数据以便在终端进行播放。

aacs(advancedaudiocodingservice,高级音频编解码服务)技术是指在通过avc技术进行音视频数据编码的时候,插入特定格式(如flv)的aac(advancedaudiocoding,高级音频编码)编码的数据,终端在avc解码音视频数据进行播放的时候,可以解码出aac编码的特定格式的数据,然后实现aac信令与音视频的数据达到对齐的效果。可以通过该技术判断音视频是否播放到指定的时刻(即插入aac数据的时刻)。

lcs(longconnectionservice,长链接服务)技术用于后端把指令下发给终端执行。lcs系统会在终端和远端服务器之间建立一个socket(套接字)通道,传输的指令通过protobuf(protocolbuffer,协议缓冲区)协议处理,以二进制的形式传输给终端,终端通过protobuf协议解析出指令并执行指令操作。

图1是根据一示例性实施例示出的一种基于直播的内容同步方法的实施环境示意图。参见图1,该实施环境具体包括:终端101和直播服务器102。

终端101可以为智能手机、智能手表、台式电脑、手提电脑、mp3播放器、mp4播放器和膝上型便携计算机等设备中的至少一种。终端101可以通过无线网络或有线网络与直播服务器102相连。终端101上可以安装并运行有客户端,该客户端可以用于登录直播用户的账号或者观众用户的账号,若该客户端登录有直播用户的账号,则该终端101可以用于对直播过程中实时采集到的直播视频流进行编码,然后将编码后的直播视频流上传至直播服务器102;若该客户端登录有观众用户的账号,则该终端101可以用于从直播服务器102获取直播视频流,然后解码获取到的直播视频流并渲染播放。或者,终端101上可以安装并运行有用于直播的客户端或者用于观看直播的客户端,直播用户可以通过用于直播的客户端对直播过程中实时采集到的直播视频流进行编码,然后将编码后的直播视频流上传至直播服务器102;观众用户可以通过用于观看直播的客户端从直播服务器102获取直播视频流,然后解码获取到的直播视频流并渲染播放。

终端101可以泛指多个终端中的一个,本实施例仅以终端101来举例说明。本领域技术人员可以知晓,上述终端的数量可以更多或更少。比如上述终端101可以仅为几个,或者上述终端101为几十个或几百个,或者更多数量,本公开实施例对终端101的数量和设备类型均不加以限定。

直播服务器102可以为一台服务器、多台服务器、云计算平台和虚拟化中心中的至少一种。直播服务器102可以通过无线网络或有线网络与终端101和其他终端相连,直播服务器102可以接收直播终端103发送的直播视频流,还可以向直播终端103发送信令添加请求。直播服务器102还可以向观众终端101发送目标内容和直播视频流。可选地,上述直播服务器102的数量可以更多或更少,本公开实施例对此不加以限定。当然,直播服务器102还可以包括其他功能服务器,以便提供更全面且多样化的服务。

在一种可选的实施方式中,该基于直播的内容同步方法可以应用于直播答题活动场景中,基于观众终端、直播终端以及直播服务器之间的交互来实现该基于直播的内容同步方法。直播答题活动指的是,直播用户在直播过程中会不断地提出问题,观看该直播的观众用户可以根据终端弹出的题目和选项进行答题,直播服务商可以根据观众用户的答题情况为观众用户发放奖励。通过直播答题活动,可以增加用户使用直播应用程序的频率,还可以在直播答题过程中进行营销活动。

图2是根据一示例性实施例示出的一种基于直播的内容同步方法的流程图,参见图2,应用于直播服务器,该方法具体步骤包括:

在步骤s201中,直播服务器接收内容发布请求,该内容发布请求用于指示在目标直播视频流播放到目标时间时发布目标内容。

在步骤s202中,响应于该内容发布请求,直播服务器向该目标直播视频流的至少一个观众终端发送该目标内容。

在步骤s203中,直播服务器获取在该目标时间添加有内容展示信令的该目标直播视频流,该内容展示信令用于指示该至少一个观众终端在播放该目标直播视频流的过程中解析出该内容展示信令时展示该目标内容。

本公开实施例提供的方案,通过响应用于指示在目标直播视频流播放到目标时间时发布目标内容的内容发布请求,向目标直播视频流的至少一个观众终端发送目标内容,以及获取在目标时间添加有内容展示信令的目标直播视频流,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该获取在该目标时间添加有内容展示信令的该目标直播视频流,包括:

获取该内容发布请求携带的终端标识、该目标时间以及该目标内容的内容标识;

生成携带有该目标内容的内容标识的内容展示信令;

向该终端标识指示的直播终端发送携带有该目标时间和该内容展示信令的信令添加请求,该信令添加请求用于指示该直播终端在该目标直播视频流的该目标时间添加该内容展示信令;

接收该直播终端发送的已添加该内容展示信令的目标直播视频流。

在一种可选的实施方式中,该获取在该目标时间添加有内容展示信令的该目标直播视频流,包括:

获取该内容发布请求携带的该目标时间以及该目标内容的内容标识;

接收该直播终端在直播过程中采集的该目标直播视频流;

在该目标直播视频流的该目标时间添加该内容展示信令,该内容展示信令携带有该目标内容的内容标识。

在一种可选的实施方式中,该目标时间为第一目标时长,该在该目标直播视频流的该目标时间添加该内容展示信令,包括:

在该第一目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该目标时间为第一目标时间点,该在该目标直播视频流的该目标时间添加该内容展示信令之后,该方法还包括:

在该第一目标时间点之后的第一目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该向该目标直播视频流的至少一个观众终端发送该目标内容之后,该方法还包括:

向该至少一个观众终端发送该目标内容对应的第二目标时间点,该第二目标时间点用于指示该至少一个观众终端在未解析出该内容展示信令时,在该第二目标时间点展示该目标内容。

在一种可选的实施方式中,该接收内容发布请求之前,该方法还包括:

响应于接收到至少一个观众终端发送的获取该目标直播视频流的视频流获取请求,向该至少一个观众终端发送该目标直播视频流。

图3是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图,参见图3,应用于直播终端,该方法具体步骤包括:

在步骤s301中,直播终端向直播服务器发送在直播过程中采集的目标直播视频流。

在步骤s302中,直播终端向直播服务器发送携带有该直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,该内容发布请求用于指示在该目标直播视频流播放到目标时间时发布目标内容。

在步骤s303中,直播终端接收该直播服务器返回的携带有该目标时间和内容展示信令的信令添加请求,该内容展示信令由该直播服务器根据该内容发布请求生成。

在步骤s304中,直播终端根据该信令添加请求,在该目标直播视频流的该目标时间添加该内容展示信令,该内容展示信令携带有该目标内容的内容标识。

本公开实施例提供的方案,通过向直播服务器发送直播过程中采集的目标直播视频流,使得至少一个观众终端可以通过直播服务器获取该直播视频流,再通过向直播服务器发送携带有直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,然后接收直播服务器根据内容发布请求生成的,携带有目标时间和内容展示信令的信令添加请求,基于该信令添加请求该目标直播视频流的目标时间,添加携带有目标内容的内容标识的内容展示信令,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该目标时间为第二目标时长,该在该目标直播视频流的该目标时间添加该内容展示信令,包括:

在该第二目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该目标时间为第三目标时间点,该在该目标直播视频流的该目标时间添加该内容展示信令之后,该方法还包括:

在该第三目标时间点之后的第二目标时长内,持续在该目标直播视频流中添加该内容展示信令。

图4是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图,参见图4,应用于观众终端,该方法具体步骤包括:

在步骤s401中,观众终端向直播服务器发送获取目标直播视频流的视频流获取请求,播放接收到的目标直播视频流。

在步骤s402中,观众终端缓存所述直播服务器发送的目标内容。

在步骤s403中,响应于在播放所述目标直播视频流的过程中解析出内容展示信令,观众终端根据所述内容展示信令,展示所述目标内容,所述内容展示信令携带有所述目标内容的内容标识。

本公开实施例提供的方案,通过缓存直播服务器发送的目标内容,以及播放从直播服务器获取的目标直播视频流,使得该观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该根据该内容展示信令,展示该目标内容,包括:

获取该内容展示信令携带的该目标内容的内容标识;

根据该内容标识,从缓存的多个内容中获取该目标内容;

展示该目标内容。

图5是根据一示例性实施例示出的一种基于直播的内容同步方法的交互流程图,参见图5,应用于直播系统,该直播系统包括直播终端、直播服务器以及至少一个观众终端,该方法具体步骤包括:

在步骤s501中,该直播终端将直播过程中采集的目标直播视频流发送至该直播服务器;

在步骤s502中,该直播服务器响应于该直播终端发送的内容发布请求,向该目标直播视频流的至少一个观众终端发送目标内容,该内容发布请求用于指示在目标直播视频流播放到目标时间时发布该目标内容;

在步骤s503中,该直播服务器获取在该目标时间添加有内容展示信令的该目标直播视频流;

在步骤s504中,该至少一个观众终端缓存该目标内容,响应于播放从该直播服务器获取到的该目标直播视频流的过程中解析出该内容展示信令,对该目标内容进行展示。

本公开实施例提供的方案,通过直播终端将直播过程中采集的目标直播视频流发送至该直播服务器,由直播服务器响应用于指示在目标直播视频流播放到目标时间时发布目标内容的内容发布请求,向目标直播视频流的至少一个观众终端发送目标内容,以及获取直播终端发送的在目标时间添加有内容展示信令的目标直播视频流,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该直播服务器获取在该目标时间添加有内容展示信令的该目标直播视频流,包括:

该直播服务器获取该直播终端发送的内容发布请求携带的终端标识、该目标时间以及该目标内容的内容标识;

该直播服务器生成携带有该目标内容的内容标识的内容展示信令;

该直播服务器向该终端标识指示的该直播终端发送携带有该目标时间和该内容展示信令的信令添加请求,该信令添加请求用于指示该直播终端在该目标直播视频流的该目标时间添加该内容展示信令;

该直播服务器接收该直播终端发送的已添加该内容展示信令的目标直播视频流。

在一种可选的实施方式中,该直播服务器向该终端标识指示的该直播终端发送携带有该目标时间和该内容展示信令的信令添加请求之后,该方法还包括:

该直播终端接收该直播服务器返回的携带有该目标时间和内容展示信令的信令添加请求;

该直播终端根据该信令添加请求,在该目标直播视频流的该目标时间添加该内容展示信令;

该直播终端向该直播服务器发送已添加该内容展示信令的该目标直播视频流。

在一种可选的实施方式中,该目标时间为第二目标时长,该直播终端根据该信令添加请求,在该目标直播视频流的该目标时间添加该内容展示信令,包括:

该直播终端根据该信令添加请求,在该第二目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该目标时间为第三目标时间点,该直播终端根据该信令添加请求,在该目标直播视频流的该目标时间添加该内容展示信令之后,该方法还包括:

该直播终端根据该信令添加请求,在该第三目标时间点之后的第二目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该直播服务器获取在该目标时间添加有内容展示信令的该目标直播视频流,包括:

该直播服务器获取该内容发布请求携带的该目标时间以及该目标内容的内容标识;

该直播服务器接收该直播终端在直播过程中采集的该目标直播视频流;

该直播服务器在该目标直播视频流的该目标时间添加该内容展示信令,该内容展示信令携带有该目标内容的内容标识。

在一种可选的实施方式中,该目标时间为第一目标时长,该直播服务器在该目标直播视频流的该目标时间添加该内容展示信令,包括:

该直播服务器,在该第一目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该目标时间为第一目标时间点,该直播服务器在该目标直播视频流的该目标时间添加该内容展示信令之后,该方法还包括:

该直播服务器,在该第一目标时间点之后的第一目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该直播服务器响应于该直播终端发送的内容发布请求,向该目标直播视频流的至少一个观众终端发送目标内容之后,该方法还包括:

该直播服务器向该至少一个观众终端发送该目标内容对应的第二目标时间点,该第二目标时间点用于指示该至少一个观众终端在未解析出该内容展示信令时,在该第二目标时间点展示该目标内容。

上述图2至图5所示仅为本公开的基本流程,下面基于一种具体实施方式,来对本公开提供的方案进行进一步阐述,图6是根据一示例性实施例示出的另一种基于直播的内容同步方法的交互流程图。以应用于直播系统为例,该直播系统包括直播终端、直播服务器以及至少一个观众终端,参见图6,该方法包括:

在步骤s601中,直播终端将直播过程中采集的目标直播视频流发送至直播服务器。

在本公开实施例中,直播用户可以通过音视频采集设备在直播过程中采集音视频数据,然后通过直播终端对采集到的数据进行编码,以直播视频流的形式发送至直播服务器。

例如,以直播答题场景为例,直播用户,即主播,在直播时通过摄像机在直播现场进行录制,直播终端对录制的直播视频进行avc编码,然后将编码后的直播视频上传到直播服务器。

需要说明的是,对于任一直播终端,该直播终端可以向直播服务器发送直播请求,由该直播服务器根据该直播请求为该直播终端提供直播所需的资源。直播终端通过该直播服务器建立的视频流传输通道,将在直播过程中采集的目标直播视频流发送至该直播服务器。直播服务器可以同时接收多个直播终端上传的直播视频流,直播服务器可以将接收到的直播视频流按照发送该直播视频流的直播终端的终端标识进行区分。

在步骤s602中,任一观众终端向直播服务器发送获取目标直播视频流的视频流获取请求,播放接收到的目标直播视频流。

在本公开实施例中,从该直播服务器请求该目标直播视频流的观众终端,即正在观看该直播的观众用户使用的终端,可以称为该目标直播视频流的观众终端,该目标直播视频流的观众终端可以为至少一个。直播服务器可以在观众终端请求直播视频流时,建立直播视频流与观众终端的对应关系。

在步骤s603中,直播终端向直播服务器发送携带有该直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,该内容发布请求用于指示在目标直播视频流播放到目标时间时发布目标内容。

需要说明的是,在直播过程中,如果直播终端检测到内容发布操作,则直播终端可以生成内容发布请求,该内容发布请求可以携带有该直播终端的终端标识、目标内容的内容标识以及发布目标内容的目标时间。在直播过程中,直播终端可以向直播服务器发送至少一个携带有不同内容标识和不同目标时间的内容发布请求,以指示在目标直播视频流播放到不同时间时发布不同的内容。

例如,继续以上述直播答题场景为例,直播用户在直播过程中念出题目后,观看该直播的观众用户的终端大约在4到6秒后才会播放直播用户念出题目的直播视频流,此时需要在终端发布题目内容和选项内容。直播用户可以通过发题操作来触发生成题目发布请求,则触发题目发布操作时直播视频流录制的时刻,如直播用户说出“请听题”这一时刻,即是该直播视频流播放时显示题目内容和选项内容的目标时间,或者在直播用户说出“请听题”之后的1秒到2秒的时间段内,即是该直播视频流播放时显示题目内容和选项内容的目标时间。直播终端可以向服务器发送携带有该直播终端的终端标识、触发题目发布操作的目标时间以及题目标识的内容发布请求。

在步骤s604中,直播服务器接收该内容发布请求。

在本公开实施例中,直播服务器可以响应于接收到的内容发布请求,执行步骤s604,向目标直播视频流的至少一个观众终端发送目标内容。

在步骤s605中,直播服务器向目标直播视频流的至少一个观众终端发送目标内容。

在本公开实施例中,直播服务器在接收到直播终端发送的内容发布请求后,可以根据该内容发布请求携带的终端标识,确定该直播终端发送的目标直播视频流。然后基于上述直播视频流与观众终端的对应关系,向该目标直播视频流的至少一个观众终端发送目标内容。该目标内容可以为待发布的题目、选项、答案以及排名信息等。

例如,继续以上述直播答题场景为例,有100个用户观看主播a的直播,也即直播答题活动,则直播服务器中存储有该100个用户所使用观众终端的终端标识与主播a的直播视频流的视频流标识的对应关系,直播服务器可以根据观众终端的终端标识向该100个用户的观众终端发送题目和选项等。

需要说明的是,直播服务器在向上述至少一个观众终端发送目标内容之前,该直播服务器可以对接收到的目标直播视频流进行编码,如压缩或者更改视频格式等,然后直播服务器可以响应于接收到该至少一个观众终端分别发送的用于获取该目标直播视频流的视频流获取请求,向该至少一个观众终端发送该目标直播视频流。

在步骤s606中,直播服务器获取在目标时间添加有内容展示信令的目标直播视频流。

在本公开实施例中,内容展示信令可以由直播服务器添加到目标直播视频流中,也可以由直播终端添加到目标直播视频流中。

在一种可选的实现方式中,内容展示信令由直播终端添加到目标直播视频流中时,直播服务器获取在目标时间添加有内容展示信令的目标直播视频流的步骤为:直播服务器能够获取内容发布请求携带的终端标识、目标时间以及目标内容的内容标识,然后生成携带有目标内容的内容标识的内容展示信令。直播服务器能够向终端标识指示的直播终端发送携带有该目标时间和内容展示信令的信令添加请求,该信令添加请求用于指示直播终端在目标直播视频流的目标时间添加内容展示信令。直播服务器可以接收直播终端发送的已添加内容展示信令的目标直播视频流。通过由直播服务器生成内容展示信令,然后由直播终端进行内容展示信令的添加,使得直播终端可以在对采集到的目标直播视频流进行编码时,即可完成内容展示信令的添加,添加效率高。

例如,继续以上述直播答题场景为例,直播服务器在接收到直播终端在“请听题”这一时间点发送的题目发布请求后,可以生成携带有题目编号的aac信令,然后将该aac信令和“请听题”这一时间点添加到信令添加请求中,根据终端标识将该信令添加请求发送至该直播终端。

在一种可选的实现方式中,内容展示信令由直播服务器添加到目标直播视频流中时,直播服务器获取在目标时间添加有内容展示信令的目标直播视频流的步骤为:服务器能够获取内容发布请求携带的目标时间以及目标内容的内容标识,然后接收直播终端在直播过程中采集的目标直播视频流。服务器能够在该目标直播视频流的目标时间添加内容展示信令,该内容展示信令携带有目标内容的内容标识。通过由直播服务器在目标直播视频流的目标时间添加内容展示信令,减少了向直播终端发送信令添加请求的步骤,简化了整体流程,提高了添加效率。

需要说明的是,该目标时间可以为时间点,也可以为时间段。当该目标时间为时间段时,该目标时间为第一目标时长,该第一目标时长可以为100毫秒、200毫秒等。直播服务器能够在第一目标时长内,持续在目标直播视频流中添加内容展示信令。当该目标时间为时间点时,该目标时间为第一目标时间点,则直播服务器在目标直播视频流的第一目标时间点添加内容展示信令之后,还能够在该第一目标时间点之后的第一目标时长内,持续在目标直播视频流中添加内容展示信令。通过持续添加内容展示信令,可以避免由于网络卡顿等原因导致第一目标时间点对应的音视频帧丢失导致内容展示信令丢失的问题,可以使该内容展示信令能够起作用,增加了该内容展示信令的鲁棒性。

同理,由直播终端在目标直播视频流的目标时间添加内容展示信令时,该目标时间可以为时间点,也可以为时间段。当该目标时间为时间段时,该目标时间为第二目标时长,该第二目标时长可以为100毫秒、200毫秒等。直播终端能够在第二目标时长内,持续在目标直播视频流中添加内容展示信令。当该目标时间为时间点时,该目标时间为第三目标时间点,则直播服务器在目标直播视频流的第三目标时间点添加内容展示信令之后,还能够在该第三目标时间点之后的第二目标时长内,持续在目标直播视频流中添加内容展示信令。通过持续添加内容展示信令,可以避免由于网络卡顿等原因导致第三目标时间点对应的音视频帧丢失导致内容展示信令丢失的问题,可以使该内容展示信令能够起作用,增加了该内容展示信令的鲁棒性。

需要说明的是,直播服务器还能够向上述至少一个观众终端发送目标内容对应的第二目标时间点,该第二目标时间点用于指示该至少一个观众终端在未解析出内容展示信令时,在该第二目标时间点展示该目标内容。由于设置了第二目标时间点,则可以在观众终端的网络不佳获取不到目标直播视频流时,基于该第二目标时间点来展示题目和选项,使观众用户在网络不好的情况下也能参与答题,给观众用户带来较好的体验。

在步骤s607中,至少一个观众终端缓存目标内容,响应于在播放从直播服务器获取到的目标直播视频流的过程中解析出内容展示信令,根据该内容展示信令,展示目标内容。

在本公开实施例中,对于该至少一个观众终端中的任一观众终端,该观众终端在接收到直播终端发送的目标内容后,可以将该目标内容缓存在该观众终端的存储空间中。该观众终端还可以不断的从直播服务器获取目标直播视频流,并对获取到的直播视频流进行解码,对解码得到的音视频进行渲染播放。

需要说明的是,观众终端在对目标直播视频流进行解码时,如果目标直播视频流中添加了内容展示信令,则该观众终端还可以从该目标直播视频流中解析得到内容展示信令。观众终端基于解析出的内容展示信令,可以根据该内容展示信令中携带的内容标识,获取缓存的目标内容,对该目标内容进行展示。

例如,继续以上述直播答题场景为例,观众终端从直播服务器获取直播视频流,通过avc技术对获取到的直播视频流进行解码,观众终端对解码得到的直播视频流进行渲染后播放。如果观众终端在对直播视频流进行解码时还解析得到了直播终端添加的aac信令,则观众终端可以根据该aac信令获取缓存的题目和选项。

需要说明的是,观众终端可以将目标内容添加到展示控件中进行展示,该展示控件可以设置有展示时间,在展示时间结束时,终端可以取消展示该展示控件,并删除缓存的目标内容。其中,该展示时间可以为5秒、10秒以及15秒等,本公开对此不进行限制。

例如,继续以上述直播答题场景为例,观众终端在播放直播视频流时,当播放到“请听题”这一时间点的直播视频流时,终端解码时解析得到用于展示题目和选项的aac信令,此时观众终端将缓存的展示题目和选项填充到答题弹框控件中。然后观众终端在渲染播放“请听题”时,控制答题弹框控件弹出。参见图7所示,图7是根据一示例性实施例示出的一种显示答题弹窗控件的示意图。在图7中,音视频播放界面上悬浮显示有答题弹窗控件,该答题弹窗控件显示有题目x、选项1、选项2以及选项3。该答题弹窗控件还显示有展示时间,该答题弹窗控件会在展示时间为0时取消显示。

需要说明的是,如果观众终端还接收到了直播服务器发送的目标内容对应的第二目标时间点,则观众终端可以在未解析到内容展示信令时,在该第二目标时间点展示目标内容。

例如,继续以上述直播答题场景为例,观众终端在播放直播视频流时,若当前时间已经达到了第二目标时间点,但是没有解析到用于展示题目和选项的aac信令,则观众终端在该第二目标时间点将缓存的展示题目和选项填充到答题弹框控件中,控制该答题弹框控件弹出。参见图8所示,图8是根据一示例性实施例示出的另一种显示答题弹窗控件的示意图。在图8中,观众终端当前网络不佳,导致获取的直播视频流有缺失,直播播放卡顿,画面显示斑马线。此时,观众终端在当前时间达到第二目标时间点时,在播放界面上悬浮显示答题弹窗控件,该答题弹窗控件显示有题目y、选项1、选项2以及选项3。

为了使上述步骤s601至步骤s607描述的基于直播的内容同步方法的流程更清晰,可以参见图9所示,图9是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图。在图9中,首先,直播用户可以通过直播终端进行直播视频流的采集,将编码后的目标直播视频流发送至直播服务器。然后,直播服务器将接收到的直播视频流发送至至少一个观众终端。然后,至少一个观众终端对接收到的目标直播视频流进行解码,渲染播放解码后的目标直播视频流。在直播过程中,直播用户通过直播终端向直播服务器发送内容发布请求,则直播服务器直播终端发送信令添加请求,同时向至少一个观众终端发送目标内容。直播终端在接收到信令添加请求后,在目标直播视频流中添加内容展示信令。

需要说明的是,上述步骤s601至步骤s607是本公开实施例提供的基于直播的内容同步方法的可选实施方式,相应的,该基于直播的内容同步方法还可以通过其他方式实现。例如,直播服务器向至少一个观众终端发送目标内容时,可以一次性将所有需要用到的内容发送至该至少一个观众终端中。然后由观众终端根据该内容标识从缓存的内容中获取对应的目标内容,然后对目标内容进行展示。

本公开实施例提供的方案,通过响应用于指示在目标直播视频流播放到目标时间时发布目标内容的内容发布请求,向目标直播视频流的至少一个观众终端发送目标内容,以及获取在目标时间添加有内容展示信令的目标直播视频流,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验

上述所有可选技术方案,可以采用任意结合形成本公开的可选实施例,在此不再一一赘述。

上述图6是以应用于图1所示的实施环境为例进行说明,可选的,在直播过程中,上述直播终端所执行的功能还可以通过主播终端和与主播终端关联的导播终端来实现。其中,主播终端登录有直播用户的账户,用于采集直播视频流,导播终端登录有与该直播用户的账户相关联的导播用户的账户,用于发送内容发布请求。上述直播服务器可以包括源站服务器、直播伴侣服务器以及内容发布服务器,该源站服务器用于接收和发送直播视频流,直播伴侣服务器用于为直播用户提供直播相关的后台服务,内容发布服务器用于向至少一个观众终端发送目标内容。下面基于上述主播终端、导播终端、源站服务器、直播伴侣服务器、内容发布服务器以及至少一个观众终端之间的交互进行说明。图10是根据一示例性实施例示出的另一种基于直播的内容同步方法的流程图。参见图10,该方法包括:

在步骤s1001中,主播终端将直播过程中采集的目标直播视频流发送至源站服务器。

需要说明的是,该源站服务器可以为内容分发网络的源站服务器,用于接收主播终端上传的目标直播视频流,然后将该目标直播视频流发送至内容分发网络的各个节点,由该目标直播视频流的至少一个观众终端从该内容分发网络的节点获取该直播视频流。本步骤可以参见上述步骤s301,在此不再赘述。

在步骤s1002中,导播终端向内容发布服务器发送内容发布请求,该内容发布请求用于指示在目标直播视频流播放到目标时间时发布目标内容。

需要说明的是,在直播过程中,内容发布请求可以由导播用户在直播用户说出内容发布口令,如“请听题”时,触发内容发布操作,通过导播终端向内容发布服务器发送内容发布请求。本步骤可以参见上述步骤s303,在此不再赘述。

在步骤s1003中,内容发布服务器响应于导播终端发送的内容发布请求,向直播伴侣服务器发送信令添加指示。

其中,该信令添加指示携带有主播终端的终端标识,用于指示直播伴侣服务器向直播终端发送信令添加请求。

在步骤s1004中,直播伴侣服务器响应于信令添加指示,向主播终端发送信令添加请求。

直播伴侣服务器可以生成内容展示信令,然后将携带内容展示信令的信令添加请求发送至主播终端。本步骤可以参见上述步骤s306,在此不再赘述。

在步骤s1005中,主播终端响应于信令添加请求,在目标直播视频流的目标时间添加携带有目标内容的内容标识的内容展示信令。

本步骤可以参见上述步骤s306,在此不再赘述。

在步骤s1006中,内容发布服务器响应于导播终端发送的内容发布请求,向目标直播视频流的至少一个观众终端发送目标内容。

本步骤可以参见上述步骤s305,在此不再赘述。

在步骤s1007中,至少一个观众终端缓存目标内容,响应于播放从源站服务器获取到的目标直播视频流的过程中解析出内容展示信令,对目标内容进行展示。

本步骤可以参见上述步骤s307,在此不再赘述。

需要说明的是,图11是根据一示例性实施例示出的主播终端、导播终端、源站服务器、直播伴侣服务器、内容发布服务器以及至少一个观众终端之间交互结构图。参见图11所示。

本公开实施例提供的方案,通过指示主播终端在目标直播视频流目标添加携带有目标内容的内容标识的内容展示信令,使得观众终端在播放从源站服务器获取的直播视频流时,可以在播放到目标时间时根据该内容展示信令对目标内容进行展示,从而可以保证直播视频流的内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

图12是根据一示例性实施例示出的一种基于直播的内容同步装置框图。参照图12,应用于直播服务器,该装置包括:第一请求接收单元1201、内容发送单元1202以及视频流获取单元1203。

第一请求接收单元1201,被配置为执行接收内容发布请求,该内容发布请求用于指示在目标直播视频流播放到目标时间时发布目标内容;

内容发送单元1202,被配置为执行向该目标直播视频流的至少一个观众终端发送该目标内容;

视频流获取单元1203,被配置为执行获取在该目标时间添加有内容展示信令的该目标直播视频流,该内容展示信令用于指示该至少一个观众终端在播放该目标直播视频流的过程中解析出该内容展示信令时展示该目标内容。

在本公开实施例中,通过响应用于指示在目标直播视频流播放到目标时间时发布目标内容的内容发布请求,向目标直播视频流的至少一个观众终端发送目标内容,以及获取在目标时间添加有内容展示信令的目标直播视频流,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该视频流获取单元1203,被配置为执行获取该内容发布请求携带的终端标识、该目标时间以及该目标内容的内容标识;生成携带有该目标内容的内容标识的内容展示信令;向该终端标识指示的直播终端发送携带有该目标时间和该内容展示信令的信令添加请求,该信令添加请求用于指示该直播终端在该目标直播视频流的该目标时间添加该内容展示信令;接收该直播终端发送的已添加该内容展示信令的目标直播视频流。

在一种可选的实施方式中,该视频流获取单元1203,包括:

获取子单元12031,被配置为执行获取该内容发布请求携带的该目标时间以及该目标内容的内容标识;

视频流接收子单元12032,被配置为执行接收该直播终端在直播过程中采集的该目标直播视频流;

信令添加子单元12033,被配置为执行在该目标直播视频流的该目标时间添加该内容展示信令,该内容展示信令携带有该目标内容的内容标识。

在一种可选的实施方式中,该目标时间为第一目标时长,该信令添加子单元12033,被配置为执行在该第一目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该目标时间为第一目标时间点,信令添加子单元12033,被配置为执行在该第一目标时间点之后的第一目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该内容发送单元1202,还被配置为执行向该至少一个观众终端发送该目标内容对应的第二目标时间点,该第二目标时间点用于指示该至少一个观众终端在未解析出该内容展示信令时,在该第二目标时间点展示该目标内容。

在一种可选的实施方式中,该装置还包括:

第一视频流发送单元1204,被配置为执行响应于接收到至少一个观众终端发送的获取该目标直播视频流的视频流获取请求,向该至少一个观众终端发送该目标直播视频流。

图13是根据一示例性实施例示出的另一种基于直播的内容同步装置框图。参照图13,应用于直播终端,该装置包括:第二视频流发送单元1301、第一请求发送单元1302、第二请求接收单元1303以及信令添加单元1304。

第二视频流发送单元1301,被配置为执行向直播服务器发送在直播过程中采集的目标直播视频流;

第一请求发送单元1302,被配置为执行向直播服务器发送携带有该直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,该内容发布请求用于指示在该目标直播视频流播放到目标时间时发布目标内容;

第二请求接收单元1303,被配置为执行接收该直播服务器返回的携带有该目标时间和内容展示信令的信令添加请求,该内容展示信令由该直播服务器根据该内容发布请求生成;

信令添加单元1304,被配置为执行根据该信令添加请求,在该目标直播视频流的该目标时间添加该内容展示信令,该内容展示信令携带有该目标内容的内容标识。

在本公开实施例中,通过向直播服务器发送直播过程中采集的目标直播视频流,使得至少一个观众终端可以通过直播服务器获取该直播视频流,再通过向直播服务器发送携带有直播终端的终端标识、目标时间以及目标内容的内容标识的内容发布请求,然后接收直播服务器根据内容发布请求生成的,携带有目标时间和内容展示信令的信令添加请求,基于该信令添加请求该目标直播视频流的目标时间,添加携带有目标内容的内容标识的内容展示信令,使得该至少一个观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该目标时间为第二目标时长,该信令添加单元1304,被配置为执行在该第二目标时长内,持续在该目标直播视频流中添加该内容展示信令。

在一种可选的实施方式中,该目标时间为第三目标时间点,该信令添加单元1304,被配置为执行在该第三目标时间点之后的第二目标时长内,持续在该目标直播视频流中添加该内容展示信令。

图14是根据一示例性实施例示出的另一种基于直播的内容同步装置框图。参照图14,应用于观众终端,该装置包括:第二请求发送单元1401、内容缓存单元1402以及内容展示单元1403。

第二请求发送单元1401,被配置为执行向直播服务器发送获取目标直播视频流的视频流获取请求,播放接收到的目标直播视频流;

内容缓存单元1402,被配置为执行缓存该直播服务器发送的目标内容;

内容展示单元1403,被配置为执行响应于在播放该目标直播视频流的过程中解析出内容展示信令,根据该内容展示信令,展示该目标内容,该内容展示信令携带有该目标内容的内容标识。

在本公开实施例中,通过缓存直播服务器发送的目标内容,以及播放从直播服务器获取的目标直播视频流,使得该观众终端在播放该目标直播视频流的过程中,如果解析内容展示信令,则展示该目标内容,从而可以保证直播视频流的视频内容和展示目标内容的时机保持一致,实现内容同步,提高用户的体验。

在一种可选的实施方式中,该内容展示单元1403,被配置为执行获取该内容展示信令携带的该目标内容的内容标识;根据该内容标识,从缓存的多个内容中获取该目标内容;展示该目标内容。

需要说明的是,上述实施例提供的基于直播的内容同步装置执行直播内容与目标内容的同步时,仅以上述各功能单元的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元完成,即将终端或者服务器的内部结构划分成不同的功能单元,以完成以上描述的全部或者部分功能。另外,上述实施例提供的基于直播的内容同步装置与基于直播的内容同步方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。

关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。

图15是根据一示例性实施例示出的一种终端框图。该终端1500可以为观众用户所使用的观众终端,也可以为直播用户所使用的直播终端。该终端1500可以是:智能手机、平板电脑、mp3播放器(movingpictureexpertsgroupaudiolayeriii,动态影像专家压缩标准音频层面3)、mp4(movingpictureexpertsgroupaudiolayeriv,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端1500还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。

通常,终端1500包括有:处理器1501和存储器1502。

处理器1501可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1501可以采用dsp(digitalsignalprocessing,数字信号处理)、fpga(field-programmablegatearray,现场可编程门阵列)、pla(programmablelogicarray,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1501也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称cpu(centralprocessingunit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1501可以在集成有gpu(graphicsprocessingunit,图像处理器),gpu用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1501还可以包括ai(artificialintelligence,人工智能)处理器,该ai处理器用于处理有关机器学习的计算操作。

存储器1502可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1502还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。

在一些实施例中,终端1500还可选包括有:外围设备接口1503和至少一个外围设备。处理器1501、存储器1502和外围设备接口1503之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1503相连。具体地,外围设备包括:射频电路1504、显示屏1505、摄像头组件1506、音频电路1507、定位组件1508和电源1509中的至少一种。

外围设备接口1503可被用于将i/o(input/output,输入/输出)相关的至少一个外围设备连接到处理器1501和存储器1502。在一些实施例中,处理器1501、存储器1502和外围设备接口1503被集成在同一芯片或电路板上;在一些其他实施例中,处理器1501、存储器1502和外围设备接口1503中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。

射频电路1504用于接收和发射rf(radiofrequency,射频)信号,也称电磁信号。射频电路1504通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1504将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1504包括:天线系统、rf收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1504可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2g、3g、4g及5g)、无线局域网和/或wifi(wirelessfidelity,无线保真)网络。在一些实施例中,射频电路1504还可以包括nfc(nearfieldcommunication,近距离无线通信)有关的电路,本公开对此不加以限定。

显示屏1505用于显示ui(userinterface,用户界面)。该ui可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1505是触摸显示屏时,显示屏1505还具有采集在显示屏1505的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1501进行处理。此时,显示屏1505还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1505可以为一个,设置终端1500的前面板;在另一些实施例中,显示屏1505可以为至少两个,分别设置在终端1500的不同表面或呈折叠设计;在再一些实施例中,显示屏1505可以是柔性显示屏,设置在终端1500的弯曲表面上或折叠面上。甚至,显示屏1505还可以设置成非矩形的不规则图形,也即异形屏。显示屏1505可以采用lcd(liquidcrystaldisplay,液晶显示屏)、oled(organiclight-emittingdiode,有机发光二极管)等材质制备。

摄像头组件1506用于采集图像或视频。可选地,摄像头组件1506包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及vr(virtualreality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1506还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。

音频电路1507可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1501进行处理,或者输入至射频电路1504以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端1500的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1501或射频电路1504的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1507还可以包括耳机插孔。

定位组件1508用于定位终端1500的当前地理位置,以实现导航或lbs(locationbasedservice,基于位置的服务)。定位组件1508可以是基于美国的gps(globalpositioningsystem,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。

电源1509用于为终端1500中的各个组件进行供电。电源1509可以是交流电、直流电、一次性电池或可充电电池。当电源1509包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。

在一些实施例中,终端1500还包括有一个或多个传感器1510。该一个或多个传感器1510包括但不限于:加速度传感器1511、陀螺仪传感器1512、压力传感器1513、指纹传感器1514、光学传感器1515以及接近传感器1516。

加速度传感器1511可以检测以终端1500建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1511可以用于检测重力加速度在三个坐标轴上的分量。处理器1501可以根据加速度传感器1511采集的重力加速度信号,控制显示屏1505以横向视图或纵向视图进行用户界面的显示。加速度传感器1511还可以用于游戏或者用户的运动数据的采集。

陀螺仪传感器1512可以检测终端1500的机体方向及转动角度,陀螺仪传感器1512可以与加速度传感器1511协同采集用户对终端1500的3d动作。处理器1501根据陀螺仪传感器1512采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变ui)、拍摄时的图像稳定、游戏控制以及惯性导航。

压力传感器1513可以设置在终端1500的侧边框和/或显示屏1505的下层。当压力传感器1513设置在终端1500的侧边框时,可以检测用户对终端1500的握持信号,由处理器1501根据压力传感器1513采集的握持信号进行左右手识别或快捷操作。当压力传感器1513设置在显示屏1505的下层时,由处理器1501根据用户对显示屏1505的压力操作,实现对ui界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。

指纹传感器1514用于采集用户的指纹,由处理器1501根据指纹传感器1514采集到的指纹识别用户的身份,或者,由指纹传感器1514根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1501授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1514可以被设置终端1500的正面、背面或侧面。当终端1500上设置有物理按键或厂商logo时,指纹传感器1514可以与物理按键或厂商logo集成在一起。

光学传感器1515用于采集环境光强度。在一个实施例中,处理器1501可以根据光学传感器1515采集的环境光强度,控制显示屏1505的显示亮度。具体地,当环境光强度较高时,调高显示屏1505的显示亮度;当环境光强度较低时,调低显示屏1505的显示亮度。在另一个实施例中,处理器1501还可以根据光学传感器1515采集的环境光强度,动态调整摄像头组件1506的拍摄参数。

接近传感器1516,也称距离传感器,通常设置在终端1500的前面板。接近传感器1516用于采集用户与终端1500的正面之间的距离。在一个实施例中,当接近传感器1516检测到用户与终端1500的正面之间的距离逐渐变小时,由处理器1501控制显示屏1505从亮屏状态切换为息屏状态;当接近传感器1516检测到用户与终端1500的正面之间的距离逐渐变大时,由处理器1501控制显示屏1505从息屏状态切换为亮屏状态。

本领域技术人员可以理解,图15中示出的结构并不构成对终端1500的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。

图16是根据一示例性实施例示出的一种直播服务器1600的框图,该服务器1600可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(centralprocessingunits,cpu)1601和一个或一个以上的存储器1602,存储器1602中包含的存储介质可以是rom1603和随机存取存储器(ram)1604。其中,该存储器1602中存储有至少一条程序代码,该至少一条程序代码由该处理器1601加载并执行以实现上述各个方法实施例提供的基于直播的内容同步方法。当然,该服务器还可以具有有线或无线网络接口1605、输入输出接口1606等部件,以便进行输入输出,该服务器1600还可以包括大容量存储设备1607,该服务器1600还可以包括其他用于实现设备功能的部件,在此不做赘述。

在示例性实施例中,还提供了一种包括程序代码的存储介质,例如包括程序代码的存储器1102,上述程序代码可由服务器1100的处理器1101执行以完成上述方法。可选地,存储介质可以是非临时性计算机可读存储介质,例如,所述非临时性计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。

本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。

应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1