直播礼物的展示方法、装置、存储介质、终端和系统与流程

文档序号:16202335发布日期:2018-12-08 06:44阅读:306来源:国知局
直播礼物的展示方法、装置、存储介质、终端和系统与流程

本发明涉及互联网技术领域,具体而言,本发明涉及一种直播礼物的展示方法、装置、存储介质、终端和系统。

背景技术

随着互联网技术的快速发展,人们对终端的依赖性越来越强,相应产生的应用程序的种类也越来越多。其中,直播类的应用程序由于具备直观、快速、交互性强的特点已经成为一种常用的应用程序。在直播类的应用程序中,礼物是直播内容的重要组成部分,其中付费礼物的消费行为对直播内容可产生正向的激励作用,丰富的礼物展示形式更能有效促进优质直播内容的产出。对此,礼物的互动作用显得愈发重要。

目前,礼物的展示一般采用在聊天公屏区域或直播画面上覆盖式地实时播放礼物动画及赠送数量的方式。其展示的方式较为单一,难以促使观看与主播互动,无法满足用户多元化的娱乐需求。



技术实现要素:

本发明的目的旨在提供一种直播礼物的展示方法,解决上述至少一种问题,特别是解决了直播礼物展示方式较为单一的问题。

第一方面,本发明提供一种直播礼物的展示方法,包括以下步骤:接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

结合第一方面,本发明在第一方面的第一种实施方式中,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:当检测到所述直播视频流中正在展示所述第一贴纸时;移除所述直播视频流中正在展示的所述第一贴纸;将所述第一贴纸重新设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸重新展示的展示效果的直播视频流。

结合第一方面的第一种实施方式,本发明在第一方面的第二种实施方式中,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:

当检测到所述直播视频流中正在展示第二贴纸,且所述第二贴纸与第一贴纸关联于相同类型的直播礼物时,将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸和第二贴纸同时展示的展示效果的直播视频流。

结合第一方面的第一种实施方式或第一方面的第二种实施方式,本发明在第一方面的第三种实施方式中,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:当检测到所述直播视频流中正在展示第三贴纸,且所述第三贴纸与第一贴纸关联于不同类型的直播礼物时;根据获取各直播礼物携带贴纸的时间点先后顺序,对贴纸进行排序;当排序在所述第一贴纸之前的其他贴纸已展示结束时,将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸展示效果的直播视频流。

结合第一方面的第三种实施方式,本发明在第一方面的第四种实施方式中,所述第一贴纸中包括至少两张;所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:根据所述第一贴纸的贴纸属性,确定脸部识别点和所述第一贴纸中的待显示贴纸;根据脸部图像识别结果与脸部识别点,确定在所述图像帧中的显示位置;将所述待显示贴纸设置于所述图像帧中的显示位置。

结合第一方面的第四种实施方式,本发明在第一方面的第五种实施方式中,所述根据脸部图像识别结果与脸部识别点,确定在所述图像帧中的显示位置,还包括以下步骤:根据所述第一贴纸的贴纸属性,确定预配置的循环帧数和关键帧数;根据所述循环帧数和关键帧数,确定所述第一贴纸在所述直播视频流中对应的入场图像帧、出场图像帧和入场图像帧与出场图像帧之间的中间图像帧;根据各图像帧对应的脸部图像识别结果与所述脸部识别点,确定在所述入场图像帧、出场图像帧和入场图像帧中的显示位置。

结合第一方面,本发明在第一方面的第六种实施方式中,所述第一贴纸为动态贴纸;所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,包括以下步骤:根据脸部图像识别结果中脸部距离镜头的距离,调整所述第一贴纸的大小尺寸。

第二方面,本发明提供一种直播礼物的展示方法,包括以下步骤:服务器确定预下发的直播礼物配置有贴纸;从所述直播礼物关联的贴纸列表中抽取第一贴纸;向直播端下发携带所述第一贴纸的直播礼物;向所述直播端下发所述直播礼物的展示指令;直播端接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

结合第二方面,本发明在第二方面的第一种实施方式中,所述从所述直播礼物关联的贴纸列表中抽取第一贴纸,包括以下步骤:获取所述直播礼物关联的贴纸列表,所述贴纸列表设置有各份贴纸及其对应的展示概率;根据所述各份贴纸及其对应的展示概率,从贴纸列表中抽取第一贴纸。

结合第二方面的第一种实施方式,本发明在第二方面的第二种实施方式中,所述贴纸列表设置有各份贴纸及其对应展示概率,包括以下步骤:获取发送直播礼物的用户的等级;获取各份贴纸的级别,根据用户的等级设置各级别的贴纸对应的展示概率。

第三方面,本发明提供一种直播礼物的展示装置,包括以下模块:获取模块,用于接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;识别模块,用于获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;展示模块,用于将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

第四方面,本发明提供一种直播礼物的展示装置,包括服务器和直播端;所述服务器包括下发模块,用于服务器确定预下发的直播礼物配置有贴纸;从所述直播礼物关联的贴纸列表中抽取第一贴纸;向直播端下发携带所述第一贴纸的直播礼物;向所述直播端下发所述直播礼物的展示指令;所述直播端包括接收模块,用于直播端接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

第五方面,本发明提供一种计算机可读的存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的直播礼物的展示方法;和/或,所述计算机程序被处理器执行时实现如第二方面所述的直播礼物的展示方法。

第六方面,本发明提供一种终端,包括:一个或多个处理器;存储器;一个或多个计算机程序,所述一个或多个计算机程序存储在所述存储器中;所述一个或多个计算机程序被所述一个或多个处理器执行时实现如第一方面所述的直播礼物的展示方法。

第七方面,本发明提供一种系统,包括服务器和直播端:所述服务器包括:一个或多个处理器;存储器;一个或多个计算机程序,所述一个或多个计算机程序存储在所述存储器中;所述一个或多个计算机程序被所述一个或多个处理器执行时实现如下操作:确定预下发的直播礼物配置有贴纸;从所述直播礼物关联的贴纸列表中抽取第一贴纸;向直播端下发携带所述第一贴纸的直播礼物;向所述直播端下发所述直播礼物的展示指令;所述直播端包括:一个或多个处理器;存储器;一个或多个计算机程序,所述一个或多个计算机程序存储在所述存储器中;所述一个或多个计算机程序被所述一个或多个处理器执行时实现如下操作:接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

相对于现有技术,本发明具有以下优势:

(1)本发明提供的直播礼物的展示方法、装置、存储介质和终端中,通过在接收到直播礼物的展示指令后,获取所述直播礼物携带的第一贴纸,并获取直播间中直播视频流中的图像帧,识别出所述图像帧中的脸部图像,以将所述第一贴纸设置于所述图像帧中脸部图像相应的位置中,形成具有贴纸展示效果的直播视频流。其中,通过将直播礼物携带的第一贴纸结合脸部识别技术,将第一贴纸插入直播间的直播视频流中显示,形成了在展示直播礼物时具有贴纸展示效果的直播视频流,丰富了直播礼物展示的多样性和趣味性,有利于提高直播间中主播与观看用户的热情,促使观看用户与主播相互互动,在直播间中营造更加积极活跃的氛围。

(2)本发明提供的直播礼物的展示方法、装置、存储介质和系统中,当服务器确定预下发的直播礼物配置有贴纸时,将从所述直播礼物关联的贴纸列表中抽取出第一贴纸。当服务器向直播端下发携带有所述第一贴纸的直播礼物时,下发所述直播礼物的展示指令。当直播端接收到所述展示指令时将获取所述直播礼物携带的第一贴纸,并结合脸部识别技术,识别直播间中直播视频流中的图像帧的脸部图像,将所述第一贴纸设置于所述图像帧中脸部图像的相应位置上,以在进行所述直播礼物展示时,形成具有贴纸展示效果的直播视频流。其中,所述直播礼物与第一贴纸具有关联关系,所述贴纸列表中包括至少一份贴纸,而所述第一贴纸为贴纸列表中的至少一份。由于所述直播礼物所携带的第一贴纸由服务器抽取,其并非观看用户或主播用户所触发,进一步增加了贴纸展示效果的趣味性,其所展示贴纸的不固定性更有利于促发优质直播内容的产出。

本发明附加的方面和优点将在下面的描述中部分给出,这些将从下面的描述中变得明显,或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:

图1为本发明实施例一直播礼物的展示方法的第一种流程图;

图2为本发明实施例一直播礼物的展示方法的第二种流程图;

图3为本发明实施例一直播礼物的展示方法的第三种流程图;

图4为本发明实施例一直播礼物的展示方法的第四种流程图;

图5为本发明实施例一直播礼物的展示方法的第五种流程图;

图6为本发明实施例一直播礼物的展示方法的第六种流程图;

图7为本发明实施例一直播礼物的展示方法的第七种流程图;

图8为本发明实施例二直播礼物的展示方法的第一种流程图;

图9为本发明实施例二直播礼物的展示方法的第二种流程图;

图10为本发明实施例二直播礼物的展示方法的第三种流程图;

图11为本发明实施例三直播礼物的展示装置的第一种模块框图;

图12为本发明实施例三直播礼物的展示装置的第二种模块框图;

图13为本发明实施例三直播礼物的展示装置的第三种模块框图;

图14为本发明实施例三直播礼物的展示装置的第四种模块框图;

图15为本发明实施例三直播礼物的展示装置的第五种模块框图;

图16为本发明实施例三直播礼物的展示装置的第六种模块框图;

图17为本发明实施例三直播礼物的展示装置的第七种模块框图;

图18为本发明实施例四直播礼物的展示装置的第一种模块框图;

图19为本发明实施例四直播礼物的展示装置的第二种模块框图;

图20为本发明实施例四直播礼物的展示装置的第三种模块框图;及

图21为本发明实施例六直播礼物的展示终端的框图。

具体实施方式

下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。

本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。

本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。

本技术领域技术人员可以理解,这里所使用的“终端”、“终端设备”既包括无线信号接收器的设备,其仅具备无发射能力的无线信号接收器的设备,又包括接收和发射硬件的设备,其具有能够在双向通讯链路上,执行双向通讯的接收和发射硬件的设备。这种设备可以包括:蜂窝或其他通讯设备,其具有单线路显示器或多线路显示器或没有多线路显示器的蜂窝或其他通讯设备;pcs(personalcommunicationsservice,个人通讯系统),其可以组合语音、数据处理、传真和/或数据通讯能力;pda(personaldigitalassistant,个人数字助理),其可以包括射频接收器、寻呼机、互联网/内联网访问、网络浏览器、记事本、日历和/或gps(globalpositioningsystem,全球定位系统)接收器;常规膝上型和/或掌上型计算机或其他设备,其具有和/或包括射频接收器的常规膝上型和/或掌上型计算机或其他设备。这里所使用的“终端”、“终端设备”可以是便携式、可运输、安装在交通工具(航空、海运和/或陆地)中的,或者适合于和/或配置为在本地运行,和/或以分布形式,运行在地球和/或空间的任何其他位置运行。这里所使用的“终端”、“终端设备”还可以是通讯终端、上网终端、音乐/视频播放终端,例如可以是pda、mid(mobileinternetdevice,移动互联网设备)和/或具有音乐/视频播放功能的移动电话,也可以是智能电视、机顶盒等设备。

本技术领域技术人员可以理解,这里所使用的远端网络设备,其包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云。在此,云由基于云计算(cloudcomputing)的大量计算机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个超级虚拟计算机。本发明的实施例中,远端网络设备、终端设备与wns服务器之间可通过任何通讯方式实现通讯,包括但不限于,基于3gpp、lte、wimax的移动通讯、基于tcp/ip、udp协议的计算机网络通讯以及基于蓝牙、红外传输标准的近距无线传输方式。

本发明实施例所涉及到的名词:

直播平台:网络视频直播是针对实时社交需求,利用互联网和多媒体通信技术,通过在网络上构建一个集音频、视频、桌面共享、文档共享、互动环节为一体的多功能网络直播平台,企业或个人可以利用此直播平台在线进行语音、视频、数据的全面交流与互动。

直播间:网络直播间是基于网络直播平台创建的一个虚拟空间(或虚拟房间),直播间一般由主播客户端创建并连接有多个观看客户端,即直播间中包括了主播及多个观众,位于该虚拟空间内的观看客户端可以观看主播客户端的直播内容,同时主播客户端的用户与观看客户端的用户、观看客户端的用户与观看客户端的用户之间还可以进行语音、图片或文字的互动。

直播端:主要为主播进行直播使用的终端,主播负责在直播端参与互联网中的一档节目或活动,从策划、编辑、录制、制作、观众互动等一系列工作,并担当主持工作。

观看端:主要由进入直播间观看由直播端形成的直播视频流,可通过发送礼物等方式与直播端的用户主播进行互动。

服务器:一个管理资源并为用户提供服务的计算机,本发明中其可记录并协助下发观看用户发送给主播的直播礼物。

实施例一

结合图1,本发明实施例提供一种直播礼物的展示方法,本发明实施例的执行主体主要为终端,具体为主播使用的直播端,包括以下步骤:

s11接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;

其中,直播礼物是指在直播间中,观看端用户通过直播平台送给主播的礼物,一般而言,直播礼物为付费礼物,观看端用户通过直播平台购买以送给主播表达对主播的欣赏或感谢。在本发明实施例中,指定某几款直播礼物配置贴纸,贴纸用于在直播端接收到直播礼物时,在主播脸部显示,达到以贴纸的展示效果表达主播当前接收到的直播礼物。配置有贴纸的直播礼物关联有贴纸列表,贴纸列表中包括至少一份贴纸,一份贴纸中包括至少一张贴纸。贴纸具体可为下面通过表1的举例对直播礼物与贴纸之间的关系进行详细叙述:

表1直播礼物与贴纸之间的关系列表

参见表1,具体可见,在表1中包括直播礼物a至n,其代表当前直播平台提供给直播间使用的直播礼物。

其中,直播礼物a关联有贴纸列表a,贴纸列表a包括第一至第n份贴纸,在直播端接收到的直播礼物a的展示指令时,获取所述直播礼物a携带的第一贴纸中可包括其中一份或多份贴纸,如包括第一份贴纸a1或第一份贴纸a1和第n份贴纸an,本发明实施例中所述第一贴纸并非对贴纸数量的限定,仅作为术语命名。其中,第一份贴纸a1包括多张贴纸,而第n份贴纸an仅包括一张贴纸1。

其中,直播礼物b没有关联的贴纸列表,即当直播端接收到直播礼物b的展示指令时,其获取的直播礼物b所携带的贴纸为空。

其中,直播礼物c关联有贴纸列表c1,与直播礼物a的区别为直播礼物c关联的贴纸列表c1中仅包括第一份贴纸c1,而第一份贴纸c1中包括多张贴纸。

其中,直播礼物n关联有贴纸列表n,与直播礼物a、c的区别为直播礼物n关联的贴纸列表n仅包括第一份贴纸n1,且第一份贴纸n1中仅包括一张贴纸。

具体地,在本发明实施例中,上述直播礼物与贴纸之间的关系可通过后台配置,其中的贴纸素材可随时更新,自由操作度较大。进一步地,贴纸可以是动态的也可以是静态的,当一份贴纸中包括有多张贴纸时,会将其配置为入场图像帧贴纸、中间图像帧贴纸、出场图像帧贴纸,即每一份贴纸会有对应的展示时长,而该展示时长内的每个时间节点对应的图像帧有其相应需要展示的贴纸。当一份贴纸中仅包括一张贴纸时,其展示时长内均将展示该同一张贴纸,且优选将该份贴纸的展示时长配置为最小值。

具体地,当主播当前使用的直播端接收到直播礼物的展示指令时,将获取与所述直播礼物具有关联关系,且当前具有携带关系的第一贴纸。

s12获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;

其中,直播视频流中的图像帧为主播端产出的视频流中包含的图像帧。所述脸部图像包括人脸图像、动物脸图像等,在本发明实施例中优选为人脸图像,即在本步骤中,将结合人脸识别技术,对所述图像帧进行人脸识别。

s13将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

结合步骤s12,当识别得出所述图像帧中的脸部图像时,将获得的所述第一贴纸设置于所述图像帧中脸部图像相应的位置中,相当于将第一贴纸插入在直播端产出的直播视频流中进行展示,形成了具有贴纸展示效果的直播视频流。当第一贴纸展示时,表征对应的直播礼物送达,此时在直播端的录播画面中同时展示第一贴纸,主播可结合贴纸的展示效果丰富当前的直播内容,促使主播与观看用户互动,更是丰富了直播内容的趣味性。

进一步地,结合图2,步骤s13,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:

s21当检测到所述直播视频流中正在展示所述第一贴纸时,移除所述直播视频流中正在展示的所述第一贴纸;

s22将所述第一贴纸重新设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸重新展示的展示效果的直播视频流。

在直播视频流中插入所述第一贴纸之前,直播端将检测直播视频流中是否有正在展示的贴纸,当检测到直播视频流中正在展示所述第一贴纸时,即正在展示的贴纸与当前需要展示的第一贴纸关联的直播礼物一样,且贴纸素材一致时,移除正在展示的所述第一贴纸,并将在步骤s11中获取到的所述第一贴纸设置于脸部图像相应的位置中,形成具有所述第一贴纸重新展示的展示效果的直播视频流。

具体地,由于每一份贴纸在直播视频流中有对应的展示时长,当在同一时间点上,检测到有正在展示的同一种贴纸(关联于相同类型的直播礼物,且属于相同贴纸素材)时,将正在展示的贴纸移除,即直播播放该正在展示贴纸的出场图像帧贴纸,使得当前获取到的贴纸从移除操作的时间点起进行展示,形成将贴纸重新展示的效果。

进一步地,在步骤s21检测到所述直播视频流中正在展示所述第一贴纸之后,还包括步骤:

延长所述直播视频流中正在展示所述第一贴纸的时间,至所述第一贴纸展示时间的两倍;所述展示时间由所述第一贴纸属性决定;

将所述直播礼物携带的第一贴纸标记为已展示。

具体地,在本发明实施例中,当检测到直播视频流中正在展示所述第一贴纸时,即正在展示的贴纸与当前需要展示的第一贴纸关联的直播礼物一样,且贴纸素材一致时,延长正在展示所述第一贴纸的时间,直至所述正在展示的所述第一贴纸的展示时间为正常展示时间的两倍,即循环展示一次正在展示的第一贴纸。

进一步地,结合图3,步骤s13,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:

s31当检测到所述直播视频流中正在展示第二贴纸,且所述第二贴纸与第一贴纸关联于相同类型的直播礼物时,将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸和第二贴纸同时展示的展示效果的直播视频流。

在直播视频流中插入所述第一贴纸之前,直播端将检测直播视频流中是否有正在展示的贴纸,当检测到直播视频流中正在展示第二贴纸,且第二贴纸与第一贴纸关联于相同类型的直播礼物时,即正在展示的贴纸与当前需要展示的第一贴纸关联的直播礼物一样,但贴纸素材不同时,将在步骤s11中获取到的所述第一贴纸设置于脸部图像相应的位置中,形成具有所述第一贴纸和第二贴纸同时展示的展示效果的直播视频流。此时,多个贴纸同时展示的展示效果有利于丰富直播画面,进一步加强趣味性。

更进一步地,结合图4,步骤s13,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:

s41当检测到所述直播视频流中正在展示第三贴纸,且所述第三贴纸与第一贴纸关联于不同类型的直播礼物时,根据获取各直播礼物携带贴纸的时间点先后顺序,对贴纸进行排序;

s42当排序在所述第一贴纸之前的其他贴纸已展示结束时,将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有第一贴纸展示效果的直播视频流。

在直播视频流中插入所述第一贴纸之前,直播端将检测直播视频流中是否有正在展示的贴纸,当检测到直播视频流中正在展示第三贴纸,且第三贴纸与第一贴纸关联于不同类型的直播礼物时,即正在展示的贴纸与当前需要展示的第一贴纸关联的直播礼物不同(此时的判断规则仅需要判断出是否关联于相同类型的直播礼物,不对是否属于同一贴纸素材作限定)时,直播端将根据获取各直播礼物携带贴纸的时间先后顺序,对贴纸进行排序,先展示完时间节点排序在前的贴纸。

具体地,由于每一份贴纸在直播视频流中有对应的展示时长,当在同一时间点上,检测到有正在展示的贴纸与当前需要插入直播视频流的贴纸关联于不同类型的直播礼物时,将根据获取贴纸的时间节点,对各需要展示的贴纸进行排序,并按照时间节点的先后顺序逐一排序展示。

下面结合表2进行举例,对上述步骤s13包括的展示逻辑进行叙述:

表2贴纸展示逻辑

参考表2,可见,当当前时间节点接收的直播礼物a的第一贴纸a1需要进行展示时,检测当前正在展示的情况包括四种:

第一种:直播视频流中有正在展示的上一时间节点接收的直播礼物a的第一贴纸a1(上一时间节点接收的直播礼物a的第一贴纸a1与当前时间节点接收的直播礼物a属于相同类型的直播礼物,且贴纸素材相同),则触发移除当前正在展示的上一时间节点接收的直播礼物a的第一贴纸a1,并重新展示当前时间节点接收的直播礼物a的第一贴纸a1。其相当于将同一份贴纸移除后重新插入进行展示。

第二种,直播视频流中有正在展示的上一时间节点接收的直播礼物a的第二贴纸a2(上一时间节点接收的直播礼物a的第一贴纸a2与当前时间节点接收的直播礼物a属于相同类型的直播礼物,但贴纸素材不同),则直接将当前时间节点接收的直播礼物a的第一贴纸a1插入直播视频流中,形成第一贴纸a1与第二贴纸a2同时展示的展示效果。

第三种:直播视频流中有正在展示上一时间节点接收的直播礼物b的第三贴纸b1,但与当前时间节点接收的直播礼物a不属于相同类型的直播礼物,则触发根据获取各贴纸的时间节点进行排序,并根据排序的时间点先后顺序依次排序展示各贴纸。

第四种:直播视频流中没有正在展示的贴纸,则直接展示当前时间节点接收的直播礼物a的第一贴纸a1。

进一步地,由于每一份贴纸有其对应的展示时长,在上述提及的移除、重新展示、同时展示、排序展示和直接展示等的操作中,均将结合每一份贴纸的展示时长进行。

优选地,所述第一贴纸中包括至少两张;在本发明实施例中,每一份贴纸中至少有一张贴纸,下述优选结合每一份贴纸中包括至少两张的情况进行叙述:结合图5,步骤s13,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流,包括以下步骤:

s51根据所述第一贴纸的贴纸属性,确定脸部识别点和所述第一贴纸中的待显示贴纸;

s52根据脸部图像识别结果与脸部识别点,确定在所述图像帧中的显示位置;

s53将所述待显示贴纸设置于所述图像帧中的显示位置。

在本发明实施例中,每一份贴纸均对应有其自身的贴纸属性,贴纸属性包括脸部识别点。当当前为进行对人脸的识别时,脸部识别点为头顶、左眼、右眼、鼻子、脸颊、嘴巴或耳朵等,其用于确定贴纸需要设置在识别的图像帧中脸部图像的哪一位置。进一步地,由于第一贴纸中可能包括不止一张贴纸,此时需要根据贴纸属性中关于各贴纸的排序确定待显示贴纸。

进一步地,结合图6,步骤s52,还包括以下步骤:

s61根据所述第一贴纸的贴纸属性,确定预配置的循环帧数和关键帧数;

s62根据所述循环帧数和关键帧数,确定所述第一贴纸在所述直播视频流中对应的入场图像帧、出场图像帧和入场图像帧与出场图像帧之间的中间图像帧;

s63根据各图像帧对应的脸部图像识别结果与所述脸部识别点,确定在所述入场图像帧、出场图像帧和中间图像帧中的显示位置。

具体地,在本发明实施例中,贴纸属性除了包括脸部识别点外,还包括预配置的循环帧数,该预配置的循环帧数对应于中间图像帧帧数,用于控制第一贴纸的展示时长,其可具体根据第一贴纸中包括的贴纸数进行设置。更进一步地,贴纸属性还包括关键帧帧数,该关键帧帧数对应于入场图像帧帧数、出场图像帧帧数,用于结合循环帧数控制第一贴纸的展示时长。结合上述步骤s62可见,在本发明实施例中,通过第一贴纸的贴纸属性,可以确定出第一贴纸的循环帧数和关键帧数,而通过循环帧数和关键帧数可确定第一贴纸的展示时长(循环帧数+关键帧数=总展示帧数,总展示帧数*每一图像帧的展示时间=第一贴纸的展示时长),以及待显示贴纸与入场图像帧、中间图像帧和出场图像帧的对应关系,形成第一贴纸的整体展示效果。

进一步地,所述第一贴纸为动态贴纸;结合图7,步骤s13,所述将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,包括以下步骤:

s71根据脸部图像识别结果中脸部距离镜头的距离,调整所述第一贴纸的大小尺寸。

在本发明实施例中,所述第一贴纸的展示为一种结合脸部识别技术的特效展示,当第一贴纸中包括的贴纸为静态图像、文字和/或符号时,可在展示时长内单一显示该静态贴纸,还在通过多张静态贴纸的过渡展示过形成在展示时长内动态显示该多张静态贴纸;当第一贴纸中包括的贴纸为动态图像、文字和/或符号时,可在展示时长内根据贴纸属性,形成在展示时长内动态显示该动态贴纸。

实施例二

结合图8,本发明实施例还提供一种直播礼物的展示方法,在本发明实施例中,执行的主体包括服务器和终端,其中终端为直播端,包括以下步骤:

s81服务器确定预下发的直播礼物配置有贴纸;从所述直播礼物关联的贴纸列表中抽取第一贴纸;向直播端下发携带所述第一贴纸的直播礼物;向所述直播端下发所述直播礼物的展示指令;

在本发明实施例中,当服务器检测到准备下发直播礼物时,将对直播礼物进行判断,确定预下发的直播礼物是否配置有贴纸。当确定预下发的直播礼物配置有贴纸时,服务器将获取与预下发的直播礼物关联的贴纸列表中抽取第一贴纸,并向直播端下发携带第一贴纸的直播礼物和对应该直播礼物的展示指令。

s82直播端接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

进一步地,结合图9,步骤s81,所述从所述直播礼物关联的贴纸列表中抽取第一贴纸,包括以下步骤:

s91获取所述直播礼物关联的贴纸列表,所述贴纸列表设置有各份贴纸及其对应的展示概率;

s92根据所述各贴纸及其对应的展示概率,从贴纸列表中抽取第一贴纸。

具体地,所述展示概率根据各份贴纸的贴纸属性和/或产品结构配置。

下面结合表3对步骤s92进行举例说明:

表3各份贴纸的抽取逻辑

参考表3,表3为各份贴纸在当前的展示情况下,发生的抽取结果。可见,在表3中,直播礼物关联的贴纸列表中包括有两份贴纸,第一份贴纸和第二份贴纸。其中,第一份贴纸的展示概率为90%,第二贴纸的展示概率为10%。在服务器的抽取过程中,每一份曾被抽取过的贴纸对应的count数值将加1,表现如表3的展示次数。表3中第一份贴纸的展示次数为8,代表第一份贴纸在直播礼物被下发9次的情况下,有8次抽取了第一份贴纸作为直播礼物携带的第一贴纸;第二份贴纸的展示次数为1,代表第二份贴纸在直播礼物被下发9次的情况下,有1次抽取了第二份贴纸作为直播礼物携带的第一贴纸。对此展示情况下,服务器需要对为该直播礼物抽取其携带的第一贴纸时,将抽取第一份贴纸作为第一贴纸。具体为,当前抽取为第10次抽取,即总展示次数将变为10,为了满足预先设置的展示概率,服务器将选择第一份贴纸作为直播礼物携带的第一贴纸,使得第一份贴纸在总展示次数为10的情况下,第一份贴纸的展示次数为9。

更进一步地,结合图10,步骤s91,所述贴纸列表设置有各贴纸及其对应展示概率,包括以下步骤:

s101获取发送直播礼物的用户的等级;

s102获取各贴纸的级别,根据用户的等级设置各级别的贴纸对应的展示概率。

具体地,所述发送直播礼物的用户的等级为该用户在当前直播平台中的等级。由于直播礼物一般为付费礼物,而相应的,若发送直播礼物的用户为当前直播平台的高级用户时,其一般花费的时间及金钱成本均较高,为了提高用户体验,将发送直播礼物的用户的等级与各直播礼物关联的贴纸列表中包括的各份贴纸的展示概率进行匹配。下面结合表4进行举例说明:

表4根据发送直播礼物用户的等级与各份贴纸设置展示概率的逻辑

参考表4,可见,在表4中,直播礼物关联的贴纸列表中包括第一份贴纸和第二份贴纸,其中,第一份贴纸包括动态贴纸,第二份贴纸包括静态贴纸。假设第一份贴纸的展示效果比第二份贴纸的展示效果好。其中,用户等级为高级的对应第一份贴纸的展示概率为90%,对应第二份贴纸的展示概率为10%。将用户等级从高至低的排序时,第一份贴纸的展示概率相应为从高至低排序,而第二份贴纸的展示概率为从低至高排序。

在本发明实施例中主要对直播礼物关联的贴纸列表中包括的各份贴纸配置的展示概率进行详细的叙述。通过展示概率的设置,可有效规划贴纸展示的方案,利于根据用户的需求优化,更加加大了技术方案操作的自由度。

实施例三

结合图11,为了进一步对本发明实施例一所述的直播礼物的展示方法进行阐述,对其进行模块化说明,提供直播礼物的展示装置,包括以下模块:

获取模块111,用于接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;

识别模块112,用于获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;

展示模块113,用于将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

进一步地,结合图12,所述展示模块113,包括以下单元:

移除单元121,用于当检测到所述直播视频流中正在展示所述第一贴纸时,移除所述直播视频流中正在展示的所述第一贴纸;

第一展示单元122,用于将所述第一贴纸重新设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸重新展示的展示效果的直播视频流。

进一步地,结合图13,所述展示模块113,包括以下单元:

第二展示单元131,用于当检测到所述直播视频流中正在展示第二贴纸,且所述第二贴纸与第一贴纸关联于相同类型的直播礼物时,将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸和第二贴纸同时展示的展示效果的直播视频流。

更进一步地,结合图14,所述展示模块113,包括以下单元:

排序单元141,用于当检测到所述直播视频流中正在展示第三贴纸,且所述第三贴纸与第一贴纸关联于不同类型的直播礼物时,根据获取各直播礼物携带贴纸的时间点先后顺序,对贴纸进行排序;

第三展示单元142,用于当排序在所述第一贴纸之前的其他贴纸已展示结束时,将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有所述第一贴纸展示效果的直播视频流。

优选地,结合图15,所述第一贴纸中包括至少两张;所述展示模块103包括以下单元:

第一确定单元151,用于根据所述第一贴纸的贴纸属性,确定脸部识别点和所述第一贴纸中的待显示贴纸;

第二确定单元152,用于根据脸部图像识别结果与脸部识别点,确定在所述图像帧中的显示位置;

设置单元153,用于将所述待显示贴纸设置于所述图像帧中的显示位置。

进一步地,结合图16,所述第二确定单元152,包括以下子单元:

第一确定子单元161,用于根据所述第一贴纸的贴纸属性,确定预配置的循环帧数和关键帧数;

第二确定子单元162,用于根据所述循环帧数和关键帧数,确定所述第一贴纸在所述直播视频流中对应的入场图像帧、出场图像帧和入场图像帧与出场图像帧之间的中间图像帧;

第三确定子单元163,用于根据各图像帧对应的脸部图像识别结果与所述脸部识别点,确定在所述入场图像帧、出场图像帧和入场图像帧中的显示位置。

更进一步地,结合图17,所述第一贴纸为动态贴纸;所述展示模块113,包括以下单元:

调整单元171,用于根据脸部图像识别结果中脸部距离镜头的距离,调整所述第一贴纸的大小尺寸。

实施例四

结合图18,为了进一步对本发明实施例二所述的直播礼物的展示方法进行阐述,对其进行模块化说明,提供直播礼物的展示装置,包括服务器和直播端:

所述服务器包括下发模块181,用于服务器确定预下发的直播礼物配置有贴纸;从所述直播礼物关联的贴纸列表中抽取第一贴纸;向直播端下发携带所述第一贴纸的直播礼物;向所述直播端下发所述直播礼物的展示指令;

所述直播端包括接收模块182,用于直播端接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

进一步地,结合图19,所述下发模块181,包括以下单元:

获取单元191,用于获取所述直播礼物关联的贴纸列表,所述贴纸列表设置有各份贴纸及其对应的展示概率;

抽取单元192,用于根据所述各份贴纸及其对应的展示概率,从贴纸列表中抽取第一贴纸。

更进一步地,结合图20,所述获取单元191,包括以下子单元:

第一获取子单元201,用于获取发送直播礼物的用户的等级;

第二获取子单元202,用于获取各份贴纸的级别,根据用户的等级设置各级别的贴纸对应的展示概率。

实施例五

本发明实施例提供一种计算机可读的存储介质,其上存储有计算机程序:

所述计算机程序被处理器执行时实现如实施例一所述的直播礼物的展示方法;和/或,

所述计算机程序被处理器执行时实现如实施例二所述的直播礼物的展示方法。

其中,所述存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、cd-rom、和磁光盘)、rom(read-onlymemory,只读存储器)、ram(randomaccessmemory,随即存储器)、eprom(erasableprogrammableread-onlymemory,可擦写可编程只读存储器)、eeprom(electricallyerasableprogrammableread-onlymemory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,存储介质包括由设备(例如,计算机)以能够读的形式存储或传输信息的任何介质。可以是只读存储器,磁盘或光盘等。

实施例六

本发明实施例还提供了终端,包括:

一个或多个处理器;

存储器;

一个或多个计算机程序,所述一个或多个计算机程序存储在所述存储器中;所述一个或多个计算机程序被所述一个或多个处理器执行时实现如实施例一所述的直播礼物的展示方法。

如图21所示,为了便于说明,仅示出了与本发明实施例相关的部分,具体技术细节未揭示的,请参照本发明实施例方法部分。该终端可以为包括手机、平板电脑、pda(personaldigitalassistant,个人数字助理)、pos(pointofsales,销售终端)、车载电脑等任意终端设备,以终端为手机为例:

图21示出的是与本发明实施例提供的终端相关的手机的部分结构的框图。参考图21,手机包括:射频(radiofrequency,rf)电路2110、存储器2120、输入单元2130、显示单元2140、传感器2150、音频电路2160、无线保真(wirelessfidelity,wi-fi)模块2170、处理器2180、以及电源2190等部件。本领域技术人员可以理解,图21中示出的手机结构并不构成对手机的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。

下面结合图21对手机的各个构成部件进行具体的介绍:

rf电路2110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器2180处理;另外,将设计上行的数据发送给基站。通常,rf电路2110包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier,lna)、双工器等。此外,rf电路2110还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(globalsystemofmobilecommunication,gsm)、通用分组无线服务(generalpacketradioservice,gprs)、码分多址(codedivisionmultipleaccess,cdma)、宽带码分多址(widebandcodedivisionmultipleaccess,wcdma)、长期演进(longtermevolution,lte)、电子邮件、短消息服务(shortmessagingservice,sms)等。

存储器2120可用于存储软件程序以及模块,处理器2180通过运行存储在存储器2120的软件程序以及模块,从而执行手机的各种功能应用以及数据处理。存储器2120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声纹播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器2120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元2130可用于接收输入的数字或字符信息,以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地,输入单元2130可包括触控面板2131以及其他输入设备2132。触控面板2131,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板2131上或在触控面板2131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板2131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器2180,并能接收处理器2180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板2131。除了触控面板2131,输入单元2130还可以包括其他输入设备2132。具体地,其他输入设备2132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元2140可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元2140可包括显示面板2141,可选的,可以采用液晶显示器(liquidcrystaldisplay,lcd)、有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板2141。进一步的,触控面板2131可覆盖显示面板2141,当触控面板2131检测到在其上或附近的触摸操作后,传送给处理器2180以确定触摸事件的类型,随后处理器2180根据触摸事件的类型在显示面板2141上提供相应的视觉输出。虽然在图21中,触控面板2131与显示面板2141是作为两个独立的部件来实现手机的输入和输入功能,但是在某些实施例中,可以将触控面板2131与显示面板2141集成而实现手机的输入和输出功能。

手机还可包括至少一种传感器2150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板2141的亮度,接近传感器可在手机移动到耳边时,关闭显示面板2141和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。

音频电路2160、扬声器2161,传声器2162可提供用户与手机之间的音频接口。音频电路2160可将接收到的音频数据转换后的电信号,传输到扬声器2161,由扬声器2161转换为声纹信号输出;另一方面,传声器2162将收集的声纹信号转换为电信号,由音频电路2160接收后转换为音频数据,再将音频数据输出处理器2180处理后,经rf电路2110以发送给比如另一手机,或者将音频数据输出至存储器2120以便进一步处理。

wi-fi属于短距离无线传输技术,手机通过wi-fi模块2170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图21示出了wi-fi模块2170,但是可以理解的是,其并不属于手机的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。

处理器2180是手机的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器2120内的软件程序和/或模块,以及调用存储在存储器2120内的数据,执行手机的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器2180可包括一个或多个处理单元;优选的,处理器2180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器2180中。

手机还包括给各个部件供电的电源2190(比如电池),优选的,电源可以通过电源管理系统与处理器2180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管未示出,手机还可以包括摄像头、蓝牙模块等,在此不再赘述。

在本发明实施例中,该终端所包括的处理器2180具备执行上述的实施例一所述的直播礼物的展示方法的功能,在此不再赘述。

实施例七

本发明实施例提供一种系统,包括服务器和直播端:

所述服务器包括:一个或多个处理器;存储器;一个或多个计算机程序,所述一个或多个计算机程序存储在所述存储器中;所述一个或多个计算机程序被所述一个或多个处理器执行时实现如下操作:确定预下发的直播礼物配置有贴纸;从所述直播礼物关联的贴纸列表中抽取第一贴纸;向直播端下发携带所述第一贴纸的直播礼物;向所述直播端下发所述直播礼物的展示指令;

所述直播端包括:一个或多个处理器;存储器;一个或多个计算机程序,所述一个或多个计算机程序存储在所述存储器中;所述一个或多个计算机程序被所述一个或多个处理器执行时实现如下操作:接收直播礼物的展示指令,获取所述直播礼物携带的第一贴纸;获取直播视频流中的图像帧,识别所述图像帧中的脸部图像;将所述第一贴纸设置于所述图像帧中脸部图像相应的位置,形成具有贴纸展示效果的直播视频流。

终端的具体结构如实施例六叙述所示,在此不再赘述。

应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1