基于主体识别的视频主体信息显示方法、装置、系统和介质与流程

文档序号:15297127发布日期:2018-08-31 19:33阅读:116来源:国知局

本发明涉及互联网应用技术领域,特别涉及互联网视频服务技术领域,具体是指一种基于主体识别的视频主体信息显示方法、装置、系统和介质。



背景技术:

目前主流的在线视频网站或播放器在播放暂停的交互与信息组织中采用的多为传统方式,通常有以下几种:

1.直接显示暂停画面,无任何额外信息;

2.显示预设定的静态/动态广告;

3.显示与当前播放的视频、剧集相关的说明信息等。

上述的几种都是现有技术中较为简单的几种视频暂停时的信息交互方式,对视频信息缺乏有效的分析和挖掘,也难以对视频服务的流量和其他收益产生更高的贡献。

因此,如何在视频服务中,利用暂停的间隙,提供观众更为直接有效的交互方式,在增加视频服务流量产生其他服务收益的同时,又可以提升用户的使用体验,成为本领域亟待解决的问题。



技术实现要素:

本发明的目的是克服了上述现有技术中的缺点,提供一种视频服务中,利用暂停的间隙,提供观众更为直接有效的交互方式,实现相应内容的推荐,在增加视频服务流量产生其他服务收益的同时,又可以提升用户的使用体验,进而可以以此来提升用户的活跃度和整体流量水平的基于主体识别的视频主体信息显示方法、装置、系统和计算机可读存储介质。

为了实现上述的目的,本发明的基于主体识别的视频主体信息显示方法包括以下步骤:

(1)在播放视频过程中获取操作指令,并获取视频画面;

(2)根据所述的操作指令识别视频画面中的主体;

(3)显示与所述主体关联的容器,所述容器内包括主体信息。

该基于主体识别的视频主体信息显示方法中,所述的主体为人物或产品,所述的主体信息为所述的人物或产品的关联信息。

该基于主体识别的视频主体信息显示方法中,所述的人物的关联信息用以提供与该人物关联的其它资源链接,所述的产品的关联信息用以提供与该产品关联的其它资源链接。

该基于主体识别的视频主体信息显示方法中,所述的方法还包括以下步骤:

(4)获取针对所述主体信息的跳转指令;

(5)显示与所述主体信息对应的目标界面。

该基于主体识别的视频主体信息显示方法中,所述的步骤(2)具体包括以下步骤:

(21)根据所述的操作指令识别视频画面中的主体;

(22)判断是否识别到主体,若是,则进入步骤(23);若否,则显示提示信息并暂停视频播放;

(23)识别所述的主体在所述视频画面中的位置;

(24)判断所述的操作指令是否关联所述的主体在所述视频画面中的位置,若是,则进入步骤(3);若否,则暂停视频播放。

该基于主体识别的视频主体信息显示方法中,所述的根据所述的操作指令识别视频画面中的主体,具体为:

根据所述的操作指令调用人脸识别数据库和物体识别数据库,对视频画面中的人脸和物体进行识别。

该基于主体识别的视频主体信息显示方法中,所述的步骤(3)具体包括以下步骤:

(31)获取与所述主体关联的主体信息;

(32)在所述视频画面中所述主体所在位置之外显示所述的主体信息。

本发明还提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时,实现上述的基于主体识别的视频主体信息显示方法。

本发明还提供一种基于主体识别的视频主体信息显示装置,其包括处理器、存储器和显示器,所述的存储器上储存有计算机程序,该计算机程序被处理器执行时,利用所述的显示器实现上述的基于主体识别的视频主体信息显示方法。

本发明还提供一种基于主体识别的视频主体信息显示系统,其包括:上述的基于主体识别的视频主体信息显示装置,以及服务器,该服务器通过网络连接所述的基于主体识别的视频主体信息显示装置,用于存储并提供视频。

该基于主体识别的视频主体信息显示系统中,所述的服务器还具有关联信息数据库,该关联信息数据库存储有人物和产品的关联信息,并用以向所述的基于主体识别的视频主体信息显示装置提供作为所述的主体信息的人物和产品的关联信息。

该基于主体识别的视频主体信息显示系统中,所述的服务器还具有人脸识别数据库和物体识别数据库,用以调用该人脸识别数据库和物体识别数据库,对视频画面中的人脸和物体进行识别。

采用了该发明的基于主体识别的视频主体信息显示方法、装置、系统和计算机可读存储介质,其所实现的方法在播放视频过程中获取暂停播放等操作指令;进而通过识别视频画面中的主体;显示与该主体关联的主体信息。从而有效利用了视频暂停的间隙,提供观众更为直接有效的交互方式,实现相应内容的推荐,在增加视频服务流量拓展服务收益的同时,又可以提升用户的使用体验,并以此来提升用户的活跃度。同时,从另一方面而言,也提供了用户在观看视频时的一种主动而便捷的交互手段,提升整体视频应用的服务辐射范围。且本发明的基于主体识别的视频主体信息显示方法、装置、系统和计算机可读存储介质,其实现方式简便,成本低廉,可以广泛应用于各类视频应用中。

附图说明

图1为本发明的基于主体识别的视频主体信息显示方法的步骤流程图。

图2为利用本发明的基于主体识别的视频主体信息显示方法的普通暂停画面示意图。

图3为利用本发明的基于主体识别的视频主体信息显示方法的预设广告画面示意图。

图4为利用本发明的基于主体识别的视频主体信息显示方法的可识别暂停画面示意图。

图5为利用本发明的基于主体识别的视频主体信息显示方法的识别结果示意图。

图6为利用本发明的基于主体识别的视频主体信息显示方法进行主体识别后显示目标界面示意图。

图7为本发明的基于主体识别的视频主体信息显示方法在实际应用中的流程示意图。

具体实施方式

为了能够更清楚地理解本发明的技术内容,特举以下实施例详细说明。

请参阅图1所示,为本发明的基于主体识别的视频主体信息显示方法的步骤流程图。

在一种实施方式中,该基于主体识别的视频主体信息显示方法包括以下步骤:

(1)在播放视频过程中获取操作指令,并获取视频画面;

(2)根据所述的操作指令识别视频画面中的主体;

(3)显示与所述主体关联的容器,所述容器内包括主体信息。

其中,所述的操作指令为点击播放界面中的暂停播放按钮或长按视频画面中的特定区域或其它预设的操作指令,如手势指令等等。所述的主体可以是人物或产品,实际应用中可以将该主体认为是图像中可供识别的轮廓,或者分别率满足条件的若干可识别的主体。所述的主体信息则对应的为所述的人物或产品的关联信息。

具体而言,人物的关联信息用以提供与该人物关联的其它资源链接,可以是与该人物关联的角色简介、演员简介、相关剧集和推广信息等等。其中相关剧集主要是该人物/演员在该视频服务网络上的其它影视作品剧集,上述剧集可根据各个剧的点播率、评分高低、弹幕数量、粉丝数量、用户观看历史、用户偏好或更新时间等等进行排列,以最大程度提供用户最有可能的选择,从而产生引流,导流的作用。

所述的产品的关联信息用以提供与该产品关联的其它资源链接,可以是产品介绍、产品广告和网商购买链接等等,其功能以提供产品资料介绍为主,提供购买渠道为辅。购买渠道又包括视频网站站外合作的平台或网站内部购物平台。在提供产品购买链接的情况下,也可以站内优先于站外平台,或根据渠道可靠度,或根据产品销售量,或好评率等等进行的优先排序,以提供用户最可靠的购买链接。

在较优选的实施方式中,该方法还包括以下步骤:

(4)获取针对所述主体信息的跳转指令;

(5)显示与所述主体信息对应的目标界面。

根据所选择的主体信息的不同,该目标界面可分为视频网站的站内界面和站外界面,所述站内界面又包括演员介绍界面、剧集播放界面、站内购物平台界面等等。站外界面可以包括其他app、h5、以及小程序以及合作购物平台等等。

在进一步优选的实施方式中,所述的步骤(2)具体包括以下步骤:

(21)根据所述的操作指令识别视频画面中的主体;

(22)判断是否识别到主体,若是,则进入步骤(23);若否,则显示提示信息并暂停视频播放;

(23)识别所述的主体在所述视频画面中的位置;

(24)判断所述的操作指令是否关联所述的主体在所述视频画面中的位置,若是,则进入步骤(3);若否,则暂停视频播放。

所述的步骤(3)具体包括以下步骤:

(31)获取与所述主体关联的主体信息;

(32)在所述视频画面中所述主体所在位置之外显示所述的主体信息。

在更优选的实施方式中,所述的根据所述的操作指令识别视频画面中的主体,具体为:根据所述的操作指令调用人脸识别数据库和物体识别数据库,对视频画面中的人脸和物体进行识别。

本发明还提供一种计算机可读存储介质和一种基于主体识别的视频主体信息显示装置,该装置包括处理器、存储器和显示器,所述的存储器为该计算机可读存储介质,其上储存有计算机程序,该计算机程序被处理器执行时,利用所述的显示器实现上述的基于主体识别的视频主体信息显示方法。

本发明还提供一种基于主体识别的视频主体信息显示系统,在一种实施方式中,该系统包括:上述的基于主体识别的视频主体信息显示装置,以及服务器,该服务器通过网络连接所述的基于主体识别的视频主体信息显示装置,用于存储并提供视频。

在优选的实施方式中,所述的服务器还具有关联信息数据库,该关联信息数据库存储有人物和产品的关联信息,并用以向所述的基于主体识别的视频主体信息显示装置提供作为所述的主体信息的人物和产品的关联信息。

在更优选的实施方式中,所述的服务器还具有人脸识别数据库和物体识别数据库,用以调用该人脸识别数据库和物体识别数据库,对视频画面中的人脸和物体进行识别。

在实际应用中,利用本发明的方法,可以使播放过程与用户的交互更加丰富,提供的更多、更精准的信息对总体播放量和点击量等指标具有较大意义。结合以下实施例进行具体说明。

实施例1

当用户在视频播放过程中,点击某个画面,此时暂停,暂停画面如图2所示。即可对暂停时显示的画面进行分析,若未能找到或识别出相关的人物,因此显示如图2所示的普通暂停画面,或显示如图3所示的预设广告画面。

若暂停时的画面如图4所示,其中含有重点关注人物与角色,则此时对画面进行分析,可以获取画面中的重点人物的位置和身份,图5所示为识别结果的示意图。

此时如果用户暂停时,点击画面的位置位于人物角色在屏幕中的区域(通常是一个以人脸为中心的矩形区域)内,则如图6所示,在暂停时显示与角色相关的主体信息,包括角色介绍、链接和推广信息等。进而,用户还可以对该主体信息进行点击等操作,界面可以跳转至目标界面,以使用户获取更多的内容。具体如图6所示,当识别出人物为“胡歌”后,可显示胡歌在本视频网站中的其它影视剧的链接,该链接可根据点播率、评分高低、弹幕数量、粉丝数量、用户观看历史、用户偏好或更新时间等等进行择一或综合排列,用户点击其中一个后即可跳转至该剧的播放界面。

实施例2

与上一实施例相同,若用户同样在如图4所示的画面暂停播放视频,还可对画面中的产品(如服装)进行分析,获取相应的信息。若用户暂停时所点击的画面区域并非位于人物角色在屏幕中的区域,而是位于服装上,则可相应的显示服装品牌、名称、价格、购买链接等信息。购买链接可包括站内链接或站外链接,各链接可以根据价格、渠道可靠度、销量、好评率等等进行排序。类似的,用户可以点击购买链接,则可以跳转至相应产品的销售界面上,供用户直接操作进行购买等等。

实施例3

与上述两个实施例不同的是,本发明的方法可将暂停视频播放以外的其它操作设定为开始识别主体的操作指令,如长按、划过屏幕或圈划屏幕某个区域等。而后直接识别上述操作指令所关联的区域中的主体,同时暂停视频播放,进而继续如上述实施例所述的后续步骤。该实施例可以有效减少识别区域,提升识别速度。同时提供用户更为主动的操作模式。

总体而言,在实际应用中,各实施例的流程均如图7所示。视频播放在暂停时,通常客户端将通过某个预定义的回调函数获得暂停的消息,此时可以获取当前画面显示的最后一帧图像数据。此时通过调用多种成熟的物体识别、人脸识别工具库(如opencv等),检测最后一帧图像中是否有人物出现,如果有,则对其身份进行识别,并与角色库中的人物身份进行比较。同时,检测人物在画面中的位置,并获取人脸识别工具库返回的人物区域大小。

如果暂停画面中没有剧中主要人物,或者观众的点击位置不在角色上,则在暂停画面中显示通用广告画面等信息;如果观众点击在剧中人物上导致暂停,则显示与该人物相关的推广信息。

采用了该发明的基于主体识别的视频主体信息显示方法、装置、系统和计算机可读存储介质,其所实现的方法在播放视频过程中获取暂停播放等操作指令;进而通过识别视频画面中的主体;显示与该主体关联的主体信息。从而有效利用了视频暂停的间隙,提供观众更为直接有效的交互方式,实现相应内容的推荐,在增加视频服务流量拓展服务收益的同时,又可以提升用户的使用体验,并以此来提升用户的活跃度。同时,从另一方面而言,也提供了用户在观看视频时的一种主动而便捷的交互手段,提升整体视频应用的服务辐射范围。且本发明的基于主体识别的视频主体信息显示方法、装置、系统和计算机可读存储介质,其实现方式简便,成本低廉,可以广泛应用于各类视频应用中。

在此说明书中,本发明已参照其特定的实施例作了描述。但是,很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此,说明书和附图应被认为是说明性的而非限制性的。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1