本发明涉及信息推荐技术领域，尤其涉及一种基于视频内容特征的信息推荐技术。
背景技术：
目前用户在观看视频时，如对其中的内容对象，如游玩的地点、吃饭的餐厅等，产生信息了解需求，只能退出该视频，自行使用各种应用工具来进行信息查询。例如，用户使用大众点评来了解剧中的餐厅并在感兴趣时进行订位。或者，用户使用去哪儿、携程等了解剧中的某个游玩地点的相关旅游信息并购买相关旅行套餐。
技术实现要素：
本发明的目的是提供一种信息推荐的方法、装置以及计算机设备、计算机可读存储介质与计算机程序产品。
根据本发明的一个方面，提供了一种用于信息推荐的方法，其中，该方法包括：
确定一个视频的一个或多个内容特征信息，其中每个内容特征信息与其在所述视频中的播放时间段相关联；
根据所述内容特征信息，获取相对应的推荐信息；
当用户观看所述视频时，在指定时间段向所述用户推送所述推荐信息。
根据本发明的一个方面，还提供了一种用于信息推荐的装置，其中，该装置包括：
用于确定一个视频的一个或多个内容特征信息的装置，其中每个内容特征信息与其在所述视频中的播放时间段相关联；
用于根据所述内容特征信息，获取相对应的推荐信息的装置；
用于当用户观看所述视频时，在指定时间段向所述用户推送所述推荐信息的装置。
根据本发明的一个方面，还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述计算机程序时实现根据本发明的一个方面的一种用于信息推荐的方法。
根据本发明的一个方面，还提供了一种计算机可读存储介质，其上存储有计算机程序，其中，所述计算机程序被处理器执行时实现根据本发明的一个方面的一种用于信息推荐的方法。
根据本发明的一个方面，还提供了一种计算机程序产品，当所述计算机程序产品被计算机设备执行时实现根据本发明的一个方面的一种用于信息推荐的方法。
与现有技术相比，本发明在用户观看视频时，即向用户提供与视频中的内容特征相关的推荐信息，使得用户无需另行搜索，而在视频过程中即可方便快捷得获得其需要了解的信息。例如，用户观看一个“红烧肉做法”视频时，本发明可以直接向用户推荐其中各原材料的购买链接，使得用户在观看视频的过程中即可完成原材料的购买。这对于用户在观看视频时所产生的信息需求，甚至是消费冲动，均提供了有效的满足。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1示出根据本发明一个实施例的一种信息推荐的方法流程图；
图2示出根据本发明另一个实施例的一种信息推荐的装置示意图。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
在上下文中所称“计算机设备”，是指可以通过运行预定程序或指令来执行数值计算和/或逻辑计算等预定处理过程的智能电子设备，其可以包括处理器与存储器，由处理器执行在存储器中预存的程序指令来执行预定处理过程，或是由asic、fpga、dsp等硬件执行预定处理过程，或是由上述二者组合来实现。计算机设备包括但不限于服务器、个人计算机(pc)、笔记本电脑、平板电脑、智能手机等。
所述计算机设备例如包括用户设备与网络设备。其中，所述用户设备包括但不限于个人计算机(pc)、笔记本电脑、移动终端等，所述移动终端包括但不限于智能手机、pda等；所述网络设备包括但不限于单个网络服务器、多个网络服务器组成的服务器组或基于云计算(cloudcomputing)的由大量计算机或网络服务器构成的云，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个超级虚拟计算机。其中，所述计算机设备可单独运行来实现本发明，也可接入网络并通过与网络中的其他计算机设备的交互操作来实现本发明。其中，所述计算机设备所处的网络包括但不限于互联网、广域网、城域网、局域网、vpn网络等。
需要说明的是，所述用户设备、网络设备和网络等仅为举例，其他现有的或今后可能出现的计算机设备或网络如可适用于本发明，也应包含在本发明保护范围以内，并以引用方式包含于此。
本文后面所讨论的方法(其中一些通过流程图示出)可以通过硬件、软件、固件、中间件、微代码、硬件描述语言或者其任意组合来实施。当用软件、固件、中间件或微代码来实施时，用以实施必要任务的程序代码或代码段可以被存储在机器或计算机可读介质(比如存储介质)中。(一个或多个)处理器可以实施必要的任务。
这里所公开的具体结构和功能细节仅仅是代表性的，并且是用于描述本发明的示例性实施例的目的。但是本发明可以通过许多替换形式来具体实现，并且不应当被解释成仅仅受限于这里所阐述的实施例。
应当理解的是，虽然在这里可能使用了术语“第一”、“第二”等等来描述各个单元，但是这些单元不应当受这些术语限制。使用这些术语仅仅是为了将一个单元与另一个单元进行区分。举例来说，在不背离示例性实施例的范围的情况下，第一单元可以被称为第二单元，并且类似地第二单元可以被称为第一单元。这里所使用的术语“和/或”包括其中一个或更多所列出的相关联项目的任意和所有组合。
这里所使用的术语仅仅是为了描述具体实施例而不意图限制示例性实施例。除非上下文明确地另有所指，否则这里所使用的单数形式“一个”、“一项”还意图包括复数。还应当理解的是，这里所使用的术语“包括”和/或“包含”规定所陈述的特征、整数、步骤、操作、单元和/或组件的存在，而不排除存在或添加一个或更多其他特征、整数、步骤、操作、单元、组件和/或其组合。
还应当提到的是，在一些替换实现方式中，所提到的功能/动作可以按照不同于附图中标示的顺序发生。举例来说，取决于所涉及的功能/动作，相继示出的两幅图实际上可以基本上同时执行或者有时可以按照相反的顺序来执行。
下面结合附图对本发明作进一步详细描述。
图1示出根据本发明一个实施例的方法流程图，其具体示出一种进行信息推荐的过程。
典型地，本发明由网络设备实现。但是，本领域技术人员应能理解，任何具有本发明所要求的计算能力的计算机设备均可实现本发明，例如用户设备，具体如pc、智能手机。
如图1所示，在步骤s1中，计算机设备确定一个视频的一个或多个内容特征信息，其中每个内容特征信息与其在所述视频中的播放时间段相关联；在步骤s2中，计算机设备根据所述内容特征信息，获取相对应的推荐信息；在步骤s3中，计算机设备在指定时间段向用户推送所述推荐信息。
其中，当由网络端实现时，即由网络设备执行本发明的方法，需与用户设备配合来确定用户观看的视频以及由用户设备将推荐信息呈现给用户。
具体地，在步骤s1中，计算机设备确定一个视频的一个或多个内容特征信息，其中每个内容特征信息与其在所述视频中的播放时间段相关联。
在此，视频的内容特征信息包括但不限于：
1)非人物的对象特征信息；
2)背景特征信息。
通过各种现有的对象识别算法，计算机设备可以对视频中的视频图像(例如关键帧)进行对象识别以及背景识别。
其中，对于所识别的对象，计算机设备区分人物与非人物，以获得非人物的对象特征信息，例如当前帧图像中人物手中拿的饮料，计算机设备由此确定的非人物特征信息可以是饮料，也可以进一步识别该饮料具体是什么，如可口可乐。此外，本发明中的非人物特征信息应做广义理解，其并非仅为图像中除了人物以外的其他对象，还可以包括图像中人物的非人体特征，例如衣着。
对于图像中的背景，计算机设备在对图像进行前景和背景分离后，可以进一步对背景进行识别，以将背景所对应的地址作为背景特征信息。例如xx教堂。
对于未包含人物的图像，计算机设备同样可以对其进行对象识别，以将所识别的地址作为非人物的对象特征信息。例如，对于一个仅包含海岛风景的图像帧，计算机设备识别出该图像帧的对象特征为海岛，或者能够进一步精确识别出该图像帧中的对象为巴厘岛。
进一步地，计算机设备还可以结合其他信息来确定内容特征信息。例如，计算机设备还可以获取视频的字幕，以结合其中的关键词来辅助进行对象识别。具体如，对于一个视频图像帧，计算机设备获取该图像帧附近的字幕，例如，前后几帧的字幕表明，剧中人物要去巴厘岛，如果该图像帧中识别到海岛，则可以认为相应的内容特征信息为巴厘岛。此外，计算机设备还可以结合视频的介绍、报道等相关信息来识别视频中的特定对象。例如，有报道称电影版“三生三世十里桃花”在“林芝”取景，则当计算机设备识别到剧中有多处桃花林的图像帧时，可以将这些图像帧的内容特征信息确定为“林芝”。
在此，计算机设备确定视频的内容特征信息的方式包括但不限于：
1)在用户播放视频之前，提取该视频的内容特征信息。
例如，用户当前观看美食视频“红烧肉做法”，在将各视频片段逐个提供给用户之前，计算机设备先提取各视频片段的内容特征信息，如各种原材料，并获取每个内容特征信息所对应的播放时间段，如老抽出现于00:08:12-00:09:01，成品红烧肉出现于00:45:18-00:48:34。这一定程度上可以被认为是一种“实时”确定方式。
2)在用户点击播放视频之后，查询视频特征库来获得该视频的内容特征信息。
在此，视频特征库需要预先建立。视频特征库中至少存储有一条或多条视频记录。每条视频记录包括视频id、一个或多个内容特征信息以及每个内容特征信息所关联的播放时间段。视频特征库中每条视频记录可以通过对相应视频的对象识别来获得。
在确定用户需要播放的视频后，计算机设备查询视频特征库来获取该视频的各内容特征信息以及每个内容特征信息所关联的播放时间段。
如果计算机设备查询视频特征库未能获得该视频的记录，即视频特征库中尚未存储该视频的相关记录，则计算机设备可以按照上述“实时”确定方式1)来提供该视频的内容特征信息并将其存储至视频特征库中。
此外，视频特征库可以是计算机设备的本地数据库，也可以是一个外部的网络数据库。优选地，当计算机设备为网络设备时，视频特征库可以作为网络设备的本地数据库并由网络设备来进行维护。当计算机设备为用户设备时，视频特征库可以为一个外部的网络数据库，供用户设备进行查询。可替代地，当计算机设备为用户设备时，用户设备可以维护一个本地的视频特征库，该本地视频特征库从网络视频特征库获得数据更新。
在步骤s2中，计算机设备根据视频的各内容特征信息，获取相对应的推荐信息。
在确定视频的内容特征信息之后，计算机设备可以获取相应的推荐信息。
在此，推荐信息至少可以是：
1)同款推荐；
当内容特征信息是对视频内容的精确识别时，例如识别出当前帧中包括可口可乐，则相应的推荐信息可以是可口可乐的购买链接。
2)同类推荐。
例如，仍接上例，当识别出当前帧中包括可口可乐，相应的推荐信息可以任意饮料的购买链接。
或者，当识别出当前帧中的背景地点为日料餐厅，相应的推荐信息可以是一个日料餐厅的订位链接。
优选地，与内容特征信息相对应的推荐信息也可以存储于视频特征库中。
优选地，推荐信息还可以结合当前用户的相关信息来确定。
例如，用户当前观看视频为“红烧肉做法”，根据当前用户的历史消费信息，如果该用户经常买菜，则为该用户提供的推荐信息可以是其中各原材料的购买链接；如果该用户经常外出就餐，则为该用户提供的推荐信息可以是“红烧肉”这道菜作为推荐菜的餐厅。
在步骤s3中，计算机设备在指定时间段向用户推送所获取的推荐信息。
在此，指定时间段可以是相应内容特征信息所对应的播放时间段。例如，特征信息“巴厘岛”出现于视频的00:58:19-01:11:32，则在该播放时间段，计算机设备向用户呈现“巴厘岛”的相关介绍和/或旅游信息。进一步地，如果一个内容特征信息所对应的播放时间段过短，如小于一个时间阈值，5s，则将其对应的推荐信息的时间段延迟至该阈值期间，即推荐信息的呈现至少需持续5s，从对应内容特征信息的起始播放时间开始计算。
据此，随着视频的播放，计算机设备可以始终向用户推送与当前视频内容相匹配的推荐信息。这可以实时满足用户对视频中特定对象的信息了解需求。例如，视频当前播放的内容为“剧中人物在大溪地的相关活动”，则计算机设备可以在该时间段提供“大溪地”的旅游信息，随后“剧中人物从大溪地在巴黎转机回到上海”，随着该过程的推进，推荐信息可以从“大溪地”旅游信息→“巴黎”旅游信息→“上海”旅游信息。这些推荐信息可以以浮动窗口的形式呈现于屏幕的特定位置，例如屏幕右下角。
并且，用户在观看视频过程中可能瞬时产生希望了解视频对象的冲动，由于推荐信息是与视频内容同步呈现的，这使得用户能够方便快捷获得其期望的信息。例如，用户当前观看的视频正播放到剧中人物在一日料餐厅吃饭，计算机设备识别出该日料餐厅，并将其订位信息推送至用户，从而用户可以点击该订位信息以直接在该餐厅订位。这显然有效满足了用户的信息了解需求，甚至是消费冲动。
此外，指定时间段也可以是用户结束观看并退出视频时，此时计算机设备同样可以向用户推送与该退出视频中各内容特征信息相对应的推荐信息。此时的推荐信息可以有多种表现形式。
例如，推荐信息可以是一个页面，其中包括多个推荐信息并分别对应于不同的内容特征信息。进一步地，每个内容特征信息可以对应有一个推荐信息子集，这些推荐信息子集被整合为一个页面呈现给用户。可替代地，推荐信息也可以基于不同的分类来生成多个推荐信息子集。
图2示出根据本发明一个实施例的装置示意图，其具体示出一种进行信息推荐的装置。
如图2所示，推荐装置200装置于网络设备中，并进一步包括特征确定装置21、推荐确定装置22和推荐推送装置23。
其中，特征确定装置21确定一个视频的一个或多个内容特征信息，其中每个内容特征信息与其在所述视频中的播放时间段相关联；接着，推荐确定装置22根据所述内容特征信息，获取相对应的推荐信息；随后，推荐推送装置23在指定时间段向用户推送所述推荐信息。
具体地，特征确定装置21确定一个视频的一个或多个内容特征信息，其中每个内容特征信息与其在所述视频中的播放时间段相关联。
在此，视频的内容特征信息包括但不限于：
1)非人物的对象特征信息；
2)背景特征信息。
通过各种现有的对象识别算法，特征确定装置21或推荐装置200中的其他装置可以对视频中的视频图像(例如关键帧)进行对象识别以及背景识别。本说明中多以特征确定装置21执行对象识别来进行举例描述。
其中，对于所识别的对象，特征确定装置21区分人物与非人物，以获得非人物的对象特征信息，例如当前帧图像中人物手中拿的饮料，特征确定装置21由此确定的非人物特征信息可以是饮料，也可以进一步识别该饮料具体是什么，如可口可乐。此外，本发明中的非人物特征信息应做广义理解，其并非仅为图像中除了人物以外的其他对象，还可以包括图像中人物的非人体特征，例如衣着。
对于图像中的背景，特征确定装置21在对图像进行前景和背景分离后，可以进一步对背景进行识别，以将背景所对应的地址作为背景特征信息。例如xx教堂。
对于未包含人物的图像，特征确定装置21同样可以对其进行对象识别，以将所识别的地址作为非人物的对象特征信息。例如，对于一个仅包含海岛风景的图像帧，特征确定装置21识别出该图像帧的对象特征为海岛，或者能够进一步精确识别出该图像帧中的对象为巴厘岛。
进一步地，特征确定装置21还可以结合其他信息来确定内容特征信息。例如，特征确定装置21还可以获取视频的字幕，以结合其中的关键词来辅助进行对象识别。具体如，对于一个视频图像帧，特征确定装置21获取该图像帧附近的字幕，例如，前后几帧的字幕表明，剧中人物要去巴厘岛，如果该图像帧中识别到海岛，则可以认为相应的内容特征信息为巴厘岛。此外，特征确定装置21还可以结合视频的介绍、报道等相关信息来识别视频中的特定对象。例如，有报道称电影版“三生三世十里桃花”在“林芝”取景，则当特征确定装置21识别到剧中有多处桃花林的图像帧时，可以将这些图像帧的内容特征信息确定为“林芝”。
在此，特征确定装置21确定视频的内容特征信息的方式包括但不限于：
1)在用户播放视频之前，提取该视频的内容特征信息。
例如，用户当前观看美食视频“红烧肉做法”，在将各视频片段逐个提供给用户之前，特征确定装置21先提取各视频片段的内容特征信息，如各种原材料，并获取每个内容特征信息所对应的播放时间段，如老抽出现于00:08:12-00:09:01，成品红烧肉出现于00:45:18-00:48:34。这一定程度上可以被认为是一种“实时”确定方式。
2)在用户点击播放视频之后，查询视频特征库来获得该视频的内容特征信息。
在此，视频特征库需要预先建立。视频特征库中至少存储有一条或多条视频记录。每条视频记录包括视频id、一个或多个内容特征信息以及每个内容特征信息所关联的播放时间段。视频特征库中每条视频记录可以通过对相应视频的对象识别来获得。
在确定用户需要播放的视频后，特征确定装置21查询视频特征库来获取该视频的各内容特征信息以及每个内容特征信息所关联的播放时间段。
如果特征确定装置21查询视频特征库未能获得该视频的记录，即视频特征库中尚未存储该视频的相关记录，则特征确定装置21可以按照上述“实时”确定方式1)来提供该视频的内容特征信息并将其存储至视频特征库中。
随后，推荐确定装置22根据视频的各内容特征信息，获取相对应的推荐信息。
在确定视频的内容特征信息之后，推荐确定装置22可以获取相应的推荐信息。
在此，推荐信息至少可以是：
1)同款推荐；
当内容特征信息是对视频内容的精确识别时，例如识别出当前帧中包括可口可乐，则相应的推荐信息可以是可口可乐的购买链接。
2)同类推荐。
例如，仍接上例，当识别出当前帧中包括可口可乐，相应的推荐信息可以任意饮料的购买链接。
或者，当识别出当前帧中的背景地点为日料餐厅，相应的推荐信息可以是一个日料餐厅的订位链接。
优选地，与内容特征信息相对应的推荐信息也可以存储于视频特征库中。
优选地，推荐信息还可以结合当前用户的相关信息来确定。
例如，用户当前观看视频为“红烧肉做法”，推荐确定装置22根据当前用户的历史消费信息，如果该用户经常买菜，则为该用户确定的推荐信息可以是其中各原材料的购买链接；如果该用户经常外出就餐，则为该用户确定的推荐信息可以是“红烧肉”这道菜作为推荐菜的餐厅。
接着，推荐推送装置23在指定时间段向用户推送所获取的推荐信息。
在此，指定时间段可以是相应内容特征信息所对应的播放时间段。例如，特征信息“巴厘岛”出现于视频的00:58:19-01:11:32，则在该播放时间段，推荐推送装置23向用户呈现“巴厘岛”的相关介绍和/或旅游信息。进一步地，如果一个内容特征信息所对应的播放时间段过短，如小于一个时间阈值，5s，推荐推送装置23则将对应推荐信息的时间段延迟至该阈值期间，即该推荐信息的呈现至少需持续5s，从对应内容特征信息的起始播放时间开始计算。
据此，随着视频的播放，推荐推送装置23可以始终向用户推送与当前视频内容相匹配的推荐信息。这可以实时满足用户对视频中特定对象的信息了解需求。例如，视频当前播放的内容为“剧中人物在大溪地的相关活动”，则推荐推送装置23可以在该时间段提供“大溪地”的旅游信息，随后“剧中人物从大溪地在巴黎转机回到上海”，随着该过程的推进，推荐信息可以从“大溪地”旅游信息→“巴黎”旅游信息→“上海”旅游信息。这些推荐信息可以以浮动窗口的形式呈现于屏幕的特定位置，例如屏幕右下角。
并且，用户在观看视频过程中可能瞬时产生希望了解视频对象的冲动，由于推荐信息是与视频内容同步呈现的，这使得用户能够方便快捷获得其期望的信息。例如，用户当前观看的视频正播放到剧中人物在一日料餐厅吃饭，特征确定装置21识别出该日料餐厅，推荐确定装置22确定相应的推荐信息为该日料餐厅的订位信息，推荐推送装置23将其订位信息推送至用户，从而用户可以点击该订位信息以直接在该餐厅订位。这显然有效满足了用户的信息了解需求，甚至是消费冲动。
此外，指定时间段也可以是用户结束观看并退出视频时，此时推荐推送装置23同样可以向用户推送与该退出视频中各内容特征信息相对应的推荐信息。此时的推荐信息可以有多种表现形式。
例如，推荐信息可以是一个页面，其中包括多个推荐信息并分别对应于不同的内容特征信息。进一步地，每个内容特征信息可以对应有一个推荐信息子集，这些推荐信息子集被整合为一个页面呈现给用户。可替代地，推荐信息也可以基于不同的分类来生成推荐信息子集。
需要注意的是，本发明可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(asic)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中，本发明的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本发明的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，ram存储器，磁或光驱动器或软磁盘及类似设备。另外，本发明的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。
另外，本发明的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本发明的方法和/或技术方案。而调用本发明的方法的程序指令，可能被存储在固定的或可移动的记录介质中，和/或通过广播或其他信号承载媒体中的数据流而被传输，和/或被存储在根据所述程序指令运行的计算机设备的工作存储器中。在此，根据本发明的一个实施例包括一个装置，该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发该装置运行基于前述根据本发明的多个实施例的方法和/或技术方案。
对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。