媒体资源投放方法、装置、存储介质及电子装置与流程

本发明涉及计算机领域，具体而言，涉及一种媒体资源投放方法、装置、存储介质及电子装置。

背景技术：

为了更广泛地传递产品信息，很多产品开发者会选择通过互联网投放与产品相关的媒体资源，以达到宣传该产品的目的。目前，在互联网中投放上述媒体资源的过程中，往往是预先获取该媒体资源所宣传的产品的产品类型，并根据该产品类型确定投放时间和投放位置。然后，在时间轴上按照上述投放时间打点，在到达该投放时间的情况下，再触发用于投放媒体资源的投放请求，以在上述投放位置的展示窗口中呈现出所投放的媒体资源。

也就是说，相关技术提供的媒体资源投放方法，通常是投放平台按照与用户预先约定的投放时间和投放位置对媒体资源进行定点投放。上述投放准备过程不仅操作较复杂，而且也占用了较长的时间，从而导致媒体资源的投放效率较低的问题。

针对上述的问题，目前尚未提出有效的解决方案。

技术实现要素：

本发明实施例提供了一种媒体资源投放方法、装置、存储介质及电子装置，以至少解决相关技术中提供的媒体资源投放方法存在投放效率较低的技术问题。

根据本发明实施例的一个方面，提供了一种媒体资源投放方法，包括：获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合；通过对象识别模型对上述画面帧集合进行对象识别，其中，上述对象识别模型为利用多个样本画面帧进行机器训练后所得到的用于识别画面帧中所展示的对象；在上述对象识别模型输出的识别结果指示上述画面帧集合中包括目标对象的情况下，触发与上述目标对象相匹配的媒体资源投放请求；响应上述媒体资源投放请求，拉取与上述目标对象相关联的目标媒体资源；将上述目标媒体资源投放至上述画面帧集合之后的目标画面帧中。

根据本发明实施例的另一方面，还提供了一种媒体资源投放装置，包括：获取单元，用于获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合；识别单元，用于通过对象识别模型对上述画面帧集合进行对象识别，其中，上述对象识别模型为利用多个样本画面帧进行机器训练后所得到的用于识别画面帧中所展示的对象；触发单元，用于在上述对象识别模型输出的识别结果指示上述画面帧集合中包括目标对象的情况下，触发与上述目标对象相匹配的媒体资源投放请求；拉取单元，用于响应上述媒体资源投放请求，拉取与上述目标对象相关联的目标媒体资源；投放单元，用于将上述目标媒体资源投放至上述画面帧集合之后的目标画面帧中。

作为一种可选的示例，上述拉取单元包括：查找模块，用于根据上述媒体资源投放请求所请求的上述目标对象的上述投放指示信息，在媒体资源库中查找与上述目标对象相关联的上述目标媒体资源，其中，上述媒体资源库中包括：待投放的多个媒体资源，与请求投放上述媒体资源的投放账号所配置的投放控制信息，上述多个媒体资源中包括上述目标媒体资源；第一拉取模块，用于在查找到上述目标媒体资源的情况下，拉取上述目标媒体资源。

作为一种可选的示例，上述触发单元包括：第一获取模块，用于在上述识别结果指示上述画面帧集合中包括上述目标对象的情况下，在目标时间段内获取与上述目标对象匹配的投放指示信息，其中，上述投放指示信息包括：上述目标对象的对象属性信息、用于登录上述播放客户端的登录账号、上述目标对象所在对象画面帧的帧标识及上述目标对象在上述对象画面帧中的显示位置坐标，上述目标时间段小于等于第一时间阈值；生成模块，用于根据上述投放指示信息生成上述媒体资源投放请求。

作为一种可选的示例，在上述画面帧集合中包括n个上述目标对象的情况下，上述生成模块包括：划分子模块，用于对n个上述目标对象按照上述对象画面帧进行划分，得到m个对象集合，其中，位于同一个上述对象画面帧中的上述目标对象划分到同一个上述对象集合中，上述n大于等于上述m；生成子模块，用于根据第i个上述对象集合中包括的上述目标对象的上述投放指示信息，生成与第i个上述对象画面帧相匹配的上述媒体资源投放请求，上述i为小于等于上述m的整数。

作为一种可选的示例，上述拉取单元包括：查找模块，用于根据上述媒体资源投放请求所请求的上述目标对象的上述投放指示信息，在媒体资源库中查找与上述目标对象相关联的上述目标媒体资源，其中，上述媒体资源库中包括：待投放的多个媒体资源，与请求投放上述媒体资源的投放账号所配置的投放控制信息，上述多个媒体资源中包括上述目标媒体资源；第一拉取模块，用于在查找到上述目标媒体资源的情况下，拉取上述目标媒体资源。

作为一种可选的示例，上述查找模块通过以下步骤实现在媒体资源库中查找与上述目标对象相关联的上述目标媒体资源：遍历上述媒体资源库中存储的上述多个媒体资源分别对应的上述投放控制信息执行以下操作，直至查找到上述目标媒体资源：获取当前媒体资源对应的当前投放控制信息；比对上述当前投放控制信息与上述目标对象的上述投放指示信息；在上述当前投放控制信息与上述目标对象的上述投放指示信息不匹配的情况下，获取下一个媒体资源作为上述当前媒体资源；在上述当前投放控制信息与上述目标对象的上述投放指示信息相匹配的情况下，确定上述当前媒体资源为上述目标媒体资源。

作为一种可选的示例，上述装置还包括：第二获取单元，用于在上述获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，获取用于登录上述播放客户端的登录账号所属的账号集合中包含的对象账号的数量，其中，属于同一个上述账号集合中的上述对象账号为进入同一个播放空间的账号，上述对象账号包括上述登录账号；第一操作单元，用于在上述对象账号的数量小于等于第一目标阈值的情况下，执行以下一种操作：暂停通过上述对象识别模型对上述画面帧集合进行对象识别的过程，或，控制减少投放的上述目标媒体资源的数量。

作为一种可选的示例，上述装置还包括：第三获取单元，用于在上述获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，获取用于运行上述对象识别模型的服务器的数据处理量；第二操作单元，用于在上述数据处理量大于等于第二目标阈值的情况下，执行以下一种操作：暂停通过上述对象识别模型对上述画面帧集合进行对象识别的过程，或，控制减少投放的上述目标媒体资源的数量。

作为一种可选的示例，上述拉取单元包括：第一确定模块，用于在上述目标对象为第一类对象的情况下，确定与上述目标对象相关联的上述目标媒体资源的资源标识为第一资源标识，其中，上述第一资源标识用于指示与上述目标对象属于相同类型的媒体资源；第二拉取模块，用于按照上述第一资源标识拉取上述目标媒体资源，其中，上述第一资源标识所指示的上述目标媒体资源将在上述目标画面帧中，与上述目标对象的显示位置预先绑定的关联位置上进行投放展示；第二确定模块，用于在上述目标对象为第二类对象的情况下，确定与上述目标对象相关联的上述目标媒体资源的资源标识为第二资源标识，其中，上述第二资源标识用于指示与上述目标对象属于相关类型的媒体资源；第三拉取模块，用于按照上述第二资源标识拉取上述目标媒体资源，其中，上述第二资源标识所指示的上述目标媒体资源将在上述目标画面帧中上述目标对象的显示位置上进行投放展示，以遮挡上述目标对象。

作为一种可选的示例，上述识别单元包括：识别模块，用于通过上述对象识别模型对上述画面帧集合中的以下至少一种对象进行识别：文字、数字、图像元素。

作为一种可选的示例，上述装置还包括：第四获取单元，用于在上述画面帧集合之后的目标画面帧中投放上述目标媒体资源之后，获取对上述目标媒体资源执行交互操作的操作数据；调整单元，用于根据上述操作数据调整所投放的上述目标媒体资源。

根据本发明实施例的又一方面，还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述媒体资源投放方法，。

根据本发明实施例的又一方面，还提供了一种电子装置，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，上述处理器通过计算机程序执行上述的媒体资源投放方法，。

在本发明实施例中，在通过对播放客户端发送的媒体数据流进行实时画面截取操作得到待识别的画面帧集合之后，可以利用对象识别模型及时对上述画面帧集合进行自动识别，以在识别出目标对象的情况下，及时触发与目标对象相匹配的媒体资源投放请求，并根据该媒体资源触发请求及时拉取到与目标对象相关联的目标媒体资源，将其投放到画面帧集合之后的目标画面帧中。从而实现及时对实时截取到的画面帧自动进行对象识别并自动触发媒体资源投放请求，以将与所请求的与目标对象关联的目标媒体资源及时投放到播放客户端所播放的目标画面帧中，而无需与用户预先约定以对媒体资源进行定点投放，简化了投放准备操作，节省了投放时间，进一步满足了播放客户端实时播放的需求，从而达到提高在播放客户端进行媒体资源投放的投放效率的效果，进而解决了相关技术中提供的媒体资源投放方法存在投放效率较低的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种可选的媒体资源投放方法的硬件环境的示意图；

图2是根据本发明实施例的一种可选的媒体资源投放方法的流程图；

图3是根据本发明实施例的一种可选的媒体资源投放方法中应用的网络结构示意图；

图4是根据本发明实施例的一种可选的媒体资源投放方法的投放账号配置界面的示意图；

图5是根据本发明实施例的另一种可选的媒体资源投放方法的投放账号配置界面的示意图；

图6是根据本发明实施例的又一种可选的媒体资源投放方法的投放账号配置界面的示意图；

图7是根据本发明实施例的又一种可选的媒体资源投放方法的投放账号配置界面的示意图；

图8是根据本发明实施例的另一种可选的媒体资源投放方法的流程图；

图9是根据本发明实施例的一种可选的媒体资源投放方法的示意图；

图10是根据本发明实施例的另一种可选的媒体资源投放方法的示意图；

图11是根据本发明实施例的又一种可选的媒体资源投放方法的示意图；

图12是根据本发明实施例的又一种可选的媒体资源投放方法的示意图；

图13是根据本发明实施例的又一种可选的媒体资源投放方法的流程图；

图14是根据本发明实施例的一种可选的媒体资源投放装置的结构示意图；

图15是根据本发明实施例的一种可选的电子装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本发明实施例的一个方面，提供了一种上述媒体资源投放方法，可选地，作为一种可选的实施方式，上述媒体资源投放方法可以但不限于应用于如图1所示的硬件环境中。假设用户终端102(如图1所示移动终端、个人电脑pc等)中运行有播放客户端，该播放客户端正在直播玩家所控制的角色对象a所参与的游戏过程。如图1上方左侧虚线框(a)所示为播放客户端的显示界面，正在播放角色对象a翻越墙体对象b的过程。如步骤s102，服务器104将获取上述播放客户端发送的媒体数据流，并执行步骤s104。如步骤s104-1，对上述媒体数据流执行画面截取操作，得到画面帧集合；然后执行步骤s104-2，通过对象识别模型对上述画面帧集合进行对象识别，其中，该对象识别模型为利用多个样本画面帧进行机器训练后，所得到的用于识别画面帧中所展示的对象的神经网络模型。在该对象识别模型输出的识别结果指示上述画面帧集合中包括目标对象的情况下，执行步骤s104-3至步骤s104-4，触发与上述目标对象相匹配的媒体资源投放请求，并响应该媒体资源投放请求，从数据库106中拉取与目标对象相关联的目标媒体资源。接着执行步骤s104-5，确定将上述目标媒体资源投放至上述画面帧集合的目标画面帧中。最后，服务器104执行步骤s106，将所要投放的上述目标媒体资源返回给用户终端102，以使用户终端102中的播放客户端的显示界面可以如图1上方右侧虚线框(b)所示，例如，该目标媒体资源是关于汽车s的广告资源。

需要说明的是，在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之后，利用对象识别模型对上述画面帧集合进行对象识别，其中，该对象识别模型为利用多个样本画面帧进行机器训练后，所得到的用于识别画面帧中所展示的对象的神经网络模型。在上述对象识别模型输出的识别结果指示上述画面帧集合中包括目标对象的情况下，触发与上述目标对象相匹配的媒体资源投放请求，并响应该媒体资源投放请求，拉取与目标对象相关联的目标媒体资源，从而实现及时将目标媒体资源投放至上述画面帧集合之后的目标画面帧中。也就是说，在通过对播放客户端发送的媒体数据流进行实时画面截取操作得到待识别的画面帧集合之后，可以利用对象识别模型及时对上述画面帧集合进行自动识别，以在识别出目标对象的情况下，及时触发与目标对象相匹配的媒体资源投放请求，并根据该媒体资源触发请求及时拉取到与目标对象相关联的目标媒体资源，将其投放到画面帧集合之后的目标画面帧中。从而实现及时对实时截取到的画面帧自动进行对象识别并自动触发媒体资源投放请求，以将与所请求的与目标对象关联的目标媒体资源及时投放到播放客户端所播放的目标画面帧中，而无需与用户预先约定以对媒体资源进行定点投放，简化了投放准备操作，节省了投放时间，进一步满足了播放客户端实时播放的需求，从而达到提高在播放客户端进行媒体资源投放的投放效率的效果，进而克服了相关技术中存在的媒体资源投放效率较低的问题。

可选地，上述媒体资源投放方法可以但不限于应用于可以计算数据的用户终端上，例如手机、平板电脑、笔记本电脑、pc机等终端上。上述用于在终端与服务器之间进行数据传输的网络可以包括但不限于无线网络或有线网络。其中，该无线网络包括：蓝牙、wifi及其他实现无线通信的网络。上述有线网络可以包括但不限于：广域网、城域网、局域网。上述服务器可以包括但不限于：供应方平台(supplysideplatform，简称ssp)服务器和广告服务器等用于提供媒体资源和/或处理媒体资源的服务器。上述仅是一种示例，本实施例中对此不作任何限定。

可选地，作为一种可选的实施方式，如图2所示，上述媒体资源投放方法，包括：

s202，获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合；

s204，通过对象识别模型对画面帧集合进行对象识别，其中，对象识别模型为利用多个样本画面帧进行机器训练后，所得到的用于识别画面帧中所展示的对象的神经网络模型；

s206，在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求；

s208，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源；

s210，将目标媒体资源投放至画面帧集合之后的目标画面帧中。

可选地，在本实施例中，上述媒体资源投放方法可以但不限于应用于要求实时播放媒体数据的播放场景中。例如，应用于视频播放应用、直播播放应用等播放客户端中。上述仅是一种示例，本实施例中对此不作任何限定。假设播放客户端以直播客户端为例，获取使用主播账号登录的直播客户端发送的直播媒体数据流，并对其执行画面截取操作得到直播画面帧集合，并通过对象识别模型自动对上述直播画面帧集合进行对象识别。在画面帧集合中识别出目标对象的情况下，及时触发与该目标对象相匹配的媒体资源投放请求，并响应该媒体资源投放请求，及时拉取到与上述目标对象相关联的目标媒体资源，然后将该目标媒体资源投放到上述直播画面帧集合之后的目标直播画面帧中。也就是说，上述使用主播账号登录的直播客户端，及进入该主播账号所在直播房间的其他播放账号所登录的直播客户端，在播放至上述目标画面帧时，都将在直播客户端的界面中呈现上述所投放的目标媒体资源。上述仅是一种示例，本实施例中对此不作任何限定。

需要说明的是，在通过对播放客户端发送的媒体数据流进行实时画面截取操作得到待识别的画面帧集合之后，可以利用对象识别模型及时对上述画面帧集合进行自动识别，以在识别出目标对象的情况下，及时触发与目标对象相匹配的媒体资源投放请求，并根据该媒体资源触发请求及时拉取到与目标对象相关联的目标媒体资源，将其投放到画面帧集合之后的目标画面帧中。从而实现及时对实时截取到的画面帧自动进行对象识别并自动触发媒体资源投放请求，以将与所请求的与目标对象关联的目标媒体资源及时投放到播放客户端所播放的目标画面帧中，简化了投放准备操作，满足了播放客户端实时播放的需求，进而达到提高在播放客户端进行媒体资源投放的投放效率的效果。

可选地，在本实施例中，上述目标媒体资源可以包括但不限于：视频资源、音频资源、图片资源或者文本资源等，也可以是这几种资源的任意组合，例如，文本资源和图片资源的组合，视频资源和文本资源的组合。具体的产品形态可以是广告媒体资源，如视频广告、原生广告、横幅广告、搜索广告等。上述仅是一种示例，本实施例中对此不作任何限定。

可选地，在本实施例中，上述对象识别模型可以包括但不限于对画面帧集合中的以下至少一种对象进行识别：文字、数字、图像元素。以截取到游戏应用中的场景画面帧为例，可以但不限于识别出上述游戏场景画面帧中的角色对象的属性信息，如角色对象的标识、角色对象的类型、角色对象所使用道具装备、角色对象正在释放的技能等；也可以但不限于识别出不同角色对象提供的评论信息，如弹幕、评论等；还可以但不限于识别出播放客户端所登录的账号标识或空间标识，如直播房间的房间号、使用播放客户端的播放账号等。上述仅是一种实施例，本实施例中对此不作任何限定。

需要说明的是，上述对象识别模型的初始网络模型可以但不限于以下至少之一：视觉几何群网络(visualgeometrygroupnetwork，简称vgg)模型(如vgg-16)、语义识别模型、基于深度卷积神经网络构建的图片分类模型。上述仅是一种实施例，本实施例中还可以采用其他的神经网络模型作为初始网络模型，利用从媒体数据流中截取的多个样本画面帧来进行深度学习，不断优化模型中的参数，以最终得到上述用于识别画面帧中所展示的对象的对象识别模型，本实施例中对上述对象识别模型的初始网络模型不作任何限定。

以基于深度卷积神经网络构建的图片分类模型为例进行说明。如图3所示，整个网络结构包括五层卷积层和三层全连接层，网络的最前端是输入图片的原始像素点，最后端是图片的分类结果。一个完整的卷积层可能包括一层卷积层(convolution，简称conv)，一层线性修正单元(rectifiedlinearunits)，一层最大池化层(max-pooling，简称pool)，一层归一化层(normalization)。

例如，对于每一层网络，具体的网络参数配置可以但不限于如表1所示。假设仍以图3所示网络结构为例，其中包括：输入图片层(inputlayer)和5个卷积层和3个全连接层，每个输入图片都将被缩放成227*227大小，分rgb三个颜色维度输入。layer1～layer5是卷积层(简称conv)，以layer1为例，卷积滤波器的大小是11*11，卷积步幅为4，本层共有96个卷积滤波器，本层的输出则是96个55*55大小的图片。在layer1，卷积滤波后，还接有relus操作和max-pooling操作。layer6～layer8是全连接层(简称full)，相当于在五层卷积层的基础上再加上一个三层的全连接神经网络分类器。以layer6为例，本层的神经元个数为4096个。layer8的神经元个数为1000个，相当于训练目标的1000个图片类别。从而实现对输入图像(如inputimage)进行分类处理，以输出得到该图像的分类处理结果(如softmaxoutput)。

表1

可选地，在本实施例中，在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，还包括：在使用投放账号登录的平台客户端上，呈现投放控制信息配置界面，其中，投放控制信息配置界面中显示有多个待配置的投放控制信息配置项；获取对投放控制信息配置项执行配置操作所生成的配置请求，其中，配置请求用于指示投放账号所请求投放的媒体资源的投放指示信息。其中，待配置的投放控制信息可以包括但不限于接收所投放的媒体资源的接收方需满足的条件信息，例如：用于展示媒体资源的操作系统、媒体资源的投放位置类型、媒体资源的展示形式类型、媒体资源的展示尺寸、媒体资源的投放时间、媒体资源的投放数量。媒体资源的展示方式/顺序等。此外，上述媒体投放控制信息还可以包括但不限于投放账号需完成的订单配置操作信息，如媒体资源的投放计费方式、媒体资源的投放计费单价等。

例如，假设媒体资源以广告媒体资源为例，上述投放账号配置投放控制信息的界面可以但不限于如图4-7所示。如图4所示为资源管理-媒体资源管理-媒体创建的界面，可以创建媒体资源并选择该媒体资源支持的操作系统，图4所示为选定ios操作系统。如图5所示为资源管理-投放位置管理-广告位创建的界面，可以选择广告位类型、广告位形式类型、广告尺寸等内容，图5所示为选定“banner广告”进行“固定广告”展示。如图6所示为资源管理-sdk/文档下载的界面，可以选择媒体数据流的来源渠道，如pc端或移动终端的安卓系统。如图7所示为投放管理-订单管理-基本信息的配置界面，可以选择媒体资源的投放策略，如选择媒体资源的计费方式、计费单价、投放时间、轮换策略等信息。

可选地，在本实施例中，在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求可以包括但不限于：在确定识别结果指示画面帧集合中包括目标对象后的目标时间段内，触发上述媒体资源投放请求。其中，上述目标时间段小于第一时间阈值。

也就是说，在本实施例中，为了满足播放客户端实时播放的需求，在利用对象识别模型对实时截取得到的画面帧集合自动进行对象识别之后，将在目标时间段内触发与识别出的目标对象相匹配的媒体资源投放请求，以便于尽快拉取到与目标对象关联的目标媒体资源，并及时将该目标媒体资源投放至播放客户端。从而实现在提供媒体数据流的播放客户端与投放媒体资源的媒体资源管理平台之间实现双向传输控制，及时将播放客户端的媒体数据流发送媒体资源管理平台，以使媒体资源管理平台利用对象识别模型(如人工智能网络模型)从媒体数据流截取出的画面帧集合中识别出目标对象，并在最短时间内触发媒体资源投放请求，以及时拉取到与目标对象关联的目标媒体资源，并投放至上述播放客户端进行曝光展示。

可选地，在本实施例中，上述触发与所述目标对象相匹配的媒体资源投放请求可以包括但不限于：

1)在画面帧集合中包括一个目标对象，直接触发与该目标对象相匹配的媒体资源投放请求；

2)在画面帧集合中包括n个目标对象，则基于目标对象所在对象画面帧触发媒体资源投放请求，其中，对象画面帧中可以包括一个或多个目标对象。

也就是说，以对象画面帧为单位触发媒体资源投放请求，以实现将根据媒体资源投放请求所拉取到的目标媒体资源都可以准确投放至同一个目标画面帧中，保证播放的实时性和同步性。

可选地，在本实施例中，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源可以包括但不限于：从媒体资源库中存储的多个媒体资源中查找出与目标对象相匹配的目标媒体资源。其中，在查找的过程中，可以但不限于：依次比对媒体资源库中为媒体资源配置的投放控制信息，和目标对象的投放指示信息，在二者匹配的情况下，确定当前比对的媒体资源即为目标对象关联的目标媒体资源。此外，在本实施例中，上述投放指示信息可以包括但不限于：目标对象的对象属性信息、用于登录播放客户端的登录账号、目标对象所在对象画面帧的帧标识及目标对象在对象画面帧中的显示位置坐标。

可选地，在本实施例中，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源可以包括但不限于：

1)在目标对象为预设的投放对象集合中的对象的情况下，则拉取到的与目标对象相关联目标媒体资源，将在目标画面帧中与目标对象的显示位置预先绑定的关联位置上进行投放展示。

需要说明的是，上述预设的投放对象集合可以包括但不限于：与媒体资源管理平台达成合作的所有投放账号，在订单中指示需要投放媒体资源的对象。上述关联位置可以包括但不限于：与上述目标对象的显示位置相邻但不完全遮挡的位置、目标画面中的指定位置。其中，该指定位置为目标画面帧中的显眼位置。从而实现利用目标画面帧中所展示的目标对象，和在关联位置上展示的目标媒体资源进行共同宣传的目的，以吸引更多的用户关注上述目标对象与上述目标媒体资源所指示的产品。

2)在目标对象并非预设的投放对象集合中的对象的情况下，则拉取到的与目标对象相关联目标媒体资源，将在目标画面帧中目标对象的显示位置上进行投放展示。

需要说明的是，为了保护投放账号的利益，可以但不限于利用拉取到的目标媒体资源对非预设的投放对象集合的对象进行遮挡。也就是说，拉取到的目标媒体资源与目标对象属于相关类型，用于遮挡目标画面帧中的目标对象，从而达到对目标媒体资源中所指示的产品进行曝光宣传的目的。

可选地，在本实施例中，在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，还可以包括但不限于：在满足以下至少一个条件的情况下，调整目标媒体资源投放策略：

1)与目标对象进入同一个播放空间的账号的数量小于等于第一目标阈值；

2)用于运行对象识别模型的服务器的数据处理量大于等于第二目标阈值。

此外，在本实施例中，上述调整目标媒体资源投放策略的方式可以包括但不限于以下至少之一：

1)暂停通过对象识别模型对画面帧集合进行对象识别的过程；

2)控制减少投放的目标媒体资源的数量。

可选地，在本实施例中，在画面帧集合之后的目标画面帧中投放目标媒体资源之后，还包括：获取对目标媒体资源执行交互操作的操作数据；根据操作数据调整所投放的目标媒体资源。

具体结合图8所示示例进行说明。假设上述媒体资源投放方法应用于如图8所示的投放控制系统中，该投放控制系统包括：播放客户端802、供应方服务器804及媒体资源库806。如步骤s802，播放客户端802将实时发送媒体数据流给供应方服务器804，然后供应方服务器804将执行步骤s806-s808：对上述获取到的媒体数据流执行画面截取操作，得到画面帧集合，并利用对象识别模型对该画面帧集合进行对象识别，其中，这里对象识别模型为基于多个样本画面帧进行机器训练后得到的用于识别画面帧中对象的人工智能神经网络模型。然后，在上述对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，则及时触发与目标对象相匹配的媒体资源投放请求。再如步骤s810，供应方服务器804将从媒体资源库806中拉取与上述目标对象相关联的目标媒体资源，其中，这里媒体资源库806中存储有待投放的媒体资源，及投放账号为媒体资源配置的投放控制信息。最后，供应方服务器804将投放目标媒体资源至播放客户端802。从而实现在最短时间内触发媒体资源投放请求，并及时拉取到与目标对象关联的目标媒体资源，投放至上述播放客户端进行曝光展示。

可选地，在本实施例中，上述供应方服务器804中可以包括但不限于视频理解模块，如图9所示人工智能(artificialintelligence，简称ai)视频理解模块902。该ai视频理解模块902包括3个层面：第一层，底层基础硬件部署，包括内容分发网络服务器(contentdeliverynetwork，简称cdn)服务器、数据服务模块，其中数据服务模块中包括数据库(如mysql)、存储系统(如redis)、操作系统(如片内操作系统(chipoperatingsystem，简称cos))等。此外，上述数据服务模块中也可以但不限于实现可视化显示。第二层，视频理解引擎，包括：房间控制模块、降级服务模块、识别模块、广告频控模块、配置服务模块、数据收集模块。其中，识别模块用于提供识别服务，如利用识别模型对画面帧集合进行：类型识别、文字识别、数字识别及画面识别，例如识别出广告的的形式为集锦广告。第三层，截图配置服务，包括：截图服务模块、配置服务模块。用于对媒体数据流执行画面截取操作(也可称作截图操作)，并对获取到的画面帧集合执行响应的配置操作。

以图9所示为例说明，播放客户端可以但不限于通过简单开发钥匙(simpledevelopkey，简称sdk)904来传输终端中展示的媒体数据流，其中，该sdk904的版本可以但不限于以下至少一种：web端对应版本、安卓系统对应版本及ios系统对应版本，将媒体数据流传输到ai视频理解模块902中。ai视频理解模块902通过第三层中截图服务模块对媒体数据流进行流截图，并通过配置服务模块获取对应的投放指示信息并进行整合配置处理，得到配置信息。进一步，将上述流截图得到的画面帧集合与配置信息发送给第二层视频理解引擎，根据房间控制模块和降级服务模块中配置的投放策略，利用识别模块对画面帧集合进行识别，如识别画面帧集合中所展示的终端应用的类型、所展示的文字或数字、所展示的画面等。其中，可以但不限于引入ai识别模型对来优化识别服务，从而实现对象识别的目的。进一步，将媒体数据流存储至第三层中cdn服务器，将识别出的识别结果数据返回数据服务模块进行数据存储或数据处理等操作。进一步，还可以将上述识别结果数据反馈至识别模型(如ai识别模型)，从而实现对识别模型的识别能力的优化提升。

通过本申请提供的实施例，在通过对播放客户端发送的媒体数据流进行实时画面截取操作得到待识别的画面帧集合之后，可以利用对象识别模型及时对上述画面帧集合进行自动识别，以在识别出目标对象的情况下，及时触发与目标对象相匹配的媒体资源投放请求，并根据该媒体资源触发请求及时拉取到与目标对象相关联的目标媒体资源，将其投放到画面帧集合之后的目标画面帧中。从而实现及时对实时截取到的画面帧自动进行对象识别并自动触发媒体资源投放请求，以将与所请求的与目标对象关联的目标媒体资源及时投放到播放客户端所播放的目标画面帧中，简化了投放准备操作，节省了投放时间，进一步满足了播放客户端实时播放的需求，从而达到提高在播放客户端进行媒体资源投放的投放效率的效果。

作为一种可选的方案，在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求包括：

s1，在识别结果指示画面帧集合中包括目标对象的情况下，在目标时间段内获取与目标对象匹配的投放指示信息，其中，投放指示信息包括：目标对象的对象属性信息、用于登录播放客户端的登录账号、目标对象所在对象画面帧的帧标识及目标对象在对象画面帧中的显示位置坐标，目标时间段小于等于第一时间阈值；

s2，根据投放指示信息生成媒体资源投放请求。

需要说明的是，在本实施例中，上述第一时间阈值可以但不限于为播放客户端满足实时播放需求的播放条件值。该第一时间阈值可以但不限于根据实时播放的场景需求设置我不同取值，本实施例中对此不作任何限定。也就是说，通过将用于触发媒体资源投放请求的时间段控制在第一时间阈值内，从而使得播放客户端可以及时利用获取到的与目标对象匹配的投放指示信息，来触发生成对应的媒体资源投放请求，以缩短投放与该目标对象相关联的目标媒体资源的处理时间，进而达到提高媒体资源投放效率的效果。

作为一种可选的实施方式，在画面帧集合中包括n个目标对象的情况下，步骤s2中，根据投放指示信息生成媒体资源投放请求包括：

s21，对n个目标对象按照对象画面帧进行划分，得到m个对象集合，其中，位于同一个对象画面帧中的目标对象划分到同一个对象集合中，n大于等于m；

s22，根据第i个对象集合中包括的目标对象的投放指示信息，生成与第i个对象画面帧相匹配的媒体资源投放请求，i为小于等于m的整数。

需要说明的是，在本实施例中，在识别结果指示画面帧集合中包括n个目标对象的情况下，上述n个目标对象与画面帧集合中的画面帧之间的关系可以包括但不限于：

1)在n＝1的情况下，根据投放指示信息，可以直接生成与上述一个目标对象相匹配的媒体资源投放请求。其中，该媒体资源投放请求中携带上述一个目标对象的投放指示信息，以便于服务器可以根据解析到的投放指示信息确定所要投放的与该目标对象相关联的目标媒体资源。

2)在n>1，且n＝m的情况下，表示与每个对象集合对应的对象画面帧中，分别识别出一个目标对象。进一步，可以分别基于每一个对象画面帧中识别出的目标对象的投放指示信息，来生成媒体资源投放请求。

3)在n>1，且n>m的情况下，表示在m个对象集合中至少一个对象集合对应的对象画面帧中，识别出了至少两个目标对象。进一步，可以根据上述两个目标对象的投放指示信息，来生成与该对象画面帧对应的媒体资源投放请求。也就是说，媒体资源投放请求中可以携带多个目标对象的投放指示信息，其中，这里多个目标对象为同一个对象画面帧中识别出的目标对象。

需要说明的是，本实施例中上述对象画面帧的数量(或对象集合的数量)小于等于画面帧集合中画面帧的数量。其中，在对象画面帧的数量(或对象集合的数量)等于画面帧集合中画面帧的数量的情况下，表示每个画面帧都识别出了目标对象，可以作为对象画面帧。在对象画面帧的数量(或对象集合的数量)小于画面帧集合中画面帧的数量的情况下，表示画面帧集合中的部分画面帧识别出来目标对象，该部分画面帧可以作为对象画面帧。

具体结合图10所示示例进行说明，假设利用对象识别模型通过对图像进行识别，确定当前在播放客户端显示界面中包括两个目标对象，包括：车和背包(如图所示圆形标记)。则可以以当前显示界面对应的画面帧(假设对应画面帧的帧标识为帧id.1)为单位，利用与该画面帧对应的对象集合中包括的目标对象(即车和背包)的投放指示信息，来尽快触发生成该帧id.1的媒体资源投放请求，

通过本申请提供的实施例，通过在小于第一时间阈值的目标时间段内控制自动触发生成与目标对象相匹配的媒体资源投放请求，从而实现对播放客户端的播放过程与媒体资源投放过程进行实时地自动结合，简化媒体资源的投放控制操作过程，以缩短用于触发媒体资源投放请求，和拉取对应目标媒体资源的处理时间，达到提高媒体资源投放效率的效果。

作为一种可选的方案，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源包括：

s1，根据媒体资源投放请求所请求的目标对象的投放指示信息，在媒体资源库中查找与目标对象相关联的目标媒体资源，其中，媒体资源库中包括：待投放的多个媒体资源，与请求投放媒体资源的投放账号所配置的投放控制信息，多个媒体资源中包括目标媒体资源；

s2，在查找到目标媒体资源的情况下，拉取目标媒体资源。

需要说明的是，在本实施例中，上述媒体资源库可以但不限于用于存储媒体资源本身或媒体资源的存储链接地址，以及请求投放媒体资源的投放账号所配置的投放控制信息，其中，这里的投放控制信息可以包括但不限于如图4-7所示的内容。上述媒体资源库在存储上述内容时可以但不限于采用key-value的形式来进行存储，以便于后续查找获取与目标对象相关联的目标媒体资源。

可选地，在本实施例中，上述步骤s1中在媒体资源库中查找与目标对象相关联的目标媒体资源包括：

s1，遍历媒体资源库中存储的多个媒体资源分别对应的投放控制信息执行以下操作，直至查找到目标媒体资源：

s12，获取当前媒体资源对应的当前投放控制信息；

s14，比对当前投放控制信息与目标对象的投放指示信息；

s16，在当前投放控制信息与目标对象的投放指示信息不匹配的情况下，获取下一个媒体资源作为当前媒体资源；

s18，在当前投放控制信息与目标对象的投放指示信息相匹配的情况下，确定当前媒体资源为目标媒体资源。

可选地，在本实施例中，上述投放控制信息可以包括但不限于投放账号预先配置的用于接收所投放的媒体资源的接收方需满足的条件信息，例如：用于展示媒体资源的操作系统、媒体资源的投放位置类型、媒体资源的展示形式类型、媒体资源的展示尺寸、媒体资源的投放时间、媒体资源的投放数量。媒体资源的展示方式/顺序等。此外，上述媒体投放控制信息还可以包括但不限于投放账号需完成的订单配置操作信息，如媒体资源的投放计费方式、媒体资源的投放计费单价等。

例如，假设获取到目标对象的投放指示信息包括：在ios操作系统运行的直播客户端中的帧id.1的右上方识别出目标对象：车辆，该车辆的显示位置坐标为(x1，y1)，对应尺寸为x*y。而当前媒体资源的投放控制信息包括：车辆，在ios系统投放，显示尺寸x’*y’，投放形式为在固定位置l以banner形式显示固定时长t。

在确定上述投放控制信息所指示的当前媒体资源不满足目标对象的投放指示信息的情况下，则从媒体资源库中存储的多个媒体资源中获取下一个媒体资源作为目标媒体资源，继续进行比对；而在确定上述投放控制信息所指示的当前媒体资源满足目标对象的投放指示信息的情况下，则将该当前媒体资源作为与目标对象关联的目标媒体资源。

上述仅是示例，对于利用当前投放控制信息与目标对象的投放指示信息进行比对，以确定所要投放的目标媒体资源的过程可以参考相关媒体资源投放技术，本实施例中对此不作任何限定。

通过本申请提供的实施例，根据媒体资源投放请求所请求的目标对象的投放指示信息，在媒体资源库中查找出与目标对象相关联的目标媒体资源，从而实现在提供媒体数据流的播放客户端与投放媒体资源的平台之间实现双向传输控制，及时将播放客户端的媒体数据流发送媒体资源管理平台，并在最短时间内触发媒体资源投放请求，以及时拉取到与目标对象关联的目标媒体资源，并投放至上述播放客户端进行曝光展示。

作为一种可选的方案，在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前还包括：通过以下至少一种方式来调整媒体资源的投放策略：

1)根据与播放空间对应的账号集合中包括的对象账号的数量，来权衡采用本实施例中所提供的媒体资源投放方法的投放策略是否需要调整：

s1，获取用于登录播放客户端的登录账号所属的账号集合中包含的对象账号的数量，其中，属于同一个账号集合中的对象账号为进入同一个播放空间的账号，对象账号包括上述登录账号；

s2，在对象账号的数量小于等于第一目标阈值的情况下，执行以下一种操作：暂停通过对象识别模型对画面帧集合进行对象识别的过程，或，控制减少投放的目标媒体资源的数量。

需要说明的是，对于播放空间对应的账号集合中包括的对象账号的数量小于等于第一目标阈值的情况，表示即使投放目标媒体资源，该目标媒体资源的曝光量或点击量，也无法达到预期效果。因而本实施例中提供利用与播放空间对应的账号集合中包括的对象账号的数量来确定投放策略是否调整。

可选地，在本实施例中，当上述播放客户端为直播客户端的情况下，上述播放空间可以但不限于为直播房间。上述仅是一种示例，本实施例中对此不作任何限定。

2)根据服务器的数据处理量，来权衡采用本实施例中所提供的媒体资源投放方法的投放策略是否需要调整：

s1，获取用于运行对象识别模型的服务器的数据处理量；

s2，在数据处理量大于等于第二目标阈值的情况下，执行以下一种操作：暂停通过对象识别模型对画面帧集合进行对象识别的过程，或，控制减少投放的目标媒体资源的数量。

需要说明的是，对于服务器的数据处理量大于等于第二目标阈值的情况，表示服务器的数据处理量已达到满负荷处理状态，若继续进行处理可能会造成系统故障。因而本实施例中提供利用服务器的数据处理量来确定投放策略是否调整。

通过本申请提供的实施例，通过获取播放空间对应的账号集合中包括的对象账号的数量，来控制调整暂停利用对象识别模型进行对象识别的过程，以缓解服务器的处理负荷。还可以控制减少投放的媒体资源的数量，以使媒体资源更精准地投放到其他场景中，从而满足投放账号要求的曝光量或点击量，进而保障投放账号的利益。

作为一种可选的方案，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源包括：

1)在目标对象为第一类对象的情况下，确定与目标对象相关联的目标媒体资源的资源标识为第一资源标识，其中，第一资源标识用于指示与目标对象属于相同类型的媒体资源；按照第一资源标识拉取目标媒体资源，其中，第一资源标识所指示的目标媒体资源将在目标画面帧中，与目标对象的显示位置预先绑定的关联位置上进行投放展示；或者

2)在目标对象为第二类对象的情况下，确定与目标对象相关联的目标媒体资源的资源标识为第二资源标识，其中，第二资源标识用于指示与目标对象属于相关类型的媒体资源；按照第二资源标识拉取目标媒体资源，其中，第二资源标识所指示的目标媒体资源将在目标画面帧中目标对象的显示位置上进行投放展示，以遮挡目标对象。

具体结合图11所示进行说明，例如媒体资源以广告资源为例，目标对象以可识别的广告对象为例。假设利用对象识别模型通过对图像进行识别，确定当前在播放客户端显示界面中包括广告对象：车辆(品牌为s)。进一步，假设品牌s为投放账号预先设定的广告投放类型，即确定该车辆(品牌为s)属于第一类对象。进一步确定与该车辆(品牌为s)相关联的目标媒体资源的资源标识为第一资源标识，即该目标媒体资源应为与品牌s属于相同类型的媒体资源，即品牌s对应的广告资源s。然后，实时拉取到广告资源s，并投放至画面帧集合之后的目标画面帧中，与车辆(品牌为s)的显示位置预先绑定的关联位置(如图11所示左上角)上进行投放展示，从而实现与目标画面帧中显示的目标对象同时进行曝光，以达到共同宣传，提升关注率的目的。

具体结合图12所示进行说明，例如媒体资源以广告资源为例，目标对象以可识别的广告对象为例。假设利用对象识别模型通过对图像进行识别，确定当前在播放客户端显示界面中包括广告对象：车辆(品牌为s)。进一步，假设品牌s并非投放账号预先设定的广告投放类型，即确定该车辆(品牌为s)属于第二类对象。进一步确定与该车辆(品牌为s)相关联的目标媒体资源的资源标识为第二资源标识，即该目标媒体资源应为与品牌s属于相关类型的媒体资源，即品牌q对应的广告资源q。然后，实时拉取到广告资源q，并投放至画面帧集合之后的目标画面帧中车辆s的显示位置上进行投放展示，以遮挡车辆s，从而实现替代原目标画面帧中所显示的目标对象，避免对非预设广告投放类型的展示，进而达到对预设广告投放类型进行指定投放曝光的目的。

具体结合图13所示进行说明：假设媒体资源投放控制方法应用于包括以下内容的系统中：流量主1302、广告sdk1304、供应方服务器(也可简称ssp服务器)1306、广告服务器(也可简称ad服务器)1308及数据服务器1310。其中，上述广告sdk1304可以但不限于应用于与图9所示ai视频理解模块进行交互，以完成本实施例中的识别处理过程。

进一步，如图13所示步骤s1302至s1346为广告投放的全流程，包括：触发广告请求，检索广告资源，投放至终端的广告位上进行渲染展示。进一步，还包括监控追踪所展示的广告的展示、点击、跳转下载等过程，并记录相应的日志。以便于利用上述记录的日志来优化广告投放过程，从而使得广告得到准确投放，进而利于吸引更有针对性的用户群，提升广告变现的效果。具体过程本实施例中在此不再赘述。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

根据本发明实施例的另一个方面，还提供了一种用于实施上述媒体资源投放方法的媒体资源投放装置。如图14所示，该装置包括：

1)获取单元1402，用于获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合；

2)识别单元1404，用于通过对象识别模型对画面帧集合进行对象识别，其中，对象识别模型为利用多个样本画面帧进行机器训练后，所得到的用于识别画面帧中所展示的对象的神经网络模型；

3)触发单元1406，用于在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求；

4)拉取单元1408，用于响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源；

5)投放单元1410，用于将目标媒体资源投放至画面帧集合之后的目标画面帧中。

可选地，在本实施例中，上述媒体资源投放装置可以但不限于应用于要求实时播放媒体数据的播放场景中。例如，应用于视频播放应用、直播播放应用等播放客户端中。上述仅是一种示例，本实施例中对此不作任何限定。假设播放客户端以直播客户端为例，获取使用主播账号登录的直播客户端发送的直播媒体数据流，并对其执行画面截取操作得到直播画面帧集合，并通过对象识别模型自动对上述直播画面帧集合进行对象识别。在画面帧集合中识别出目标对象的情况下，及时触发与该目标对象相匹配的媒体资源投放请求，并响应该媒体资源投放请求，及时拉取到与上述目标对象相关联的目标媒体资源，然后将该目标媒体资源投放到上述直播画面帧集合之后的目标直播画面帧中。也就是说，上述使用主播账号登录的直播客户端，及进入该主播账号所在直播房间的其他播放账号所登录的直播客户端，在播放至上述目标画面帧时，都将在直播客户端的界面中呈现上述所投放的目标媒体资源。上述仅是一种示例，本实施例中对此不作任何限定。

需要说明的是，在通过对播放客户端发送的媒体数据流进行实时画面截取操作得到待识别的画面帧集合之后，可以利用对象识别模型及时对上述画面帧集合进行自动识别，以在识别出目标对象的情况下，及时触发与目标对象相匹配的媒体资源投放请求，并根据该媒体资源触发请求及时拉取到与目标对象相关联的目标媒体资源，将其投放到画面帧集合之后的目标画面帧中。从而实现及时对实时截取到的画面帧自动进行对象识别并自动触发媒体资源投放请求，以将与所请求的与目标对象关联的目标媒体资源及时投放到播放客户端所播放的目标画面帧中，简化了投放准备操作，满足了播放客户端实时播放的需求，进而达到提高在播放客户端进行媒体资源投放的投放效率的效果。

可选地，在本实施例中，上述目标媒体资源可以包括但不限于：视频资源、音频资源、图片资源或者文本资源等，也可以是这几种资源的任意组合，例如，文本资源和图片资源的组合，视频资源和文本资源的组合。具体的产品形态可以是广告媒体资源，如视频广告、原生广告、横幅广告、搜索广告等。上述仅是一种示例，本实施例中对此不作任何限定。

可选地，在本实施例中，上述识别单元1404包括：识别模块，用于通过对象识别模型对画面帧集合中的以下至少一种对象进行识别：文字、数字、图像元素。以截取到游戏应用中的场景画面帧为例，可以但不限于识别出上述游戏场景画面帧中的角色对象的属性信息，如角色对象的标识、角色对象的类型、角色对象所使用道具装备、角色对象正在释放的技能等；也可以但不限于识别出不同角色对象提供的评论信息，如弹幕、评论等；还可以但不限于识别出播放客户端所登录的账号标识或空间标识，如直播房间的房间号、使用播放客户端的播放账号等。上述仅是一种实施例，本实施例中对此不作任何限定。

需要说明的是，上述对象识别模型的初始网络模型可以但不限于以下至少之一：视觉几何群网络(visualgeometrygroupnetwork，简称vgg)模型(如vgg-16)、语义识别模型、基于深度卷积神经网络构建的图片分类模型。上述仅是一种实施例，本实施例中还可以采用其他的神经网络模型作为初始网络模型，利用从媒体数据流中截取的多个样本画面帧来进行深度学习，不断优化模型中的参数，以最终得到上述用于识别画面帧中所展示的对象的对象识别模型，本实施例中对上述对象识别模型的初始网络模型不作任何限定。

可选地，在本实施例中，在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，还包括：在使用投放账号登录的平台客户端上，呈现投放控制信息配置界面，其中，投放控制信息配置界面中显示有多个待配置的投放控制信息配置项；获取对投放控制信息配置项执行配置操作所生成的配置请求，其中，配置请求用于指示投放账号所请求投放的媒体资源的投放指示信息。其中，待配置的投放控制信息可以包括但不限于接收所投放的媒体资源的接收方需满足的条件信息，例如：用于展示媒体资源的操作系统、媒体资源的投放位置类型、媒体资源的展示形式类型、媒体资源的展示尺寸、媒体资源的投放时间、媒体资源的投放数量。媒体资源的展示方式/顺序等。此外，上述媒体投放控制信息还可以包括但不限于投放账号需完成的订单配置操作信息，如媒体资源的投放计费方式、媒体资源的投放计费单价等。

例如，假设媒体资源以广告媒体资源为例，上述投放账号配置投放控制信息的界面可以但不限于如图4-7所示。如图4所示为资源管理-媒体资源管理-媒体创建的界面，可以创建媒体资源并选择该媒体资源支持的操作系统，图4所示为选定ios操作系统。如图5所示为资源管理-投放位置管理-广告位创建的界面，可以选择广告位类型、广告位形式类型、广告尺寸等内容，图5所示为选定“banner广告”进行“固定广告”展示。如图6所示为资源管理-sdk/文档下载的界面，可以选择媒体数据流的来源渠道，如pc端或移动终端的安卓系统。如图7所示为投放管理-订单管理-基本信息的配置界面，可以选择媒体资源的投放策略，如选择媒体资源的计费方式、计费单价、投放时间、轮换策略等信息。

可选地，在本实施例中，在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求可以包括但不限于：在确定识别结果指示画面帧集合中包括目标对象后的目标时间段内，触发上述媒体资源投放请求。其中，上述目标时间段小于第一时间阈值。

也就是说，在本实施例中，为了满足播放客户端实时播放的需求，在利用对象识别模型对实时截取得到的画面帧集合自动进行对象识别之后，将在目标时间段内触发与识别出的目标对象相匹配的媒体资源投放请求，以便于尽快拉取到与目标对象关联的目标媒体资源，并及时将该目标媒体资源投放至播放客户端。从而实现在提供媒体数据流的播放客户端与投放媒体资源的媒体资源管理平台之间实现双向传输控制，及时将播放客户端的媒体数据流发送媒体资源管理平台，以使媒体资源管理平台利用对象识别模型(如人工智能网络模型)从媒体数据流截取出的画面帧集合中识别出目标对象，并在最短时间内触发媒体资源投放请求，以及时拉取到与目标对象关联的目标媒体资源，并投放至上述播放客户端进行曝光展示。

可选地，在本实施例中，上述触发与所述目标对象相匹配的媒体资源投放请求可以包括但不限于：

1)在画面帧集合中包括一个目标对象，直接触发与该目标对象相匹配的媒体资源投放请求；

2)在画面帧集合中包括n个目标对象，则基于目标对象所在对象画面帧触发媒体资源投放请求，其中，对象画面帧中可以包括一个或多个目标对象。

也就是说，以对象画面帧为单位触发媒体资源投放请求，以实现将根据媒体资源投放请求所拉取到的目标媒体资源都可以准确投放至同一个目标画面帧中，保证播放的实时性和同步性。

可选地，在本实施例中，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源可以包括但不限于：从媒体资源库中存储的多个媒体资源中查找出与目标对象相匹配的目标媒体资源。其中，在查找的过程中，可以但不限于：依次比对媒体资源库中为媒体资源配置的投放控制信息，和目标对象的投放指示信息，在二者匹配的情况下，确定当前比对的媒体资源即为目标对象关联的目标媒体资源。此外，在本实施例中，上述投放指示信息可以包括但不限于：目标对象的对象属性信息、用于登录播放客户端的登录账号、目标对象所在对象画面帧的帧标识及目标对象在对象画面帧中的显示位置坐标。

可选地，在本实施例中，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源可以包括但不限于：

1)在目标对象为预设的投放对象集合中的对象的情况下，则拉取到的与目标对象相关联目标媒体资源，将在目标画面帧中与目标对象的显示位置预先绑定的关联位置上进行投放展示。

需要说明的是，上述预设的投放对象集合可以包括但不限于：与媒体资源管理平台达成合作的所有投放账号，在订单中指示需要投放媒体资源的对象。上述关联位置可以包括但不限于：与上述目标对象的显示位置相邻但不完全遮挡的位置、目标画面中的指定位置。其中，该指定位置为目标画面帧中的显眼位置。从而实现利用目标画面帧中所展示的目标对象，和在关联位置上展示的目标媒体资源进行共同宣传的目的，以吸引更多的用户关注上述目标对象与上述目标媒体资源所指示的产品。

2)在目标对象并非预设的投放对象集合中的对象的情况下，则拉取到的与目标对象相关联目标媒体资源，将在目标画面帧中目标对象的显示位置上进行投放展示。

需要说明的是，为了保护投放账号的利益，可以但不限于利用拉取到的目标媒体资源对非预设的投放对象集合的对象进行遮挡。也就是说，拉取到的目标媒体资源与目标对象属于相关类型，用于遮挡目标画面帧中的目标对象，从而达到对目标媒体资源中所指示的产品进行曝光宣传的目的。

可选地，在本实施例中，在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，还可以包括但不限于：在满足以下至少一个条件的情况下，调整目标媒体资源投放策略：

1)与目标对象进入同一个播放空间的账号的数量小于等于第一目标阈值；

2)用于运行对象识别模型的服务器的数据处理量大于等于第二目标阈值。

此外，在本实施例中，上述调整目标媒体资源投放策略的方式可以包括但不限于以下至少之一：

1)暂停通过对象识别模型对画面帧集合进行对象识别的过程；

2)控制减少投放的目标媒体资源的数量。

可选地，在本实施例中，上述装置还包括：第四获取单元，用于在画面帧集合之后的目标画面帧中投放目标媒体资源之后，获取对目标媒体资源执行交互操作的操作数据；调整单元，用于根据操作数据调整所投放的目标媒体资源。

通过本申请提供的实施例，在通过对播放客户端发送的媒体数据流进行实时画面截取操作得到待识别的画面帧集合之后，可以利用对象识别模型及时对上述画面帧集合进行自动识别，以在识别出目标对象的情况下，及时触发与目标对象相匹配的媒体资源投放请求，并根据该媒体资源触发请求及时拉取到与目标对象相关联的目标媒体资源，将其投放到画面帧集合之后的目标画面帧中。从而实现及时对实时截取到的画面帧自动进行对象识别并自动触发媒体资源投放请求，以将与所请求的与目标对象关联的目标媒体资源及时投放到播放客户端所播放的目标画面帧中，简化了投放准备操作，节省了投放时间，进一步满足了播放客户端实时播放的需求，从而达到提高在播放客户端进行媒体资源投放的投放效率的效果。

作为一种可选的方案，触发单元1406包括：

1)第一获取模块，用于在识别结果指示画面帧集合中包括目标对象的情况下，在目标时间段内获取与目标对象匹配的投放指示信息，其中，投放指示信息包括：目标对象的对象属性信息、用于登录播放客户端的登录账号、目标对象所在对象画面帧的帧标识及目标对象在对象画面帧中的显示位置坐标，目标时间段小于等于第一时间阈值；

2)生成模块，用于根据投放指示信息生成媒体资源投放请求。

需要说明的是，在本实施例中，上述第一时间阈值可以但不限于为播放客户端满足实时播放需求的播放条件值。该第一时间阈值可以但不限于根据实时播放的场景需求设置我不同取值，本实施例中对此不作任何限定。也就是说，通过将用于触发媒体资源投放请求的时间段控制在第一时间阈值内，从而使得播放客户端可以及时利用获取到的与目标对象匹配的投放指示信息，来触发生成对应的媒体资源投放请求，以缩短投放与该目标对象相关联的目标媒体资源的处理时间，进而达到提高媒体资源投放效率的效果。

作为一种可选的实施方式，在画面帧集合中包括n个目标对象的情况下，生成模块包括：

1)划分子模块，用于对n个目标对象按照对象画面帧进行划分，得到m个对象集合，其中，位于同一个对象画面帧中的目标对象划分到同一个对象集合中，n大于等于m；

2)生成子模块，用于根据第i个对象集合中包括的目标对象的投放指示信息，生成与第i个对象画面帧相匹配的媒体资源投放请求，i为小于等于m的整数。

需要说明的是，在本实施例中，在识别结果指示画面帧集合中包括n个目标对象的情况下，上述n个目标对象与画面帧集合中的画面帧之间的关系可以包括但不限于：

1)在n＝1的情况下，根据投放指示信息，可以直接生成与上述一个目标对象相匹配的媒体资源投放请求。其中，该媒体资源投放请求中携带上述一个目标对象的投放指示信息，以便于服务器可以根据解析到的投放指示信息确定所要投放的与该目标对象相关联的目标媒体资源。

2)在n>1，且n＝m的情况下，表示与每个对象集合对应的对象画面帧中，分别识别出一个目标对象。进一步，可以分别基于每一个对象画面帧中识别出的目标对象的投放指示信息，来生成媒体资源投放请求。

3)在n>1，且n>m的情况下，表示在m个对象集合中至少一个对象集合对应的对象画面帧中，识别出了至少两个目标对象。进一步，可以根据上述两个目标对象的投放指示信息，来生成与该对象画面帧对应的媒体资源投放请求。也就是说，媒体资源投放请求中可以携带多个目标对象的投放指示信息，其中，这里多个目标对象为同一个对象画面帧中识别出的目标对象。

需要说明的是，本实施例中上述对象画面帧的数量(或对象集合的数量)小于等于画面帧集合中画面帧的数量。其中，在对象画面帧的数量(或对象集合的数量)等于画面帧集合中画面帧的数量的情况下，表示每个画面帧都识别出了目标对象，可以作为对象画面帧。在对象画面帧的数量(或对象集合的数量)小于画面帧集合中画面帧的数量的情况下，表示画面帧集合中的部分画面帧识别出来目标对象，该部分画面帧可以作为对象画面帧。

具体结合图10所示示例进行说明，假设利用对象识别模型通过对图像进行识别，确定当前在播放客户端显示界面中包括两个目标对象，包括：车和背包(如图所示圆形标记)。则可以以当前显示界面对应的画面帧(假设对应画面帧的帧标识为帧id.1)为单位，利用与该画面帧对应的对象集合中包括的目标对象(即车和背包)的投放指示信息，来尽快触发生成该帧id.1的媒体资源投放请求，

通过本申请提供的实施例，通过在小于第一时间阈值的目标时间段内控制自动触发生成与目标对象相匹配的媒体资源投放请求，从而实现对播放客户端的播放过程与媒体资源投放过程进行实时地自动结合，简化媒体资源的投放控制操作过程，以缩短用于触发媒体资源投放请求，和拉取对应目标媒体资源的处理时间，达到提高媒体资源投放效率的效果。

作为一种可选的方案，拉取单元1408包括：

1)查找模块，用于根据媒体资源投放请求所请求的目标对象的投放指示信息，在媒体资源库中查找与目标对象相关联的目标媒体资源，其中，媒体资源库中包括：待投放的多个媒体资源，与请求投放媒体资源的投放账号所配置的投放控制信息，多个媒体资源中包括目标媒体资源；

2)第一拉取模块，用于在查找到目标媒体资源的情况下，拉取目标媒体资源。

需要说明的是，在本实施例中，上述媒体资源库可以但不限于用于存储媒体资源本身或媒体资源的存储链接地址，以及请求投放媒体资源的投放账号所配置的投放控制信息，其中，这里的投放控制信息可以包括但不限于如图4-7所示的内容。上述媒体资源库在存储上述内容时可以但不限于采用key-value的形式来进行存储，以便于后续查找获取与目标对象相关联的目标媒体资源。

可选地，在本实施例中，上述查找模块通过以下步骤实现在媒体资源库中查找与目标对象相关联的目标媒体资源：

s1，遍历媒体资源库中存储的多个媒体资源分别对应的投放控制信息执行以下操作，直至查找到目标媒体资源：

s12，获取当前媒体资源对应的当前投放控制信息；

s14，比对当前投放控制信息与目标对象的投放指示信息；

s16，在当前投放控制信息与目标对象的投放指示信息不匹配的情况下，获取下一个媒体资源作为当前媒体资源；

s18，在当前投放控制信息与目标对象的投放指示信息相匹配的情况下，确定当前媒体资源为目标媒体资源。

可选地，在本实施例中，上述投放控制信息可以包括但不限于投放账号预先配置的用于接收所投放的媒体资源的接收方需满足的条件信息，例如：用于展示媒体资源的操作系统、媒体资源的投放位置类型、媒体资源的展示形式类型、媒体资源的展示尺寸、媒体资源的投放时间、媒体资源的投放数量。媒体资源的展示方式/顺序等。此外，上述媒体投放控制信息还可以包括但不限于投放账号需完成的订单配置操作信息，如媒体资源的投放计费方式、媒体资源的投放计费单价等。

例如，假设获取到目标对象的投放指示信息包括：在ios操作系统运行的直播客户端中的帧id.1的右上方识别出目标对象：车辆，该车辆的显示位置坐标为(x1，y1)，对应尺寸为x*y。而当前媒体资源的投放控制信息包括：车辆，在ios系统投放，显示尺寸x’*y’，投放形式为在固定位置l以banner形式显示固定时长t。

在确定上述投放控制信息所指示的当前媒体资源不满足目标对象的投放指示信息的情况下，则从媒体资源库中存储的多个媒体资源中获取下一个媒体资源作为目标媒体资源，继续进行比对；而在确定上述投放控制信息所指示的当前媒体资源满足目标对象的投放指示信息的情况下，则将该当前媒体资源作为与目标对象关联的目标媒体资源。

上述仅是示例，对于利用当前投放控制信息与目标对象的投放指示信息进行比对，以确定所要投放的目标媒体资源的过程可以参考相关媒体资源投放技术，本实施例中对此不作任何限定。

通过本申请提供的实施例，根据媒体资源投放请求所请求的目标对象的投放指示信息，在媒体资源库中查找出与目标对象相关联的目标媒体资源，从而实现在提供媒体数据流的播放客户端与投放媒体资源的平台之间实现双向传输控制，及时将播放客户端的媒体数据流发送媒体资源管理平台，并在最短时间内触发媒体资源投放请求，以及时拉取到与目标对象关联的目标媒体资源，并投放至上述播放客户端进行曝光展示。

作为一种可选的方案，上述装置还包括：

1)第二获取单元，用于在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，获取用于登录播放客户端的登录账号所属的账号集合中包含的对象账号的数量，其中，属于同一个账号集合中的对象账号为进入同一个播放空间的账号，对象账号包括登录账号；

2)第一操作单元，用于在对象账号的数量小于等于第一目标阈值的情况下，执行以下一种操作：暂停通过对象识别模型对画面帧集合进行对象识别的过程，或，控制减少投放的目标媒体资源的数量。

需要说明的是，对于播放空间对应的账号集合中包括的对象账号的数量小于等于第一目标阈值的情况，表示即使投放目标媒体资源，该目标媒体资源的曝光量或点击量，也无法达到预期效果。因而本实施例中提供利用与播放空间对应的账号集合中包括的对象账号的数量来确定投放策略是否调整。

可选地，在本实施例中，当上述播放客户端为直播客户端的情况下，上述播放空间可以但不限于为直播房间。上述仅是一种示例，本实施例中对此不作任何限定。

作为另一种可选的方案，上述装置还包括：

1)第三获取单元，用于在获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合之前，获取用于运行对象识别模型的服务器的数据处理量；

2)第二操作单元，用于在数据处理量大于等于第二目标阈值的情况下，执行以下一种操作：暂停通过对象识别模型对画面帧集合进行对象识别的过程，或，控制减少投放的目标媒体资源的数量。

需要说明的是，对于服务器的数据处理量大于等于第二目标阈值的情况，表示服务器的数据处理量已达到满负荷处理状态，若继续进行处理可能会造成系统故障。因而本实施例中提供利用服务器的数据处理量来确定投放策略是否调整。

通过本申请提供的实施例，通过获取播放空间对应的账号集合中包括的对象账号的数量，来控制调整暂停利用对象识别模型进行对象识别的过程，以缓解服务器的处理负荷。还可以控制减少投放的媒体资源的数量，以使媒体资源更精准地投放到其他场景中，从而满足投放账号要求的曝光量或点击量，进而保障投放账号的利益。

作为一种可选的方案，拉取单元1408包括：

1)第一确定模块，用于在目标对象为第一类对象的情况下，确定与目标对象相关联的目标媒体资源的资源标识为第一资源标识，其中，第一资源标识用于指示与目标对象属于相同类型的媒体资源；

2)第二拉取模块，用于按照第一资源标识拉取目标媒体资源，其中，第一资源标识所指示的目标媒体资源将在目标画面帧中，与目标对象的显示位置预先绑定的关联位置上进行投放展示；

3)第二确定模块，用于在目标对象为第二类对象的情况下，确定与目标对象相关联的目标媒体资源的资源标识为第二资源标识，其中，第二资源标识用于指示与目标对象属于相关类型的媒体资源；

4)第三拉取模块，用于按照第二资源标识拉取目标媒体资源，其中，第二资源标识所指示的目标媒体资源将在目标画面帧中目标对象的显示位置上进行投放展示，以遮挡目标对象。

具体结合图11所示进行说明，例如媒体资源以广告资源为例，目标对象以可识别的广告对象为例。假设利用对象识别模型通过对图像进行识别，确定当前在播放客户端显示界面中包括广告对象：车辆(品牌为s)。进一步，假设品牌s为投放账号预先设定的广告投放类型，即确定该车辆(品牌为s)属于第一类对象。进一步确定与该车辆(品牌为s)相关联的目标媒体资源的资源标识为第一资源标识，即该目标媒体资源应为与品牌s属于相同类型的媒体资源，即品牌s对应的广告资源s。然后，实时拉取到广告资源s，并投放至画面帧集合之后的目标画面帧中，与车辆(品牌为s)的显示位置预先绑定的关联位置(如图11所示左上角)上进行投放展示，从而实现与目标画面帧中显示的目标对象同时进行曝光，以达到共同宣传，提升关注率的目的。

具体结合图12所示进行说明，例如媒体资源以广告资源为例，目标对象以可识别的广告对象为例。假设利用对象识别模型通过对图像进行识别，确定当前在播放客户端显示界面中包括广告对象：车辆(品牌为s)。进一步，假设品牌s并非投放账号预先设定的广告投放类型，即确定该车辆(品牌为s)属于第二类对象。进一步确定与该车辆(品牌为s)相关联的目标媒体资源的资源标识为第二资源标识，即该目标媒体资源应为与品牌s属于相关类型的媒体资源，即品牌q对应的广告资源q。然后，实时拉取到广告资源q，并投放至画面帧集合之后的目标画面帧中车辆s的显示位置上进行投放展示，以遮挡车辆s，从而实现替代原目标画面帧中所显示的目标对象，避免对非预设广告投放类型的展示，进而达到对预设广告投放类型进行指定投放曝光的目的。

根据本发明实施例的又一个方面，还提供了一种用于实施上述媒体资源投放方法，的电子装置，如图15所示，该电子装置包括存储器1502和处理器1504，该存储器1502中存储有计算机程序，该处理器1504被设置为通过计算机程序执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述电子装置可以位于计算机网络的多个网络设备中的至少一个网络设备。

可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：

s1，获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合；

s2，通过对象识别模型对画面帧集合进行对象识别，其中，对象识别模型为利用多个样本画面帧进行机器训练后，所得到的用于识别画面帧中所展示的对象的神经网络模型；

s3，在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求；

s4，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源；

s5，将目标媒体资源投放至画面帧集合之后的目标画面帧中。

可选地，本领域普通技术人员可以理解，图15所示的结构仅为示意，电子装置也可以是智能手机(如android手机、ios手机等)、平板电脑、掌上电脑以及移动互联网设备(mobileinternetdevices，mid)、pad等终端设备。图15其并不对上述电子装置的结构造成限定。例如，电子装置还可包括比图15中所示更多或者更少的组件(如网络接口等)，或者具有与图15所示不同的配置。

其中，存储器1502可用于存储软件程序以及模块，如本发明实施例中的媒体资源投放方法，和装置对应的程序指令/模块，处理器1504通过运行存储在存储器1502内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的媒体资源投放方法，。存储器1502可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器1502可进一步包括相对于处理器1504远程设置的存储器，这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。其中，存储器1502具体可以但不限于用于存储画面帧集合与识别出的目标对象的投放指示信息，进一步还可以缓存拉取到的目标媒体资源等信息。作为一种示例，如图15所示，上述存储器1502中可以但不限于包括上述媒体资源投放装置中的获取单元1402、识别单元1404、触发单元1406、拉取单元1408及投放单元1410。此外，还可以包括但不限于上述媒体资源投放装置中的其他模块单元，本示例中不再赘述。

可选地，上述的传输装置1506用于经由一个网络接收或者发送数据。上述的网络具体实例可包括有线网络及无线网络。在一个实例中，传输装置1506包括一个网络适配器(networkinterfacecontroller，nic)，其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中，传输装置1506为射频(radiofrequency，rf)模块，其用于通过无线方式与互联网进行通讯。

此外，上述电子装置还包括：显示器1508，用于显示目标对象和目标媒体资源；和连接总线1510，用于连接上述电子装置中的各个模块部件。

根据本发明的实施例的又一方面，还提供了一种存储介质，该存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的计算机程序：

s1，获取对播放客户端发送的媒体数据流执行画面截取操作所得到的画面帧集合；

s2，通过对象识别模型对画面帧集合进行对象识别，其中，对象识别模型为利用多个样本画面帧进行机器训练后，所得到的用于识别画面帧中所展示的对象的神经网络模型；

s3，在对象识别模型输出的识别结果指示画面帧集合中包括目标对象的情况下，触发与目标对象相匹配的媒体资源投放请求；

s4，响应媒体资源投放请求，拉取与目标对象相关联的目标媒体资源；

s5，将目标媒体资源投放至画面帧集合之后的目标画面帧中。

可选地，在本实施例中，本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(read-onlymemory，rom)、随机存取器(randomaccessmemory，ram)、磁盘或光盘等。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。