一种图像数据处理方法及其设备的制造方法
【专利摘要】本发明实施例公开一种图像数据处理方法及其设备，其中方法包括如下步骤：获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息；搜索与所述识别信息相关联的搜索结果；将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示。采用本发明，可以保证多媒体数据的播放效率，提升对多媒体数据的播放效果。
【专利说明】
一种图像数据处理方法及其设备
技术领域
[0001]本发明涉及互联网技术领域，尤其涉及一种图像数据处理方法及其设备。
【背景技术】
[0002]随着计算机技术不断的开发和完善，手机和平板电脑等用户终端已经成为了人们生活中不可或缺的一个部分，人们不仅可以利用这些用户终端进行通讯，还可以进行文件传输、摄像、玩游戏等。
[0003]在使用手机和平板电脑等用户终端进行多媒体数据浏览时，例如:观看视频等，用户往往对当前播放的多媒体数据中的数据内容(例如:人物、衣服、酒店、地点等)存在疑问，现有的执行过程需要用户中断对多媒体数据的播放，并切换至其它搜索应用中进行数据内容的搜索，影响了多媒体数据的播放效率以及播放效果。
【发明内容】
[0004]本发明实施例提供一种图像数据处理方法及其设备，可以保证多媒体数据的播放效率，提升对多媒体数据的播放效果。
[0005]本发明实施例第一方面提供了一种图像数据处理方法，可包括:
[0006]获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；
[0007]对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息；
[0008]搜索与所述识别信息相关联的搜索结果；
[0009]将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显不O
[0010]本发明实施例第二方面提供了一种图像数据处理设备，可包括:
[0011]数据获取单元，用于获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；
[0012]信息获取单元，用于对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息；
[0013]结果搜索单元，用于搜索与所述识别信息相关联的搜索结果；
[0014]结果发送单元，用于将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示。
[0015]在本发明实施例中，通过获取针对当前播放的多媒体数据所截取的图像数据，并识别图像数据获取对应的识别信息以及搜索识别信息关联的搜索结果，最终将搜索结果发送至用户终端进行显示。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容。
【附图说明】
[0016]为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0017]图1是本发明实施例提供的一种图像数据处理方法的流程示意图；
[0018]图2是本发明实施例提供的另一种图像数据处理方法的流程示意图；
[0019]图3是本发明实施例提供的一种图像数据处理的举例示意图；
[0020]图4是本发明实施例提供的另一种图像数据处理的举例示意图；
[0021]图5是本发明实施例提供的又一种图像数据处理的举例示意图；
[0022]图6是本发明实施例提供的一种弹幕内容处理设备的结构示意图；
[0023]图7是本发明实施例提供的信息获取单元的结构示意图；
[0024]图8是本发明实施例提供的结果搜索单元的结构示意图；
[0025]图9是本发明实施例提供的另一种图像数据设备的结构示意图；
[0026]图10是本发明实施例提供的又一种图像数据处理设备的结构示意图。
【具体实施方式】
[0027]下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
[0028]本发明实施例提供的图像数据处理方法可以应用于支持截图功能的多媒体数据播放的场景，例如:图像数据处理设备获取用户终端发送的在当前播放的多媒体数据所截取的图像数据，所述图像数据处理设备对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息，所述图像数据处理设备搜索与所述识别信息相关联的搜索结果，所述图像数据处理设备将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示的场景等。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容。
[0029]本发明实施例涉及的图像数据处理设备可以为多媒体数据播放应用的后台服务器，具体为具备推送多媒体数据流、图像识别等功能在内的服务器;所述用户终端可以包括平板电脑、智能手机、个人计算机(PC)、掌上电脑以及移动互联网设备(MID)等具备播放多媒体数据功能的终端设备;所述多媒体数据可以包括视频、图像等。
[0030]下面将结合附图1和附图2，对本发明实施例提供的一种图像数据处理方法进行详细介绍。
[0031]请参见图1，为本发明实施例提供了一种图像数据处理方法的流程示意图。如图1所示，本发明实施例的所述方法可以包括以下步骤SlOl-步骤S104。
[0032]SlOl，获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；
[0033]具体的，图像数据处理设备可以获取用户终端发送的在当前播放的多媒体数据中所截取的图像数据，可以理解的是，所述用户终端在对所述多媒体数据进行播放时，用户可以在所述用户终端的播放界面中采用约定的截屏方式选中需要截取的图像数据，例如:通过移动光标在播放界面中拉动的矩形框中的图像数据，或者通过手指在播放界面中拉动的矩形框中的图像数据等，再通过预设操作确定发送所截取的图像数据至所述图像数据处理设备，例如:可以将选中的图像数据的所在位置作为滑动的起始位置，通过光标点击或手指按压快速向一固定方向滑动等，所述用户终端在监测到对当前播放的多媒体数据进行图像数据截取时，可以自动暂停播放所述多媒体数据，直至确定发送所述图像数据后，再继续播放所述多媒体数据。所述图像数据处理设备可以获取所述用户终端发送的所述图像数据。
[0034]S102，对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息；
[0035]具体的，所述图像数据处理设备可以对所述图像数据进行图像识别处理，所述图像识别处理可以包括图像特征提取处理以及特征匹配处理，所述图像数据处理设备在图像识别处理后获取所述图像数据对应的识别信息，所述识别信息优选为描述所述图像数据的简要文本信息。
[0036]S103，搜索与所述识别信息相关联的搜索结果；
[0037]具体的，所述图像数据处理设备可以搜索所述识别信息关联的搜索结果，所述搜索结果可以为与所述识别信息相关联的简要描述、网页链接等，所述图像数据处理设备可以预先设置所述识别信息关联的所述搜索结果，当所述图像数据处理设备获取到所述图像数据对应的识别信息时，可以根据所述识别信息查找到所述搜索结果。
[0038]优选的，所述图像数据处理设备可以检测当前是否预置有与所述识别信息相关联的搜索结果，当检测到当前预置有与所述识别信息相关联的搜索结果时，所述图像数据处理设备可以直接获取所述搜索结果；当检测到当前未预置有与所述识别信息相关联的搜索结果时，所述图像数据处理设备可以向搜索设备发送携带有所述识别信息的结果搜索请求，需要说明的是，所述搜索设备可以为所述图像数据处理设备中的搜索引擎，或者可以为独立于所述图像数据处理设备的搜索服务器，所述搜索设备可以获取所述识别信息，并查找与所述识别信息相关联的搜索结果，所述搜索设备可以将所述搜索结果发送至所述图像数据处理设备，所述图像数据处理设备获取所述搜索设备发送的与所述识别信息相关联的所述搜索结果。
[0039]S104，将所述搜索结果发送至所述用户终端；
[0040]具体的，所述图像数据处理设备可以将所述搜索结果发送至所述用户终端，进一步的，所述图像数据处理设备可以采用预设显示格式对所述搜索结果进行封装，并将封装后的搜索结果发送至所述用户终端，所述用户终端可以对所述封装后的搜索结果进行显示，优选的，所述预设显示格式可以为悬浮半透明属性的显示格式。
[0041]在本发明实施例中，通过获取针对当前播放的多媒体数据所截取的图像数据，并识别图像数据获取对应的识别信息以及搜索识别信息关联的搜索结果，最终将搜索结果发送至用户终端进行显示。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容;通过采用悬浮半透明属性的显示格式，可以使得用户在浏览搜索结果的同时对多媒体数据进行浏览，进一步提升了对多媒体数据的播放效果。
[0042]请参见图2，为本发明实施例提供了另一种图像数据处理方法的流程示意图。如图2所示，本发明实施例的所述方法可以包括以下步骤S201-步骤S209。
[0043]S201，获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；
[0044]具体的，图像数据处理设备可以获取用户终端发送的在当前播放的多媒体数据中所截取的图像数据，可以理解的是，所述用户终端在对所述多媒体数据进行播放时，用户可以在所述用户终端的播放界面中采用约定的截屏方式选中需要截取的图像数据，例如:通过移动光标在播放界面中拉动的矩形框中的图像数据，或者通过手指在播放界面中拉动的矩形框中的图像数据等，再通过预设操作确定发送所截取的图像数据至所述图像数据处理设备，例如:可以将选中的图像数据的所在位置作为滑动的起始位置，通过光标点击或手指按压快速向一固定方向滑动等，所述用户终端在监测到对当前播放的多媒体数据进行图像数据截取时，可以自动暂停播放所述多媒体数据，直至确定发送所述图像数据后，再继续播放所述多媒体数据。所述图像数据处理设备可以获取所述用户终端发送的所述图像数据。
[0045]请一并参见图3，为本发明实施例提供了一种图像数据处理的举例示意图。如图3所示，所述用户终端的显示屏在对多媒体数据XX视频进行播放时，在播放界面的预设位置可以显示截屏按钮，例如图3所示的播放界面的右侧边缘处，用户可以通过移动光标或者使用手指、感应笔等点击所述截屏按钮，此时所述用户终端可以暂停对所述多媒体数据的播放，同时等待在播放界面中的拉动操作。当然，所述截屏按钮为可选的按钮，在设计过程中，也可以不需要设置截屏按钮，当用户终端检测到在播放界面中的拉动操作时，即可暂停对所述多媒体数据的播放。
[0046]再请一并参见图4，为本发明实施例提供了另一种图像数据处理的举例示意图。如图4所示，通过上述拉动操作后，可以形成图4所示的标定框，该标定框中存在用户需要截取的图像数据，当选定所述图像数据时，通过滑动操作(如图4中的箭头指向)可以确定发送所述图像数据至所述图像数据处理设备。
[0047]需要说明的是，用户可以预先向所述图像数据处理设备注册相应的多媒体数据播放应用的应用标识，例如:应用账号等，并可以使用所述应用标识在所述用户终端中登录所述多媒体数据播放应用，在登录成功后则可以向所述图像数据处理设备请求需要播放的多媒体数据。
[0048]S202，根据预设图像特征在所述图像数据中提取目标识别特征；
[0049]具体的，所述图像数据处理设备可以根据预设图像特征在所述图像数据中提取目标识别特征，所述预设图像特征可以包括颜色分布、图像数据内容特征等，可以通过颜色分布分析以及图像数据内容特征分析等在所述图像数据中提取目标识别特征，依据上述举例，所述图像数据中包含一个圆，其余地方为空白，则可以通过颜色分布分析以及图像数据内容特征分析在所述图像数据中提取“圆”的目标识别特征。
[0050]S203，在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，并将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息；
[0051]具体的，所述图像数据处理设备可以在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，进一步的，可以对所提取的目标识别特征进行灰度转换，以得到所述目标识别特征的图像轮廓，在所述预设图像特征数据库中查找与所述目标识别特征的图像轮廓相匹配的图像元素，依据上述举例，可以将提取的目标识别特征“圆”进行灰度转换，得到“圆”的图像轮廓，进而在所述预设图像特征数据库中查找“圆”的图像元素。
[0052]所述图像数据处理设备可以将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息，可以理解的是，所述图像数据处理设备中可以预先存储有图像元素以及图像元素对应的元素信息，所述元素信息为描述所述图像元素的简要文本信息，所述识别信息优选为描述所述图像数据的简要文本信息，依据上述举例，“圆”的图像元素对应的元素信息可以为文字“圆”、图形等简要文本信息，所述图像数据处理设备可以将图像元素“圆”对应的文字“圆”、图形等元素信息确定为所截取的图像数据对应的识别信息。
[0053]S204，检测当前是否预置有与所述识别信息相关联的搜索结果；
[0054]具体的，所述图像数据处理设备可以检测当前是否预置有与所述识别信息相关联的搜索结果，所述搜索结果可以为与所述识别信息相关联的简要描述、网页链接等，依据上述举例，所述搜索结果可以为“圆”的词条介绍、“图形”的词条介绍、词条介绍对应的网页链接等，所述图像数据处理设备可以预先设置所述识别信息关联的所述搜索结果，当所述图像数据处理设备获取到所述图像数据对应的识别信息时，可以根据所述识别信息查找到所述搜索结果。
[0055]S205，当检测到当前未预置有与所述识别信息相关联的搜索结果时，向搜索设备发送携带有所述识别信息的结果搜索请求，以使所述搜索设备查找与所述识别信息相关联的搜索结果；
[0056]S206，获取所述搜索设备发送的与所述识别信息相关联的搜索结果；
[0057]具体的，当检测到当前未预置有与所述识别信息相关联的搜索结果时，所述图像数据处理设备可以向搜索设备发送携带有所述识别信息的结果搜索请求，需要说明的是，所述搜索设备可以为所述图像数据处理设备中的搜索引擎，或者可以为独立于所述图像数据处理设备的搜索服务器，所述搜索设备可以获取所述识别信息，并查找与所述识别信息相关联的搜索结果，所述搜索设备可以将所述搜索结果发送至所述图像数据处理设备，所述图像数据处理设备获取所述搜索设备发送的与所述识别信息相关联的所述搜索结果。
[0058]可选的，当检测到当前预置有与所述识别信息相关联的搜索结果时，所述图像数据处理设备可以直接获取所述搜索结果。
[0059]S207，将所述搜索结果发送至所述用户终端；
[0060]具体的，所述图像数据处理设备可以将所述搜索结果发送至所述用户终端，进一步的，所述图像数据处理设备可以采用预设显示格式对所述搜索结果进行封装，并将封装后的搜索结果发送至所述用户终端，所述用户终端可以对所述封装后的搜索结果进行显示，优选的，所述预设显示格式可以为悬浮半透明属性的显示格式。
[0061]请一并参见图5，为本发明实施例提供又一种图像数据处理的举例示意图。如图5所示，所述用户终端可以在所述播放界面中对所述封装后的搜索结果进行显示，例如:图5所示的播放界面的左侧悬浮框中，可以采用悬浮半透明属性的显示格式对所述搜索结果进行显示，同时，透过所述搜索结果所在的悬浮框，可以继续观看多媒体数据XX视频。
[0062]S208，当检测到对所述搜索结果的触发操作时，获取所述用户终端发送的对所述搜索结果的浏览请求；
[0063]S209，将所述搜索结果对应的网页页面发送至所述用户终端，以使所述用户终端对所述网页页面进行显示；
[0064]具体的，当所述用户终端检测到对所述搜索结果的触发操作时，例如:所述用户终端检测到对网页链接的点击操作等，所述用户终端可以基于所述应用标识向所述图像数据处理设备发送对所述搜索结果的浏览请求，所述图像数据处理设备可以获取所述用户终端发送的对所述搜索结果的浏览请求。优选的，所述图像数据处理设备可以将所述搜索结果对应的网页页面发送至所述应用标识对应的所述用户终端，所述用户终端对所述网页页面进行显示。
[0065]在本发明实施例中，通过获取针对当前播放的多媒体数据所截取的图像数据，并识别图像数据获取对应的识别信息以及搜索识别信息关联的搜索结果，最终将搜索结果发送至用户终端进行显示。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容;通过采用悬浮半透明属性的显示格式，可以使得用户在浏览搜索结果的同时对多媒体数据进行浏览，进一步提升了对多媒体数据的播放效果;通过对图像数据进行图像特征提取处理以及特征匹配处理，实现了对图像数据中的目标特征的准确提取，进而保证了搜索结果的准确性。
[0066]下面将结合附图6-附图9，对本发明实施例提供的图像数据处理设备进行详细介绍。需要说明的是，附图6-附图9所示的图像数据处理设备，用于执行本发明图1和图2所示实施例的方法，为了便于说明，仅示出了与本发明实施例相关的部分，具体技术细节未揭示的，请参照本发明图1和图2所示的实施例。
[0067]请参见图6，为本发明实施例提供了一种图像数据处理设备的结构示意图。如图6所示，本发明实施例的所述图像数据处理设备I可以包括:数据获取单元U、信息获取单元12、结果搜索单元13和结果发送单元14。
[0068]数据获取单元11，用于获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；
[0069]具体实现中，所述数据获取单元11可以获取用户终端发送的在当前播放的多媒体数据中所截取的图像数据，可以理解的是，所述用户终端在对所述多媒体数据进行播放时，用户可以在所述用户终端的播放界面中采用约定的截屏方式选中需要截取的图像数据，例如:通过移动光标在播放界面中拉动的矩形框中的图像数据，或者通过手指在播放界面中拉动的矩形框中的图像数据等，再通过预设操作确定发送所截取的图像数据至所述图像数据处理设备I，例如:可以将选中的图像数据的所在位置作为滑动的起始位置，通过光标点击或手指按压快速向一固定方向滑动等，所述用户终端在监测到对当前播放的多媒体数据进行图像数据截取时，可以自动暂停播放所述多媒体数据，直至确定发送所述图像数据后，再继续播放所述多媒体数据。所述数据获取单元11可以获取所述用户终端发送的所述图像数据。
[0070]信息获取单元12，用于对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息；
[0071]具体实现中，所述信息获取单元12可以对所述图像数据进行图像识别处理，所述图像识别处理可以包括图像特征提取处理以及特征匹配处理，所述信息获取单元12在图像识别处理后获取所述图像数据对应的识别信息，所述识别信息优选为描述所述图像数据的简要文本信息。
[0072]具体的，请一并参见图7，为本发明实施例提供了信息获取单元的结构示意图。如图7所示，所述信息获取单元12可以包括:
[0073]特征提取子单元121，用于根据预设图像特征在所述图像数据中提取目标识别特征；
[0074]具体实现中，所述特征提取子单元121可以根据预设图像特征在所述图像数据中提取目标识别特征，所述预设图像特征可以包括颜色分布、图像数据内容特征等，可以通过颜色分布分析以及图像数据内容特征分析等在所述图像数据中提取目标识别特征，依据上述举例，所述图像数据中包含一个圆，其余地方为空白，则可以通过颜色分布分析以及图像数据内容特征分析在所述图像数据中提取“圆”的目标识别特征。
[0075]信息确定子单元122，用于在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，并将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息;
[0076]具体实现中，所述信息确定子单元122可以在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，进一步的，可以对所提取的目标识别特征进行灰度转换，以得到所述目标识别特征的图像轮廓，在所述预设图像特征数据库中查找与所述目标识别特征的图像轮廓相匹配的图像元素，依据上述举例，可以将提取的目标识别特征“圆”进行灰度转换，得到“圆”的图像轮廓，进而在所述预设图像特征数据库中查找“圆”的图像元素。
[0077]所述信息确定子单元122可以将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息，可以理解的是，所述图像数据处理设备I中可以预先存储有图像元素以及图像元素对应的元素信息，所述元素信息为描述所述图像元素的简要文本信息，所述识别信息优选为描述所述图像数据的简要文本信息，依据上述举例，“圆”的图像元素对应的元素信息可以为文字“圆”、图形等简要文本信息，所述信息确定子单元122可以将图像元素“圆”对应的文字“圆”、图形等元素信息确定为所截取的图像数据对应的识别信息。
[0078]结果搜索单元13，用于搜索与所述识别信息相关联的搜索结果；
[0079]具体实现中，所述结果搜索单元13可以搜索所述识别信息关联的搜索结果，所述搜索结果可以为与所述识别信息相关联的简要描述、网页链接等，所述图像数据处理设备I可以预先设置所述识别信息关联的所述搜索结果，当所述信息获取单元12获取到所述图像数据对应的识别信息时，所述结果搜索单元13可以根据所述识别信息查找到所述搜索结果O
[0080]优选的，所述结果搜索单元13可以检测当前是否预置有与所述识别信息相关联的搜索结果，当检测到当前预置有与所述识别信息相关联的搜索结果时，所述结果搜索单元13可以直接获取所述搜索结果；当检测到当前未预置有与所述识别信息相关联的搜索结果时，所述结果搜索单元13可以向搜索设备发送携带有所述识别信息的结果搜索请求，需要说明的是，所述搜索设备可以为所述图像数据处理设备I中的搜索引擎，或者可以为独立于所述图像数据处理设备I的搜索服务器，所述搜索设备可以获取所述识别信息，并查找与所述识别信息相关联的搜索结果，所述搜索设备可以将所述搜索结果发送至所述图像数据处理设备I，所述结果搜索单元13获取所述搜索设备发送的与所述识别信息相关联的所述搜索结果。
[0081]具体的，请一并参见图8，为本发明实施例提供了结果搜索单元的结构示意图。如图8所示，所述结果搜索单元13可以包括:
[0082]信息检测子单元131，用于检测当前是否预置有与所述识别信息相关联的搜索结果;
[0083]具体实现中，所述信息检测子单元131可以检测当前是否预置有与所述识别信息相关联的搜索结果，所述搜索结果可以为与所述识别信息相关联的简要描述、网页链接等，依据上述举例，所述搜索结果可以为“圆”的词条介绍、“图形”的词条介绍、词条介绍对应的网页链接等，所述图像数据处理设备I可以预先设置所述识别信息关联的所述搜索结果，当所述信息获取单元12获取到所述图像数据对应的识别信息时，所述结果搜索单元13可以根据所述识别信息查找到所述搜索结果。
[0084]请求发送子单元132，用于当检测到当前未预置有与所述识别信息相关联的搜索结果时，向搜索设备发送携带有所述识别信息的结果搜索请求；
[0085]结果获取子单元133，用于获取所述搜索设备发送的与所述识别信息相关联的搜索结果；
[0086]具体实现中，当所述信息检测子单元131检测到当前未预置有与所述识别信息相关联的搜索结果时，所述请求发送子单元132可以向搜索设备发送携带有所述识别信息的结果搜索请求，需要说明的是，所述搜索设备可以为所述图像数据处理设备I中的搜索引擎，或者可以为独立于所述图像数据处理设备I的搜索服务器，所述搜索设备可以获取所述识别信息，并查找与所述识别信息相关联的搜索结果，所述搜索设备可以将所述搜索结果发送至所述图像数据处理设备I，所述结果获取子单元133获取所述搜索设备发送的与所述识别信息相关联的所述搜索结果。
[0087]可选的，当所述信息检测子单元131检测到当前预置有与所述识别信息相关联的搜索结果时，所述结果搜索单元13可以直接获取所述搜索结果。
[0088]结果发送单元14，用于将所述搜索结果发送至所述用户终端；
[0089]具体实现中，所述结果发送单元14可以将所述搜索结果发送至所述用户终端，进一步的，所述结果发送单元14可以采用预设显示格式对所述搜索结果进行封装，并将封装后的搜索结果发送至所述用户终端，所述用户终端可以对所述封装后的搜索结果进行显示，优选的，所述预设显示格式可以为悬浮半透明属性的显示格式。
[0090]在本发明实施例中，通过获取针对当前播放的多媒体数据所截取的图像数据，并识别图像数据获取对应的识别信息以及搜索识别信息关联的搜索结果，最终将搜索结果发送至用户终端进行显示。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容;通过采用悬浮半透明属性的显示格式，可以使得用户在浏览搜索结果的同时对多媒体数据进行浏览，进一步提升了对多媒体数据的播放效果;通过对图像数据进行图像特征提取处理以及特征匹配处理，实现了对图像数据中的目标特征的准确提取，进而保证了搜索结果的准确性。
[0091]请参见图9，为本发明实施例提供了另一种弹幕内容处理设备的结构示意图。如图9所示，本发明实施例的所述弹幕内容处理设备I可以包括:数据获取单元11、信息获取单元12、结果搜索单元13、结果发送单元14、请求获取单元15和页面发送单元16;其中，数据获取单元11、信息获取单元12、结果搜索单元13和结果发送单元14的结构可以参见图6所示实施例的具体描述，在此不进行赘述。
[0092]请求获取单元15，用于当检测到对所述搜索结果的触发操作时，获取所述用户终端发送的对所述搜索结果的浏览请求；
[0093]页面发送单元16，用于将所述搜索结果对应的网页页面发送至所述用户终端，以使所述用户终端对所述网页页面进行显示；
[0094]具体实现中，当所述用户终端检测到对所述搜索结果的触发操作时，例如:所述用户终端检测到对网页链接的点击操作等，所述用户终端可以基于所述应用标识向所述图像数据处理设备I发送对所述搜索结果的浏览请求，所述请求获取单元15可以获取所述用户终端发送的对所述搜索结果的浏览请求。优选的，所述页面发送单元16可以将所述搜索结果对应的网页页面发送至所述应用标识对应的所述用户终端，所述用户终端对所述网页页面进行显示。
[0095]在本发明实施例中，通过获取针对当前播放的多媒体数据所截取的图像数据，并识别图像数据获取对应的识别信息以及搜索识别信息关联的搜索结果，最终将搜索结果发送至用户终端进行显示。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容;通过采用悬浮半透明属性的显示格式，可以使得用户在浏览搜索结果的同时对多媒体数据进行浏览，进一步提升了对多媒体数据的播放效果;通过对图像数据进行图像特征提取处理以及特征匹配处理，实现了对图像数据中的目标特征的准确提取，进而保证了搜索结果的准确性。
[0096]请参见图10，为本发明实施例提供了另一种图像数据处理设备的结构示意图。如图10所示，所述图像数据处理设备1000可以包括:至少一个处理器1001，例如CPU，至少一个网络接口 1004，用户接口 1003，存储器1005，至少一个通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。其中，用户接口 1003可以包括显示屏(Display)、键盘(Keyboard)，可选用户接口 1003还可以包括标准的有线接口、无线接口。网络接口 1004可选的可以包括标准的有线接口、无线接口(如W1-FI接口)。存储器1005可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。存储器1005可选的还可以是至少一个位于远离前述处理器1001的存储装置。如图10所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及数据处理应用程序。
[0097]在图10所示的图像数据处理设备1000中，用户接口1003主要用于为用户提供输入的接口，获取用户输入的数据；网络接口 1004用于接收用户终端发送的数据;而处理器1001可以用于调用存储器1005中存储的数据处理应用程序，并具体执行以下操作:
[0098]获取用户终端发送的在当前播放的多媒体数据所截取的图像数据；
[0099]对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息；
[0100]搜索与所述识别信息相关联的搜索结果；
[0101 ]将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显不O
[0102]在一个实施例中，所述处理器1001在执行对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息时，具体执行以下操作:
[0103]根据预设图像特征在所述图像数据中提取目标识别特征；
[0104]在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，并将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息。
[0105]在一个实施例中，所述处理器1001在执行搜索与所述识别信息相关联的搜索结果时，具体执行以下操作:
[0106]检测当前是否预置有与所述识别信息相关联的搜索结果；
[0107]当检测到当前未预置有与所述识别信息相关联的搜索结果时，向搜索设备发送携带有所述识别信息的结果搜索请求，以使所述搜索设备查找与所述识别信息相关联的搜索结果；
[0108]获取所述搜索设备发送的与所述识别信息相关联的搜索结果。
[0109]在一个实施例中，所述处理器1001在执行将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示时，具体执行以下操作:
[0110]采用预设显示格式对所述搜索结果进行封装，并将封装后的搜索结果发送至所述用户终端，以使所述用户终端对所述封装后的搜索结果进行显示。
[0111]在一个实施例中，所述处理器1001还执行以下操作:
[0112]当检测到对所述搜索结果的触发操作时，获取所述用户终端发送的对所述搜索结果的浏览请求；
[0113]将所述搜索结果对应的网页页面发送至所述用户终端，以使所述用户终端对所述网页页面进行显示。
[0114]在一个实施例中，所述图像数据为采用标定框在所述多媒体数据中所选定的目标图像区域中的数据。
[0115]在一个实施例中，所述预设显示格式为悬浮半透明属性的显示格式。
[0116]在本发明实施例中，通过获取针对当前播放的多媒体数据所截取的图像数据，并识别图像数据获取对应的识别信息以及搜索识别信息关联的搜索结果，最终将搜索结果发送至用户终端进行显示。通过对在多媒体数据中截取的图像数据进行识别并搜索关联的搜索结果进行输出，无需中断当前播放的多媒体数据即可完成对数据内容的搜索，保证了多媒体数据的播放效率，提升了对多媒体数据的播放效果，同时实现了对数据内容的实时搜索，丰富了多媒体数据的展示内容;通过采用悬浮半透明属性的显示格式，可以使得用户在浏览搜索结果的同时对多媒体数据进行浏览，进一步提升了对多媒体数据的播放效果;通过对图像数据进行图像特征提取处理以及特征匹配处理，实现了对图像数据中的目标特征的准确提取，进而保证了搜索结果的准确性。
[0117]本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
[0118]以上所揭露的仅为本发明较佳实施例而已，当然不能以此来限定本发明之权利范围，因此依本发明权利要求所作的等同变化，仍属本发明所涵盖的范围。
【主权项】
1.一种图像数据处理方法，其特征在于，包括: 获取用户终端发送的在当前播放的多媒体数据所截取的图像数据； 对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别?目息; 搜索与所述识别信息相关联的搜索结果； 将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示。2.根据权利要求1所述的方法，其特征在于，所述对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息，包括: 根据预设图像特征在所述图像数据中提取目标识别特征； 在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，并将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息。3.根据权利要求1所述的方法，其特征在于，所述搜索与所述识别信息相关联的搜索结果，包括: 检测当前是否预置有与所述识别信息相关联的搜索结果； 当检测到当前未预置有与所述识别信息相关联的搜索结果时，向搜索设备发送携带有所述识别信息的结果搜索请求，以使所述搜索设备查找与所述识别信息相关联的搜索结果; 获取所述搜索设备发送的与所述识别信息相关联的搜索结果。4.根据权利要求1所述的方法，其特征在于，所述将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示，包括: 采用预设显示格式对所述搜索结果进行封装，并将封装后的搜索结果发送至所述用户终端，以使所述用户终端对所述封装后的搜索结果进行显示。5.根据权利要求3所述的方法，其特征在于，还包括: 当检测到对所述搜索结果的触发操作时，获取所述用户终端发送的对所述搜索结果的浏览请求； 将所述搜索结果对应的网页页面发送至所述用户终端，以使所述用户终端对所述网页页面进行显示。6.根据权利要求1所述的方法，其特征在于，所述图像数据为采用标定框在所述多媒体数据中所选定的目标图像区域中的数据。7.根据权利要求4所述的方法，其特征在于，所述预设显示格式为悬浮半透明属性的显示格式。8.—种图像数据处理设备，其特征在于，包括: 数据获取单元，用于获取用户终端发送的在当前播放的多媒体数据所截取的图像数据； 信息获取单元，用于对所述图像数据进行图像识别处理，并在图像识别处理后获取所述图像数据对应的识别信息； 结果搜索单元，用于搜索与所述识别信息相关联的搜索结果； 结果发送单元，用于将所述搜索结果发送至所述用户终端，以使所述用户终端对所述搜索结果进行显示。9.根据权利要求8所述的设备，其特征在于，所述信息获取单元包括: 特征提取子单元，用于根据预设图像特征在所述图像数据中提取目标识别特征； 信息确定子单元，用于在预设图像特征数据库中查找与所述目标识别特征相匹配的图像元素，并将所述图像元素对应的元素信息确定为所述图像数据对应的识别信息。10.根据权利要求8所述的设备，其特征在于，所述结果搜索单元包括: 信息检测子单元，用于检测当前是否预置有与所述识别信息相关联的搜索结果； 请求发送子单元，用于当检测到当前未预置有与所述识别信息相关联的搜索结果时，向搜索设备发送携带有所述识别信息的结果搜索请求，以使所述搜索设备查找与所述识别信息相关联的搜索结果； 结果获取子单元，用于获取所述搜索设备发送的与所述识别信息相关联的搜索结果。11.根据权利要求8所述的设备，其特征在于，所述结果发送单元具体用于采用预设显示格式对所述搜索结果进行封装，并将封装后的搜索结果发送至所述用户终端，以使所述用户终端对所述封装后的搜索结果进行显示。12.根据权利要求10所述的设备，其特征在于，还包括: 请求获取单元，用于当检测到对所述搜索结果的触发操作时，获取所述用户终端发送的对所述搜索结果的浏览请求； 页面发送单元，用于将所述搜索结果对应的网页页面发送至所述用户终端，以使所述用户终端对所述网页页面进行显示。13.根据权利要求8所述的设备，其特征在于，所述图像数据为采用标定框在所述多媒体数据中所选定的目标图像区域中的数据。14.根据权利要求11所述的设备，其特征在于，所述预设显示格式为悬浮半透明属性的显示格式。
【文档编号】H04N21/4722GK106028160SQ201610392196
【公开日】2016年10月12日
【申请日】2016年6月3日
【发明人】张从玺
【申请人】腾讯科技（深圳）有限公司