一种数据处理方法、装置及电子设备的制作方法

文档序号:6540636阅读:173来源:国知局
一种数据处理方法、装置及电子设备的制作方法
【专利摘要】本发明实施例提供一种数据处理方法、装置及电子设备。其中一种数据处理方法包括:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体;从第一多媒体中获取第一对象的第一特征信息,第一特征信息用于识别待匹配多媒体中是否包括第一对象;获取第二对象的第二特征信息;依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体。该方法可以基于第一特征信息和第二特征信息进行匹配,得到匹配的目标多媒体。并且第一特征信息和第二特征信息的结合比单一信息更能符合用户意图,因此基于这两个特征信息匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
【专利说明】一种数据处理方法、装置及电子设备
【技术领域】
[0001]本发明涉及信息检索【技术领域】,特别涉及一种数据处理方法、装置及电子设备。
【背景技术】
[0002]目前电子设备在进行信息搜索时,电子设备可以采集搜索栏中由用户输入的搜索信息,并基于该搜索信息进行搜索得到一系列的搜索结果。例如查找张柏芝和谢霆锋的信息时,可以采集搜索栏中输入“张柏芝和谢霆锋”这一关键词作为搜索信息,在获取到对检索按钮的点击动作后,电子设备生成搜索指令,以指示电子设备开启搜索应用进行匹配内容的搜索,得到搜索结果。
[0003]当然电子设备也可以通过采集某张图像中的一个对象信息或者通过识别一段音乐旋律进行相关内容的搜索。但是目前电子设备的搜索方式一般都是基于单一信息进行搜索。

【发明内容】

[0004]本发明所要解决的技术问题是提供一种数据处理方法、装置及电子设备,可以基于第一对象的第一特征信息和第二对象的第二特征信息进行匹配,得到匹配的目标多媒体。技术方案如下:
[0005]本发明实施例提供一种数据处理方法,应用于电子设备,所述方法包括:
[0006]采集第一操作体的第一选择动作,以得到所述第一操作体选中的第一多媒体;
[0007]从所述第一多媒体中获取第一对象的第一特征信息,所述第一特征信息用于识别待匹配多媒体中是否包括所述第一对象;
[0008]获取第二对象的第二特征信息;
[0009]依据所述第一特征信息和所述第二特征信息,对所述待匹配多媒体进行特征匹配,得到目标多媒体,其中所述目标多媒体中的第三特征信息与所述第一特征信息匹配,所述目标多媒体中的第四特征信息与所述第二特征信息匹配。
[0010]优选地,所述获取第二对象的第二特征信息包括:
[0011]通过所述电子设备的声音传感器采集第二操作体产生的声音,并利用语音识别技术对所述第二操作体产生的声音进行识别,得到对应的关键词,所述关键词对应的对象为所述第二对象,所述关键词为所述第二对象的第二特征信息;
[0012]或者
[0013]通过所述电子设备的感应单元获取所述第一操作体产生的至少一个位置,基于所述至少一个位置查找对应的文字,并将查找到的文字进行组合得到关键词,所述关键词对应的对象为所述第二对象,所述关键词为所述第二对象的第二特征信息。
[0014]优选地,所述获取第二对象的第二特征信息,包括:
[0015]采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体;
[0016]从所述第二多媒体中得到所述第二对象的第二特征信息,所述第二特征信息用于识别待匹配多媒体中是否包括所述第二对象。
[0017]优选地,所述第二多媒体为第二图像,且所述第二图像包括至少一个对象,所述电子设备在显示区域内同时显示多个所述第二图像,且所述电子设备内记录每个所述第二图像在所述显示区域内的位置;
[0018]所述采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体,包括:
[0019]通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的第二操作点;
[0020]获取所述第二操作点在显示区域内的位置;
[0021]将所述第二操作点在显示区域内的位置与所述第二图像的位置进行匹配,匹配成功的所述第二图像为所述第二多媒体。
[0022]优选地,从所述第二多媒体中得到所述第二对象的第二特征信息,包括:
[0023]通过所述感应单元获得所述第一操作体在所述第二图像上生成的多个第三操作点,所述多个第三操作点形成第一形状;
[0024]获取所述第一形状内的第二对象;
[0025]通过图像识别技术获取第二对象的第二特征信息。
[0026]优选地,所述第二多媒体为第三图像,且所述第三图像包括至少一个对象,所述电子设备按照预设顺序在所述显示区域内依次显示所述多个第三图像,且每次所述显示区域内仅显示一个所述第三图像;
[0027]所述采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体,包括:
[0028]通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的至少一个第四操作点;
[0029]获取形成所述至少一个第四操作点时,所述显示区域上显示的所述第三图像,所述第三图像为所述第二多媒体。
[0030]优选地,从所述第二多媒体中得到所述第二对象的第二特征信息,包括:
[0031]获取所述至少一个第四操作点形成的第一轨迹;
[0032]获取所述第一轨迹在显示区域内的位置;
[0033]将所述第一轨迹的位置与所述第三图像中每个对象的位置进行匹配,匹配成功的对象为第二对象;
[0034]通过图像识别技术获取第二对象的第二特征信息。
[0035]优选地,所述第二对象为第四图像,且所述第四图像内记录所述第四图像拍摄地点的地理位置信息,获取所述第二对象的第二特征信息,包括:
[0036]将所述第四图像的地理位置信息作为第二对象的所述第二特征信息。
[0037]优选地,从所述第一多媒体中获取第一对象的第一特征信息,包括:
[0038]通过第一识别方式,从作为第一多媒体的图像中获取第一对象的第一特征信息;
[0039]获取第二对象的第二特征信息,包括:通过第二识别方式,从作为所述第二多媒体的图像中获取所述第二对象的第二特征信息,所述第二识别方式不同于所述第一识别方式。[0040]优选地,所述电子设备包括多个所述待匹配多媒体,所述多个待匹配多媒体以预定顺序关系在电子设备上显示,且显示范围超出所述电子设备的显示区域的范围;
[0041]所述方法还包括:
[0042]获取作为所述目标多媒体的所述待匹配多媒体的显示位置;
[0043]搜索作为所述目标多媒体的所述待匹配多媒体;
[0044]在维持所述预定顺序关系的情况下,在所述显示区域内显示所述目标多媒体。
[0045]优选地,所述第一特征信息为第一图像特征信息,所述第二特征信息为第二图像特征信息,所述待匹配多媒体包括N帧图像;
[0046]依据所述第一特征信息和所述第二特征信息,对所述待匹配多媒体进行特征匹配,得到目标多媒体,包括:
[0047]通过图像识别技术,获取任意一帧图像的第三特征信息和第四特征信息;
[0048]将所述第三特征信息与所述第一图像特征信息进行匹配,将所述第四特征信息与所述第二图像特征信息进行匹配;
[0049]所述第三特征信息与所述第一图像特征信息匹配,且所述第四特征信息与所述第二图像特征信息匹配的至少一帧图像为目标多媒体中的匹配图像。
[0050]优选地,所述N帧图像为所述电子设备播放的视频中的部分图像,所述方法还包括:
[0051]获取电子设备中与所述匹配图像对应的视频;
[0052]从电子设备中选取与所述视频对应的播放应用,并指示电子设备调用所述播放应用;
[0053]将所述视频加载至所述播放应用中,播放所述视频。
[0054]优选地,所述方法还包括:
[0055]从至少一帧匹配图像中获取一帧所述匹配图像;
[0056]在获取一帧匹配图像后,调用所述播放应用的快速播放应用;
[0057]执行所述快速播放应用,将所述视频播放内容跳转至获取到的所述匹配图像;
[0058]在所述电子设备的显示区域内显示获取到的所述匹配图像。
[0059]本发明实施例还提供一种数据处理装置,应用于电子设备,所述装置包括:
[0060]采集单元,用于采集第一操作体的第一选择动作,以得到所述第一操作体选中的第一多媒体;
[0061]第一获取单元,用于从所述第一多媒体中获取第一对象的第一特征信息,所述第一特征信息用于识别待匹配多媒体中是否包括所述第一对象;
[0062]第二获取单元,用于获取第二对象的第二特征信息;
[0063]匹配单元,用于依据所述第一特征信息和所述第二特征信息,对所述待匹配多媒体进行特征匹配,得到目标多媒体,其中所述目标多媒体中的第三特征信息与所述第一特征信息匹配,所述目标多媒体中的第四特征信息与所述第二特征信息匹配。
[0064]优选地,所述第二获取单元获取第二对象的第二特征信息包括:
[0065]通过所述电子设备的声音传感器采集第二操作体产生的声音,并利用语音识别技术对所述第二操作体产生的声音进行识别,得到对应的关键词,所述关键词对应的对象为所述第二对象,所述关键词为所述第二对象的第二特征信息;[0066]或者
[0067]通过所述电子设备的感应单元获取所述第一操作体产生的至少一个位置,基于所述至少一个位置查找对应的文字,并将查找到的文字进行组合得到关键词,所述关键词对应的对象为所述第二对象,所述关键词为所述第二对象的第二特征信息。
[0068]优选地,所述第二获取单元获取第二对象的第二特征信息,包括:
[0069]采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体,从所述第二多媒体中得到所述第二对象的第二特征信息,所述第二特征信息用于识别待匹配多媒体中是否包括所述第二对象。
[0070]优选地,所述第二多媒体为第二图像,且所述第二图像包括至少一个对象,所述电子设备在显示区域内同时显示多个所述第二图像,且所述电子设备内记录每个所述第二图像在所述显示区域内的位置;
[0071]所述第二获取单元,包括:第一获取子单元、第二获取子单元和第一匹配子单元;
[0072]所述第一获取子单元,用于通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的第二操作点;
[0073]所述第二获取子单元,用于获取所述第二操作点在显示区域内的位置;
[0074]所述第一匹配子单元,用于将所述第二操作点在显示区域内的位置与所述第二图像的位置进行匹配,匹配成功的所述第二图像为所述第二多媒体。
[0075]优选地,所述第二获取单元还包括:
[0076]第三获取子单元,用于通过所述感应单元获得所述第一操作体在所述第二图像上生成的多个第三操作点,所述多个第三操作点形成第一形状;
[0077]第四获取子单元,用于获取所述第一形状内的第二对象;
[0078]第一识别子单元,用于通过图像识别技术获取第二对象的第二特征信息。
[0079]优选地,所述第二多媒体为第三图像,且所述第三图像包括至少一个对象,所述电子设备按照预设顺序在所述显示区域内依次显示所述多个第三图像,且每次所述显示区域内仅显示一个所述第三图像;
[0080]所述第二获取单元包括:第四获取子单元和第五获取子单元,其中,
[0081]所述第四获取子单元,用于通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的至少一个第四操作点;
[0082]所述第五获取子单元,用于获取形成所述至少一个第四操作点时,所述显示区域上显示的所述第三图像,所述第三图像为所述第二多媒体。
[0083]优选地,所述第二获取单元还包括:
[0084]第六获取子单元,用于获取所述至少一个第四操作点形成的第一轨迹;
[0085]第七获取子单元,用于获取所述第一轨迹在显示区域内的位置;
[0086]第二匹配子单元,用于将所述第一轨迹的位置与所述第三图像中每个对象的位置进行匹配,匹配成功的对象为第二对象;
[0087]第二识别子单元,用于通过图像识别技术获取第二对象的第二特征信息。
[0088]优选地,所述第二对象为第四图像,且所述第四图像内记录所述第四图像拍摄地点的地理位置信息,所述第二获取单元获取所述第二对象的第二特征信息,包括:
[0089]将所述第四图像的地理位置信息作为第二对象的所述第二特征信息。[0090]优选地,所述第一获取单元从所述第一多媒体中获取第一对象的第一特征信息,包括:通过第一识别方式,从作为第一多媒体的图像中获取第一对象的第一特征信息;
[0091]所述第二获取单元获取第二对象的第二特征信息,包括:通过第二识别方式,从作为所述第二多媒体的图像中获取所述第二对象的第二特征信息,所述第二识别方式不同于所述第一识别方式。
[0092]优选地,所述电子设备包括多个所述待匹配多媒体,所述多个待匹配多媒体以预定顺序关系在电子设备上显示,且显示范围超出所述电子设备的显示区域的范围;
[0093]所述装置还包括:
[0094]第三获取单元,用于获取作为所述目标多媒体的所述待匹配多媒体的显示位置;
[0095]搜索单元,用于搜索作为所述目标多媒体的所述待匹配多媒体;
[0096]显示单元,用于在维持所述预定顺序关系的情况下,在所述显示区域内显示所述目标多媒体。
[0097]优选地,所述第一特征信息为第一图像特征信息,所述第二特征信息为第二图像特征信息,所述待匹配多媒体包括N帧图像;
[0098]所述匹配单元包括:信息获取子单元和信息匹配子单元,其中,
[0099]所述信息获取子单元,用于通过图像识别技术,获取任意一帧图像的第三特征信息和第四特征信息;
[0100]所述信息匹配子单元,用于将所述第三特征信息与所述第一图像特征信息进行匹配,将所述第四特征信息与所述第二图像特征信息进行匹配,所述第三特征信息与所述第一图像特征信息匹配,且所述第四特征信息与所述第二图像特征信息匹配的至少一帧图像为目标多媒体中的匹配图像。
[0101]优选地,所述N帧图像为所述电子设备播放的视频中的部分图像,所述装置还包括:
[0102]第四获取单元,用于获取电子设备中与所述匹配图像对应的视频;
[0103]调用单元,用于从电子设备中选取与所述视频对应的播放应用,并指示电子设备调用所述播放应用;
[0104]播放单元,用于将所述视频加载至所述播放应用中,播放所述视频。
[0105]优选地,所述装置还包括:
[0106]第五获取单元,用于从至少一帧匹配图像中获取一帧所述匹配图像;
[0107]应用调用单元,用于在获取一帧匹配图像后,调用所述播放应用的快速播放应用;
[0108]执行单元,用于执行所述快速播放应用,将所述视频播放内容跳转至获取到的所述匹配图像;
[0109]图像显示单元,用于在所述电子设备的显示区域内显示获取到的所述匹配图像。
[0110]本发明实施例还提供一种电子设备,包括上述数据处理装置。
[0111]通过上述技术方案可知,相对于现有技术的单一信息匹配,本发明实施例提供的数据处理方法可以基于第一特征信息和第二特征信息这两个信息进行匹配,得到匹配的目标多媒体。
[0112]并且本领域技术人员可知的,第一特征信息和第二特征信息的结合比单一信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
【专利附图】

【附图说明】
[0113]为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
[0114]图1是本发明实施例1提供的一种数据处理方法的流程图;
[0115]图2是本发明实施例提供的电子设备的第一种显示方式示意图;
[0116]图3是本发明实施例2提供的一种数据处理方法的流程图;
[0117]图4是本发明实施例3提供的一种数据处理方法的流程图;
[0118]图5是基于图2本发明实施例中第二多媒体和第二特征信息获取方式的一种流程图;
[0119]图6是第二特征信息获取方式的一种示意图;
[0120]图7是本发明实施例提供的电子设备的第二张显示方式示意图;
[0121]图8是基于图7本发明实施例中第二多媒体和第二特征信息获取方式的另一种流程图;
[0122]图9是本发明实施例提供的多媒体和特征信息获取的第一种示意图;
[0123]图10是本发明实施例提供的多媒体和特征信息获取的第二种示意图;
[0124]图11是本发明实施例提供的多媒体和特征信息获取的第三种示意图;
[0125]图12是本发明实施例4提供的一种数据处理方法的流程图;
[0126]图13是本发明实施例5提供的一种数据处理方法的流程图;
[0127]图14是对图2进彳丁显不调整的不意图;
[0128]图15是本发明实施例6提供的一种数据处理方法的流程图;
[0129]图16是基于图15本发明实施例提供的数据处理方法的另一种流程图;
[0130]图17是本发明实施例提供的电子设备播放视频的一种示意图;
[0131]图18是本发明实施例提供的一种数据处理装置的一种结构示意图;
[0132]图19是图18中第二获取单元的一种结构示意图;
[0133]图20是图18中第二获取单元的另一种结构示意图;
[0134]图21是基于图18本发明实施例提供的数据处理装置的另一种结构示意图;
[0135]图22是图18中匹配单元的结构示意图;
[0136]图23是基于图18本发明实施例提供的数据处理装置的再一种结构示意图;
[0137]图24是基于图23本发明实施例提供的数据处理装置的结构示意图。
【具体实施方式】
[0138]下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
[0139]请参阅图1,其示出了本发明实施例1应用于电子设备中的数据处理方法的流程图,应用于电子设备中,可以包括以下步骤:
[0140]101:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体。
[0141]在本发明实施例中,电子设备包括一感应单元,当第一操作体在电子设备上执行第一选择动作时,感应单元可以通过感应第一操作体在电子设备的显示区域内产生的操作点来确定第一选择动作。并且通过感应到操作点在显示区域的坐标,来选中该坐标处的第
一多媒体。
[0142]例如:电子设备的显示区域内显示多个第一多媒体,多个第一多媒体采用图2所示方式,依次排列在显示区域内。当第一操作体,如手指在电子设备的显示区域上执行第一选择动作时,感应单元通过显示区域内产生的操作点的坐标可以确定当前第一选择动作对应的第一多媒体,该第一多媒体则是第一操作体在执行第一选择动作时选中的。
[0143]当然,在本发明实施例中,第一操作体还可以是用户操作的鼠标或电子笔,通过检测鼠标或电子笔在显示区域形成的操作点的坐标来确定选中的第一多媒体。
[0144]102:从第一多媒体中获取第一对象的第一特征信息。
[0145]其中第一对象是本发明实施例中用于进行匹配的第一个参照体,而第一特征信息为第一对象的关键特征信息,其可以表征第一对象,通过第一特征信息可以识别待匹配多媒体中是否包括第一对象。
[0146]在本发明的一些示例中,第一多媒体可以记录有一个对象以及该对象的第一特征信息,电子设备可以直接将第一多媒体记录的对象作为第一对象,其记录的对象的第一特征信息为第一特征信息。
[0147]在本发明的另一些示例中,第一多媒体中包括多个对象,电子设备需要从中选取一个作为第一对象,然后在获取该第一对象的第一特征信息。其中电子设备选取一个对象为第一对象可以通过感应第一操作体的动作选择,可以采用选择第一多媒体的方式,对此不再阐述。
[0148]在这两种示例中,第一对象可以为第一图像或者为第一音频。比如,第一多媒体中包括一张张柏芝的个人图像,则电子设备可以将张柏芝的个人图像作为第一对象,并通过人脸识别技术获取张柏芝的脸型作为第一特征信息。
[0149]当然第一多媒体还可以是一个音频,在该音频中包括一完整的歌曲以及该歌曲中有代表性的伴奏片段,则电子设备可以将完整的歌曲作为第一对象,而有代表性的伴奏片段作为第一特征信息。如果音频中仅包括一完整的歌曲,则电子设备可以从该完整歌曲中选取重复次数最多部分的伴奏作为第一特征信息。
[0150]103:获取第二对象的第二特征信息。
[0151]其中第二对象是本发明实施例中用于进行匹配的第二个参照体,而第二特征信息为第二对象的关键特征信息,其可以表征第二对象,通过第二特征信息可以识别待匹配多媒体中是否包括第二对象。
[0152]在本发明实施例中,第一特征信息和第二特征信息可以为同一类型信息,这样通过两个同一类型的特征信息进行匹配相对于一个对象的特征信息匹配,其准确度得到提高。比如第一特征信息为从作为第一对象的一个图像中获取人脸信息,第二特征信息为从作为第二对象的额一个图像中获取的物体的纹理信息,则第一特征信息和第二特征信息同属于图像类型的信息,并且作为第一对象和第二对象的图像可以为同一个图像,也可以为不同的图像。
[0153]此外,第一特征信息和第二特征信息也可以为不同类型的信息,基于这两种不同类型的信息可以匹配出某种类型的多媒体,其中匹配出的多媒体的类型可以与第一特征信息或第二特征信息的类型相同,也可以不同于这两个信息的类型。比如第一特征信息为人脸信息,第二特征信息为该人脸所对应人物的名称(文字信息),匹配出的则是多媒体中具有这一人物名称的人物图像,匹配结果类型与第一特征信息类型相同。
[0154]当然通过人脸信息和文字信息这两个特征信息还可以从多媒体中匹配出具有这两个信息的视频。也就是说,本发明实施例提供的数据处理方法不仅仅可以实现单一类型匹配,还可以通过不同类型信息匹配出某种类型的多媒体,使得搜索方式多样化。
[0155]并且在搜索时可以基于第一操作体的选择得到第一特征信息,结合后的第一特征信息和第二特征信息比单一信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
[0156]上述单一类型匹配是指通过某种类型信息匹配出与该类型相同的多媒体,如现有技术中的图像信息匹配图像。但是本发明实施例在基于单一类型匹配时,是将同一类型的第一特征信息和第二特征信息作为匹配基础进行匹配。第一特征信息和第二特征信息在描述同一多媒体时其准确度要高于采用一个特征信息对多媒体的描述,搜索到的多媒体数量少于基于一个特征信息搜索到的多媒体数量,从而加快了搜索速度。
[0157]104:依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体,其中目标多媒体中的第三特征信息与第一特征信息匹配,目标多媒体中的第四特征信息与第二特征信息匹配。
[0158]电子设备在进行特征匹配时,可以基于第一特征信息对每个待匹配多媒体中的第三特征信息进行匹配,将第二特征信息与每个待匹配多媒体中的第四特征信息进行匹配。当某一个待匹配多媒体中的第三特征信息与第一特征信息匹配,且第四特征信息与第二特征信息匹配时,将该待匹配多媒体作为目标多媒体。
[0159]从上述可知,本发明实施例提供的数据处理方法可以基于第一特征信息和第二特征信息这两个信息进行匹配,得到匹配的目标多媒体。并且结合后的第一特征信息和第二特征信息比单一信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
[0160]此外对于描述同一个多媒体来说,第一特征信息和第二特征信息在描述同一多媒体时其准确度要高于采用一个特征信息对多媒体的描述,搜索到的多媒体数量少于基于一个特征信息搜索到的多媒体数量,从而加快了搜索速度。在实际搜索过程中,本发明实施例提供的数据处理方法不仅仅可以实现单一类型匹配,还可以通过不同类型信息匹配出某种类型的多媒体,使得搜索方式多样化。
[0161]请参阅图3,其示出了本发明实施例2提供的数据处理方法的一种流程图,阐述了获取第二特征信息的一种可行方式,可以包括以下步骤:[0162]301:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体。
[0163]302:从第一多媒体中获取第一对象的第一特征信息,第一特征信息用于识别待匹配多媒体中是否包括第一对象。
[0164]步骤301和步骤302:与步骤101和步骤102相同,对此不在阐述。
[0165]303:获取描述第二对象的关键词,该描述第二对象的关键词为第二对象的第二特征信息。
[0166]在本发明实施例中,获取关键词的方式可以包括但不限于下述两种方式:
[0167]电子设备上包括一声音传感器,当第二操作体对准电子设备发出声音时,该声音传感器可以采集第二操作体产生的声音,然后电子设备利用语音识别技术对第二操作体产生的声音进行识别,可以得到对应的关键词。其中,第二操作体可以为用户口腔,声音可以为从双唇碰撞发出的声音,也可以是声带振动产生的声音。
[0168]当然,电子设备识别的第二操作体产生的声音还可以是由其他设备发送的,如电子设备包括一主体和与主体进行信息交互的遥控设备,该遥控设备包括一声音传感器,用于采集第二操作体产生的声音,然后利用遥控设备中的通信模块发送给主体,由主体利用语音识别技术对第二操作体产生的声音进行识别。
[0169]在其他示例中,电子设备包括一感应单元,该感应单元可以获取第一操作体产生的至少一个位置,如第一操作体触摸电子设备的输入部分(硬件按键或虚拟按键)时,产生的至少一个位置。第一操作体产生的至少一个位置可以是第一操作体多次触摸输入部分得到的多个位置,也可以是第一操作体在输入部分触摸时产生的一个轨迹。
[0170]电子设备通过对多个位置或轨迹可以确定对应的按键,并结合当前电子设备启用的输入法,得到对应的文字。然后电子设备将查找到的文字进行组合得到关键词。
[0171]304:依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体,其中目标多媒体中的第三特征信息与第一特征信息匹配,目标多媒体中的第四特征信息与第二特征信息匹配。
[0172]请参阅图4,其示出了本发明实施例3提供的数据处理方法的流程图,阐述了获取第二特征信息的可行方式,可以包括以下步骤:
[0173]401:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体。
[0174]402:从第一多媒体中获取第一对象的第一特征信息,第一特征信息用于识别待匹配多媒体中是否包括第一对象。
[0175]步骤401和步骤402:与步骤101和步骤102相同,对此不在阐述。
[0176]403:采集第一操作体的第二选择动作,以得到第一操作体选中的第二多媒体。
[0177]在本发明实施例中,电子设备包括一感应单元,当第一操作体在电子设备上执行第二选择动作时,感应单元可以通过感应第一操作体在电子设备的显示区域内产生的操作点来确定第二选择动作。并且通过感应到操作点在显示区域的坐标,来选中该坐标处的第二多媒体。
[0178]其中第一操作体可以为手指,通过检测手指在显示区域形成的操作点的坐标来确定选中的第二多媒体。当然,在本发明实施例中,第一操作体还可以是用户操作的鼠标或电子笔,通过检测鼠标或电子笔在显示区域形成的操作点的坐标来确定选中的第一多媒体。
[0179]404:从第二多媒体中得到第二对象的第二特征信息,第二特征信息用于识别待匹配多媒体中是否包括第二对象。
[0180]其中第二对象是本发明实施例中用于进行匹配的第一个参照体,而第二特征信息为第二对象的关键特征信息,其可以表征第二对象,通过第二特征信息可以识别待匹配多媒体中是否包括第二对象。
[0181]在本发明实施例中,第二多媒体可以记录有一个对象以及该对象的第二特征信息,电子设备可以直接将第二多媒体记录的对象作为第二对象,其记录的对象的第二特征信息为第二特征信息。
[0182]第二多媒体也可以同时包括多个对象,电子设备需要从中选取一个作为第二对象,然后在获取该第二对象的第二特征信息。其中电子设备选取一个对象为第二对象可以通过感应第一操作体的动作选择,可以采用选择第二多媒体的方式,对此不再阐述。
[0183]在这两种示例中,第二对象可以为第一图像或者为第一音频。比如,第二多媒体中包括一张张柏芝的个人图像,则电子设备可以将张柏芝的个人图像作为第二对象,并通过人脸识别技术获取张柏芝的脸型作为第二特征信息。
[0184]当然第二多媒体还可以是一个音频,在该音频中包括一完整的歌曲以及该歌曲中有代表性的伴奏片段,则电子设备可以将完整的歌曲作为第二对象,而有代表性的伴奏片段作为第二特征信息。如果音频中仅包括一完整的歌曲,则电子设备可以从该完整歌曲中选取重复次数最多部分的伴奏作为第二特征信息。
[0185]405:依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体,其中目标多媒体中的第三特征信息与第一特征信息匹配,目标多媒体中的第四特征信息与第二特征信息匹配。
[0186]电子设备在进行特征匹配时,可以基于第一特征信息对每个待匹配多媒体中的第三特征信息进行匹配,将第二特征信息与每个待匹配多媒体中的第四特征信息进行匹配。当某一个待匹配多媒体中的第三特征信息与第一特征信息匹配,且第四特征信息与第二特征信息匹配时,将该待匹配多媒体作为目标多媒体。
[0187]在本发明实施例3中,电子设备中第二多媒体以不同方式显示时,获取第二多媒体及第二特征信息的方式也不同,第二多媒体的一种显示方式可以参阅图2所示,在图2中第二多媒体为第二图像,电子设备的显示区域内同时显示多个第二图像,显示区域被划分为与第二图像个数等同的区域块,在每个区域块内显示一个第二图像,且电子设备会记录每个第二图像在显示区域内的位置。
[0188]基于图2所示的显示方式,电子设备首先选中一个第二图像,然后再从第二图像中选择第二对象的第二特征信息,过程如图5所示,可以包括以下步骤:
[0189]5031:通过电子设备的感应单元获取第一操作体执行第二选择动作时,在电子设备的显示区域上形成的第二操作点。
[0190]在本发明实施例中,当第一操作体在电子设备上执行第二选择动作时,第一操作体在与显示区域接触时,会在显示区域上形成至少一个第二操作点,通过感应单元电子设备可以获取到第二操作点。
[0191]5032:获取第二操作点在显示区域内的位置。
[0192]5033:将第二操作点在显示区域内的位置与第二图像的位置进行匹配,匹配成功的第二图像为第二多媒体。[0193]如图2中,每个第二图像分别在一个独立的区域块内显示,那么显示第二图像的区域块的位置即为对应的第二图像的位置,该位置可以通过区域块的四个顶点在显示区域内的坐标表示。
[0194]第一操作体在第一个区域块内执行第二选择动作时,电子设备的感应单元可以感应到第一区域块内形成至少一个第二操作点,然后基于该第二操作点的坐标与每个区域块的坐标匹配,可以得出第二操作体选中的第二多媒体为显示在第一个区域块中的第二图像。
[0195]5034:通过感应单元获得第一操作体在第二图像上生成的多个第三操作点,多个第三操作点形成第一形状。
[0196]5035:获取第一形状内的第二对象。
[0197]在得到作为第二多媒体的第二图像后,需要从第二图像中获取第二对象,然后在识别出第二对象的第二特征信息。在选取第二对象时,电子设备可以基于感应单元获得的第一操作体生成的多个第三操作点,这些第三操作点形成一个第一形状,且第一形状框住第二图像中的某个对象,所框住的对象则为第二对象。多个第三操作点是第一操作体在第二图像上执行选择动作时生成的操作点。
[0198]如图6所示,第一操作体在选中的第二图像上执行选择动作时,感应单元可以获得第一操作体执行选择动作时生成的多个第三操作点,多个第三操作点在第二图像上形成一个矩形,该矩形框住第二图像中人脸,则该人脸则是第一操作体选中的第二对象。
[0199]5036:通过图像识别技术获取第二对象的第二特征信息。
[0200]其中图像识别技术包括:人脸识别技术、图像分割和模式识别技术获取第二对象的图像特征信息为第二特征信息,具体需要依据第二对象的类型调用相应的识别技术,如图6选中的第二对象为人脸时,电子设备可以采用人脸识别技术获取人脸特征为第二特征信息。
[0201]电子设备应用图5所示流程在获取作为第二多媒体的第二图像后,从第二图像中获取第二对象,并通过图像识别技术获取第二对象的第二特征信息。
[0202]当然电子设备还可以实现第二多媒体和第二对象的同时获取,为了实现这一目的,电子设备需要更改图2所示的显示方式。更改后的显示方式如图7所示,电子设备设置显示区域显示作为第二多媒体的第三图像的预设顺序,该预设顺序用于指示电子设备每次在显示区域内显示哪个第三图像,并且电子设备以大图浏览方式显示,即每次在显示区域内仅显示一个第三图像。
[0203]基于这种显示方式,电子设备获取第二多媒体和第二对象的第二特征信息的过程可以参阅图8所示,包括以下步骤:
[0204]5037:通过电子设备的感应单元获取第一操作体执行第二选择动作时,在电子设备的显示区域上形成的至少一个第四操作点。
[0205]在本发明实施例中,当第一操作体在电子设备上执行第二选择动作时,第一操作体在与显示区域接触时,会在显示区域上形成至少一个第四操作点,通过感应单元电子设备可以获取到第四操作点。
[0206]5038:获取形成至少一个第四操作点时,显示区域上显示的第三图像,第三图像为
第二多媒体。[0207]当电子设备感应到第四操作点时,其可以通过查询预设顺序获知当前显示区域正在显示的是哪个第三图像,则将正在显示的第三图像作为第二多媒体。
[0208]并且第三图像包括至少一个对象,电子设备需要在获取第三图像的同时,确定选中的第三图像的某个对象为第二对象,因此电子设备还需要获取第四操作点与第三图像中对象的关系,选取出与第四操作点匹配的第二对象,可行方式参阅步骤5039至5041。
[0209]5039:获取至少一个第四操作点形成的第一轨迹。
[0210]在本发明实施例中,第一操作体在执行第二选择动作时,感应单元获取到的至少一个第四操作点形成第一轨迹,该第一轨迹可以为任意一种形状的图形,用于选择第三图像中可作为第二对象的对象。
[0211]5040:获取第一轨迹在显示区域内的位置。
[0212]5041:将第一轨迹的位置与第三图像中每个对象的位置进行匹配,匹配成功的对象为第二对象。
[0213]其中第一轨迹在显示区域内的位置以第一轨迹的起始操作点和终止操作点,在第三图像中的像素值表示,同样第三图像中每个对象的位置以该对象的边缘部分的特征点的像素值表示,特征点是从组成边缘部分的所有点中选择的一系列较突出的点,如转折点、顶点等。
[0214]电子设备将表示第一轨迹位置的像素值和位于第三图像中每个对象的特征点的像素值进行匹配,像素值匹配成功的对象为第三对象。
[0215]如图7所示,第一操作体在执行第二选择动作时,在选中第三图像的同时感应单元获得第四操作点从位置I到位置2形成的第一轨迹,从图7所示可以看出第一轨迹为一矩形,该矩形框住第三图像中的一个对象——人脸,电子设备通过将该矩形的位置与人脸的位置进行匹配,确定两者位置匹配,则该人脸则是第三对象。
[0216]5042:通过图像识别技术获取第二对象的第二特征信息。
[0217]上述两种第二多媒体和第二特征信息的获取方式基于第一操作体的选择动作完成,而第一操作体的选择动作是在用户的某种要求下进行,所以基于第一操作体的选择动作获得的第二特征信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
[0218]在这里需要说明的一点是:第一多媒体也可以是一图像,从该图像中获取第一对象的第一特征信息,第一多媒体和第一特征信息的获取方式也可以采用上述图5和图8所示获取方式,这样,第一特征信息和第二特征信息都可以基于第一操作体的选择动作完成,使得这两个特征信息更能符合用户意图,基于这两个特征信息匹配的目标多媒体更能符合用户意图,提高搜索精准度。
[0219]基于第一操作体的选择动作选择出两张图像作为第一多媒体和第二多媒体,并获取第一特征信息和第二特征信息的示意图可以参阅图9至图11所示,其中图9示出了获取第一多媒体和第二多媒体后,再从作为第一多媒体和第二多媒体的两张图像中获取第一特征信息和第二特征信息;
[0220]图10则示出了在获取第一多媒体和第二多媒体的同时,获取到第一特征信息和第二特征信息;图11则示出了在获取一张图像作为第一多媒体后,从该图像中获取第一特征信息,并且示出了在获取第二多媒体的同时获取到第二特征信息。
[0221]还需要注意的一点是:当第一多媒体和第二多媒体为两张图像时,电子设备可以通过第一识别方式,从作为第一多媒体的图像中获取第一对象的第一特征信息;相应的电子设备可以通过第二识别方式,从作为第二多媒体的图像中获取第二对象的第二特征信息,且第一识别方式可以不同于第二识别方式,这样电子设备可以利用这两种识别方式获取到不同类型的特征信息。相对应采用相同识别方式获取同种类型的特征信息,不同类型的特征信息对对象的描述更加准确,以提高搜索的精准度。
[0222]如第一对象为人脸,则第一识别方式可以为人脸识别方式以得到人脸的轮廓;第二对象为手提包,则第二识别方式可以为图像分割和模式识别方式,以获得手提包的纹理信息。
[0223]请参阅图12,其示出了本发明实施例4提供的数据处理方法的流程图,可以包括以下步骤:
[0224]601:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体。
[0225]在本发明实施例中,电子设备包括一感应单元,当第一操作体在电子设备上执行第一选择动作时,感应单元可以通过感应第一操作体在电子设备的显示区域内产生的操作点来确定第一选择动作。并且通过感应到操作点在显示区域的坐标,来选中该坐标处的第
一多媒体。
[0226]例如:电子设备的显示区域内显示多个第一多媒体,多个第一多媒体采用图2所示方式,依次排列在显示区域内。当第一操作体,如手指在电子设备的显示区域上执行第一选择动作时,感应单元通过显示区域内产生的操作点的坐标可以确定当前第一选择动作对应的第一多媒体,该第一多媒体则是第一操作体在执行第一选择动作时选中的。
[0227]当然,在本发明实施例中,第一操作体还可以是用户操作的鼠标或电子笔,通过检测鼠标或电子笔在显示区域形成的操作点的坐标来确定选中的第一多媒体。
[0228]602:从第一多媒体中获取第一对象的第一特征信息。
[0229]其中第一对象是本发明实施例中用于进行匹配的第一个参照体,而第一特征信息为第一对象的关键特征信息,其可以表征第一对象,通过第一特征信息可以识别待匹配多媒体中是否包括第一对象。
[0230]在本发明的一些示例中,第一多媒体可以记录有一个对象以及该对象的第一特征信息,电子设备可以直接将第一多媒体记录的对象作为第一对象,其记录的对象的第一特征信息为第一特征信息。
[0231]在本发明的另一些示例中,第一多媒体中包括多个对象,电子设备需要从中选取一个作为第一对象,然后在获取该第一对象的第一特征信息。其中电子设备选取一个对象为第一对象可以通过感应第一操作体的动作选择,可以采用选择第一多媒体的方式,对此不再阐述。
[0232]在这两种示例中,第一对象可以为第一图像或者为第一音频。比如,第一多媒体中包括一张张柏芝的个人图像,则电子设备可以将张柏芝的个人图像作为第一对象,并通过人脸识别技术获取张柏芝的脸型作为第一特征信息。
[0233]当然第一多媒体还可以是一个音频,在该音频中包括一完整的歌曲以及该歌曲中有代表性的伴奏片段,则电子设备可以将完整的歌曲作为第一对象,而有代表性的伴奏片段作为第一特征信息。如果音频中仅包括一完整的歌曲,则电子设备可以从该完整歌曲中选取重复次数最多部分的伴奏作为第一特征信息。
[0234]需要说明的一点是:第一多媒体为某一图像时,电子设备对多个第一多媒体的显示方式,以及第一多媒体和第一特征信息的获取方式可以参阅图2至图8阐述的关于第二多媒体为某图像时其显示和获取方式,对此本发明实施例不再阐述。
[0235]603:获取作为第二对象的第四图像的地理位置信息,该地理位置信息为第二特征信息。
[0236]目前电子设备在存储第四图像时,会将该第四图像拍摄地点的地理位置信息记录在第四图像中,因此本发明实施例可以从第四图像中获取地理位置信息作为第二特征信
肩、O
[0237]其中地理位置信息可以为拍摄地点的经度和纬度,当然,地理位置信息也可以采用拍摄地点的名称标识。如第四图像为在杭州西湖拍摄到的西湖景象,则地理位置信息可以为杭州西湖的经度和纬度,也可以杭州西湖作为地理位置信息。
[0238]604:依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体,其中目标多媒体中的第三特征信息与第一特征信息匹配,目标多媒体中的第四特征信息与第二特征信息匹配。
[0239]当第二特征信息为地理位置信息时,第一特征信息可以为一图像中某个对象的图像信息,匹配到的目标多媒体可以是在该地理位置下包括这一图像信息的图像或者视频。如果第一特征信息为一有代表性的伴奏片段,匹配到的目标多媒体可以是包括该地理位置和伴奏片段的视频。
[0240]应用上述技术方案,将第四图像增加的一个特征信息——地理位置信息应用到匹配过程中,实现了基于地理位置信息和第一特征信息这两个不同类型信息进行特征匹配。
[0241]电子设备在匹配到目标多媒体后,还可以对目标多媒体进行后续处理,请参阅图13,其示出了本发明实施例5提供的数据处理方法的流程图,阐述了电子设备在匹配到目标多媒体后如何自动跳转到目标多媒体。可以包括以下步骤:
[0242]701:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体。
[0243]702:从第一多媒体中获取第一对象的第一特征信息,第一特征信息用于识别待匹配多媒体中是否包括第一对象;
[0244]703:获取第二对象的第二特征信息。
[0245]704:依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体,其中目标多媒体中的第三特征信息与第一特征信息匹配,目标多媒体中的第四特征信息与第二特征信息匹配。
[0246]步骤701至步骤704的执行方式,可以参阅上述实施例1至实施例4任意实施例阐述的方式,对此本发明实施例不再阐述。
[0247]705:获取作为目标多媒体的待匹配多媒体的显示位置。
[0248]在本发明实施例中,电子设备包括多个待匹配多媒体,且多个待匹配多媒体以预定顺序关系在电子设备上显示,且显示范围超出电子设备的显示区域的范围,如图2所示。在图2待匹配多媒体为图像,电子设备的显示区域内显示了多个图像,且部分图像并未完整显示在显示区域内。[0249]当匹配到目标多媒体后,需要获取该目标多媒体的显示位置,其中显示位置为目标多媒体在显示区域的坐标,才可以在不改动预定顺序关系的情况下实现自动跳转。
[0250]706:搜索作为目标多媒体的待匹配多媒体。
[0251]707:在维持预定顺序关系的情况下,在显示区域内显示目标多媒体。
[0252]所谓维持预定顺序关系是指不打乱电子设备显示顺序,在该情况下电子设备可以自动调整显示区域,以在显示区域内显示目标多媒体,尤其是目标多媒体在光标调整之前并不在显示区域的情况下,可以实现电子设备自动切换显示区域内的多媒体。
[0253]其中自动切换可以是将光标向下移动至目标多媒体所在位置,实现显示区域自动向下滑动。当然自动切换也可以是显示区域的自动滑屏,切换固定显示区域所显示的多媒体。如图14所示,其示出了在图2基础上,将光标下移至目标多媒体所在位置。
[0254]应用上述技术方案,在匹配到目标多媒体后,还可以通过查找目标多媒体的位置,实现对显示区域内显示内容的自动调整。
[0255]此外,在本发明实施例中第一特征信息可以为第一图像特征信息,第二特征信息可以为第二图像特征信息,待匹配多媒体可以包括N帧图像,相应的进行特征匹配则可以从某个待匹配多媒体中匹配到至少一帧图像,其匹配过程可以参阅图15所示,示出了本发明实施例6提供的数据处理方法,可以包括以下步骤:
[0256]801:采集第一操作体的第一选择动作,以得到第一操作体选中的第一多媒体。
[0257]802:从第一多媒体中获取第一对象的第一特征信息,第一特征信息用于识别待匹配多媒体中是否包括第一对象;
[0258]803:获取第二对象的第二特征信息。
[0259]在本发明实施例中第一特征信息可以为第一图像特征信息,第二特征信息可以为第二图像特征信息,其获取过程可以参阅上述方法实施例中阐述的利用图像识别技术获取图像特征信息的过程,对此不再进行阐述。
[0260]804:通过图像识别技术,获取任意一帧图像的第三特征信息和第四特征信息。
[0261]805:将第三特征信息与第一图像特征信息进行匹配,将第四特征信息与第二图像特征信息进行匹配。
[0262]由于待匹配多媒体包括N帧图像,所以电子设备在从待匹配多媒体中找到一个目标多媒体需要对每个待匹配多媒体中的每帧图像进行匹配。在对每帧图像进行匹配时,电子设备首先要获取每帧图像的第三特征信息和第四特征信息,然后将第三特征信息与第一图像特征信息进行匹配,将第四特征信息与第二图像特征信息进行匹配,得到匹配图像,该匹配图像所在待匹配多媒体则是目标多媒体。
[0263]806:第三特征信息与第一图像特征信息匹配,且第四特征信息与第二图像特征信息匹配的至少一帧图像为目标多媒体中的匹配图像。
[0264]在本发明的一些示例中,N帧图像为电子设备播放的视频中的部分图像,当从N帧图像中获取到匹配图像后,本发明实施例提供的数据处理方法还可以获取视频进行播放,如图16所示,在图15基础上还可以包括:
[0265]807:获取电子设备中与匹配图像对应的视频。
[0266]在本发明实施例中,电子设备可以记录每帧图像对应的视频名称,当获取到匹配图像后,可以通过视频名称查找到与匹配图像对应的视频。[0267]808:从电子设备中选取与视频对应的播放应用,并指示电子设备调用播放应用。其中播放应用用于播放视频。
[0268]809:将视频加载至播放应用中,播放视频。
[0269]基于上述方案,电子设备可以在获取到匹配图像后,调取与其对应的视频,并启用播放应用进行视频播放,与现有视频播放基于关键词搜索不同,本发明实施例实现基于图像匹配获取视频并自动播放。
[0270]并且本发明实施例在播放视频时可以从视频的开始位置进行播放。当然其还可以从匹配图像所在视频中的播放位置开始,继续播放视频。
[0271]此外,电子设备还可以从至少一帧匹配图像中获取一帧匹配图像,调用播放应用的快速播放应用,这样电子设备可以执行快速播放应用,将视频播放内容跳转至获取到的匹配图像。在电子设备将视频播放内容跳转至获取到的匹配图像后,执行暂停播放应用,此时电子设备的显示区域内可以显示获取到的匹配图像。
[0272]由于匹配图像可以为多帧,在从这多帧匹配图像中获取一帧匹配图像时可以通过但不限于相关度匹配或时间匹配这两种匹配方式,其中相关度为每帧匹配图像的内容与第一特征信息和第二特征信息表示的内容是否相关的程度,从相关度中选取匹配程度最高的匹配图像;而时间匹配可以是通过对比多帧匹配图像在视频中的播放时间,选取播放时间最早的匹配图像。
[0273]当然在显示区域显示匹配图像时,还可以是直接调用匹配图像所在视频对应的播放应用,将视频播放内容直接跳转至获取到的匹配图像,从而实现跳过视频播放直接显示匹配图像。
[0274]如图17所示,电子设备获取到视频I的匹配图像后,调用“暴风影音”这一播放应用将视频播放内容自动跳转到匹配图像,并执行暂停播放功能,在显示区域上显示该匹配图像。如果电子设备获取到继续播放指令,则可以从匹配图像所在播放位置,继续播放视频,如图17中匹配图像所在播放位置为01:07,则电子设备继续从01:07这一位置继续播放视频。
[0275]与方法实施例相对应,本发明实施例7提供了一种数据处理装置,应用于电子设备,其结构示意图如图18所示,可以包括:采集单元11、第一获取单元12、第二获取单元13和匹配单元14,其中,
[0276]采集单元11,用于采集第一操作体的第一选择动作,以得到第一操作体选中的第
一多媒体。
[0277]在本发明实施例中,电子设备包括一感应单元,当第一操作体在电子设备上执行第一选择动作时,采集单元11可以通过感应单元感应第一操作体在电子设备的显示区域内产生的操作点来确定第一选择动作。并且通过感应到操作点在显示区域的坐标,来选中该坐标处的第一多媒体。
[0278]例如:电子设备的显示区域内显示多个第一多媒体,多个第一多媒体采用图2所示方式,依次排列在显示区域内。当第一操作体,如手指在电子设备的显示区域上执行第一选择动作时,采集单元11可以通过显示区域内产生的操作点的坐标可以确定当前第一选择动作对应的第一多媒体,该第一多媒体则是第一操作体在执行第一选择动作时选中的。
[0279]当然,在本发明实施例中,第一操作体还可以是用户操作的鼠标或电子笔,通过检测鼠标或电子笔在显示区域形成的操作点的坐标来确定选中的第一多媒体。
[0280]第一获取单元12,用于从第一多媒体中获取第一对象的第一特征信息,第一特征信息用于识别待匹配多媒体中是否包括第一对象。
[0281]其中第一对象是本发明实施例中用于进行匹配的第一个参照体,而第一特征信息为第一对象的关键特征信息,其可以表征第一对象,通过第一特征信息可以识别待匹配多媒体中是否包括第一对象。
[0282]在本发明的一些示例中,第一多媒体可以记录有一个对象以及该对象的第一特征信息,第一获取单元12可以直接将第一多媒体记录的对象作为第一对象,其记录的对象的第一特征信息为第一特征信息。
[0283]在本发明的另一些示例中,第一多媒体中包括多个对象,第一获取单元12需要从中选取一个作为第一对象,然后在获取该第一对象的第一特征信息。其中第一获取单元12选取一个对象为第一对象可以通过感应第一操作体的动作选择,可以采用选择第一多媒体的方式,对此不再阐述。
[0284]在这两种示例中,第一对象可以为第一图像或者为第一音频。比如,第一多媒体中包括一张张柏芝的个人图像,则第一获取单元12可以将张柏芝的个人图像作为第一对象,并通过人脸识别技术获取张柏芝的脸型作为第一特征信息。
[0285]当然第一多媒体还可以是一个音频,在该音频中包括一完整的歌曲以及该歌曲中有代表性的伴奏片段,则第一获取单元12可以将完整的歌曲作为第一对象,而有代表性的伴奏片段作为第一特征信息。如果音频中仅包括一完整的歌曲,则第一获取单元12可以从该完整歌曲中选取重复次数最多部分的伴奏作为第一特征信息。
[0286]第二获取单元13,用于获取第二对象的第二特征信息。
[0287]其中第二对象是本发明实施例中用于进行匹配的第二个参照体,而第二特征信息为第二对象的关键特征信息,其可以表征第二对象,通过第二特征信息可以识别待匹配多媒体中是否包括第二对象。
[0288]在本发明实施例中,第一特征信息和第二特征信息可以为同一类型信息,这样通过两个同一类型的特征信息进行匹配相对于一个对象的特征信息匹配,其准确度得到提高。比如第一特征信息为从作为第一对象的一个图像中获取人脸信息,第二特征信息为从作为第二对象的额一个图像中获取的物体的纹理信息,则第一特征信息和第二特征信息同属于图像类型的信息,并且作为第一对象和第二对象的图像可以为同一个图像,也可以为不同的图像。
[0289]此外,第一特征信息和第二特征信息也可以为不同类型的信息,基于这两种不同类型的信息可以匹配出某种类型的多媒体,其中匹配出的多媒体的类型可以与第一特征信息或第二特征信息的类型相同,也可以不同于这两个信息的类型。比如第一特征信息为人脸信息,第二特征信息为该人脸所对应人物的名称(文字信息),匹配出的则是多媒体中具有这一人物名称的人物图像,匹配结果类型与第一特征信息类型相同。
[0290]当然通过人脸信息和文字信息这两个特征信息还可以从多媒体中匹配出具有这两个信息的视频。也就是说,本发明实施例提供的数据处理方法不仅仅可以实现单一类型匹配,还可以通过不同类型信息匹配出某种类型的多媒体,使得搜索方式多样化。
[0291]并且在搜索时可以基于第一操作体的选择得到第一特征信息,结合后的第一特征信息和第二特征信息比单一信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
[0292]上述单一类型匹配是指通过某种类型信息匹配出与该类型相同的多媒体,如现有技术中的图像信息匹配图像。但是本发明实施例在基于单一类型匹配时,是将同一类型的第一特征信息和第二特征信息作为匹配基础进行匹配。第一特征信息和第二特征信息在描述同一多媒体时其准确度要高于采用一个特征信息对多媒体的描述,搜索到的多媒体数量少于基于一个特征信息搜索到的多媒体数量,从而加快了搜索速度。
[0293]匹配单元14,用于依据第一特征信息和第二特征信息,对待匹配多媒体进行特征匹配,得到目标多媒体,其中目标多媒体中的第三特征信息与第一特征信息匹配,目标多媒体中的第四特征信息与第二特征信息匹配。
[0294]在本发明实施例中,匹配单元14在进行特征匹配时,可以基于第一特征信息对每个待匹配多媒体中的第三特征信息进行匹配,将第二特征信息与每个待匹配多媒体中的第四特征信息进行匹配。当某一个待匹配多媒体中的第三特征信息与第一特征信息匹配,且第四特征信息与第二特征信息匹配时,将该待匹配多媒体作为目标多媒体。
[0295]从上述可知,本发明实施例提供的数据处理装置可以基于第一特征信息和第二特征信息这两个信息进行匹配,得到匹配的目标多媒体。并且结合后的第一特征信息和第二特征信息比单一信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
[0296]此外对于描述同一个多媒体来说,第一特征信息和第二特征信息在描述同一多媒体时其准确度要高于采用一个特征信息对多媒体的描述,搜索到的多媒体数量少于基于一个特征信息搜索到的多媒体数量,从而加快了搜索速度。在实际搜索过程中,本发明实施例提供的数据处理装置不仅仅可以实现单一类型匹配,还可以通过不同类型信息匹配出某种类型的多媒体,使得搜索方式多样化。
[0297]上述装置实施例中,第二获取单元可以有多种获取第二特征信息的方式,其中第一种可行方式为:第二获取单元13通过电子设备的声音传感器采集第二操作体产生的声音,并利用语音识别技术对第二操作体产生的声音进行识别,得到对应的关键词,关键词对应的对象为第二对象,关键词为第二对象的第二特征信息。
[0298]第二种可行方式为:第二获取单元13通过电子设备的感应单元获取第一操作体产生的至少一个位置,基于至少一个位置查找对应的文字,并将查找到的文字进行组合得到关键词,关键词对应的对象为第二对象,关键词为第二对象的第二特征信息。
[0299]第三种可行方式为:第二获取单元13采集第一操作体的第二选择动作,以得到第一操作体选中的第二多媒体,从第二多媒体中得到第二对象的第二特征信息,第二特征信息用于识别待匹配多媒体中是否包括第二对象。
[0300]相应的在第三种可行方式中,第二多媒体为第二图像,且第二图像包括至少一个对象,电子设备在显示区域内同时显示多个第二图像,且电子设备内记录每个第二图像在显示区域内的位置,第二获取单元13可以先获取第二多媒体再获取第二特征信息,其结构示意图可以参阅图19所示,包括:第一获取子单元131、第二获取子单元132、第一匹配子单元133、第三获取子单元134、第四获取子单元135和第一识别子单元136。其中,
[0301]第一获取子单元131,用于通过电子设备的感应单元获取第一操作体执行第二选择动作时,在电子设备的显示区域上形成的第二操作点。
[0302]在本发明实施例中,当第一操作体在电子设备上执行第二选择动作时,第一操作体在与显示区域接触时,会在显示区域上形成至少一个第二操作点,通过感应单元第一获取子单元131可以获取到第二操作点。
[0303]第二获取子单元132,用于获取第二操作点在显示区域内的位置。
[0304]第一匹配子单元133,用于将第二操作点在显示区域内的位置与第二图像的位置进行匹配,匹配成功的第二图像为第二多媒体。
[0305]如图2中,每个第二图像分别在一个独立的区域块内显示,那么显示第二图像的区域块的位置即为对应的第二图像的位置,该位置可以通过区域块的四个顶点在显示区域内的坐标表示。
[0306]第一操作体在第一个区域块内执行第二选择动作时,第一获取子单元131通过感应单元可以感应到第一区域块内形成至少一个第二操作点,然后基于该第二操作点的坐标与每个区域块的坐标匹配,可以得出第二操作体选中的第二多媒体为显示在第一个区域块中的第二图像。
[0307]第三获取子单元134,用于通过感应单元获得第一操作体在第二图像上生成的多个第三操作点,多个第三操作点形成第一形状。
[0308]第四获取子单元135,用于获取第一形状内的第二对象。
[0309]在得到作为第二多媒体的第二图像后,需要从第二图像中获取第二对象,然后在识别出第二对象的第二特征信息。在选取第二对象时,第三获取子单元134可以基于感应单元获得的第一操作体生成的多个第三操作点,这些第三操作点形成一个第一形状,且第一形状框住第二图像中的某个对象,所框住的对象则为第二对象。多个第三操作点是第一操作体在第二图像上执行选择动作时生成的操作点。
[0310]如图6所示,第一操作体在选中的第二图像上执行选择动作时,感应单元可以获得第一操作体执行选择动作时生成的多个第三操作点,多个第三操作点在第二图像上形成一个矩形,该矩形框住第二图像中人脸,则该人脸则是第一操作体选中的第二对象。
[0311]第一识别子单元136,用于通过图像识别技术获取第二对象的第二特征信息。其中图像识别技术包括:人脸识别技术、图像分割和模式识别技术获取第二对象的图像特征信息为第二特征信息,具体需要依据第二对象的类型调用相应的识别技术,如图6选中的第二对象为人脸时,电子设备可以采用人脸识别技术获取人脸特征为第二特征信息。
[0312]当然第二获取单元13也可以在获取第二多媒体的同时获取第二对象的第二特征信息,其中第二多媒体可以为第三图像,且第三图像包括至少一个对象,电子设备按照预设顺序在显示区域内依次显示多个第三图像,且每次显示区域内仅显示一个第三图像。
[0313]为了实现第二多媒体和第二特征信息同时获取,第二获取单元13的结构示意图可以参阅图20所示,可以包括:第四获取子单元201、第五获取子单元202、第六获取子单元203、第七获取子单元204、第二匹配子单元205和第二识别子单元206,其中,
[0314]第四获取子单元201,用于通过电子设备的感应单元获取第一操作体执行第二选择动作时,在电子设备的显示区域上形成的至少一个第四操作点。[0315]在本发明实施例中,当第一操作体在电子设备上执行第二选择动作时,第一操作体在与显示区域接触时,会在显示区域上形成至少一个第四操作点,第四获取子单元201通过感应单元电子设备可以获取到第四操作点。
[0316]第五获取子单元202,用于获取形成至少一个第四操作点时,显示区域上显示的第三图像,第三图像为第二多媒体。
[0317]当第四获取子单元201感应到第四操作点时,触发第五获取子单元202通过查询预设顺序获知当前显示区域正在显示的是哪个第三图像,则将正在显示的第三图像作为第二多媒体。
[0318]第六获取子单元203,用于获取至少一个第四操作点形成的第一轨迹。由于第三图像包括至少一个对象,电子设备需要在获取第三图像的同时,确定选中的第三图像的某个对象为第二对象,因此电子设备还需要获取第四操作点与第三图像中对象的关系,选取出与第四操作点匹配的第二对象。
[0319]在本发明实施例中,第一操作体在执行第二选择动作时,感应单元获取到的至少一个第四操作点形成第一轨迹,该第一轨迹可以为任意一种形状的图形,用于选择第三图像中可作为第二对象的对象。
[0320]第七获取子单元204,用于获取第一轨迹在显示区域内的位置。
[0321]第二匹配子单元205,用于将第一轨迹的位置与第三图像中每个对象的位置进行匹配,匹配成功的对象为第二对象。
[0322]其中第一轨迹在显示区域内的位置以第一轨迹的起始操作点和终止操作点,在第三图像中的像素值表示,同样第三图像中每个对象的位置以该对象的边缘部分的特征点的像素值表示,特征点是从组成边缘部分的所有点中选择的一系列较突出的点,如转折点、顶点等。
[0323]第二匹配子单元205将表示第一轨迹位置的像素值和位于第三图像中每个对象的特征点的像素值进行匹配,像素值匹配成功的对象为第三对象。
[0324]如图7所示,第一操作体在执行第二选择动作时,在选中第三图像的同时感应单元获得第四操作点形成的第一轨迹,从图7所示可以看出第一轨迹为一矩形,该矩形框住第三图像中的一个对象——人脸,第二匹配子单元205通过将该矩形的位置与人脸的位置进行匹配,确定两者位置匹配,则该人脸则是第三对象。
[0325]第二识别子单元206,用于通过图像识别技术获取第二对象的第二特征信息。
[0326]上述两种第二多媒体和第二特征信息的获取方式基于第一操作体的选择动作完成,而第一操作体的选择动作是在用户的某种要求下进行,所以基于第一操作体的选择动作获得的第二特征信息更能符合用户意图,因此基于第一特征信息和第二特征信息同时匹配得到的目标多媒体,相对于基于单一信息匹配得到的目标多媒体更能符合用户意图,提高搜索精确度。
[0327]在这里需要说明的一点是:第一多媒体也可以是一图像,从该图像中获取第一对象的第一特征信息,第一多媒体和第一特征信息也可以采用图19或图20所示第二获取单元进行获取,这样,第一特征信息和第二特征信息都可以基于第一操作体的选择动作完成,使得这两个特征信息更能符合用户意图,基于这两个特征信息匹配的目标多媒体更能符合用户意图,提高搜索精准度。[0328]还需要注意的一点是:当第一多媒体和第二多媒体为两张图像时,第一获取单元12可以通过第一识别方式,从作为第一多媒体的图像中获取第一对象的第一特征信息;相应的第二获取单元13可以通过第二识别方式,从作为第二多媒体的图像中获取第二对象的第二特征信息,且第一识别方式可以不同于第二识别方式,这样匹配单元14可以利用这两种识别方式获取到不同类型的特征信息。相对应采用相同识别方式获取同种类型的特征信息,不同类型的特征信息对对象的描述更加准确,以提高搜索的精准度。
[0329]如第一对象为人脸,则第一识别方式可以为人脸识别方式以得到人脸的轮廓;第二对象为手提包,则第二识别方式可以为图像分割和模式识别方式,以获得手提包的纹理信息。
[0330]此外目前电子设备在存储图像时,会将该图像拍摄地点的地理位置信息记录在图像中,因此本发明实施例中第二获取单元13可以从作为第二对象的第四图像中获取地理位置信息作为第二特征信息。这样本发明实施例提供的数据处理装置可以基于地理位置信息和第一特征信息这两个不同类型信息进行特征匹配。
[0331]其中地理位置信息可以为拍摄地点的经度和纬度,当然,地理位置信息也可以采用拍摄地点的名称标识。如第四图像为在杭州西湖拍摄到的西湖景象,则地理位置信息可以为杭州西湖的经度和纬度,也可以杭州西湖作为地理位置信息。
[0332]在本发明实施例中,电子设备可以包括多个待匹配多媒体,多个待匹配多媒体以预定顺序关系在电子设备上显示,且显示范围超出电子设备的显示区域的范围,如图2所示。在图2待匹配多媒体为图像,电子设备的显示区域内显示了多个图像,且部分图像并未完整显示在显示区域内。基于该种电子设备,本发明实施例提供的数据处理装置在图18基础上,还可以包括:第三获取单元15、搜索单元16和显示单元17,如图21所示,其中,
[0333]第三获取单元15,用于获取作为目标多媒体的待匹配多媒体的显示位置。
[0334]在现有电子设备在显示待匹配多媒体时由于显示区域范围有限,导致部分待匹配多媒体未完整显示在显示区域内,因此当作为目标多媒体的待匹配多媒体未显示或完整显示在显示区域内时,第三获取单元15会获取该目标多媒体的显示位置,以使得电子设备在不改动预定顺序关系的情况下实现自动跳转。其中显示位置可以为目标多媒体在显示区域的坐标。
[0335]搜索单元16,用于搜索作为目标多媒体的待匹配多媒体。
[0336]显示单元17,用于在维持预定顺序关系的情况下,在显示区域内显示目标多媒体。
[0337]所谓维持预定顺序关系是指不打乱电子设备显示顺序,在该情况下显示单元17可以自动调整显示区域,以在显示区域内显示目标多媒体,尤其是目标多媒体在光标调整之前并不在显示区域的情况下,可以实现自动切换显示区域内的多媒体。
[0338]其中自动切换可以是将光标向下移动至目标多媒体所在位置,实现显示区域自动向下滑动。当然自动切换也可以是显示区域的自动滑屏,切换固定显示区域所显示的多媒体。如图14所示,其示出了在图2基础上,将光标下移至目标多媒体所在位置。
[0339]应用上述技术方案,在匹配到目标多媒体后,还可以通过查找目标多媒体的位置,实现对显示区域内显示内容的自动调整。
[0340]此外,在本发明实施例中第一特征信息可以为第一图像特征信息,第二特征信息可以为第二图像特征信息,待匹配多媒体可以包括N帧图像,匹配单元14进行特征匹配时则可以从某个待匹配多媒体中匹配到至少一帧图像,其结构示意图如图22所示,可以包括:信息获取子单元251和信息匹配子单元252,其中,
[0341]信息获取子单元251,用于通过图像识别技术,获取任意一帧图像的第三特征信息和第四特征信息。
[0342]信息匹配子单元252,用于将第三特征信息与第一图像特征信息进行匹配,将第四特征信息与第二图像特征信息进行匹配,第三特征信息与第一图像特征信息匹配,且第四特征信息与第二图像特征信息匹配的至少一帧图像为目标多媒体中的匹配图像。
[0343]由于待匹配多媒体包括N帧图像,所以信息匹配子单元252在从待匹配多媒体中找到一个目标多媒体需要对每个待匹配多媒体中的每帧图像进行匹配。
[0344]在对每帧图像进行匹配时,信息匹配子单元252首先要获取每帧图像的第三特征信息和第四特征信息,然后将第三特征信息与第一图像特征信息进行匹配,将第四特征信息与第二图像特征信息进行匹配,得到匹配图像,该匹配图像所在待匹配多媒体则是目标多媒体。
[0345]在本发明的一些示例中,N帧图像为电子设备播放的视频中的部分图像,当从N帧图像中获取到匹配图像后,本发明实施例提供的数据处理装置还可以获取视频进行播放,如图23所示,在图18基础上,还可以包括:第四获取单元18、调用单元19和播放单元20。其中,
[0346]第四获取单元18,用于获取电子设备中与匹配图像对应的视频。在本发明实施例中,匹配单元14还可以记录每帧图像对应的视频名称,当获取到匹配图像后,第四获取单元18可以通过视频名称查找到与匹配图像对应的视频。
[0347]调用单元19,用于从电子设备中选取与视频对应的播放应用,并指示电子设备调用播放应用。
[0348]播放单元20,用于将视频加载至播放应用中,播放视频。
[0349]基于上述方案,电子设备应用数据处理装置可以在获取到匹配图像后,调取与其对应的视频,并启用播放应用进行视频播放,与现有视频播放基于关键词搜索不同,本发明实施例实现基于图像匹配获取视频并自动播放。
[0350]并且本发明实施例在播放视频时可以从视频的开始位置进行播放。当然其还可以从匹配图像所在视频中的播放位置开始,继续播放视频。
[0351]请参阅图24,其示出了本发明实施例提供的数据处理装置的再一种结构示意图,在图23基础上,还可以包括:第五获取单元21、应用调用单元22、执行单元23和图像显示单元24。其中,
[0352]第五获取单元21,用于从至少一帧匹配图像中获取一帧匹配图像。由于匹配图像可以为多帧,在从这多帧匹配图像中获取一帧匹配图像时可以通过但不限于相关度匹配或时间匹配这两种匹配方式,其中相关度为每帧匹配图像的内容与第一特征信息和第二特征信息表示的内容是否相关的程度,从相关度中选取匹配程度最高的匹配图像;而时间匹配可以是通过对比多帧匹配图像在视频中的播放时间,选取播放时间最早的匹配图像。
[0353]应用调用单元22,用于在获取一帧匹配图像后,调用播放应用的快速播放应用。该快速播放应用用于将视频播放内容快速调整至匹配图像。
[0354]执行单元23,用于执行快速播放应用,将视频播放内容跳转至获取到的匹配图像。[0355]图像显示单元24,用于在电子设备的显示区域内显示获取到的匹配图像。
[0356]基于上述方案,数据处理装置从至少一帧匹配图像中获取一帧匹配图像,调用播放应用的快速播放应用,这样数据处理装置可以执行快速播放应用,将视频播放内容跳转至获取到的匹配图像。在将视频播放内容跳转至获取到的匹配图像后,执行暂停播放应用,此时电子设备的显示区域内可以显示获取到的匹配图像。
[0357]当然在显示区域显示匹配图像时,还可以是直接调用匹配图像所在视频对应的播放应用,将视频播放内容直接跳转至获取到的匹配图像,从而实现跳过视频播放直接显示匹配图像。
[0358]如图17所示,电子设备获取到视频I的匹配图像后,调用“暴风影音”这一播放应用将视频播放内容自动跳转到匹配图像,并执行暂停播放功能,在显示区域上显示该匹配图像。如果电子设备获取到继续播放指令,则可以从匹配图像所在播放位置,继续播放视频,如图17中匹配图像所在播放位置为01:07,则电子设备继续从01:07这一位置继续播放视频。
[0359]需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
[0360]最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
[0361]为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
[0362]以上对本发明所提供的一种数据处理方法、装置及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在【具体实施方式】及应用范 围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
【权利要求】
1.一种数据处理方法,应用于电子设备,其特征在于,所述方法包括: 采集第一操作体的第一选择动作,以得到所述第一操作体选中的第一多媒体; 从所述第一多媒体中获取第一对象的第一特征信息,所述第一特征信息用于识别待匹配多媒体中是否包括所述第一对象; 获取第二对象的第二特征信息; 依据所述第一特征信息和所述第二特征信息,对所述待匹配多媒体进行特征匹配,得到目标多媒体,其中所述目标多媒体中的第三特征信息与所述第一特征信息匹配,所述目标多媒体中的第四特征信息与所述第二特征信息匹配。
2.根据权利要求1所述的方法,其特征在于,所述获取第二对象的第二特征信息包括: 通过所述电子设备的声音传感器采集第二操作体产生的声音,并利用语音识别技术对所述第二操作体产生的声音进行识别,得到对应的关键词,所述关键词对应的对象为所述第二对象,所述关键词为所述第二对象的第二特征信息; 或者 通过所述电子设备的感应单元获取所述第一操作体产生的至少一个位置,基于所述至少一个位置查找对应的文字,并将查找到的文字进行组合得到关键词,所述关键词对应的对象为所述第二对象,所述关键词为所述第二对象的第二特征信息。
3.根据权利要求1所述的方法,其特征在于,所述获取第二对象的第二特征信息,包括:` 采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体; 从所述第二多媒体中得到所述第二对象的第二特征信息,所述第二特征信息用于识别待匹配多媒体中是否包括所述第二对象。
4.根据权利要求3所述的方法,其特征在于,所述第二多媒体为第二图像,且所述第二图像包括至少一个对象,所述电子设备在显示区域内同时显示多个所述第二图像,且所述电子设备内记录每个所述第二图像在所述显示区域内的位置; 所述采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体,包括: 通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的第二操作点; 获取所述第二操作点在显示区域内的位置; 将所述第二操作点在显示区域内的位置与所述第二图像的位置进行匹配,匹配成功的所述第二图像为所述第二多媒体。
5.根据权利要求4所述的方法,其特征在于,从所述第二多媒体中得到所述第二对象的第二特征信息,包括: 通过所述感应单元获得所述第一操作体在所述第二图像上生成的多个第三操作点,所述多个第三操作点形成第一形状; 获取所述第一形状内的第二对象; 通过图像识别技术获取第二对象的第二特征信息。
6.根据权利要求3所述的方法,其特征在于,所述第二多媒体为第三图像,且所述第三图像包括至少一个对象,所述电子设备按照预设顺序在所述显示区域内依次显示所述多个第三图像,且每次所述显示区域内仅显示一个所述第三图像; 所述采集第一操作体的第二选择动作,以得到所述第一操作体选中的第二多媒体,包括:
通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的至少一个第四操作点; 获取形成所述至少一个第四操作点时,所述显示区域上显示的所述第三图像,所述第三图像为所述第二多媒体。
7.根据权利要求6所述的方法,其特征在于,从所述第二多媒体中得到所述第二对象的第二特征信息,包括: 获取所述至少一个第四操作点形成的第一轨迹; 获取所述第一轨迹在显示区域内的位置; 将所述第一轨迹的位置与所述第三图像中每个对象的位置进行匹配,匹配成功的对象为第二对象; 通过图像识别技术获取第二对象的第二特征信息。
8.根据权利要求1所述的方法,其特征在于,所述第二对象为第四图像,且所述第四图像内记录所述第四图像拍摄地点的地理位置信息,获取所述第二对象的第二特征信息,包括: 将所述第四图像的地理位置信息作为第二对象的所述第二特征信息。
9.根据权利要求1所述的方法,其特征在于,从所述第一多媒体中获取第一对象的第一特征信息,包括: 通过第一识别方式,从作为第一多媒体的图像中获取第一对象的第一特征信息; 获取第二对象的第二特征信息,包括:通过第二识别方式,从作为所述第二多媒体的图像中获取所述第二对象的第二特征信息,所述第二识别方式不同于所述第一识别方式。
10.根据权利要求1至9任意一项所述的方法,其特征在于,所述电子设备包括多个所述待匹配多媒体,所述多个待匹配多媒体以预定顺序关系在电子设备上显示,且显示范围超出所述电子设备的显示区域的范围; 所述方法还包括: 获取作为所述目标多媒体的所述待匹配多媒体的显示位置; 搜索作为所述目标多媒体的所述待匹配多媒体; 在维持所述预定顺序关系的情况下,在所述显示区域内显示所述目标多媒体。
11.根据权利要求1至9任意一项所述的方法,其特征在于,所述第一特征信息为第一图像特征信息,所述第二特征信息为第二图像特征信息,所述待匹配多媒体包括N帧图像; 依据所述第一特征信息和所述第二特征信息,对所述待匹配多媒体进行特征匹配,得到目标多媒体,包括: 通过图像识别技术,获取任意一帧图像的第三特征信息和第四特征信息; 将所述第三特征信息与所述第一图像特征信息进行匹配,将所述第四特征信息与所述第二图像特征信息进行匹配; 所述第三特征信息与所述第一图像特征信息匹配,且所述第四特征信息与所述第二图像特征信息匹配的至少一帧图像为目标多媒体中的匹配图像。
12.根据权利要求11所述的方法,其特征在于,所述N帧图像为所述电子设备播放的视频中的部分图像,所述方法还包括: 获取电子设备中与所述匹配图像对应的视频; 从电子设备中选取与所述视频对应的播放应用,并指示电子设备调用所述播放应用; 将所述视频加载至所述播放应用中,播放所述视频。
13.根据权利要求12所述的方法,其特征在于,所述方法还包括: 从至少一帧匹配图像中获取一帧所述匹配图像; 在获取一帧匹配图像后,调用所述播放应用的快速播放应用; 执行所述快速播放应用,将所述视频播放内容跳转至获取到的所述匹配图像; 在所述电子设备的显示区域内显示获取到的所述匹配图像。
14.一种数据处理装置,应用于电子设备,其特征在于,所述装置包括: 采集单元,用于采集第一操作体的第一选择动作,以得到所述第一操作体选中的第一多媒体; 第一获取单元,用于从所述第一多媒体中获取第一对象的第一特征信息,所述第一特征信息用于识别待匹配 多媒体中是否包括所述第一对象; 第二获取单元,用于获取第二对象的第二特征信息; 匹配单元,用于依据所述第一特征信息和所述第二特征信息,对所述待匹配多媒体进行特征匹配,得到目标多媒体,其中所述目标多媒体中的第三特征信息与所述第一特征信息匹配,所述目标多媒体中的第四特征信息与所述第二特征信息匹配。
15.根据权利要求14所述的装置,其特征在于,所述第二多媒体为第二图像,且所述第二图像包括至少一个对象,所述电子设备在显示区域内同时显示多个所述第二图像,且所述电子设备内记录每个所述第二图像在所述显示区域内的位置; 所述第二获取单元,包括:第一获取子单元、第二获取子单元、第一匹配子单元、第三获取子单元、第四获取子单元和第一识别子单元;其中, 所述第一获取子单元,用于通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的第二操作点; 所述第二获取子单元,用于获取所述第二操作点在显示区域内的位置; 所述第一匹配子单元,用于将所述第二操作点在显示区域内的位置与所述第二图像的位置进行匹配,匹配成功的所述第二图像为所述第二多媒体; 所述第三获取子单元,用于通过所述感应单元获得所述第一操作体在所述第二图像上生成的多个第三操作点,所述多个第三操作点形成第一形状; 所述第四获取子单元,用于获取所述第一形状内的第二对象; 所述第一识别子单元,用于通过图像识别技术获取第二对象的第二特征信息。
16.根据权利要求14所述的装置,其特征在于,所述第二多媒体为第三图像,且所述第三图像包括至少一个对象,所述电子设备按照预设顺序在所述显示区域内依次显示所述多个第三图像,且每次所述显示区域内仅显示一个所述第三图像; 所述第二获取单元包括:第四获取子单元、第五获取子单元、第六获取子单元、第七获取子单元、第二匹配子单元和第二识别子单元,其中, 所述第四获取子单元,用于通过电子设备的感应单元获取所述第一操作体执行所述第二选择动作时,在所述电子设备的显示区域上形成的至少一个第四操作点; 所述第五获取子单元,用于获取形成所述至少一个第四操作点时,所述显示区域上显示的所述第三图像,所述第三图像为所述第二多媒体; 所述第六获取子单元,用于获取所述至少一个第四操作点形成的第一轨迹; 所述第七获取子单元,用于获取所述第一轨迹在显示区域内的位置; 所述第二匹配子单元,用于将所述第一轨迹的位置与所述第三图像中每个对象的位置进行匹配,匹配成功的对象为第二对象; 所述第二识别子单元,用于通过图像识别技术获取第二对象的第二特征信息。
17.根据权利要求14至16任意一项所述的装置,其特征在于,所述电子设备包括多个所述待匹配多媒体,所述多个待匹配多媒体以预定顺序关系在电子设备上显示,且显示范围超出所述电子设备的显示区域的范围; 所述装置还包括: 第三获取单元,用于获取作为所述目标多媒体的所述待匹配多媒体的显示位置; 搜索单元,用于搜索作为所述目标多媒体的所述待匹配多媒体; 显示单元,用于在维持所述预定顺序关系的情况下,在所述显示区域内显示所述目标多媒体。
18.根据权利要求14至16任意一项所述的装置,其特征在于,所述第一特征信息为第一图像特征信息,所述第二特征信息为第二图像特征信息,所述待匹配多媒体包括N帧图像,且所述N帧图像为所述电子设备播放的视频中的部分图像;` 所述匹配单元包括:信息获取子单元和信息匹配子单元,其中, 所述信息获取子单元,用于通过图像识别技术,获取任意一帧图像的第三特征信息和第四特征信息; 所述信息匹配子单元,用于将所述第三特征信息与所述第一图像特征信息进行匹配,将所述第四特征信息与所述第二图像特征信息进行匹配,所述第三特征信息与所述第一图像特征信息匹配,且所述第四特征信息与所述第二图像特征信息匹配的至少一帧图像为目标多媒体中的匹配图像;所述装置还包括: 第四获取单元,用于获取电子设备中与所述匹配图像对应的视频; 调用单元,用于从电子设备中选取与所述视频对应的播放应用,并指示电子设备调用所述播放应用; 播放单元,用于将所述视频加载至所述播放应用中,播放所述视频。
19.根据权利要求18所述的装置,其特征在于,所述装置还包括: 第五获取单元,用于从至少一帧匹配图像中获取一帧所述匹配图像; 应用调用单元,用于在获取一帧匹配图像后,调用所述播放应用的快速播放应用; 执行单元,用于执行所述快速播放应用,将所述视频播放内容跳转至获取到的所述匹配图像; 图像显示单元,用于在所述电子设备的显示区域内显示获取到的所述匹配图像。
20.一种电子设备,其特征在于,包括如权利要求14至19任意一项所述的数据处理装置。
【文档编号】G06F17/30GK103823898SQ201410096003
【公开日】2014年5月28日 申请日期:2014年3月14日 优先权日:2014年3月14日
【发明者】付旭松, 秦丽君, 李斌 申请人:联想(北京)有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1