指向相应场景标记，则显示与所述相应场景标记相关的图像或样本场景视频，或者在作为所述查询结果显示的图像或样本场景视频的情况下，如果指向相应图像或样本场景视频，则显示与所述相应图像或样本场景视频相关的场景标记。
[0225]所述方法还包括:在显示图像或样本场景视频作为所述查询的结果的情况下，通过用户界面生成输入，并且根据所述输入的保持时间的增加来改变相应图像或样本场景视频的尺寸并进行显示。
[0226]所述方法还包括:在显示样本场景视频作为所述查询的结果的情况下，如果生成了通过用户界面进行的输入，则回放相应样本场景视频。
[0227]所述方法还包括:在显示样本场景视频作为查询的结果的情况下，如果生成了通过用户界面进行的输入，则从相应样本场景视频的位置开始回放内容。
[0228]所述所述方法还包括:回放内容，确定内容的当前回放位置是否与查询结果相关联；以及当内容的回放位置与所述查询结果相关联时，基于场景标记属性来执行声音反馈、触觉反馈和视觉反馈中的一个或更多个反馈。
[0229]所述方法还包括:向与查询结果相对应的场景标记指派场景标记属性。
[0230]所述方法还包括:当指向与查询结果相对应的场景标记时，根据场景标记属性来执行声音反馈、触觉反馈和视觉反馈中的一个或更多个反馈。
[0231]—种输入针对在内容中进行基于内容的查询的用户查询的方法，包括:通过用户输入界面设置要搜索的内容;设置针对搜索要搜索的内容中的内容的查询;通过使用关于要搜索的内容的描述信息来搜索与查询相对应的内容的部分内容，作为查询结果；以及基于查询匹配程度来显示一个或更多个检测到的查询结果。
[0232]设置针对搜索要搜索的内容中的内容的查询包括:设置查询图像；以及通过对查询图像进行图像分析来提取一个或更多个查询内容。
[0233]设置查询图像包括:暂停正在播放的视频播放器;并将暂停的视频的屏幕设置为查询图像。
[0234]设置查询图像包括:捕获图像;并通过用户输入界面将捕获的图像与要查询的内容关联起来。
[0235]捕获图像包括:通过用户输入界面设置包括要捕获的一个或更多个图像的区域。
[0236]捕获图像包括:通过用户输入界面设置图像的区域以至少部分地捕获另一区域中的一个或更多个图像，所述另一区域不是要查询的内容的位置。
[0237]将捕获的图像与要查询的内容关联起来包括:将捕获的图像移动至要查询的内容上。
[0238]设置针对搜索要搜索的内容中的内容的查询包括:通过按键或虚拟键区输入字符。
[0239]设置针对搜索要搜索的内容中的内容的查询包括:接收语音信号；提取与语音信号相对应的文本;并将提取出的文本设置为查询词。
[0240]设置针对搜索要搜索的内容中的内容的查询包括:记录音乐声音;通过识别记录的音乐声音来提取至少包括音乐标题的一条或更多条元数据;并通过使用提取出的至少包括音乐标题的元数据来设置查询词。
[0241]所述方法包括:在输入查询之前，识别本地设备中是否存在关于要搜索的内容的图像索引信息或元数据；当本地设备中不存在关于要搜索的内容的图像索引信息或元数据时，识别在与内容相关的服务器或远程设备中是否存在图像索引信息或元数据；当在与内容相关的服务器或远程设备中存在图像索引信息或元数据时，下载包括图像索引信息和元数据中的一个或更多个的描述信息；当本地设备中不存在关于要搜索的内容的图像索引信息或元数据时并且当在与内容相关的服务器或远程设备中不存在图像索引信息或元数据时，生成包括关于要搜索的内容的图像索引信息和元数据中的一个或更多个的描述信息。
[0242]—种电子设备包括:一个或更多个处理器;存储器；以及存储器中存储并被配置为由一个或更多个处理器执行的一个或更多个程序。所述程序包括以下命令:通过使用用户界面输入针对搜索所述内容中的内容的查询;通过使用与所述内容相关的描述信息来检测与所述查询相对应的所述内容的至少一部分内容，作为查询结果;确定显示所述查询结果的位置;考虑到所述内容的部分内容的长度和所述查询结果之间的相对距离中的至少一个，确定与查询结果相对应的场景标记的尺寸或显示所述查询结果的窗口的尺寸；以及根据所确定的查询结果的位置和所确定的相关尺寸至少部分地显示一个或更多个查询结果。
[0243]用于至少部分地显示一个或更多个查询结果的命令包括以下命令:与一个或更多个进度条一起显示一个或更多个查询结果，并在进度条、边界和相邻区域中的至少一个区域中显示与查询结果相对应的场景标记、图像和样本场景视频中的至少一个。
[0244]根据与所述查询结果相对应的内容中的内容的长度或所述查询的匹配程度来确定并显示场景标记的至少一个图形属性，例如数字、字符、符号、相对尺寸、长度、颜色、形状、角度或动画效果。
[0245]程序还包括以下命令:计算所述查询的内容与所述查询结果之间的匹配程度。
[0246]程序还包括以下命令:生成与一个或更多个查询结果相对应的一个或更多个图像或样本场景视频，并在屏幕上至少部分地显示所生成的图像或样本场景视频。
[0247]程序还包括以下命令:根据每个镜头和场景的长度、所述查询的匹配程度、所述内容回放/暂停的位置和与所述查询结果相对应的场景标记之间的距离设置与所述查询结果相对应的图像或样本场景视频的优先级；以及根据所述优先级确定显示图像或样本场景视频的窗口的尺寸、位置、重叠、是否显示图像或样本场景视频、动画和图形属性中的至少一个。
[0248]程序还包括以下命令:在视频磁轨、音频磁轨和字幕磁轨中的每一个位置处分别显示所述查询结果。
[0249]当彼此相邻的查询结果之间的距离比预定参考更短时，重叠地显示查询结果。
[0250]程序还包括以下命令:当彼此相邻的查询结果之间的距离比预定参考更短时，考虑到显示窗口的尺寸布置所述查询结果，使得查询结果中的一些查询结果以预定比率或更大比率彼此不重叠。
[0251]程序还包括以下命令:当彼此相邻的查询结果之间的距离比预定参考更短时，在通过用户界面生成了输入事件时，执行用于放大相应部分的放大镜功能。
[0252]程序还包括以下命令:选择所述一个或更多个查询结果中的一个；以及放大或缩小与所选的查询结果相对应的图像或样本场景视频并进行显示。
[0253]程序还包括以下命令:从与所选的查询结果相对应的位置回放内容，或执行与所选的查询结果相对应的图像或样本场景视频的全视图。
[0254]在进度条上显示所述场景标记作为查询的结果的情况下，如果指向相应场景标记，则显示关于相应场景标记的图像或样本场景视频，或者在显示图像或样本场景视频作为查询的结果的情况下，如果指向相应图像或样本场景视频，则显示与相应图像或样本场景视频相关的场景标记。
[0255]程序还包括以下命令:在显示图像或样本场景视频作为查询结果的情况下，通过用户界面生成输入并根据输入的保持时间的增加来改变相应图像或样本场景视频的尺寸并进行显示。
[0256]程序还包括以下命令:在显示样本场景视频作为查询的结果的情况下，如果生成了通过用户界面进行的输入，则回放所述相应样本场景视频。
[0257]程序还包括以下命令:在显示样本场景视频作为查询结果的情况下，如果生成了通过用户界面进行的输入，则从相应样本场景视频的位置开始回放内容。
[0258]程序还包括以下命令:回放内容，确定内容的当前回放位置是否与查询结果相关联；以及当内容的再现位置与所述查询结果相关联时，通过场景标记属性来执行声音反馈、触觉反馈和视觉反馈中的一个或更多个反馈。
[0259]程序还包括以下命令:向与查询结果相对应的场景标记指派场景标记属性。
[0260]程序还包括以下命令:当指向与查询结果相对应的场景标记时，根据场景标记属性执行声音反馈、触觉反馈和视觉反馈中的一个或更多个反馈。
[0261]—种电子设备包括:一个或更多个处理器;存储器；以及存储在存储器中并配置为由所述一个或更多个处理器执行的一个或更多个程序。程序包括以下命令:通过用户输入界面设置要搜索的内容;设置针对搜索要搜索的内容中的内容的查询;通过使用关于要搜索的内容的描述信息来检测与查询相对应的内容的部分内容；以及基于查询匹配程度来显示一个或更多个检测到的查询结果。
[0262]用于设置针对搜索要搜索的内容中的内容的查询的命令包括以下命令:设置查询图像，并通过对查询图像进行图像分析来提取一个或更多个查询内容。
[0263]用于设置查询图像的命令包括以下命令:暂停正在播放的视频播放器;并将暂停的视频的屏幕设置为查询图像。
[0264]用于设置查询图像的命令包括以下命令:捕获图像;并通过用户输入界面将捕获的图像与要查询的内容关联起来。
[0265]用于捕获图像的命令包括以下命令:通过用户输入界面设置包括要捕获的一个或更多个图像的区域。
[0266]用于捕获图像的命令包括以下命令:通过用户输入界面设置图像的区域以至少部分地捕获另一区域中的一个或更多个图像，所述另一区域不是要查询的内容的位置。
[0267]用于将捕获的图像与要查询的内容关联起来的命令包括以下命令:将捕获的图像移动至要查询的内容上。
[0268]用于设置针对搜索要搜索的内容中的内容的查询的命令包括以下命令:通过按键或虚拟键区输入字符。
[0269]用于设置针对搜索要搜索的内容中的内容的查询的命令包括以下命令:接收语音信号;提取与语音信号相对应的文本;并将提取出的文本设置为查询词。
[0270]用于设置针对搜索要搜索的内容中的内容的查询的命令包括以下命令:记录音乐声音;通过识别记录的音乐声音来提取至少包括音乐标题的一条或更多条元数据;并通过使用提取出的至少包括提取出的音乐标题的元数据来设置查询词。
[0271]程序包括以下命令:在输入查询之前，识别本地设备中是否存在关于要搜索的内容的图像索引信息或元数据；当本地设备中不存在关于要搜索的内容的图像索引信息或元数据时，识别在与内容相关的服务器或远程设备中是否存在图像索引信息或元数据；当在与内容相关的服务器或远程设备中存在图像索引信息或元数据时，下载包括图像索引信息和元数据中的一个或更多个的描述信息；当本地设备中不存在关于要搜索的内容的图像索引信息或元数据时并且当在与内容相关的服务器或远程设备中不存在图像索引信息或元数据时，生成包括关于要搜索的内容的图像索引信息和元数据中的一个或更多个的描述信息。
[0272]尽管在本发明的详细描述中描述了实施例，然而在不脱离本发明的范围的前提下可以用各种形式修改本发明。因此，本发明的范围不应被定义为限于实施例，而是应当由所附权利要求及其等同物来限定。
【主权项】
1.一种由电子设备搜索内容的方法，所述方法包括: 通过用户界面接收用于搜索所述内容中的内容的查询的输入； 通过使用与所述内容相关的描述信息来检测与所述查询相对应的所述内容的至少一部分内容，作为所述查询的结果； 确定显示查询结果的位置； 考虑到所述内容的所述部分内容的长度和所述查询结果之间的相对距离中的至少一个，确定与所述查询结果相对应的场景标记的尺寸或显示所述查询结果的区域的尺寸；以及 根据所确定的所述查询结果的位置和相关尺寸至少部分地显示一个或更多个查询结果Ο2.根据权利要求1所述的方法，其中，至少部分地显示一个或更多个查询结果包括:与一个或更多个进度条一起显示所述一个或更多个查询结果，并在所述进度条、所述进度条的边界和所述进度条的相邻区域中的至少一个区域中显示与所述查询结果相对应的场景标记、图像和样本场景视频中的至少一个。3.根据权利要求2所述的方法，其中，根据与所述查询结果相对应的所述内容中的内容的长度或所述查询的匹配程度来确定并显示所述场景标记的至少一个图形属性，例如数字、字符、符号、相对尺寸、长度、颜色、形状、角度或动画效果。4.根据权利要求1所述的方法，其中，检测所述至少一部分内容作为所述查询的结果包括:计算所述查询的内容与所述查询结果之间的匹配程度。5.根据权利要求1所述的方法，还包括:生成与一个或更多个查询结果相对应的一个或更多个图像或样本场景视频，并在屏幕上至少部分地显示所生成的图像或样本场景视频。6.根据权利要求5所述的方法，还包括: 根据每个镜头和场景的长度、所述查询的匹配程度、所述内容的回放/暂停的位置和与所述查询结果相对应的场景标记之间的距离来设置与所述查询结果相对应的图像或样本场景视频的优先级；以及 根据所述优先级来确定显示所述图像或样本场景视频的窗口的尺寸、位置、重叠、是否显示所述图像或样本场景视频、动画和图形属性中的至少一个。7.根据权利要求2所述的方法，还包括:在视频磁轨、音频磁轨和字幕磁轨中的每一个位置处分别显示所述查询结果。8.根据权利要求1所述的方法，其中，如果彼此相邻的查询结果之间的距离比预定参考更短，则所述方法包括以下至少一项:重叠所述查询结果、以及将所述查询结果组合为一个并进行显示。9.根据权利要求1所述的方法，还包括:如果彼此相邻的查询结果之间的距离比预定参考更短，则考虑到显示窗口的尺寸来布置所述查询结果，使得所述查询结果中的一些查询结果以预定比率或更大比率彼此分离。10.根据权利要求1所述的方法，还包括:如果彼此相邻的查询结果之间的距离比预定参考更短，则如果通过用户界面生成了输入事件，则执行用于放大相应部分的放大镜功能。11.根据权利要求1所述的方法，还包括: 选择所述一个或更多个查询结果中的一个查询结果；以及 放大或缩小与所选择的查询结果相对应的图像或样本场景视频并进行显示。12.根据权利要求11所述的方法，还包括:从与所选择的查询结果相对应的位置回放所述内容，或执行与所选择的查询结果相对应的图像或样本场景视频的全视图。13.根据权利要求2所述的方法，其中，在在所述进度条上显示所述场景标记作为所述查询的结果的情况下，如果指向相应场景标记，则显示与所述相应场景标记相关的图像或样本场景视频，或者在作为所述查询结果显示的图像或样本场景视频的情况下，如果指向相应图像或样本场景视频，则显示与所述相应图像或样本场景视频相关的场景标记。14.根据权利要求2所述的方法，还包括:在显示图像或样本场景视频作为所述查询的结果的情况下，通过用户界面生成输入，并且根据所述输入的保持时间的增加来改变相应图像或样本场景视频的尺寸并进行显示。15.根据权利要求2所述的方法，还包括:在显示样本场景视频作为所述查询的结果的情况下，如果生成了通过用户界面进行的输入，则回放相应样本场景视频。
【专利摘要】本发明的各实施例涉及：与用于对查询和查询结果进行查询以基于例如视频的多媒体内容中的内容搜索所需场景的方法相关的用户界面方法和设备，所述用于搜索内容的方法包括以下步骤：通过用户界面接收用于搜索内容的查询输入；通过使用与所述内容相关联的描述信息来检测与所述查询相对应的部分内容中的至少一个，作为查询结果；基于与部分内容中的至少一个中的每一个相对应的播放时段来确定用于显示所述查询结果的位置；通过考虑部分内容的长度和/或所述查询结果之间的相对距离，确定与查询结果相对应的场景标记的尺寸或显示所述查询结果的区域的尺寸；以及根据所确定的查询结果的位置和相关尺寸至少部分地显示至少一个查询结果。
【IPC分类】G06F3/01, G06F3/14, G06F17/30
【公开号】CN105474207
【申请号】CN201480042678
【发明人】郑哲虎, 新承爀, 柳辅铉, 朱宰石
【申请人】三星电子株式会社
【公开日】2016年4月6日
【申请日】2014年5月28日
【公告号】EP3007084A1, US20160103830, WO2014193161A1