信息搜索装置、移动终端及方法与流程

本发明涉及移动终端设备技术领域，尤其涉及一种信息搜索装置、移动终端及方法。

背景技术：

用户在观看电视的过程中，经常会在电视的播放画面中看到自己喜欢的物体，一般情况下，用户想要了解该物体或想要购买该物体时，需要根据自己的主观判断，在对应网站的搜索输入框内输入该物体相关的关键词进行搜索，并且可能用户需要多次尝试输入不同的关键词进行搜索才能搜索到自己想要的信息，该方法搜索效率非常低。

技术实现要素：

本发明的主要目的在于提供一种信息搜索装置、移动终端及方法，旨在提高移动终端对信息搜索的灵活性及效率。

为实现上述目的，本发明提供了一种信息搜索装置，包括：

获取模块，用于与电视建立连接，在所述电视播放的过程中，获取所述电视播放画面中的目标物体；

搜索模块，用于提取所述目标物体的特征信息，搜索与所述目标物体的特征信息相关的信息；

显示模块，用于将搜索到的所述目标物体的特征信息相关的信息按照指定的规则进行排序，并在移动终端的显示屏幕内进行显示。

可选地，所述获取模块还用于，获取所述电视播放画面中的图像信息，或接收所述电视发送的对播放画面进行截图得到的图像信息；对所述图像信息进行解析，提取所述图像信息中包含的目标物体。

可选地，所述获取模块还用于，接收所述电视发送的界面数据，根据所述界面数据在所述移动终端的显示屏幕内显示对应的显示界面；接收用户在所述显示界面内输入的操作指令，根据所述操作指令确定目标物体。

可选地，所述搜索模块还用于，提取所述目标物体的特征信息，从服务器搜索与所述特征信息相关的链接数据；根据所述链接数据获取与所述目标物体相关的购买信息、价格信息和/或产品信息。

此外，为实现上述目的，本发明还提供了一种移动终端，所述移动终端包括上述结构的信息搜索装置。

此外，为实现上述目的，本发明还提供了一种信息搜索方法，包括：

与电视建立连接，在所述电视播放的过程中，获取所述电视播放画面中的目标物体；

提取所述目标物体的特征信息，搜索与所述目标物体的特征信息相关的信息；

将搜索到的所述目标物体的特征信息相关的信息按照指定的规则进行排序，并在移动终端的显示屏幕内进行显示。

可选地，所述获取所述电视播放画面中的目标物体包括：

获取所述电视播放画面中的图像信息，或接收所述电视发送的对播放画面进行截图得到的图像信息；

对所述图像信息进行解析，提取所述图像信息中包含的目标物体。

可选地，对所述图像信息进行解析，提取所述图像信息中包含的目标物体包括：

对所述图像信息进行解析，判断所述图像信息中是否存在多个物体；

当存在多个物体时，接收用户输入的确定指令，根据所述确定指令从所述多个物体中，选择其中的一个物体设定为目标物体。

可选地，所述获取所述电视播放画面中的目标物体包括：

接收所述电视发送的界面数据，根据所述界面数据在所述移动终端的显示屏幕内显示对应的显示界面；

接收用户在所述显示界面内输入的操作指令，根据所述操作指令确定目标物体。

可选地，所述提取所述目标物体的特征信息，搜索与所述目标物体的特征信息相关的信息包括：

提取所述目标物体的特征信息，从服务器搜索与所述特征信息相关的链接数据；

根据所述链接数据获取与所述目标物体相关的购买信息、价格信息和/或产品信息。

本发明实施例移动终端与电视建立连接后，在电视播放的过程中，移动终端获取电视播放画面中的目标物体，然后搜索与该目标物体相关的信息，再将搜索到的目标物体相关的信息，在移动终端的显示屏幕内进行显示。从而实现了在观看电视的过程中，可通过移动终端对电视播放画面中的物体进行搜索，提高了移动终端对信息搜索的灵活性及效率。

附图说明

图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图；

图2为如图1所示的移动终端的无线通信装置示意图；

图3为本发明信息搜索装置第一实施例的功能模块示意图；

图4为本发明信息搜索方法第一实施例的流程示意图；

图5为本发明信息搜索方法第二实施例的流程示意图；

图6为本发明信息搜索方法第三实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，“模块”与“部件”可以混合地使用。

移动终端可以以各种形式来实施。例如，本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本发明的实施方式的构造也能够应用于固定类型的终端。

图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图。

移动终端100可以包括无线通信单元110、A/V输入单元120、用户输入单元130、输出单元140、存储器150、控制器160、电源单元170和接口单元180等等。图1示出了具有各种组件的移动终端，但是应理解的是，并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。

无线通信单元110通常包括一个或多个组件，其允许移动终端100与无线通信装置或网络之间的无线电通信。例如，无线通信单元可以包括移动通信模块111、无线互联网模块112和短程通信模块113中的至少一个。

移动通信模块111将无线电信号发送到基站(例如，接入点、节点B等等)、外部终端以及服务器中的至少一个和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种类型的数据。

无线互联网模块112支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等等。

短程通信模块113是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙^TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂^TM等等。

A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风122，相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元141上。经相机121处理后的图像帧可以存储在存储器150(或其它存储介质)中或者经由无线通信单元110进行发送，可以根据移动终端的构造提供两个或更多相机121。麦克风122可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风接收声音(音频数据)，并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由移动通信模块111发送到移动通信基站的格式输出。麦克风122可以实施各种类型的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。

用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种类型的信息，并且可以包括键盘、锅仔片、触发板(例如，检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地，当触发板以层的形式叠加在显示单元141上时，可以形成触发屏。

接口单元180用作至少一个外部装置与移动终端100连接可以通过的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、客户识别模块(SIM)、通用客户识别模块(USIM)等等。另外，具有识别模块的装置(下面称为“识别装置”)可以采取智能卡的形式，因此，识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元180可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。

另外，当移动终端100与外部底座连接时，接口单元180可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元140被构造为以视觉、音频和/或触觉方式提供输出信号(例如，音频信号、视频信号、振动信号等等)。

输出单元140可以包括显示单元141和音频输出模块142等等，显示单元141可以显示在移动终端100中处理的信息。例如，当移动终端100处于电话通话模式时，显示单元141可以显示与通话或其它通信(例如，文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时，显示单元141可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。

同时，当显示单元141和触发板以层的形式彼此叠加以形成触发屏时，显示单元141可以用作输入装置和输出装置。显示单元141可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看，这可以称为透明显示器，典型的透明显示器可以例如为TOLED(透明有机发光二极管)显示器等等。根据特定想要的实施方式，移动终端100可以包括两个或更多显示单元(或其它显示装置)，例如，移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触发屏可用于检测触发输入压力以及触发输入位置和触发输入面积。

音频输出模块142可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时，将无线通信单元110接收的或者在存储器150中存储的音频数据转换音频信号并且输出为声音。而且，音频输出模块142可以提供与移动终端100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出模块142可以包括拾音器、蜂鸣器等等。

存储器150可以存储由控制器160执行的处理和控制操作的软件程序等等，或者可以暂时地存储己经输出或将要输出的数据(例如，电话簿、消息、静态图像、视频等等)。而且，存储器150可以存储关于当触发施加到触发屏时输出的各种方式的振动和音频信号的数据。

存储器150可以包括至少一种类型的存储介质，所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且，移动终端100可以与通过网络连接执行存储器150的存储功能的网络存储装置协作。

控制器160通常控制移动终端的总体操作。如图3所示，该控制器包括获取模块10、搜索模块20和显示模块30等，例如，控制器160执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外，控制器160可以包括用于再现(或回放)多媒体数据的多媒体模块161，多媒体模块161可以构造在控制器160内，或者可以构造为与控制器160分离。控制器160可以执行模式识别处理，以将在触发屏上执行的手写输入或者图片绘制输入识别为字符或图像。

电源单元170在控制器160的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。

这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施，这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施，在一些情况下，这样的实施方式可以在控制器160中实施。对于软件实施，诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施，软件代码可以存储在存储器150中并且由控制器160执行。

至此，己经按照其功能描述了移动终端。下面，为了简要起见，将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种类型的移动终端中的滑动型移动终端作为示例。因此，本发明能够应用于任何类型的移动终端，并且不限于滑动型移动终端。

如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信装置以及基于卫星的通信装置来操作。

现在将参考图2描述其中根据本发明的移动终端能够操作的通信装置。

这样的通信装置可以使用不同的空中接口和/或物理层。例如，由通信装置使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信装置(UMTS)(特别地，长期演进(LTE))、全球移动通信装置(GSM)等等。作为非限制性示例，下面的描述涉及CDMA通信装置，但是这样的教导同样适用于其它类型的装置。

参考图2，CDMA无线通信装置可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造，所述接口包括例如E1/T1、ATM，IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是，如图2中所示的装置可以包括多个BSC275。

每个BS270可以服务一个或多个分区(或区域)，由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者，每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配，并且每个频率分配具有特定频谱(例如，1.25MHz,5MHz等等)。

分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子装置(BTS)或者其它等效术语。在这样的情况下，术语“基站”可以用于笼统地表示单个BSC275和至少一个BS270。基站也可以被称为“蜂窝站”。或者，特定BS270的各分区可以被称为多个蜂窝站。

如图2中所示，广播发射器(BT)295将广播信号发送给在装置内操作的移动终端100。在图2中，示出了几个全球定位装置(GPS)卫星300。卫星300帮助定位多个移动终端100中的至少一个。

在图2中，描绘了多个卫星300，但是可以理解的是，可以利用任何数目的卫星获得有用的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外，可以使用可以跟踪移动终端的位置的其它技术。另外，至少一个GPS卫星300可以选择性地或者额外地处理卫星DMB传输。

作为无线通信装置的一个典型操作，BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它类型的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280，其提供用于与PSTN290形成接口的额外的路由服务。类似地，PSTN290与MSC280形成接口，MSC与BSC275形成接口，并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。

基于上述移动终端硬件结构、通信装置的结构，提出本发明方法各个实施例。

如图3所示，示出了本发明一种信息搜索装置第一实施例。该实施例的信息搜索装置包括：

获取模块10，用于与电视建立连接，在所述电视播放的过程中，获取所述电视播放画面中的目标物体；

本实施例中，移动终端的类型可根据实际需要进行设置，例如，该移动终端包括手机、平板电脑等。

为了方便移动终端与电视之间进行信息交互，首先在移动终端与电视进行信息交互之前，移动终端可通过蓝牙、wifi等无线通信与电视进行配对连接。例如，移动终端可搜索电视机的唯一标识，或接收用户输入电视的唯一标识，根据该唯一标识与电视机建立连接关系，在连接成功后移动终端与电视之间可以互传数据。通过移动终端与电视进行配对连接，提高了移动终端与电视之间进行信息交互的可靠性。

可选地，以蓝牙连接为例，在移动终端与电视之间进行配对连接成功后，自动弹出提示框提示用户是否记住此蓝牙，若用户选择记住此蓝牙，则移动终端保存该蓝牙连接信息。用户可根据自己的需求选择保存该蓝牙连接信息，方便下次重新连接；或选择不保存该蓝牙连接信息，提升了用户体验。

在移动终端与电视建立连接关系后，在电视播放的过程中，当用户看到自己喜欢的或者想了解的物体时，可选取该物体设定为目标物体。具体地，方式一，获取模块10可对当前电视播放画面的中指定物体进行拍摄，将采集的该物体设定为目标物体。方式二，获取模块10对当前电视播放画面进行拍摄，得到电视播放画面的图片，然后接收用户操作指令在该电视播放画面的图片中选择目标物体。方式三，获取模块10接收电视发送的对播放画面进行截图得到的电视播放画面的图片，然后接收用户操作指令在该电视播放画面的图片中选择目标物体。方式四，获取模块10接收电视发送的界面数据，根据界面数据在显示屏幕内显示电视播放画面，然后接收用户在输入的操作指令来确定目标物体。当然，移动终端获取目标物体的方式还可以根据具体情况而灵活设置，并不限定本发明。

需要说明的是，该目标物体可分为静态图片和动态视频，当目标物体为静态图片时，可直接将用户操作指令所对应选定的目标区域，即用户选定的目标区域与预存的目标物体进行匹配，当匹配度超过预设阈值时，认为该目标区域与目标物体相匹配，即可确定出目标物体。该预设阈值可根据具体情况而灵活设置，例如，该预设阈值可设置为90％。

当目标物体为动态视频时，由于连续播放的视频帧存在连续性，每帧图片中目标物体的位置变化不会很大，因此，可以只根据动态视频中的部分帧图片来确定目标物体。例如，获取动态视频中的多帧图片，根据多帧图片中的任一帧图片中用户选定的目标区域所在位置，将目标区域与预存的目标物体进行匹配，当匹配度超过预设阈值时，认为该区域与目标物体相匹配，即可确定出目标物体，提高确定目标物体的速度。

或者是，当目标物体为动态视频时，可以对用户选定的目标区域进行跟踪，然后确定目标物体，提高确定目标物体的准确性。具体地，在获取动态视频后，对动态视频中图片的目标区域匹配的目标跟踪方法可包括六个步骤：超像素过分割、候选目标块的提取、无向图的构建、无向图匹配、目标位置的确定以及模型的更新等，首先，根据跟踪窗口中的表象分布信息，利用超像素分割方法将跟踪窗口过分割成多个块，即超像素；然后，采用前景背景分割方法从这些块中选出候选目标块，该前景背景分割方法是基于图割的能量最小化形式；再利用所述候选目标块的表象信息和相对位置，构建一个具有马尔可夫特性的无向图G(V，E)，称为候选图；利用谱聚类匹配方法，将已经保留的目标图G(V’，E’)和新得到的候选图G(V，E)匹配起来，得到各个块之间的匹配关系；最后，根据所述匹配关系来确定最终的目标区域的位置：利用各个块的表象似然和结构似然，通过加权投票机制得到目标区域的最终位置，得到目标区域的位置后，即可将该目标区域与预存的目标物体进行匹配，当匹配度超过预设阈值时，认为该区域与目标物体相匹配，即可确定出目标物体。从而可以构建的目标跟踪模型能够有效地对目标区域内部的结构信息进行建模，以至于当目标区域发生移动而产生较大的结构形变或者遮挡时，仍然能够精确地确定目标物体。

搜索模块20，用于提取所述目标物体的特征信息，搜索与所述目标物体的特征信息相关的信息；

移动终端在确定目标物体后，可通过搜索模块20提取目标物体的特征信息，根据该特征信息向服务器发送搜索请求，获取与目标物体相关的信息。该相关信息包括购买信息、价格信息、产品信息、制作信息等，例如，当目标物体为杯子时，用户想购买该杯子，移动终端可根据杯子的颜色、形状等特征信息，对该杯子的销售店铺、工艺信息、价格信息等信息进行搜索；当目标物体为清蒸鲈鱼时，移动终端可根据鱼的种类、配料等特征信息，对该鱼的清蒸步骤、用户评价等信息进行搜索。

显示模块30，用于将搜索到的所述目标物体的特征信息相关的信息按照指定的规则进行排序，并在移动终端的显示屏幕内进行显示。

移动终端在搜索到目标物体相关的信息后，调用显示模块30将目标物体相关的信息在显示屏幕内进行显示的过程中，首先按照指定的规则对目标物体的特征信息进行排序，该指定的规则可根据具体情况而灵活设置。可选地，移动终端可对目标物体相关的信息进行分类排序，例如，以搜索频率从高至低、时间从前往后、相关度从大至小、价格从高至低等方式进行分类排序。然后可以以列表的形式进行显示，或是是以分页的形式进行显示，还可以是分区域对不同类型的信息进行显示，等等。

需要说明的是，移动终端在显示目标物体相关的信息时，还可以语音播报的形式对显示的目标物体相关的信息进行播报，以便用户获取相关的信息，例如，用户可以一边用眼睛看电视，一边用耳朵听移动终端播报目标物体相关的信息，大大提升了用户体验。

本发明实施例移动终端与电视建立连接后，在电视播放的过程中，移动终端获取电视播放画面中的目标物体，然后搜索与该目标物体相关的信息，再将搜索到的目标物体相关的信息，在移动终端的显示屏幕内进行显示。从而实现了在观看电视的过程中，可通过移动终端对电视播放画面中的物体进行搜索，提高了移动终端对信息搜索的灵活性及效率。

进一步地，基于上述信息搜索装置第一实施例，提出了本发明信息搜索装置第二实施例，本实施例与本发明信息搜索装置第一实施例的区别是，本实施例中上述获取模块10还用于，获取所述电视播放画面中的图像信息，或接收所述电视发送的对播放画面进行截图得到的图像信息；对所述图像信息进行解析，提取所述图像信息中包含的目标物体。

本实施例中，获取模块10在获取电视播放画面中的目标物体的过程中，在一实施例中，获取模块10可通过预置的摄像头，对电视播放画面的中一定区域范围内的指定物体进行拍摄，将拍摄得到的指定物体的图像信息进行解析，获取该图像信息中包含的物体设定为目标物体。当然，获取模块10也可以是通过预置的摄像头对电视播放的整体画面进行拍摄，得到电视播放画面的图像信息在显示屏幕内进行显示。然后解析该图像信息识别出物体，接收用户操作指令在识别出的物体中选择目标物体。

在另一实施例中，当需要获取目标物体时，获取模块10向电视发送获取请求，电视机根据接收到的获取请求，对当前播放画面进行截图得到图像信息，将该图像信息发送至移动终端。获取模块10解析该图像信息识别出物体，接收用户操作指令在识别出的物体中选择目标物体。

本实施例移动终端通过获取电视播放画面中的图像信息，或接收电视发送的对播放画面进行截图得到的图像信息；对该图像信息进行解析，提取图像信息中包含的目标物体，提高了对目标物体进行获取的灵活性。

进一步地，基于上述信息搜索装置第二实施例，提出了本发明信息搜索装置第三实施例，本实施例与本发明信息搜索装置第二实施例的区别是，本实施例中上述获取模块10还用于，对所述图像信息进行解析，判断所述图像信息中是否存在多个物体；当存在多个物体时，接收用户输入的确定指令，根据所述确定指令从所述多个物体中，选择其中的一个物体设定为目标物体。

本实施例中，在上述获取模块10对电视播放画面中的图像信息进行解析识别出物体后，首先确定出图像信息中包含物体的个数，当图像信息中仅存在一个物体时，直接将该物体设定为目标物体。当图像信息中存在多个物体时，移动终端可对各个物体进行突出显示，并提示用户选择其中的一个物体作为目标物体。当用户点击某个物体所在的区域而产生确定指令时，即可根据确定指令将该物体选定为目标物体。或者是移动终端对识别出的各个物体进行编号，以列表的形式列出各个物体对应的编号供用户选择。

本实施例当图像信息中识别出多个物体时，通过接收用户输入的确定指令来从多个物体中，选择其中的一个物体设定为目标物体，提高了对目标物体选择的可靠性。

进一步地，基于上述信息搜索装置第一实施例，提出了本发明信息搜索装置第四实施例，本实施例与本发明信息搜索装置第一实施例的区别是，本实施例中上述获取模块10还用于，接收所述电视发送的界面数据，根据所述界面数据在所述移动终端的显示屏幕内显示对应的显示界面；接收用户在所述显示界面内输入的操作指令，根据所述操作指令确定目标物体。

本实施例中，移动终端在获取电视播放画面中的目标物体的过程中，当需要获取目标物体时，获取模块10向电视发送获取请求，电视机根据接收到的获取请求，将当前播放画面的界面数据发送至移动终端。获取模块10在接收到电视发送的界面数据后，根据界面数据在显示屏幕内显示对应的显示界面。用户可在移动终端当前的显示界面，点击或按压某个物体所在的区域而产生操作指令，移动终端根据该操作指令识别出该区域对应的物体，即可将该物体确定为目标物体。

本实施例移动终端根据接收到电视发送的界面数据在显示屏幕内显示对应的显示界面，然后接收用户在该显示界面内输入的操作指令来确定目标物体，提高了对目标物体进行获取的便捷性。

进一步地，基于上述信息搜索装置第一至第四实施例中的任一实施例，提出了本发明信息搜索装置第五实施例，本实施例与本发明信息搜索装置第一至第四实施例中的任一实施例的区别是，本实施例中上述搜索模块20还用于，提取所述目标物体的特征信息，从服务器搜索与所述特征信息相关的链接数据；根据所述链接数据获取与所述目标物体相关的购买信息、价格信息和/或产品信息。

本实施例中，搜索模块20在对目标物体进行搜索的过程中，在确定目标物体后，首先对目标物体的特征信息进行提取，该特征信息包括物体的形状、大小、颜色、种类等。然后根据该特征信息向服务器发送搜索请求，服务器根据搜索请求，从指定的数据库中查询与特征信息相关的链接数据，将链接数据发送至移动终端。搜索模块20根据接收到的链接数据获取与目标物体相关的信息。例如，获取目标物体的购买信息、价格信息和/或产品信息。

以下进行举例说明，当目标物体为耳环时，用户想购买该耳环，移动终端可根据耳环的颜色、形状、材质等特征信息，对该耳环的销售店铺、工艺信息、价格信息、用户评价信息等进行搜索。当目标物体为红烧肉时，移动终端可根据红烧肉的种类、配料等特征信息，对该红烧肉的烹饪步骤、用户评价等信息进行搜索。

本实施例移动终端通过提取目标物体的特征信息，从服务器搜索与特征信息相关的链接数据，来获取与该目标物体相关的购买信息、价格信息和/或产品信息，而不需要用户进行判断并手动输入关键词进行搜索，提高了搜索效率。

对应地，提出本发明一种移动终端，该移动终端包括上述结构的信息搜索装置，该信息搜索装置的工作原理及实现方式可参照图3及其对应的实施例，包含了其中的所有技术特征，在此不作赘述。该移动终端可为手机、平板电脑等。本发明移动终端实施例中，由于具有上述与电视建立连接，在所述电视播放的过程中，移动终端获取电视播放画面中的目标物体，然后搜索与该目标物体相关的信息，再将搜索到的目标物体相关的信息，在移动终端的显示屏幕内进行显示。从而实现了在观看电视的过程中，可通过移动终端对电视播放画面中的物体进行搜索，提高了移动终端对信息搜索的灵活性及效率。

对应地，如图4所示，提出本发明一种信息搜索方法第一实施例。本实施例信息搜索方法与上述信息搜索装置第一实施例对应，该实施例的信息搜索方法包括：

步骤S10、与电视建立连接，在所述电视播放的过程中，获取所述电视播放画面中的目标物体；

本实施例中，移动终端的类型可根据实际需要进行设置，例如，该移动终端包括手机、平板电脑等。

为了方便移动终端与电视之间进行信息交互，首先在移动终端与电视进行信息交互之前，移动终端可通过蓝牙、wifi等无线通信与电视进行配对连接。例如，移动终端可搜索电视机的唯一标识，或接收用户输入电视的唯一标识，根据该唯一标识与电视机建立连接关系，在连接成功后移动终端与电视之间可以互传数据。通过移动终端与电视进行配对连接，提高了移动终端与电视之间进行信息交互的可靠性。

可选地，以蓝牙连接为例，在移动终端与电视之间进行配对连接成功后，自动弹出提示框提示用户是否记住此蓝牙，若用户选择记住此蓝牙，则移动终端保存该蓝牙连接信息。用户可根据自己的需求选择保存该蓝牙连接信息，方便下次重新连接；或选择不保存该蓝牙连接信息，提升了用户体验。

在移动终端与电视建立连接关系后，在电视播放的过程中，当用户看到自己喜欢的或者想了解的物体时，可选取该物体设定为目标物体。具体地，方式一，移动终端可对当前电视播放画面的中指定物体进行拍摄，将采集的该物体设定为目标物体。方式二，移动终端对当前电视播放画面进行拍摄，得到电视播放画面的图片，然后接收用户操作指令在该电视播放画面的图片中选择目标物体。方式三，移动终端接收电视发送的对播放画面进行截图得到的电视播放画面的图片，然后接收用户操作指令在该电视播放画面的图片中选择目标物体。方式四，移动终端接收电视发送的界面数据，根据界面数据在显示屏幕内显示电视播放画面，然后接收用户在输入的操作指令来确定目标物体。当然，移动终端获取目标物体的方式还可以根据具体情况而灵活设置，并不限定本发明。

需要说明的是，该目标物体可分为静态图片和动态视频，当目标物体为静态图片时，可直接将用户操作指令所对应选定的目标区域，即用户选定的目标区域与预存的目标物体进行匹配，当匹配度超过预设阈值时，认为该目标区域与目标物体相匹配，即可确定出目标物体。该预设阈值可根据具体情况而灵活设置，例如，该预设阈值可设置为90％。

当目标物体为动态视频时，由于连续播放的视频帧存在连续性，每帧图片中目标物体的位置变化不会很大，因此，可以只根据动态视频中的部分帧图片来确定目标物体。例如，获取动态视频中的多帧图片，根据多帧图片中的任一帧图片中用户选定的目标区域所在位置，将目标区域与预存的目标物体进行匹配，当匹配度超过预设阈值时，认为该区域与目标物体相匹配，即可确定出目标物体，提高确定目标物体的速度。

或者是，当目标物体为动态视频时，可以对用户选定的目标区域进行跟踪，然后确定目标物体，提高确定目标物体的准确性。具体地，在获取动态视频后，对动态视频中图片的目标区域匹配的目标跟踪方法可包括六个步骤：超像素过分割、候选目标块的提取、无向图的构建、无向图匹配、目标位置的确定以及模型的更新等，首先，根据跟踪窗口中的表象分布信息，利用超像素分割方法将跟踪窗口过分割成多个块，即超像素；然后，采用前景背景分割方法从这些块中选出候选目标块，该前景背景分割方法是基于图割的能量最小化形式；再利用所述候选目标块的表象信息和相对位置，构建一个具有马尔可夫特性的无向图G(V，E)，称为候选图；利用谱聚类匹配方法，将已经保留的目标图G(V’，E’)和新得到的候选图G(V，E)匹配起来，得到各个块之间的匹配关系；最后，根据所述匹配关系来确定最终的目标区域的位置：利用各个块的表象似然和结构似然，通过加权投票机制得到目标区域的最终位置，得到目标区域的位置后，即可将该目标区域与预存的目标物体进行匹配，当匹配度超过预设阈值时，认为该区域与目标物体相匹配，即可确定出目标物体。从而可以构建的目标跟踪模型能够有效地对目标区域内部的结构信息进行建模，以至于当目标区域发生移动而产生较大的结构形变或者遮挡时，仍然能够精确地确定目标物体。

步骤S20、提取所述目标物体的特征信息，搜索与所述目标物体的特征信息相关的信息；

移动终端在确定目标物体后，可提取目标物体的特征信息，根据该特征信息向服务器发送搜索请求，获取与目标物体相关的信息。该相关信息包括购买信息、价格信息、产品信息、制作信息等，例如，当目标物体为杯子时，用户想购买该杯子，移动终端可根据杯子的颜色、形状等特征信息，对该杯子的销售店铺、工艺信息、价格信息等信息进行搜索；当目标物体为清蒸鲈鱼时，移动终端可根据鱼的种类、配料等特征信息，对该鱼的清蒸步骤、用户评价等信息进行搜索。

步骤S30、将搜索到的所述目标物体的特征信息相关的信息按照指定的规则进行排序，并在移动终端的显示屏幕内进行显示。

移动终端在搜索到目标物体相关的信息后，将目标物体相关的信息在显示屏幕内进行显示的过程中，首先按照指定的规则对目标物体的特征信息进行排序，该指定的规则可根据具体情况而灵活设置。可选地，移动终端可对目标物体相关的信息进行分类排序，例如，以搜索频率从高至低、时间从前往后、相关度从大至小、价格从高至低等方式进行分类排序。然后可以以列表的形式进行显示，或是是以分页的形式进行显示，还可以是分区域对不同类型的信息进行显示，等等。可选地，移动终端可对目标物体相关的信息进行分类显示，例如，以搜索频率从高至低、时间从前往后、相关度从大至小、价格从高至低等方式进行分类显示。

需要说明的是，移动终端在显示目标物体相关的信息时，还可以语音播报的形式对显示的目标物体相关的信息进行播报，以便用户获取相关的信息，例如，用户可以一边用眼睛看电视，一边用耳朵听移动终端播报目标物体相关的信息，大大提升了用户体验。

本发明实施例移动终端与电视建立连接后，在电视播放的过程中，移动终端获取电视播放画面中的目标物体，然后搜索与该目标物体相关的信息，再将搜索到的目标物体相关的信息，在移动终端的显示屏幕内进行显示。从而实现了在观看电视的过程中，可通过移动终端对电视播放画面中的物体进行搜索，提高了移动终端对信息搜索的灵活性及效率。

进一步地，如图5所示，基于上述信息搜索方法第一实施例，提出了本发明信息搜索方法第二实施例，本实施例信息搜索方法与上述信息搜索装置第二实施例对应。本实施例与本发明信息搜索方法第一实施例的区别是，本实施例中上述步骤S10包括：

步骤S11、获取所述电视播放画面中的图像信息，或接收所述电视发送的对播放画面进行截图得到的图像信息；

步骤S12、对所述图像信息进行解析，提取所述图像信息中包含的目标物体。

本实施例中，移动终端在获取电视播放画面中的目标物体的过程中，在一实施例中，移动终端可通过预置的摄像头，对电视播放画面的中一定区域范围内的指定物体进行拍摄，将拍摄得到的指定物体的图像信息进行解析，获取该图像信息中包含的物体设定为目标物体。当然，移动终端也可以是通过预置的摄像头对电视播放的整体画面进行拍摄，得到电视播放画面的图像信息在显示屏幕内进行显示。然后解析该图像信息识别出物体，接收用户操作指令在识别出的物体中选择目标物体。

在另一实施例中，当需要获取目标物体时，移动终端向电视发送获取请求，电视机根据接收到的获取请求，对当前播放画面进行截图得到图像信息，将该图像信息发送至移动终端。移动终端解析该图像信息识别出物体，接收用户操作指令在识别出的物体中选择目标物体。

本实施例移动终端通过获取电视播放画面中的图像信息，或接收电视发送的对播放画面进行截图得到的图像信息；对该图像信息进行解析，提取图像信息中包含的目标物体，提高了对目标物体进行获取的灵活性。

进一步地，基于上述信息搜索方法第二实施例，提出了本发明信息搜索方法第三实施例，本实施例信息搜索方法与上述信息搜索装置第三实施例对应。本实施例与本发明信息搜索方法第二实施例的区别是，本实施例中上述步骤S12包括：

对所述图像信息进行解析，判断所述图像信息中是否存在多个物体；

当存在多个物体时，接收用户输入的确定指令，根据所述确定指令从所述多个物体中，选择其中的一个物体设定为目标物体。

本实施例中，在上述移动终端对电视播放画面中的图像信息进行解析识别出物体后，首先确定出图像信息中包含物体的个数，当图像信息中仅存在一个物体时，直接将该物体设定为目标物体。当图像信息中存在多个物体时，移动终端可对各个物体进行突出显示，并提示用户选择其中的一个物体作为目标物体。当用户点击某个物体所在的区域而产生确定指令时，即可根据确定指令将该物体选定为目标物体。或者是移动终端对识别出的各个物体进行编号，以列表的形式列出各个物体对应的编号供用户选择。

本实施例当图像信息中识别出多个物体时，通过接收用户输入的确定指令来从多个物体中，选择其中的一个物体设定为目标物体，提高了对目标物体选择的可靠性。

进一步地，如图6所示，基于上述信息搜索方法第一实施例，提出了本发明信息搜索方法第四实施例，本实施例信息搜索方法与上述信息搜索装置第四实施例对应。本实施例与本发明信息搜索方法第一实施例的区别是，本实施例中上述步骤S10包括：

步骤S13、接收所述电视发送的界面数据，根据所述界面数据在所述移动终端的显示屏幕内显示对应的显示界面；

步骤S14、接收用户在所述显示界面内输入的操作指令，根据所述操作指令确定目标物体。

本实施例中，移动终端在获取电视播放画面中的目标物体的过程中，当需要获取目标物体时，移动终端向电视发送获取请求，电视机根据接收到的获取请求，将当前播放画面的界面数据发送至移动终端。移动终端在接收到电视发送的界面数据后，根据界面数据在显示屏幕内显示对应的显示界面。用户可在移动终端当前的显示界面，点击或按压某个物体所在的区域而产生操作指令，移动终端根据该操作指令识别出该区域对应的物体，即可将该物体确定为目标物体。

本实施例移动终端根据接收到电视发送的界面数据在显示屏幕内显示对应的显示界面，然后接收用户在该显示界面内输入的操作指令来确定目标物体，提高了对目标物体进行获取的便捷性。

进一步地，基于上述信息搜索方法第一至第四实施例中的任一实施例，提出了本发明信息搜索方法第五实施例，本实施例信息搜索方法与上述信息搜索装置第五实施例对应。本实施例与本发明信息搜索方法第一至第四实施例中的任一实施例的区别是，本实施例中上述步骤S20包括：

提取所述目标物体的特征信息，从服务器搜索与所述特征信息相关的链接数据；

根据所述链接数据获取与所述目标物体相关的购买信息、价格信息和/或产品信息。

本实施例中，移动终端在对目标物体进行搜索的过程中，在确定目标物体后，首先对目标物体的特征信息进行提取，该特征信息包括物体的形状、大小、颜色、种类等。然后根据该特征信息向服务器发送搜索请求，服务器根据搜索请求，从指定的数据库中查询与特征信息相关的链接数据，将链接数据发送至移动终端。移动终端根据接收到的链接数据获取与目标物体相关的信息。例如，获取目标物体的购买信息、价格信息和/或产品信息。

以下进行举例说明，当目标物体为耳环时，用户想购买该耳环，移动终端可根据耳环的颜色、形状、材质等特征信息，对该耳环的销售店铺、工艺信息、价格信息、用户评价信息等进行搜索。当目标物体为红烧肉时，移动终端可根据红烧肉的种类、配料等特征信息，对该红烧肉的烹饪步骤、用户评价等信息进行搜索。

本实施例移动终端通过提取目标物体的特征信息，从服务器搜索与特征信息相关的链接数据，来获取与该目标物体相关的购买信息、价格信息和/或产品信息，而不需要用户进行判断并手动输入关键词进行搜索，提高了搜索效率。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的可选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。