终端装置及其信息提供方法
【专利说明】终端装置及其信息提供方法
[0001]相关申请的交叉引用
[0002]本申请要求2014年11月5日在韩国知识产权局提交的第10_2014_0152754号韩国专利申请的优先权，该申请的公开通过引用全部合并于此。
技术领域
[0003]与示例性实施例一致的方法和设备涉及移动装置及其信息提供方法，更具体地，涉及一种能够在提供内容相关信息时减少终端设备上和服务器上的信息处理负荷的移动终端及其信息提供方法。
【背景技术】
[0004]随着用户需求的逐渐增加，广播内容和多媒体内容的源正在从面向天波的单个源变为诸如线缆、因特网协议电视(IPTV)和视频点播(VOD)的各种源。此外，出现了提供诸如定制广告和节目推荐等信息的源。
[0005]包括定制广告和节目推荐的这种信息需要被提供，使得它与通过输出装置输出的图像相应。例如，当展示特定产品的图像被显示时，显示关于该产品的广告消息是有效的。
[0006]现有技术的设备使用图像的指纹，S卩，用于识别当前正输出的内容部分的特征数据，以便提供这样的信息提供服务。
[0007]然而，在现有技术的设备中，为了识别当前正输出的内容部分，必须以非常短的周期将指纹发送到服务器。这是因为，在指纹尚未发送时，有意义的对象可能在当前正输出的内容部分上出现和消失，在这种情况下，用户可能无法及时接收信息。
[0008]然而，上述现有技术的方法是有问题的，因为它可能将过多操作负荷置于输出内容的设备和服务器上。此外，从网络的角度看，可能招致过多流量成本。
【发明内容】
[0009]示例性实施例至少解决以上问题和/或缺点以及以上没有描述的其它缺点。另夕卜，不要求示例性实施例克服以上描述的缺点，并且示例性实施例可不克服以上描述的任何问题。
[0010]一个或更多个示例性实施例提供了一种能够在提供内容相关信息时减少对终端设备和服务器的操作负荷的移动终端及其信息提供方法。
[0011]根据示例性实施例的一方面，提供了一种终端装置，包括:通信接口，被配置为接收运动图像；指纹提取器，被配置为从运动图像的帧提取指纹；控制器，被配置为从所述帧检测对象，控制通信接口将指纹发送到服务器，并从服务器接收与发送的指纹相应的对象信息；输出器，被配置为当与对象信息相应的内容被输出时输出接收到的对象信息。
[0012]控制器可在指纹被发送到服务器的时刻与检测到另一对象的后续时刻之间停止发送指纹。
[0013]控制器可控制通信接口以预定时间间隔将未检测到对象的帧的指纹发送到服务器。
[0014]控制器可控制通信接口在不考虑所述预定时间间隔的情况下将检测到对象的帧的指纹发送到服务器。
[0015]所述对象信息可包括档案信息、音乐信息、广告信息、广播节目信息和物品信息中的至少一种。
[0016]控制器可控制通信接口将接收的对象信息发送到外部装置。
[0017]控制器可控制指纹提取器仅针对检测到对象的帧执行指纹提取。
[0018]所述指纹可以是从所述帧提取的能够将所述帧与其它帧区分开的标识符，其中，所述帧与视频帧和音频帧中的至少一种相应。
[0019]根据示例性实施例的另一方面，提供了一种信息提供系统，包括:终端装置，被配置为从运动图像的帧提取指纹，从所述帧检测目标对象，响应于检测到目标将所述帧的指纹发送到服务器；服务器，被配置为将与指纹相应的对象信息发送到所述终端装置。
[0020]所述服务器可包括:通信接口，被配置为接收运动图像；指纹提取器，被配置为提取接收到的运动图像的指纹；控制器，被配置为从形成运动图像的帧检测目标对象，控制通信接口将检测到的目标对象的特征数据发送到对象识别服务器，从所述对象识别服务器接收与所述特征数据相应的对象信息；存储器，被配置为将接收的所述对象信息映射到所述指纹并存储映射结果。
[0021]根据示例性实施例的另一方面，提供了一种终端装置的信息提供方法，所述方法包括:从形成运动图像的帧提取指纹；从所述帧检测对象；响应于检测到目标对象，将提取的所述帧的指纹发送到服务器；从服务器接收与指纹相应的对象信息；当与对象信息相应的内容被输出时输出接收到的对象信息。
[0022]在指纹被发送到服务器的时刻与检测到另一对象的后续时刻之间可停止发送指纹。
[0023]发送步骤可包括:以预定时间间隔将未检测到对象的帧的指纹发送到服务器。
[0024]发送步骤还可包括:在不考虑所述预定时间间隔的情况下将检测到对象的帧的指纹发送到服务器。
[0025]所述对象信息可包括档案信息、音乐信息、广告信息、广播节目信息和物品信息中的至少一种。
[0026]所述方法还可包括:将接收到的对象信息发送到外部装置。
[0027]指纹提取的步骤可仅针对检测到对象的帧被执行。
[0028]所述指纹可以是从所述帧提取的能够将所述帧与其它帧区分开的标识符，其中，所述帧与视频帧和音频帧中的至少一种相应。
[0029]根据示例性实施例的另一方面，提供了一种非暂时性计算机可读记录介质，其中，所述计算机可读记录介质包括用于执行终端装置的信息提供方法的程序。所述方法可包括:从形成运动图像的帧提取指纹；从所述帧检测目标对象；响应于检测到目标对象，将提取的指纹发送到服务器；从服务器接收与发送的指纹相应的对象信息；当与对象信息相应的内容被输出时输出接收到的对象信息。
[0030]根据示例性实施例的另一方面，提供了一种终端装置的信息提供方法，所述方法包括:从视频的第一帧识别第一对象；将第一帧的指纹发送到服务器以接收关于第一对象的信息；从视频的第二帧识别第二对象；确定第二对象是否与第一对象相同；响应于确定第二对象与第一对象不同，将第二帧的指纹发送到服务器。
[0031]确定步骤可包括:确定第一对象和第二对象的相似度是否大于预定水平。
[0032]当第二对象具有与第一对象基本相同的外观并且第二对象在第二帧中的位置值不同于第一对象在第一帧中的位置值时，第二对象可被确定为与第一对象相同。
[0033]所述方法还可包括:响应于第一帧的指纹被发送到服务器，从服务器接收关于第一对象的信息；确定第二对象与第一对象相同；当第二对象被显示时显示接收到的关于第一对象的信息，而不将第二帧的指纹发送到服务器。
【附图说明】
[0034]通过参考附图描述特定示例性实施例，以上和/或其它方面将更明显，其中:
[0035]图1是用于说明根据示例性实施例的信息提供系统的视图；
[0036]图2是用于说明根据示例性实施例的终端装置的框图；
[0037]图3A和3B示出根据示例性实施例的对象检测方法；
[0038]图4是用于说明根据示例性实施例的终端装置的指纹发送方法的流程图；
[0039]图5至图7是用于说明根据各种示例性实施例的终端装置的指纹发送方法的视图；
[0040]图8至图9是用于说明根据各种示例性实施例的终端装置的对象信息提供方法的视图；
[0041]图10是用于说明根据示例性实施例的服务器的框图；
[0042]图11是用于说明根据示例性实施例的存储在服务器中的信息的视图；
[0043]图12是用于说明根据示例性实施例的根据服务器的指纹搜索方法的视图；
[0044]图13是用于说明根据示例性实施例的终端设备的信息提供方法的流程图；
[0045]图14是用于说明根据另一示例性实施例的终端装置的框图。
【具体实施方式】
[0046]下面参考附图更详细描述特定示例性实施例。
[0047]在以下描述中，相同的附图标记用于相同的元素，即使在不同图中也是如此。提供描述中定义的诸如详细构造和元件的事项以帮助综合理解示例性实施例。然而，示例性实施例可在没有这些具体定义事项的情况下实施。另外，由于公知功能或构造将以不必要的细节模糊本申请，因此不对它们进行详细描述，。
[0048]诸如“第一”和“第二”的词语可用于描述各种组件，但是它们不应限制各种组件。这些词语仅用于区分一组件与其它组件的目的。例如，在不脱离本公开的精神和范围的情况下，第一组件可被称为第二组件，第二组件可被称为第一组件等等。此外，“和/或”可包括提到的组件中的任何一个或这些组件的组合。
[0049]此外，单数形式可包括复数形式，只要未在句子中具体提到。此外，说明书中使用的“包括/包含”表示一个或更多个组件、步骤、操作、元件存在或被增加。
[0050]“模块”或“单元”执行至少一个功能或操作，并可实现为硬件或软件、或硬件和软件的组合。此外，多个“模块”或多个“单元”可集成为至少一个模块并被实现为至少一个处理器(未示出)，除了它们需要被实现为特定硬件的情况。
[0051]图1是用于说明根据示例性实施例的信息提供系统的视图。
[0052]参考图1，信息提供系统100包括终端装置100、服务器200、以及多个对象识别服务器 300a、300b、300c、300d。
[0053]终端装置100被配置为是可提供图像中包括的对象的信息的装置。具体地，终端装置100被配置为是可请求服务器200提供对象的信息并从服务器200接收请求的对象信息且将接收的对象信息提供给用户的装置。例如，终端装置100可以是显示设备(例如，TV，智能电话，PC，笔记本，平板，电子书，数码相框，PDA等)或连接到显示