在显示装置110上显示的图像。然后，在操作S1420中，控制单元320可以相对于捕获的图像执行图像处理。图像处理可以是相对于包括在图像中的对象的图像识别。例如，当人的面部被包括在图像中时，控制单元320可以基于包括在图像中的面部与存储在图像识别数据库中的信息之间的比较的结果，来识别包括在图像中的人的面部。
[0155]然后，控制单元320可以根据在操作S1420中执行的图像识别的结果获取关键字。例如，当正在经由显示装置110的显示单元输出关于总统的新闻图像时，控制单元320可以获取关键字，诸如词“总统”或总统的名字。当在操作S1430中确定没有获取到关键字时，控制单元320可以重新执行操作S1410。另一方面，当在操作S1430中确定已经获取到关键字时，在操作S1440中，包括在显示装置110中的网络服务器330或控制单元320可以通过使用所获取的关键字来搜索信息。根据一个实施例，在操作S1440，网络服务器330或控制单元320可以通过使用网络搜索引擎来搜索网络文档。然而，操作S1440中的搜索不限于搜索网络文档。根据另一实施例，控制单元可以从诸如EPG的广播相关信息获取关键字。例如，包括在EPG中的广播节目标题中所包括的词可以被获取作为关键字。
[0156]此后，在操作S1450中，网络服务器330或控制单元320可以基于用户偏好信息和在操作S1440中发现的信息，产生将被提供给用户的附加信息。用户偏好信息可以是从存储用户偏好信息的数据库获取的信息，或者是直接由用户输入的信息。
[0157]根据一个实施例，当在操作S1450中产生附加信息时，在操作S1460，控制单元320可以控制通信单元向移动终端100发送指示附加信息已经被产生的通知消息。根据另一实施例，当在操作S1450中产生附加信息时，在操作S1460，控制单元可以控制显示单元在经由其输出广播信号的显示装置110的屏幕上显示指示附加信息已经被产生的通知消息。
[0158]然后，当在操作S1470控制单元320经由通信单元从移动终端100接收到信息提供请求时，在操作S1480，控制单元320可以经由移动终端100向用户提供附加信息。换句话说，附加信息可以被发送到移动终端100。已经接收到附加信息的移动终端100可以输出接收到的附加信息。根据一个实施例，当在操作S1480中被提供给用户的附加信息是由用户选择的时，控制单元320可以更新存储用户偏好信息的数据库。例如，如图20所示，可以更新用户已经访问附加信息的总次数。另一方面，当在操作S1470中没有从移动终端100接收到信息提供请求时，控制单元320可以重新执行操作S1410。
[0159]图15是根据本公开的实施例的显示装置经由声音抓取来提供附加信息的过程的流程图。
[0160]参照图15，在操作S1510，包括在显示装置110中的控制单元3 20可以识别包括在由显示装置110输出的广播信号中的声学信号。在操作S1520，控制单元320可以确定所识别的声学信号的声学模式是否已改变。例如，当由显示装置110重放的广播节目中所输出的人之间的对话被包括在广播节目中的原声(OST)中的歌曲替换时，控制单元320可以确定声学信号的声学模式已改变。对于声学信号的声学模式是否已改变的确定可以通过各种方法来做出。例如，控制单元320可以将广播信号的声学模式与存储在数据库中的声学模式进行比较。控制单元320可以确定来自存储在数据库中的声学模式当中的、与广播信号的声学模式匹配的声学模式是否已改变。当来自存储在数据库中的声学模式当中的、与广播信号的声学模式匹配的声学模式已改变时，控制单元320可以确定广播信号的声学模式已改变。当在操作S1520中确定声学模式未改变时，控制单元320可以重新执行操作S1510。
[0161]然后，当在操作S1520中确定声学模式已改变时，在操作S1530，控制单元320可以存储声学信号，并且搜索与该声学信号相匹配的关键字。例如，当正在由TV输出的广播节目的体育广播员或体育评论员说“Hyunjin Ryu开始今天的棒球比赛”时，包括在TV中的控制单元320可以获取棒球和Hyunjin Ryu作为关键字。作为另一示例，当正在由TV输出的广播节目中播放包括在OST中的歌曲时，包括在TV中的控制单元320可以获取OST的标题和OST的艺术家的名字作为关键字。当在操作S1540中确定没有获取到关键字时，控制单元320可以重新执行操作S1510。
[0162]当在操作S1540中确定已经获取关键字时，在操作S1550，网络服务器330或控制单元320可以通过使用所获取的关键字来搜索信息。根据一个实施例，在操作S1550，网络服务器330或控制单元320可以通过使用外部网络搜索引擎来搜索网络文档。然而，本公开的实施例不限于此，并且在操作S1550，控制单元320或网络服务器330可以搜索除了网络文档外的附加信息。
[0163]此后，在操作S1560中，网络服务器330或控制单元320可以基于用户偏好信息和在操作S1550中发现的信息，产生将被提供给用户的附加信息。用户偏好信息可以是从存储用户偏好信息的数据库获取的信息，或者是直接由用户输入的信息。
[0164]根据一个实施例，当在操作S1560中产生附加信息时，在操作S1570，控制单元320可以控制通信单元向移动终端100发送指示附加信息已经被产生的通知消息。根据另一实施例，当在操作S1560中产生附加信息时，在操作S1570，控制单元320可以控制显示单元在经由其输出广播信号的显示装置110的屏幕上显示指示附加信息已经被产生的通知消息。
[0165]然后，当在操作S1580控制单元320经由通信单元从移动终端100接收到信息提供请求时，在操作S1590，控制单元320可以经由移动终端100向用户提供附加信息。换句话说，附加信息可以被发送到移动终端100。已经接收到附加信息的移动终端100可以显示接收到的附加信息。根据一个实施例，当在操作S1480中被提供给移动终端100的附加信息是由用户选择的时，控制单元320可以更新存储用户偏好信息的数据库。换句话说，控制单元320可以通过从移动终端100接收所选择的附加信息的ID来更新用户偏好信息。例如，可以更新如图20所示的访问的总次数。另一方面，当在操作S1580中没有从移动终端100接收到信息提供请求时，控制单元320可以重新执行操作S1510。
[0166]图16是根据本公开的实施例的显示装置110经由用户搜索提供附加信息的过程的流程图。
[0167]参照图16，在操作S1610，显示装置110可以接收包括请求附加信息的命令的用户输入。根据实施例，用户输入可以以各种形式来具体实施。例如，当按压包括在遥控器中的特定按钮、用户在显示装置110前面做出预设姿势、或输入了预设声音时，显示装置110可以接收包括请求附加信息的命令的用户输入。
[0168]此后，在操作S1620，包括在显示装置110中的控制单元320可以捕获正在显示装置110上显示的图像，并且可以在操作S1630中相对于捕获的图像执行图像处理。操作S1620和S1630对应于图14的操作S1410和S1420，并且因此将省略其详细描述。在操作S1625，控制单元320可以识别正在由显示装置110再现的广播信号中所包括的声学信号的改变。一旦识别到声学信号的改变，在操作S1635，控制单元320就可以存储声音信号，并且搜索对应于声学信号的关键字。操作S1625和S1635对应于图15的操作S1510至S1530，并且因此将省略其详细描述。
[0169]如果在操作S1640中确定关键字已经被获取作为操作S1630和S1635的结果，则在操作S1650，控制单元320可以通过使用所获取的关键字来搜索信息。然后，在操作S1660中，控制单元320可以基于发现信息和用户偏好信息来产生附加信息。此后，在操作S1670，控制单元320可以经由移动终端100向用户提供所产生的附加信息。由于操作S1650和S1670可以容易地被参照图14和图15的本领域普通技术人员所理解，因此将省略其详细说明。
[0170]图17是示出根据本公开的实施例的关于存储在显示装置中的关键字的信息的表。
[0171]参照图17，根据一个实施例的显示装置110可以从广播信号获取关键字并且存储所获取的关键字。显示装置110可以存储所获取的关键字的搜索ID、类型、数据、搜索时间以及所获取的关键字。然而，本公开的实施例不限于此。搜索ID是识别关键字的识别信息。类型是关键字类型。例如，类型可以是指示关键字是经由图像抓取、声音抓取还是用户搜索所获取的信息。数据是指示已经从其获取到关键字的数据的信息。例如，数据可以是指示关键字是从图像数据、从诸如EPG的元数据、还是从声音数据获取的信息。搜索时间可以是获取关键字或使用关键字搜索信息所花费的时间段。
[0172]图18是示出根据本公开的实施例的包括在搜索结果中的信息的表。
[0173]参照图1，显示装置110可以获取和存储信息如图18所示的信息，作为图14的操作S1440、图15的操作S1550或图16的操作S1650的结果。显示装置110可以存储搜索结果ID、搜索ID、发现的信息所属的组、发现的信息的标题、包括在发现的信息中的内容和链接信息，作为使用从广播信号获取的关键字所获取的信息。
[0174]搜索结果ID是被分配以用于识别所发现的信息的识别信息。搜索ID是被分配以用于识别在搜索中使用的关键字的识别信息。发现的信息所属的组指示对所发现的信息进行分类的类型。例如，组可以是关于广播节目的详细信息、与广播节目相关联的消息、以及与广播节目相关联的网络文档。所发现的信息的标题可以是所发现的网络文档的标题。标题可以是包括在网络文档的元数据中的信息。包括在所发现的信息中的内容可以是与来自包括在所发现的网络文档中的多个信息的关键字相关联的信息。链接信息可以表示用于访问所发现的网络文档的位置信息。
[0175]图19是示出根据本公开的实施例所产生的附加信息的表。
[0176]图20是示出根据本公开内容的实施例的用户偏好信息的表。
[0177]参照图19和图20，在图14的操作S1450、图15的操作S1560或图16的操作S1660中，显示装置110可以获取图20中所示的用户偏好信息，并且基于用户偏好信息和从广播信号获取的关键字来产生图19中所示的附加信息。
[0178]根据一个实施例，用户偏好信息可以包括用户ID、偏好排序、当附加信息最后被访问时的最后访问时间、访问的总次数、类别、和多个关键字。用户ID是被分配以用于识别移动终端100的用户的识别信息。偏好排序是根据用户偏好的每个关键字类别的排序。当最后访问时间在从当前时间点开始的预设范围之内并且访问的总次数增加时，偏好排序可以增加。然而，本公开的实施例不限于此。访问的总次数是用户访问经由属于某一类别的关键字所发现的附加信息的次数。例如，当用户I通过从提供给用户I的移动终端100的多个信息当中选择经由属于比赛类别的关键字所发现的信息，来访问与比赛类别相对应的网页时，与比赛类别相对应的访问的总次数可以增加。类别是关键字的上位概念。换句话说，多个关键字属于一个类别。多个关键字包括用户偏好的关键字。
[0179]根据一个实施例，显示装置110可以通过使用从广播信号获取的关键字来获取第一附加信息。显示装置110还可以通过相对于第一附加信息通过使用包括在用户