信息处理设备、信息处理方法、和程序的制作方法
【专利摘要】本发明提供一种信息处理设备、服务器、信息处理方法、以及程序。所述信息处理设备包括：再现处理单元，用于再现信息记录介质上记录的媒介记录内容；特征提取单元，用于提取所述媒介记录内容的特征量；以及信息处理单元，用于获得被设置到具有与由所述特征提取单元提取的媒介记录内容的特征量类似的特征量的相似内容的评论，并且用于以在所述媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
【专利说明】信息处理设备、信息处理方法、和程序
【技术领域】
[0001]本公开涉及一种信息处理设备、信息处理方法、和程序。更具体地，本公开涉及一种用于在再现内容的同时显示评论的信息处理设备、信息处理方法、和程序。
【背景技术】
[0002]经由网络的信息通信已变得普遍。例如，已经存在许多用户可以观看和分享评论的系统。在这个系统中，网络上的服务器向用户递送图像，观看所递送的图像的用户向所述服务器传送评论，并且，将所述评论与将进一步递送的图像一起递送。
[0003]在这样的系统中，从许多用户接收的评论可以由观看相同的图像的许多用户同时观看，并且，许多用户可以经由网络在彼此之间交换信息或进行讨论。此外，在例如JP4799515B等中公开了用于递送评论的系统。
[0004]这样的经由网络的信息交换技术使得用户可以更享受地观看内容，并成为较高附加值的内容的主要因素。此外，在欣赏相同内容的用户之间的信息交换使得可以获得用户之间的扩展的通信范围，并且创建允许激活用户之间的通信以及观看内容的新的服务。
[0005]然而，这样的分享增加到内容的评论的系统意图用于例如实时图像、或在网络上放置的相同递送源(或相同记录介质(medium)或相同媒介(media))的相同内容。因此,没有假设用于使用不同记录介质或媒介之间的内容的处理，其中内容被记录在由每个用户拥有的盘(例如DVD和BD (蓝光盘))、或例如半导体存储器的存储媒介上。
[0006]此外，相关领域中将图像与评论一起递送的系统意图用于将递送的特定内容。即，在相关领域中还没有实施用于提供和分享关于任何内容(例如除了以前准备的内容以外由用户可选地选择的内容(具体是在盘中记录的内容))的评论的处理。
【发明内容】
[0007]已经鉴于上述问题做出了本公开的实施例。根据本公开的实施例，提供信息处理设备、信息处理方法、和程序，其可以在不同记录介质或媒介之间关于任何内容(例如除了以前准备的内容以外由用户可选地选择的内容(例如在盘中记录的内容))提供和分享评论。
[0008]根据本公开的第一实施例，提供一种信息处理设备，包括:再现处理单元，用于再现在信息记录介质上记录的媒介记录内容；特征提取单元，用于提取媒介记录内容的特征量；以及信息处理单元，用于获得被设置到具有与由特征提取单元提取的媒介记录内容的特征量类似的特征量的相似内容的评论，并且用于以在媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
[0009]此外，信息处理单元可以向服务器传送由特征提取单元提取的媒介记录内容的特征量。服务器可以检索具有与媒介记录内容的特征量类似的特征量的相似内容，并且可以向信息处理单元传送被设置到所检索的相似内容的评论。所述信息处理单元可以获得被设置到相似内容的评论。[0010]此外，当接收到附加评论时，信息处理单元可以以将所述附加评论与所获得的评论一起叠加在媒介记录内容的再现图像上的方式来执行控制。
[0011]此外，信息处理单元可以执行能够区分所获得的评论和附加评论的评论输出控制。
[0012]此外，信息处理单元可以确定输出所获得的评论的位置是否交叠在媒介记录内容的再现图像中的面部区域上。如果确定所述位置交叠在面部区域上，则信息处理单元可以执行改变输出所获得的评论的位置的处理。
[0013]此外，当接收到附加评论时，信息处理单元可以执行向服务器传送所述附加评论的处理。
[0014]此外，当再现媒介记录内容时，再现处理单元可以执行再现速度控制，在所述再现速度控制下，评论被分配到的片段(segment)的再现速度比另一片段的再现速度慢。
[0015]根据本公开的第二实施例，提供一种服务器，用于接收由再现设备将再现的再现内容的特征量信息，检索具有与接收的特征量类似的特征量的相似内容，以及向再现设备输出被设置到所检索的相似内容的评论。
[0016]此外，服务器可以被配置为从再现设备接收由用户输入的附加评论，并且执行将所接收的附加评论记录为对应于与再现内容相似的相似内容的评论的处理。
[0017]此外，服务器还可以被配置为在确定在相似内容上将记录的附加评论的位置的处理中应用从再现设备接收的内容的特征量或关于再现内容的位置的信息。
[0018]根据本公开的第三实施例，提供在信息处理设备中执行的信息处理方法，所述方法包括:由再现处理单元再现在信息记录介质上记录的媒介记录内容；由特征提取单元提取媒介记录内容的特征量；由信息处理单元获得被设置到具有与由特征提取单元提取的媒介记录内容的特征量类似的特征量的相似内容的评论；以及由信息处理单元以在媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
[0019]根据本公开的第四实施例，提供用于使得在信息处理设备中执行信息处理的程序，所述信息处理包括:由再现处理单元再现在信息记录介质上记录的媒介记录内容；由特征提取单元提取媒介记录内容的特征量；由信息处理单元获得被设置到具有与由特征提取单元提取的媒介记录内容的特征量类似的特征量的相似内容的评论；以及由信息处理单元以在媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
[0020]注意，根据本公开的实施例的程序是例如可以在以计算机可读形式提供的存储介质或通信介质中提供的、用于能够执行各种类型的程序代码的信息处理设备或计算机系统的程序。以计算机可读形式提供这类程序使得可以根据信息处理设备或计算机系统中的程序来实施处理。
[0021]稍后将通过基于本公开的实施例和附图的更详细的解释来明确本公开的目的、特征、和优点。此外，此说明书中的系统不限于作为逻辑上聚集全部包括在同一壳体内的多个设备的配置。
[0022]根据上面描述的本公开的实施例，可以实施可以结合从媒介获得的内容的再现而显示与相似内容对应的、从外部输入的评论的设备和方法。
[0023]更具体地，本公开的实施例包括:再现处理单元，用于执行在例如BD的信息记录介质上记录的媒介记录内容的再现处理；特征提取单元，用于提取媒介记录内容的特征量；信息处理单元，用于检索具有与由特征提取单元提取的媒介记录内容的特征量相似的特征量的相似内容，获得被设置到所检索的相似内容的评论，并且执行控制以使得在媒介记录内容的再现图像上叠加所获得的评论；以及显示处理单元，用于基于信息处理单元的控制，在媒介记录内容的再现图像上叠加所获得的评论。
[0024]根据上面描述的本公开的实施例，即使当没有评论被分配到例如在例如BD的信息记录介质上记录的媒介记录内容时，也可以获得并显示与相似内容对应的评论并且知道许多其他用户的兴趣程度和想法，从而再现和欣赏较高附加值的内容。
【专利附图】
【附图说明】
[0025]图1是用于解释使用信息处理设备的内容再现处理的概述的图；
[0026]图2是用于解释由信息处理设备和服务器执行的处理的图；
[0027]图3是用于解释由信息处理设备执行的内容再现控制的图；
[0028]图4是用于解释由服务器执行的记录关于内容的附加评论的示例处理的图；
[0029]图5是用于解释由服务器执行的记录关于内容的附加评论的示例处理的图；
[0030]图6是用于解释示例评论显示处理的图；
[0031]图7是用于解释示例评论显示处理的图；
[0032]图8是用于解释信息处理设备的示例配置的图；
[0033]图9是图示用于解释由信息处理设备执行的处理序列的流程图的图；以及
[0034]图10是图示用于解释由信息处理设备执行的处理序列的流程图的图。
【具体实施方式】
[0035]在下文中，将参考附图详细描述本公开的优选实施例。注意，在此说明书和附图中，采用相同的参考标号指示具有基本上相同的功能和结构的结构元素，并且省略这些结构元素的重复解释。
[0036]下面将参考附图详细描述根据本公开的实施例的信息处理设备、信息处理方法、和程序。将以下列顺序做出描述。
[0037]1.使用信息处理设备的内容再现处理的概述
[0038]2.由信息处理设备和服务器执行的处理的概述
[0039]3.由信息处理设备执行的内容再现控制处理
[0040]4.关于在服务器中保持的内容的示例评论设置处理
[0041]5.评论显示控制处理
[0042]6.信息处理设备的示例配置
[0043]7.由信息处理设备执行的处理序列
[0044]8.根据本公开的实施例的配置的结论
[0045]【1.使用信息处理设备的内容再现处理的概述】
[0046]将参考图1描述根据本公开的实施例的利用信息处理设备的内容再现处理的概述。根据本公开的实施例的信息处理设备是执行来自信息记录介质的内容的再现的设备，所述信息记录介质具体是记录例如图像或音乐的内容的各种记录媒介，例如BD (蓝光盘)、DVD、或闪存。[0047]在图1中，作为信息处理设备的示例，图示用作例如BD记录器或BD播放器的记录和再现设备的信息处理设备100a、以及用作PC的信息处理设备100b。
[0048]信息处理设备IOOa和IOOb例如通过安装例如BD的信息记录介质110而再现内容。此外，信息记录介质Iio记录例如诸如静止图像、移动图像、和音乐的内容。作为例如BD记录器或BD播放器的再现设备的信息处理设备IOOa连接到包括显示器和扬声器的输出单元30。在输出单元30处输出由信息处理设备IOOa从信息记录介质110再现的数据(音频/图像)。用作PC的信息处理设备IOOb包括扬声器和显示器。在PC的扬声器和显示器处输出由信息处理设备IOOb从信息记录介质110再现的数据(音频/图像)。
[0049]此外，在再现从信息记录介质110获得的内容期间，信息处理设备100经由网络20连接到服务器200。服务器200可以是提供例如网站、并且包括各种内容的服务器。服务器200包括用于存储各种内容的内容数据库。在内容数据库中存储的内容包括记录在用户浏览时由用户分配的评论的内容。此外，虽然图1中仅示出一个服务器200，但是，多个服务器可以连接到网络20，并且，信息处理设备100可以经由网络20访问多个服务器。
[0050]【2.由信息处理设备和服务器执行的处理的概述】
[0051]然后，将参考图2描述根据本公开的实施例的由信息处理设备和服务器执行的处理的概述。此外，信息处理设备100可以从记录内容的例如BD、DVD、或闪存的各种记录媒介再现内容。然而，在下列描述中，将描述信息记录介质110是记录内容的BD (蓝光盘)的示例。
[0052]例如，持有记录例如移动图像的内容的信息记录介质110的用户通过将信息记录介质110安装到信息处理设备100而再现内容。下面将描述图2中示出的步骤Sll到S17中的每个处理。步骤Sll 是如上述的内容再现处理。
[0053]图2中所示的图像251指示作为正在再现的内容的移动图像中包括的每个帧。在开始内容再现时，信息处理设备100试图连接到服务器200，然后，在内容再现的时段期间，信息处理设备100建立与服务器200的通信状态。在步骤S12中，信息处理设备100再现内容，并且同时提取与正在再现的内容的每个场景对应的图像帧或音频的特征量，并且向服务器200传送所提取的特征量。
[0054]此外，向服务器200传送的与所述场景对应的内容的特征量是由信息处理设备100以内容为单元或以内容的每个图像帧或多个图像帧为单位提取的特征量。可替换地，内容的特征量可以是在盘(信息记录介质110)上被记录作为属性信息的特征量。
[0055]在步骤S13中，服务器200从信息处理设备100接收内容的特征量，并且基于从信息处理设备100接收的内容的特征量从在内容数据库中存储的多个内容片断中检索具有与所接收的内容的特征量类似的特征量的相似内容。此外，例如，当内容是移动图像时，以在移动图像的内容中包括的场景为单位(例如以图像帧为单位)执行相似内容的提取。当内容是静止图像时，以静止图像为单位执行相似内容的提取。由服务器200执行的内容的检索除了意图用于在移动图像的内容中包括的视频流之外、还意图用于静止图像。
[0056]此外，在步骤S14中，服务器200提取先前设置的关于作为检索结果而获得的相似内容的评论。这个预设评论是由观看所述内容或与所述内容类似的相似内容的各种用户设置的评论。
[0057]此外，在服务器200中执行的内容检索处理是从与正在再现的内容相似的内容中提取用户的评论。因此，例如，当在内容数据库中存在多个内容片断时，可以配置以便执行意图检索具有大量预设评论信息的一组内容的内容检索。可替换地，可以执行优选地检索具有良好图像质量的内容的处理。
[0058]此外，可以通过测量被分配到屏幕的字符的数量而执行评论信息量的确定。可以使用反射式字幕(telop)检测技术来执行屏幕中的信息的检测。例如，可以将在名称为“IMAGE PROCESSING APPARATUS AND METHOD, DETECTION DEVICE AND METHOD, PROGRAM ANDRECORDING MEDIUM”的日本专利申请公开N0.2007-329832中公开的技术应用于信息的检测。
[0059]在步骤S15中，服务器200向信息处理设备100输出所提取的评论。在步骤S16中，信息处理设备100将从服务器200接收的评论与正在再现的内容一起显示。如在图2的步骤S16中所示，例如，在信息处理设备100的屏幕上显示的评论“可爱”对应于由服务器200从相似内容中提取的评论。
[0060]用户可以响应于基于所显示的评论的信息来分配新的评论。如图2的步骤S16中所示，例如，在信息处理设备100的屏幕上显示的评论“真的好可爱”是附加评论。
[0061]此外，在步骤S17a中，信息处理设备100在信息处理设备100的硬盘、作为内容再现媒介的信息记录介质110等上记录关于附加评论的信息。此外，在步骤S17b中，信息处理设备100向服务器200传送附加评论。在步骤S18中，服务器200将从信息处理设备接收的附加评论另外记录为与被提取所述评论的内容对应的评论。
[0062]【3.由信息处理设备执行的内容再现控制处理】
[0063]然后，将参考图3描述由再现内容的信息处理设备执行的示例内容再现控制处 理。
[0064]例如，可以将被设置到图像内容的评论的大多数区段(section)假设为用户感兴趣的区段，并且所述区段可以被估计为用户很可能观看并感兴趣的内容区段，即具有高用户关注度的关注内容区段。
[0065]下面将参考图3描述为评论被分配到的关注内容区段执行摘要(digest)再现的内容再现控制处理的示例。在图3中，水平轴指示时间轴(t)作为内容的再现时间，并且在每个时间指示正在再现的内容的场景(图像帧)和为每个场景设置的评论。在图3中，指示下列数据的时间序列数据。
[0066](A)评论存在区段
[0067]( B )服务器上的内容(相似内容)
[0068](C)从媒介正在再现的内容
[0069](D)再现速度转换(当执行摘要再现或检索模式时)
[0070]再现区段a2、a5是存在评论的再现区段。当执行摘要再现或检索模式时，信息处理设备的再现处理单元根据图3中示出的(D)再现速度转换来控制再现速度。换句话说，作为评论设置区段的再现区段a2、a5的再现速度被设置为正常再现速度，并且其余再现区段的再现速度被设置为高速再现处理。
[0071]此外，在图3中示出的示例中，评论设置区段a2、a5的前面和后面区段的再现速度逐渐改变。如果仅评论设置区段a2、a5被设置为正常速度，则仅再现对应的场景，从而变得难以理解内容的细节的上下文。因此，再现速度的逐渐改变意图防止难以理解正在再现的内容的细节。
[0072]在被设置评论的图像帧中，当设置评论时，设置指示评论设置帧的标识信息(元数据)。信息处理设备的再现处理单元参考这个元数据来控制再现速度。
[0073]【4.关于在服务器中保持的内容的示例评论设置处理】
[0074]如上面描述的，图1和图2中示出的信息处理设备100向服务器200传送被安装到信息处理设备100的例如BD的信息记录介质110的正在再现的内容的特征量。服务器200基于所接收的特征量从由服务器保持的内容中检索相似内容或场景。然后，服务器200提取被设置到作为检索结果而获得的相似内容或场景的评论，并且向信息处理设备100传送所提取的评论。信息处理设备100将所述评论与在信息处理设备100或连接到信息处理设备100的显示单元上正在显示或再现的内容一起显示。
[0075]正在观看正在再现的内容的用户可以进一步输入附加评论。可以在用户观看的内容上叠加这个附加评论，并且，如图2的步骤S17到S18的处理中所描述的，所述附加评论还可以被传送到服务器侧，并被另外记录为与由服务器保持的内容对应的评论。
[0076]将参考图4和5通过使用两个示例处理来描述当在服务器中执行评论增加记录处理时如何确定记录评论的位置。图4图示基于图像/音频特征量来确定评论设置位置的情况。图4中示出的信息处理设备100再现作为在被安装到信息处理设备100的例如BD的信息记录介质110中存储的内容的内容al。
[0077]用户输入关于正在再现的内容al的附加评论。在用户观看的内容上叠加所述附加评论。此外，如在图2的步骤S17到S18的处理中所描述的，向服务器传送所述附加评论。当执行这个处理时，从信息处理设备向服务器侧传送的信息与关于增加评论的场景的图像
/音频特征量有关。
[0078]在图4中示出的示例中，示出两个服务器，即提供网站I的服务器X和提供网站2的服务器Y。信息处理设备100提取正在再现的内容al的特征量并且向服务器X和Y传送所述特征量。服务器中的每一个基于所接收的特征量信息从由服务器保持的内容中检索相似内容或场景。然后，服务器中的每一个在内容数据库上将从信息处理设备100传送的、与图像帧相关联的用户的附加评论记录为关于作为检索结果而获得的相似内容或场景的评论。
[0079]图5是用于解释当执行服务器中的评论增加记录处理时在不使用与图像/音频特征量有关的信息的情况下使用时间信息的示例处理的图。使用这个时间信息的评论增加记录处理可以被应用于服务器保持与内容bl相同的内容的情况，所述内容bl是在被安装到信息处理设备100的例如BD的信息记录介质110中存储的内容。
[0080]如果假设不同的记录介质或媒介具有相同的内容，则服务器X和Y中的每一个的内容(B卩Web上的内容和由用户正在再现的盘(B卩，信息记录介质110)的内容)具有不同的时间基准。因此，可以考虑可能没有在合适的位置处理评论分配的情况。因此，服务器从内容的开始位置计算相对位置以便确定评论位置。从内容开始位置的再现时间信息可以被用作相对位置。此外，除了再现时间信息以外，还可以使用从内容开始位置的帧的数量。
[0081]此外，参考图4和5解释的用户的附加评论和评论设置位置信息可以被配置为与内容标识信息相关联地不但记录在服务器上而且记录在用户侧的信息处理设备100的本地存储装置(存储器)上。[0082]通过执行用于记录这样的评论和评论位置信息的处理，当随后再现与内容标识信息对应的相同内容时，可以通过从与附加评论的记录相同的场景中读出在本地存储装置(存储器)上记录的评论，来显示在本地存储装置(存储器)上记录的评论。
[0083]【5.评论显示控制处理】
[0084]然后，将描述在用户侧的信息处理设备100或连接到信息处理设备100的显示单元(例如，图1中示出的输出单元30)上显示评论的示例。
[0085]图6图示屏幕显示的示例。在图6中，如下示出三个示例评论显示处理:
[0086](I)根据评论的类型通过改变显示颜色来显示评论的示例处理，
[0087](2)根据评论的类型通过淡出评论中的一个来显示评论的示例处理，以及
[0088]( 3 )根据评论的类型通过执行缩放处理(改变评论显示的大小的处理)来显示评论的示例处理。
[0089]图6 (I)是根据评论的类型通过改变显示颜色来显示评论的示例处理。例如，这个示例指示通过改变原始评论(即，从服务器获得的评论)的颜色和由用户新增加的附加评论的显示颜色来显示评论的处理。更具体地，例如，以黑色显示从服务器获得的评论并且以红色显示由用户新增加的附加评论。
[0090]图6(2)是根据评论的类型通过淡出显示的评论中的一个来显示评论的示例处理。更具体地，可以通过执行逐渐淡出评论的显示的淡出处理来显示从服务器获得的评论。
[0091]图6(3)是根据评论的类型通过执行缩放处理来显示评论的示例处理。更具体地，例如，可以通过执行逐渐减小字符的大小的减小处理来显示从服务器获得的评论。
[0092]图7是用于解释确定图像中评论的显示位置的处理的图。评论的显示位置优选地被设置为不干扰图像的位置。例如，如果在屏幕上存在例如人的面部的对象，则不希望在面部的位置上显示评论。
[0093]例如，在用户侧的信息处理设备中正在再现的内容上叠加与从服务器获得的相似内容对应的评论。在这种情况下，即使没有在面部上交叠最初获取的相似内容中的评论，也可能存在在面部上交叠在用户侧正在再现的内容的评论的情况。
[0094]因此，当信息处理设备100显示与从服务器获得的相似内容对应的评论而作为评论显示控制处理时，信息处理设备100执行下列处理:
[0095](SI)确定在预计显示用户侧的信息记录介质110中正在再现的内容的评论的帧中是否存在面部图像。
[0096](S2)当确定在预计显示评论的帧中不存在面部图像时，在与评论所获取自的相似内容中显示的评论显示位置相同的位置上显示评论，以及
[0097](S3)当确定在预计显示评论的帧中存在面部图像时，改变在评论所获取自的相似内容中显示的评论显示位置。
[0098]将参考图7描述用于改变上面的处理(S3)的评论显示位置的处理的具体示例。在图7的上部中被示出为图(la)、(lb)、和(Ic)的示例图示了没有调整评论显示位置的显示。图中的每一个指示如下数据:
[0099](Ia)从信息记录介质110中正在再现的内容，
[0100](Ib)与从服务器(Web)获得的相似内容对应的评论，以及
[0101]( Ic)在没有执行显示评论的位置的调整的情况下叠加评论的示例。[0102]如果以这样的方式显示评论，则如图7 (Ic)中所示在面部的位置上显示评论将是不希望的。为了防止这样的情况发生，信息处理设备100控制显示评论的位置。
[0103]具体地，执行图7中示出的每个步骤S51到S53的处理。在步骤S51中，信息处理设备100分析预计显示从信息记录介质110正在再现的内容的评论的图像。
[0104]更具体地，基于面部检测处理检测面部区域，并且通过图像分段处理检测与面部区域相邻的区域(身体区域)和其他区域(背景区域)。可以基于聚类处理通过使用例如图像中的每个像素的颜色数据或亮度数据的图像特征量数据来执行图像分段处理。
[0105]然后，在步骤S52中，计算背景区域的中心位置。最后，在步骤S53中，在背景区域的中心位置处显示评论。
[0106]如图7的步骤S53中所示，通过执行这些处理，可以在没有叠加在面部区域上的背景区域上显示从服务器获得的评论。
[0107]【6.信息处理设备的示例配置】
[0108]将参考图8描述信息处理设备100的示例配置。信息处理设备100包括连接到数据总线(DB)和控制总线(CB)的各种处理系统。
[0109]具体地，信息处理设备100包括网络I/F302、调谐器303、记录处理单元304、信息处理单元305、接口(I/F) 306、和存储器307。网络I/F302被适配为通过网络301传送和接收数据。调谐器303通过天线传送和接收内容。记录处理单元304在盘型记录介质308a或记录介质309上记录数据。信息处理单元305执行例如内容检索、显示控制、面部检测、和图像分段的处理。接口(I/F) 306通过由用户操作的例如远程控制器的操作单元来接收输入信息。存储器307被配置为包括RAM、或ROM等，其被用作评论、或将由系统控制器314执行的处理程序或参数的临时 存储区域。
[0110]此外，信息处理设备100还包括盘驱动器308、记录介质309、再现处理单元310、显示处理单元311、图像/音频特征提取单元313、和系统控制器314。通过插入盘型记录介质308a来驱动盘驱动器308，并且，盘驱动器308执行数据记录和再现处理。记录介质309可以是硬盘等。再现处理单元310执行内容再现控制。显示处理单元311执行在用作显示单元的显示器312上的内容或评论的显示。图像/音频特征提取单元313提取正在再现的内容的图像或音频的特征。系统控制器314被配置为包括具有例如执行每个处理单元的中央控制的程序执行功能的CPU等。
[0111]此外，当再现内容时，图像/音频特征提取单元313提取图像/音频特征量。图像特征量的示例包括例如颜色特征、亮度特征、或纹理的全局图像特征量、以及例如Harris角点检测或SIFT (尺度不变特征变换)的局部图像特征量。
[0112]在信息处理单元305的控制下，通过网络I/F302向服务器传送所提取的特征量。然后，服务器对于所提取的特征量检测相似场景。然后，服务器从被分配评论的内容的相似图像场景中获得所述评论，并且向信息处理设备100提供所述评论。以这样的方式，信息处理单元305检索具有与由图像/音频特征提取单元313提取的特征量类似的特征量的相似内容，获得被设置到所检索的相似内容的评论，并且执行控制以使得在媒介上记录的内容的正在再现的图像上叠加所获得的评论。
[0113]此外，执行由信息处理单元305执行的评论获得处理，例如作为用于向服务器传送由图像/音频特征提取单元313提取的特征量和用于从服务器获得被设置到相似内容的评论的处理。此外，当接收到由用户新输入的附加评论时，信息处理单元305使得将所述附加评论与所获得的评论一起叠加在媒介上记录的内容的正在再现的图像上，并且向服务器传送所述附加评论。此外，当控制评论的显示时，信息处理单元305执行已经参考图6和7解释的用于区分附加评论和所获得的评论的评论输出控制，或执行用于改变评论的输出位
置的处理。
[0114]【7.由信息处理设备执行的处理序列】
[0115]然后，将参考图9和10中示出的流程图描述由信息处理设备执行的处理序列。
[0116]例如，根据图8中示出的存储器307中存储的程序，通过由系统控制器314的CPU执行所述程序，来执行根据图9和10中示出的每个流程图的处理。
[0117]在步骤SlOl中，确定信息处理设备是否被设置为再现模式。如果确定信息处理设备处于再现模式中，则流程前进到步骤S102。如果确定信息处理设备未处于再现模式中，则流程前进到步骤S200，并且执行根据其他模式的处理。
[0118]如果确定信息处理设备处于再现模式中，则流程前进到步骤S102，并且执行评论检索模式中的设置标志的初始设置。评论检索模式中的设置标志被设置为如下。
[0119]F=I — OFF (关):不执行评论检索
[0120]F=O — ON (开):执行评论检索
[0121]在步骤S102中，评论检索模式中的设置标志的初始设置是被设置为如下的处理。
[0122]F=O — ON:执行评论检索
[0123]在步骤S103中，执行由用户希望的评论检索模式的模式设置。这个模式设置是设置“不执行评论检索”和“执行评论检索”中的任何一个，并且，使得通过Π (用户接口)执行用于请求这些设置的用户输入。
[0124]然后，在步骤S104中，确定用户是否被设置为“执行评论检索”(f=0)。如果确定用户被设置为“执行评论检索”，则流程前进到步骤S105。如果确定用户被设置为“不执行评论检索”，则流程前进到步骤S106，然后，通过将标志设置为f=l，流程前进到处理(Ml)。处理(Ml)是将根据图10中示出的流程图执行的处理，并且，稍后将描述所述处理(Ml)。
[0125]在步骤S104中，如果确定用户被设置为“执行评论检索”(f=0)，则流程前进到步骤S105。在步骤S105中，从正在再现的内容提取特征。例如，诸如颜色特征和纹理的全局图像特征量、或例如Harris角点检测和SIFT (尺度不变特征变换)的局部图像特征量被提取作为图像特征量。获得例如音调间隔和音量的时间转换信息、或对于每个预定间隔(从几十毫秒到几百毫秒)的功率谱，作为音频特征量。
[0126]然后，在步骤S107中，基于所提取的特征信息检索服务器中存储的内容(即，网站的相似内容)。这个内容检索可以是例如具有与在步骤S105中提取的特征量类似的特征量的内容的场景检索处理。
[0127]在步骤S108中，确定相似内容的检索是否成功。如果确定没有检索到相似内容，则流程前进到步骤S111。在步骤Slll中，在表示由用户正在观看的内容的显示器上显示指示没有获得评论的消息。然后，在步骤S112中，通过将标志设置为f=l (即，“不执行评论检索”)，流程前进到处理(Ml)。处理(Ml)是根据图10中示出的流程图将执行的处理，并且，稍后将描述所述处理(Ml)。
[0128]另一方面。在步骤S108中，如果确定相似内容的检索成功，则流程前进到步骤S109。在步骤S109中，确定评论是否被设置到相似内容。如果没有从相似内容中获得评论，则流程前进到步骤S111。在步骤Slll中，例如，在表示由用户正在观看的内容的显示器上显示指示没有获得评论的消息。然后，在步骤S112中，通过将标志设置为f=l (即，“不执行评论检索”)，流程前进到处理(Ml)。处理(Ml)是根据图10中示出的流程将执行的处理，并且，稍后将描述所述处理(Ml)。[0129]在步骤S109中，如果确定评论被设置到相似内容，则流程前进到步骤S110。在步骤SllO中，获得评论，并且将所获得的评论与正在再现的内容一起显示。此外，当执行此评论显示时，优选地执行上面参考图7解释的评论显示位置控制。然后，流程前进到处理(Ml)0
[0130]然后，将参考图10中示出的流程图描述处理(Ml)。在步骤S121中，确定对于评论增加处理的设置是否是有效的。如果确定所述设置不是有效的，则流程前进到步骤S123。如果确定所述设置是有效的，则流程前进到步骤S122。在步骤S122中，如果检查到用户增加了评论，则流程前进到S123。此外，即使在确定设置是有效的情况下，如果在预设时间段中没有执行评论的增加，则流程也可以前进到步骤S123。
[0131]在步骤S123中，检查对评论检索模式进行哪种类型的设置。如果检查到使用设置“执行评论检索”(f=0)，则流程前进到步骤S124。如果检查到使用设置“不执行评论检索”(f=l)，则流程前进到步骤S126。
[0132]在步骤S124中，确定是否设置改变所获得的评论的显示的模式。这是用于确定是否设置执行上面参考图6解释的处理(I)到(3)的模式的处理。换句话说，这是用于确定是否设置执行可以区分从服务器获得的评论和从用户新增加的附加评论的处理的模式的处理。
[0133]如果确定没有设置这个模式，则流程前进到步骤S126。如果确定设置这个模式，则流程前进到步骤S125。在步骤S125中，执行根据依照设置的模式的显示方式的改变处理的显示控制，例如，执行根据图6的处理(I)到(3)中的任何一个的显示控制。当完成这个处理时，流程前进到步骤S126。
[0134]在步骤S126中，确定内容的再现是否完成。如果确定内容的再现完成，则终止整个处理。如果确定内容的再现还未完成但正在继续，则流程返回到图9的流程图(B卩，处理(M2))中示出的步骤S104，并且，重复执行步骤S104和其后的步骤的处理。
[0135]根据本公开的实施例的处理，例如，可以预计下列优点。用户可以容易地检索和观看该用户还未看但听上去有趣的内容。此外，用户可以仅选择内容中的该用户感兴趣的一些区段，并且在短时间段中高效地观看所述区段。此外，用户可以知道其他观众对该用户想观看的内容感受如何。例如，可以实现这样的优点。
[0136]【8.根据本公开的实施例的配置的结论】
[0137]上面参考特定实施例详细描述了本公开的实施例。然而，本领域技术人员显然可以修改和替代所述实施例，而不背离本公开的实施例的精神。即，以范例的形式公开了本公开的实施例，并且不应该以限制的方式解释本公开的实施例。应该根据本公开的实施例判断本公开的主旨。
[0138]本领域技术人员应理解，取决于设计需求和其他因素，只要各种修改、组合、子组合和变更在所附权利要求或其等效物的范围内，则各种修改、组合、子组合和变更可以出现。
[0139]此外，本技术还可以被配置如下。
[0140](I) 一种信息处理设备包括:
[0141]再现处理单元，用于再现在信息记录介质上记录的媒介记录内容；
[0142]特征提取单元，用于提取媒介记录内容的特征量；以及
[0143]信息处理单元，用于获得被设置到具有与由特征提取单元提取的媒介记录内容的特征量类似的特征量的相似内容的评论，并且用于以在媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
[0144](2)根据(I)的信息处理设备，
[0145]其中所述信息处理单元向服务器传送由特征提取单元提取的媒介记录内容的特征量，
[0146]其中服务器检索具有与媒介记录内容的特征量类似的特征量的相似内容，并且向信息处理单元传送被设置到所检索的相似内容的评论。
[0147]其中信息处理单元获得被设置到相似内容的评论。
[0148](3)根据(I)或(2)的信息处理设备，其中，当接收到附加评论时，信息处理单元以将所述附加评论与所获得的评论一起叠加在媒介记录内容的再现图像上的方式来执行控制。
[0149](4)根据(3)的信息处理设备，其中信息处理单元执行能够区分所获得评论和附加评论的评论输出控制。
[0150](5)根据(I)到(4)中的任何一项的信息处理设备，其中信息处理单元确定输出所获得的评论的位置是否交叠在媒介记录内容的再现图像中的面部区域上，以及
[0151]其中，如果确定所述位置交叠在面部区域上，则信息处理单元执行改变输出所获得的评论的位置的处理。
[0152](6)根据(I)到(5)中的任何一项的信息处理设备，其中，当接收到附加评论时，信息处理单元执行向服务器传送所述附加评论的处理。
[0153](7)根据(I)到(6)中的任何一项的信息处理设备，其中，当再现媒介记录内容时，再现处理单元执行再现速度控制，在再现速度控制下，评论被分配到的片段的再现速度比另一片段的再现速度慢。
[0154](8)—种服务器，用于接收由再现设备将再现的再现内容的特征量信息，检索具有与所接收的特征量类似的特征量的相似内容，以及向再现设备输出被设置到所检索的相似内容的评论。
[0155](9)根据(8)的服务器，其中所述服务器被配置为从再现设备接收由用户输入的附加评论，并且执行将所接收的附加评论记录为对应于与再现内容相似的相似内容的评论的处理。
[0156](10)根据(9)的服务器，其中所述服务器还被配置为在确定在相似内容上将记录的附加评论的位置的处理中，应用从所述再现设备接收的内容的特征量或关于再现所述内容的位置的信息。
[0157]此外，在上述装置或系统中执行的处理的方法、以及用于执行处理的程序都包括在本公开的配置中。[0158]此外，可以由硬件、由软件、以及由结合硬件和软件的配置实施说明书中解释的处理序列。在由软件实施所述处理的情况下，可以在被合并到专用硬件中的计算机内的存储器中安装编码所述处理序列的程序，并且执行所述程序。还可以在能够执行各种类型的处理的通用计算机中安装程序，并且执行所述程序。例如，可以在存储介质中预先安装所述程序。除了从存储介质中将所述程序安装到计算机中之外，所述程序还可以通过例如局域网(LAN)或因特网的网络接收，并且可以在内置到所述计算机中的例如硬盘等的存储介质中安装所述程序。
[0159]注意到，根据执行在此说明中描述的各种类型的处理的设备的处理能力或根据需要，不仅可以如所描述的按照时间序列来执行所述处理，还可以并行或单独地执行所述处理。此外，此说明书中的系统不限于作为逻辑上聚集全部包括在同一壳体内的多个设备的配置。
[0160]如上面描述的，根据本公开的实施例，可以实施可以结合从媒介获得的内容的再现而显示从外部输入的与相似内容对应的评论的设备和方法。
[0161]更具体地，本公开的实施例包括:再现处理单元，用于执行在例如BD的信息记录介质上记录的媒介记录内容的再现处理；特征提取单元，用于提取媒介记录内容的特征量；信息处理单元，用于检索具有与由特征提取单元提取的媒介记录内容的特征量相似的特征量的相似内容，获得被设置到所检索的相似内容的评论，并且使得在媒介记录内容的再现图像上以交叠的方式显示所获得的评论；以及显示处理单元，用于基于信息处理单元的控制，在媒介记录内容的再现图像上以交叠的方式显示所获得的评论。
[0162]根据上面描述的本公开的实施例，即使当没有向在例如BD的信息记录介质上记录的媒介记录内容分配评论时，也可以获得并显示与相似内容对应的评论，并且知道许多其他用户的兴趣程度和想法，从而再现和欣赏较高附加值的内容。
[0163]本公开包括与在于2012年5月31日向日本专利局提交的日本在先专利申请JP2012-124075中公开的主题有关的主题，所述申请的全部内容通过引用合并于此。
【权利要求】
1.一种信息处理设备,包括: 再现处理单元，用于再现在信息记录介质上记录的媒介记录内容； 特征提取单元，用于提取所述媒介记录内容的特征量；以及 信息处理单元，用于获得被设置到具有与由所述特征提取单元提取的所述媒介记录内容的特征量类似的特征量的相似内容的评论，并且用于以在所述媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
2.如权利要求1所述的信息处理设备， 其中所述信息处理单元向服务器传送由所述特征提取单元提取的所述媒介记录内容的特征量， 其中所述服务器检索具有与所述媒介记录内容的特征量类似的特征量的相似内容，并且向所述信息处理单元传送被设置到所检索的相似内容的评论，以及 其中所述信息处理单元获得被设置到所述相似内容的评论。
3.如权利要求1所述 的信息处理设备，其中，当接收到附加评论时，所述信息处理单元以将所述附加评论与所获得的评论一起叠加在所述媒介记录内容的再现图像上的方式来执行控制。
4.如权利要求3所述的信息处理设备，其中，所述信息处理单元执行能够区分所获得的评论和所述附加评论的评论输出控制。
5.如权利要求1所述的信息处理设备，其中，所述信息处理单元确定输出所获得的评论的位置是否交叠在所述媒介记录内容的再现图像中的面部区域上，以及 其中，如果确定所述位置交叠在所述面部区域上，则所述信息处理单元执行改变输出所获得的评论的位置的处理。
6.如权利要求1所述的信息处理设备，其中，当接收到附加评论时，所述信息处理单元执行向服务器传送所述附加评论的处理。
7.如权利要求1所述的信息处理设备，其中，当再现所述媒介记录内容时，所述再现处理单元执行再现速度控制，在所述再现速度控制下，所述评论被分配到的片段的再现速度比另一片段的再现速度慢。
8.一种服务器，用于接收由再现设备将再现的再现内容的特征量信息，检索具有与接收的特征量类似的特征量的相似内容，以及向所述再现设备输出被设置到所检索的相似内容的评论。
9.如权利要求8所述的服务器，其中所述服务器被配置为从所述再现设备接收由用户输入的附加评论，并且执行将所接收的附加评论记录为对应于与所述再现内容相似的相似内容的评论的处理。
10.如权利要求9所述的服务器，其中所述服务器还被配置为在确定将在所述相似内容上记录附加评论的位置的处理中，应用从所述再现设备接收的内容的特征量或关于再现所述内容的位置的信息。
11.一种在信息处理设备中执行的信息处理方法，所述方法包括: 由再现处理单元再现信息记录介质上记录的媒介记录内容； 由特征提取单元提取所述媒介记录内容的特征量； 由信息处理单元获得被设置到具有与由所述特征提取单元提取的所述媒介记录内容的特征量类似的特征量的相似内容的评论；以及 由所述信息处理单元以在所述媒介记录内容的再现图像上叠加所获得的评论的方式来执行控制。
12.—种程序，用于使得在信息处理设备中执行信息处理，所述信息处理包括: 由再现处理单元再现信息记录介质上记录的媒介记录内容； 由特征提取单元提取所述媒介记录内容的特征量； 由信息处理单元获得被设置到具有与由所述特征提取单元提取的所述媒介记录内容的特征量类似的特征量的相似内容的评论；以及 由所述信息处理单元以在所述媒介记录内容的再现图像上叠加所获得的评论的方式来 执行控制。
【文档编号】G06F17/30GK103455539SQ201310196777
【公开日】2013年12月18日 申请日期:2013年5月24日 优先权日:2012年5月31日
【发明者】铃木裕之, 村林升 申请人:索尼公司