专利名称：显示控制装置和显示控制方法
技术领域：
本发明涉及显示控制装置和显示控制方法，并且具体地，涉及根据观看位置来控 制显示图像显示的显示控制装置和显示控制方法。
背景技术：
为了将许多段(piece)内容作为列表显示在显示屏幕上，通常在缩小图像之后显 示代表内容的静止图像。以这种方式缩小显示代表内容的静止图像被称为缩略图显示。虽 然缩略图显示使得观看者能够在一个屏幕中确认许多段内容，但是存在诸如取决于观看距 离内容的可视性很差以及辨别内容的细节困难之类的问题。例如，当在大屏幕TV上显示许 多缩略图、并且观看者远离显示屏幕时，存在缩略图显示太小而不能抓住内容细节的问题。从而，为了增强内容的可视性，公开了根据观看者周围的环境或者显示设备 和观看者之间的距离来调节音频输出并调节图像质量的技术(例如，日本专利申请特 开No. H7-93089和日本专利申请特开No. 2008-72561)。例如，根据日本专利申请特开 No. H7-93089，识别诸如鼻子之类的观看者身体的一部分，并且如果鼻子更靠近显示设备， 则放大显示图像，而如果鼻子远离显示设备移动，则缩小显示图像。根据日本专利申请特开 No. 2008-72561，根据显示屏幕和观看者之间的距离来调节图像质量和字符大小。
发明内容
然而，根据日本专利申请特开No. 7-93089和日本专利申请特开No. 2008-72561, 虽然可以根据显示设备和观看者之间的距离来放大/缩小显示图像，但是存在如下问题 难以通过根据观看者的位置恰当调节缩略像的大小和数量来显示从观看者的位置可 容易区分的缩略图。按照上文，期望提供能够根据观看者的距离或位置来适当进行缩略图显示的新颖 且改善的显示控制装置以及显示控制方法。根据本发明的实施例，提供了一种显示控制装置，包括拾取图像获取单元，其获 取观看显示图像的观看者的拾取图像；检测单元，其基于由所述拾取图像获取单元获取的 观看者的拾取图像来检测观看者相对于显示图像的观看位置和观看距离；以及显示控制单 元，其根据由所述检测单元检测的观看者的观看距离来改变显示图像的大小，同时将由所 述检测单元检测的观看者的观看位置与显示图像的显示位置相关联。根据上述配置，基于观看显示图像的观看者的拾取图像来检测观看者相对于显示 图像的观看位置和观看距离，以及可以根据该观看距离来改变显示图像的大小，同时将所 检测的观看者的观看位置与显示图像的显示位置相关联。从而，可以根据观看者的距离或 位置来使显示屏幕恰当显示缩略图等的显示图像。此外，显示控制单元可以使显示屏幕显示多个显示图像，以及将多个显示图像中 的一个显示图像的显示位置与观看者的观看位置相关联，以使显示屏幕将其他显示图像显 示在该一个显示图像的周围。
此外，显示控制单元可以根据观看者的观看距离来控制多个显示图像的显示数量。此外，显示控制单元可以根据观看者的观看距离来改变多个显示图像的显示数 量，同时将多个显示图像中的一个显示图像的显示位置与观看者的观看位置相关联。此外，该一个显示图像可以是正被再现的内容。此外，该一个显示图像可以是在显示屏幕的全屏幕上显示的显示图像。此外，检测单元可以基于由拾取图像获取单元获取的观看者的拾取图像来检测观 看者的视线位置，以及显示控制单元可以根据由检测单元检测的观看者的视线位置从多个 显示图像中选择一个显示图像并显示。此外，如果根据观看者的视线位置选择该一个显示图像并显示了预定时间或更 差，则显示控制单元可以使显示屏幕再现与该一个显示图像相关联的内容。此外，检测单元可以基于由拾取图像获取单元获取的观看者的拾取图像来检测观 看者的脸部方向，以及显示控制单元可以根据观看者的脸部方向或观看者的视线位置来使 显示在显示屏幕上的多个显示图像滚动。此外，显示控制单元可以在使多个显示图像在水平方向上滚动之后删除位于显示 屏幕的可显示区域之外的显示图像，以及使显示屏幕将不同于多个显示图像的其他显示图 像显示在显示屏幕的没有显示多个显示图像的可显示区域中。根据本发明的另一实施例，提供了一种显示控制方法，包括如下步骤获取观看显 示图像的观看者的拾取图像；基于所获取的观看者的拾取图像，检测观看者相对于所述显 示图像的观看位置和观看距离；以及根据所检测的观看者的观看距离来改变所述显示图像 的大小，同时将所检测的观看者的观看位置与所述显示图像的显示位置相关联。如上所述，根据本发明，可以根据观看者的距离或位置来恰当进行缩略图显示。
图1是例示根据本发明实施例的显示控制装置的硬件配置的说明性视图；图2是示出根据实施例的显示控制装置的功能配置的框图；图3A是图示根据实施例的显示图像的显示位置和显示数量的说明性视图；图3B是图示根据实施例的显示图像的显示位置和显示数量的说明性视图；图4是图示根据实施例的缩略图的显示数量和大小的说明性视图；图5是图示根据实施例的缩略图的显示数量和大小的说明性视图；图6是图示根据实施例的根据观看者的视线位置来显示缩略图的说明性视图；图7是图示根据实施例的根据观看者的脸部方向来显示缩略图的说明性视图；图8是示出根据实施例的根据观看者的位置的图像显示处理的流程图；图9是示出根据实施例的根据观看者的视线的图像显示处理的流程图；以及图10是示出根据实施例的根据观看者的脸部方向的图像显示处理的流程图。
具体实施例方式在下文中，将参考附图详细描述本发明的优选实施例。注意的是，在该说明书和附 图中，用相同的参考标记表示实质上具有相同功能和结构的结构化元件，并省略这些结构化元件的重复说明。将以下面所示的顺序来描述“具体实施方式
”[1]本实施例的目的[2]显示控制装置的硬件配置[3]显示控制装置的功能配置[4]显示控制装置中的图像显示处理的细节[1]本实施例的目的为了将许多段内容作为列表显示在显示屏幕上，通常在缩小图像之后显示代表内 容的静止图像。以这种方式缩小显示代表内容的静止图像被称为缩略图显示。虽然缩略图 显示使得观看者能够在一个屏幕中确认许多段内容，但是存在诸如取决于观看距离、内容 的可视性很差以及辨别内容的细节困难之类的问题。例如，当在大屏幕TV上显示许多缩略 图、并且观看者远离显示屏幕时，存在缩略图显示太小而不能抓住内容细节的问题。从而，为了增强内容的可视性，公开了根据观看者周围的环境或者显示设备和观 看者之间的距离来调节音频输出并调节图像质量的技术。例如，公开了一种技术，根据该技 术，识别诸如鼻子之类的观看者身体的一部分，并且如果鼻子更靠近显示设备，则放大显示 图像，而如果鼻子远离显示设备移动，则缩小显示图像。并且，公开了一种技术，根据该技 术，根据显示屏幕和观看者之间的距离来调节图像质量和字符大小。然而，根据现有技术中的上述技术，虽然可以根据显示设备和观看者之间的距离 来放大/缩小显示图像，但是存在如下问题难以通过根据观看者的位置恰当调节缩略图 图像的大小和数量来使得从观看者的位置可以容易区分缩略图显示。关注上述情况导致根 据本发明实施例的显示控制装置10的创建。根据本实施例中的显示控制装置10，可以根据 观看者的距离或位置来恰当进行缩略图显示。为了在再现(!^produce)由TV机接收的节目或者记录内容时检查其他节目或者 观看其它记录内容，需要中断之前(in the past)正在再现的内容。在这样的情况下，难以 在观看内容时检查其它内容或选择其它内容。然而，根据本实施例中的显示控制装置10，如 果存在正在再现的内容，则可以使显示控制装置10进行其它内容的缩略图显示而不中断 其再现。此外，当使显示控制装置10进行其它内容的缩略图显示时，变得能够根据观看者 的位置来调节缩略图位置或缩小缩略图。 最近，随着TV广播的数字化，TV机不仅处理TV广播的接收和显示，还处理大量的 多媒体内容，例如经由网络提供内容、再现静止图像或音乐以及从记录介质进行视频再现。 因此，存在如下问题TV机的操作变得越来越复杂，并且远程控制的按钮数量增多，导致更 低的使用率。还存在如下问题由于远程控制的便携性，存在许多找不到远程控制的情况， 并且花费一些时间来寻找(detect)远程控制，或者每次操作远程控制时需要取来远程控 制。根据本实施例，如上所述，可以根据观看者的位置来调节缩略图显示而不操作远 程控制。通过识别观看者的脸部的方位或视线来改变缩略图显示的位置或选择与缩略图相 关联的内容也变成可能。当观看者远离显示屏幕移动时，可以通过放大被缩小的缩略图显 示来改善缩略图的可视性而无需远程控制操作。[2]显示控制装置的硬件配置
5
接下来，将参考图1描述显示控制装置10的硬件配置。图1是例示根据本实施例 的显示控制装置10的硬件配置的说明性视图。显示控制装置10包括CPU(中央处理单元)101、R0M(只读存储器)102、RAM(随 机存取存储器)103、主机总线104、桥105、外部总线106、接口 107、输入设备108、输出设备 109和存储设备(HDD) 110、驱动111、以及通信设备112。CPU 101充当运算处理单元和控制单元，并根据各种各样的程序来控制显示控制 装置10中的全部操作。CPU 101可以是微处理器。ROM 102存储由CPU 101使用的程序、 运算参数等。MM 103暂时存储用于由CPU 101执行的程序以及在其执行期间适当改变的 参数。由CPU总线等组成的主机总线104互连这些单元。主机总线104经由桥105与诸如PCI (外围组件互连/接口 )总线的外部总线106 相连。顺便说一下，不需要分别组成主机总线104、桥105和外部总线106，而是可以由单一 总线来实施这些功能。输入设备108作为诸如鼠标、键盘、触摸板、按钮、麦克风、开关和控制杆之类的用 于用户输入信息的输入装置，基于用户的输入来生成输入信号，并由输入控制电路等组成 以输出到CPU 101。显示控制装置10的用户可以通过操作输入设备108来向显示控制装置 10输入各种类型的数据或者提供处理操作指令。输出设备109由诸如CRT (阴极射线管)显示单元、液晶显示(IXD)单元、OLED (有 机发光显示)单元和灯之类的显示设备以及诸如扬声器和耳机之类的音频输出设备组成。 例如，输出设备109输出再现的内容。更具体地，显示设备将诸如再现的视频数据之类的各 种类型的信息显示为文本或图像。另一方面，音频输出设备将再现的音频数据等转换为音 频来输出。存储设备110是作为根据本实施例的显示控制装置10的存储单元的例子而构成 的用于数据存储的设备，并且可以包括存储介质、将数据记录到存储介质中的记录设备、从 存储介质读数据的读出设备以及删除存储介质中记录的数据的删除装置。例如，存储设备 110由HDD (硬盘驱动器)组成。存储设备110驱动硬盘，并存储由CPU 101执行的程序和 各种类型的数据。驱动111是用于存储介质的读写器，并被包括在显示控制装置10中或从外部附连 到显示控制装置10。驱动111读取记录在诸如安装的磁盘、光盘、磁光盘和半导体存储器之 类的可移动存储介质120中的信息，并将信息输出给RAM 103。通信设备112是由例如用于连接到通信网络50的通信设备组成的通信接口。通 信设备112可以是无线LAN(局域网)可兼容通信设备、无线USB可兼容通信设备或者通过 线路执行通信的有线通信设备。[3]显示控制装置的功能配置在上文中，描述了显示控制装置10的硬件配置。接下来，将参考图2描述显示控 制装置10的功能配置。如图2所示，显示控制装置10主要包括拾取图像获取单元152、 图像处理单元154、检测单元158、显示控制单元160和视频/音频处理单元162。拾取图像获取单元152具有获取观看显示图像的观看者的拾取图像的功能。观看 者的拾取图像由成像设备20来拾取，并被提供给拾取图像获取单元152。在本实施例中，成 像设备20与显示控制装置10相分离，但是本发明不限于这样的例子，而是成像设备20和显示控制装置10可以被配置为集成的装置。在由成像设备20对观看者成像之后，变得能 够检测观看者和显示控制装置10之间的距离以及检测诸如脸部方位和视线之类的观看者 的位置和操作。成像设备20可以被提供在显示设备30的外框架(frame)部分中，以更准 确地检测观看者的操作。拾取图像获取单元152可以以预定间隔或根据用户操作等获取拾取图像。例如， 拾取图像获取单元152可以在显示显示图像的显示设备30由用户操作打开之后以预定间 隔获取拾取图像。可替代地，可以在检测到用户操作时获取观看者的拾取图像。拾取图像 获取单元152将观看者的拾取图像提供给图像处理单元154。图像处理单元154具有从由拾取图像获取单元152提供的观看者的拾取图像中提 取观看者的特征点的功能。例如，观看者的特征点是观看者的位置和距离、脸部方位或者视 线。图像处理单元154包括观看位置处理单元155、视线位置处理单元156和脸部方向处 理单元157。观看位置处理单元155具有从观看者的拾取图像中提取代表显示设备30和观看 者之间的位置关系或距离的特征点的功能。观看位置处理单元155使用观看者身体的外形 图像等从观看者自身的拾取图像中提取代表显示设备30和观看者之间的位置关系或距离 的特征点。例如，可以提取脸部区域相对于观看者整个图像的大小作为特征点以从该特征 点计算距离。可替代地，观看位置处理单元155可以通过使用利用了红外线辐射等的距离 传感器来提取代表显示设备30和观看者之间的位置关系或距离的特征点。视线位置处理单元156具有从观看者的拾取图像中提取代表观看者的视线位置 的特征点的功能。视线位置处理单元156可以提取例如观看者眼睛的部分图像作为用于识 别视线位置的特征点。视线位置处理单元156从观看者眼睛的部分图像中计算视线在图像 上的坐标。脸部方向处理单元157具有从观看者的拾取图像中提取代表观看者的脸部方向 的特征点的功能。例如，脸部方向处理单元157可以识别图像中的脸部区域的位置来提取 脸部区域的皮肤颜色或其眼睛、嘴巴等的轮廓，作为用于识别脸部方向的特征点。图像处理单元154将由观看位置处理单元155、视线位置处理单元156、和脸部方 向处理单元157提供的相应特征点提供给检测单元158。检测单元158具有从由图像处理 单元154提供的、基于观看者的拾取图像的特征点来检测与观看者的操作有关的信息的功 能。例如，与观看者的操作有关的信息是观看者的位置信息或距离信息、关于脸部方位的信 息或者关于视线的信息。例如，检测单元158从由观看位置处理单元155提取的、脸部区域相对于整个图像 的大小来计算观看者的位置信息或距离信息。检测单元158还从由视线位置处理单元156 提取的观看者眼睛的部分图像来计算视线位置在图像上的坐标。检测单元158还从由脸部 方向处理单元157提取的脸部区域的皮肤颜色或其眼睛、嘴巴等的轮廓来识别观看者的脸 部方向。检测单元158可以从由观看位置处理单元155提取的信息和由视线位置处理单元 156提取的信息来计算位置信息或距离信息。检测单元158还可以从由观看位置处理单元 155提取的信息和由脸部方向处理单元157提取的信息来计算观看者的脸部方向。检测单 元158将与所检测的观看者的操作有关的信息提供给显示控制单元160。显示控制单元160具有根据由检测单元158检测的观看者的观看距离来改变显示图像的大小、同时将由检测单元158检测的观看者的观看位置与显示图像的显示位置相关 联的功能。例如，当在显示屏幕上显示多个显示图像时，显示控制单元160将多个显示图像 中的一个显示图像的显示位置与观看者的观看位置相关联，以使显示屏幕将其他显示图像 显示在该一个显示图像的周围。显示控制单元160还根据观看者的观看距离来改变多个显 示图像的显示数量。此外，显示控制单元160具有根据观看者的观看距离来改变多个显示图像的显示 数量、同时将多个显示图像中的一个显示图像的显示位置与观看者的观看位置相关联的功 能。显示控制单元160还根据由检测单元158检测的观看者的视线位置来选择和显示多个 显示图像中的一个显示图像。例如，当在显示屏幕上显示多个缩略图时，如果观看者的视线 位置与多个缩略图之一重合，则可以选择并在全屏幕上显示该缩略图。可替代地，可以再现 与观看者的视线位置重合的该缩略图。如果由检测单元158检测观看者的脸部方向，则可以根据观看者的脸部方向来使 在显示屏幕上显示的多个缩略图滚动(scroll)。例如，如果观看者的脸部方向是左侧方向， 则可以使多个缩略图在左侧方向上滚动。在该情况下，使位于可显示区域之外也就是显示 屏幕之外的缩略图擦除，并使得与所显示的缩略图不同的其他缩略图依次显示在左侧。将参考图3至7描述由显示控制单元160进行的缩略图显示。首先，将参考图3A 和3B描述由显示控制单元160控制的显示图像的显示位置和显示数量。下面，将描述缩小 多个显示图像并将其显示在一个屏幕中的缩略图显示。图3A是图示观看者的距离和缩略图显示之间的关系的说明性视图。如图3A所示， 假设观看者40位于显示屏幕301的中央、并逐渐靠近显示屏幕301。在显示屏幕301上，正 在再现观看者40观看的内容。在显示屏幕301上，在全屏幕上显示正在再现的内容。随着观看者40靠近显示屏幕301，显示控制单元160将显示屏幕301显示为显示 屏幕302那样。也就是，缩小正在显示屏幕301上再现的内容的大小，并将其他内容与关注 的内容一起显示(显示屏幕302)。根据由检测单元158检测的观看者的位置来决定正由观 看者40观看的内容的显示位置。根据由检测单元158检测的观看者和显示设备30之间的 距离来决定在显示屏幕302上显示的缩略图的数量和大小。在图3A中，观看者40位于显示屏幕301的中央，从而将正在观看的内容布置在显 示屏幕302下部的中央。此外，在显示屏幕302上显示三个缩略图。例如，如果在显示屏幕 302上显示的缩略图代表运动图像，则在其显示区域被缩小之后，可以不改变地再现正在观 看的内容，而其他内容为静止图像的缩略图。随着观看者40进一步靠近显示屏幕302，正由观看者40观看的缩略图被缩小并被 布置在中央，并且在显示屏幕303上显示九个缩略图。随着观看者40进一步靠近显示屏幕 303，正由观看者40观看的缩略图被缩小并被布置在中央，并且在显示屏幕304上显示15 个缩略图。如上所述，根据观看者的位置来决定正由观看者40观看的缩略图的显示位置， 以及根据观看者40和显示设备30之间的距离来决定缩略图的显示数量和大小。在图3B中假设观看者40位于显示屏幕311的左侧。同样在该情况下，根据由检 测单元158检测的观看者的位置来决定正由观看者40观看的内容的显示位置。也就是，如 果观看者40靠近显示屏幕311、同时位于显示屏幕311的左侧，则缩小正在显示屏幕311上 再现的内容的显示大小，并将其他内容与关注的内容一起显示。
8
如上所述，观看者40位于显示屏幕311的左侧，从而如显示屏幕312所示，随着观 看者40靠近显示屏幕311，显示三个缩略图，正在观看的内容被布置在左侧。随着观看者 40进一步靠近显示屏幕312，正由观看者40观看的缩略图被布置在左侧的中央，并在显示 屏幕313上显示九个缩略图。随着观看者40进一步靠近显示屏幕313，正由观看者40观看 的缩略图被缩小并被布置在左侧的中央，并且在显示屏幕314上显示15个缩略图。将参考图4和5描述缩略图的显示数量和大小。图4是图示缩略图的显示数量和 大小的说明性视图。例如，如图4所示，将描述一组距离阈值以10为增量范围从0到100 的情况。作为该组距离阈值，例如，将0至9设置为hl，10至19设置为h2，20至29设置为 h3，30至39设置为h4，40至49设置为h5，50至59设置为h6，60至69设置为h7，70至79 设置为h8，80至89设置为h9，以及90至99设置为hlO。如果由检测单元158检测的观看 者40和显示设备30之间的距离是65，则将该距离信息与阈值信息相比较来确定h7的阈值 信息是可适用的。如图5所示，如果距离信息、显示数量和大小是相关联的，则可以根据距离信息来 决定要在显示屏幕上显示的缩略图的显示数量和大小。图5是图示缩略图的显示数量和大 小相对于距离的映射例子的说明性视图。例如，如果距离在60和70之间，则“h7”的距离 信息(号)适用，使得缩略图的显示数量被决定为五以，及其大小为160X160。将在下面描 述决定缩略图的显示数量和大小的方法。接下来，将参考图6描述由显示控制单元160控制的、根据观看者的视线位置的缩 略图的显示。如图6所示，假设观看者的视线41与在显示屏幕321上显示的多个缩略图中 由箭头指示的缩略图相重合。然后，在显示屏幕322上，以指示与观看者的视线41相重合 的缩略图被选择的方式来显示该缩略图。在显示屏幕322上，双显示框可以用于所选择的缩略图，或者可以布置与其他缩 略图的颜色不同的颜色来使缩略图选择在视觉上可识别。可替代地，可以通过箭头等来使 缩略图选择在视觉上可识别。接着，如果观看者的视线41与所选择的缩略图相重合了预定 时间，则使该缩略图在全屏幕上显示以再现内容(显示屏幕324)。接下来，将参考图7描述由显示控制单元160控制的、根据观看者的脸部方向的缩 略图的显示。如图7所示，在显示屏幕311上显示可在显示屏幕中显示的尽可能多的多个 缩略图。接着，如果检测到观看者的脸部方向42在左侧，在如显示屏幕332所示，则在作为 与观看者的脸部方向42相反的方向的右侧方向上滚动缩略图。虽然在图7中使缩略图根 据观看者的脸部方向滚动，但是还可以使缩略图根据观看者的视线方向而滚动。可替代地， 如显示屏幕333所示，当显示了所有要被显示的缩略图时，可以停止滚动。可替代地，当观 看者面朝前方时，可以停止滚动。在上文中，描述了由显示控制单元160进行的缩略图的显
7J\ ο返回图2，将继续显示控制装置10的功能配置的描述。显示控制单元160将诸如缩 略图的数量和大小以及缩略图位置之类的显示控制信息提供给视频/音频处理单元162。 视频/音频处理单元162包括视频/音频接收单元163、视频信号处理单元164、视频存储 器165、视频缩放器(scaler) 166和音频处理单元167。在视频/音频接收单元163接收视 频和音频之后，放大并检测所接收的信号以在分别输出到视频信号处理单元164和音频处 理单元167之前将该信号分离为视频信号和音频信号。
视频信号处理单元164调节并编码从视频/音频接收单元163输出的视频信号， 并将所调节的视频信号输出到视频存储器165。音频处理单元167调节并编码从视频/音 频接收单元163输出的音频信号。再被输出到显示设备30之前，由视频缩放器166将输出 到视频存储器165的视频信号调节到由显示控制单元160命令的或根据显示器大小的视频 大小。[4]显示控制装置中的图像显示处理的细节在上文中，描述了显示控制装置10的功能配置。接下来，将参考图8至10描述显 示控制装置10中的图像显示处理的细节。图8是示出根据观看者的位置的图像显示处理 的流程图。如图8所示，首先由观看位置处理单元155识别由成像设备20成像的观看者的 脸部大小，并由检测单元158测量观看者和显示设备30之间的距离(S102)。在步骤S102 中基于观看者的脸部大小来测量距离，但是本发明不限于这样的例子，并且可以基于诸如 观看者的鼻子之类的不同于脸部的其他部位的大小来测量距离。接下来，显示控制单元160将在步骤S102中测量的距离信息与预登记 (pre-registered)的阈值信息相比较(S104)。更具体地，显示控制单元160将阈值信息N 与观看距离的大小相比较。如果观看距离大于阈值N，则增加阈值N的值(S106)。例如，假 设在步骤S104中计算的距离是10，并且预登记的阈值组以10为增量范围从0到100。在 该情况下，首先在步骤S104中比较阈值0和距离10。因为在步骤S104的比较中距离10大 于阈值0，所以将阈值0加1。在该情况下，当阈值变为10时执行步骤S108中的处理。然后，显示控制单元160确定步骤S102中测量的观看距离是否与上次测量的观看 距离相同(S108)。如果在步骤S108中观看距离与上次测量的观看距离的测量值相同，则终 止处理。如果显示控制单元160在步骤S108中确定观看距离与上次测量的观看距离的测 量值不同，则根据如图5所示的阈值和显示数量之间的映射来决定图像的显示数量和大小 (SllO)。接下来，显示控制单元160确定是否正在再现内容(S112)。如果显示控制单元160 在步骤S112中确定正在再现内容，则测量观看者的位置(S114)。步骤S114中的位置测量 测量观看者相对于显示设备30的右侧和左侧位置。接着，缩小并显示正由观看者观看的内 容，然后根据观看者的位置来移动内容(S116)。例如，如果观看者相对于显示设备30位于右侧，则将被缩小的内容移动到右侧。 如果观看者相对于显示设备30位于左侧，则将被缩小的内容移动到左侧。根据步骤SllO 中决定的图像大小来改变步骤S116中的内容的减小比例。根据步骤SllO中决定的图像的显示数量来将内容的移动位置布置在最佳位置 处。例如，如图3B所示，当观看者位于左侧时，根据显示数量的最佳位置是将正在再现的内 容布置在左侧，如显示屏幕312所示。如果显示数量增加，如显示屏幕313和314所示，则 将正在再现的内容布置在左侧的中央。然后，以当在步骤SllO中决定的观看距离是阈值N-I以上且阈值N以下时的显示 数量和大小来显示多个缩略图(S118)。如果在步骤S118中在显示屏幕上显示的内容段的 数量是内容段的最大数量，则可以停止正在再现的内容。这是因为如果在显示屏幕上显示 大量段的内容且每段内容的大小变得最小，则即便再现内容，内容的细节可能在视觉上也 是不可识别的。
10
从而，根据本实施例，变得能够根据观看者和显示设备30之间的距离或其位置来 改变缩略图的显示数量和大小，或者能够将正被再现的缩略图布置在观看者可以容易看到 的位置。接下来，将参考图9描述根据观看者的视线的图像显示处理的细节。图9是示出 根据观看者的视线的图像显示处理的流程图。如图9所示，首先确定是否在显示屏幕上显 示了任何缩略图(S202)。如果在步骤S202中确定显示了缩略图，则检测单元158根据由视 线位置处理单元156提取的眼睛的部分图像来计算视线位置在屏幕上的坐标(S204)。然后，确定在步骤S204中计算的观看者的视线位置是否与正在显示的任何缩略 图的位置相重合(S206)。如果在步骤S206中确定观看者的视线位置位于正在显示的缩略 图之一上，则确定视线位置是否与指针(cursor)的上次显示位置相同(S210)。步骤S210 中的指针显示是使缩略图的选择可识别的显示。将在下面详细描述当在步骤S206中确定 观看者的视线位置没有位于正在显示的任何缩略图上时的情况。然后，如果在步骤S210中确定视线位置与指针的上次显示位置相同，则确定指针 显示是否持续了固定时间(S212)。如果在步骤S210中确定视线位置与指针的上次显示位 置不同，则针对在当前观看位置的坐标处的缩略图来进行指针显示(S208)。然后，重复步骤 S202至S210中的处理。如果在步骤S212中确定指针显示持续了固定时间，则选择与位于指针显示处的 缩略图相关的内容(S214)。在步骤S214中，可以以全屏幕显示来再现与所选缩略图相关的 内容。从而，可以使观看者期望再现的内容自动再现而不使用任何远程控制。如果在步骤S206中确定观看者的视线位置与正在显示的任何缩略图不相重合， 则接下来确定当前是否进行了指针显示(S216)。如果在步骤S216中确定当前进行了指针 显示，则删除有关的指针显示(S218)。当在步骤S206中观看者的视线位置与任何缩略图 不相重合时，观看者没有看缩略图，从而删除用于选择一个缩略图的指针显示。如果在步骤 S216中确定当前没有进行指针显示，则执行步骤S220中的处理。然后，确定是否经过了固定时间(S220)。如果在确定观看者没有观看显示为缩略 图的内容之后、在步骤S220中经过了固定时间，则删除缩略图的列表显示，并在全屏幕上 再现当前正在观看的内容或者在显示缩略图之前观看的内容(S222)。如果在步骤S220中 没有经过固定时间，则处理返回到步骤S202。在上文中，详细描述了根据观看者的视线的图像显示处理。接下来，将参考图10 描述根据观看者的脸部方向的图像显示处理的细节。图10是示出根据观看者的脸部方向 的图像显示处理的流程图。如图10所示，确定是否在全屏幕上显示缩略图，也就是显示可 在显示屏幕中显示的最大数量的缩略图(S302)。在步骤S302中在全屏幕中显示缩略图的 情况是在观看者靠近显示屏幕时、在显示屏幕上显示的缩略图数量增加、并且最后显示可 在显示屏幕中显示的最大数量的缩略图的情况。如果在步骤S302中确定在全屏幕中显示缩略图，则检测单元158测量观看者的脸 部方向(S304)。在步骤S304中检测单元158根据由脸部方向处理单元157提取的图像中 的脸部区域的皮肤颜色或其眼睛、嘴巴等的轮廓来计算脸部方向。然后，确定步骤S304中 测量的脸部方向是否面向前方(S306)。如果在步骤S306中确定脸部方向不是面向前方，则在与脸部方向相反的方向上滚动缩略图(S308)。例如，如果在步骤S308中观看者的脸部方向是右侧方向，则使缩略图 在左侧方向上滚动。如果观看者的脸部方向是左侧方向，则使缩略图在右侧方向上滚动。使缩略图滚动意味着平移(translate)缩略图，结果，移出显示屏幕的可显示区 域的缩略像被删除，以将新的缩略图显示在通过缩略图的平移而创建的空白空间中。 从而，即便难以将所有可显示的缩略图显示在显示屏幕中，仍可以在视觉上连续识别新的 缩略图而不执行麻烦的远程控制操作。在上文中，详细描述了根据观看者的脸部方向的图像显示处理。如上所述，根据本 实施例中的显示控制装置10，可以基于观看显示图像的观看者的拾取图像来检测观看者的 观看位置和与显示图像的观看距离，并且可以根据观看距离来改变显示图像的大小，同时 将所检测的观看者的观看位置与显示图像的显示位置相关联。从而，可以根据观看者的距 离或位置来使诸如缩略图之类的显示图像恰当显示。如果存在正在再现的内容，可以使显示屏幕进行其他内容的缩略图像显示而不停 止其再现。此外，当使显示屏幕进行其他内容的缩略图显示时，可以根据观看者的位置来调 节缩略图的位置或者可以缩小缩略图。此外，可以根据观看者的位置来调节缩略图显示而无需观看者的远程控制操作。 此外，通过识别观看者的脸部方位或视线，变得能够改变缩略图显示的位置或者选择与缩 略图相关的内容。当观看者远离显示屏幕移动时，可以通过放大被缩小的缩略图显示来改 善缩略图的可视性而不用执行远程控制操作。还变得能够根据观看者的位置或其视线或脸部方位来改变缩略图的显示数量或 大小或者再现内容。因此，可以根据观看者的位置或其视线或脸部方位来恰当控制图像的 显示而不用手的复杂操作或夸张的手势。本领域技术人员应该理解的是，取决于设计要求和其他因素，各种各样的修改、组 合、子组合和替代可以发生，只要它们在所附权利要求或其等效物的范围内即可。例如，在这里，不需要以流程图所描述的顺序来按时间顺序处理显示控制装置10 的处理中的每个步骤。也就是，显示控制装置10的处理中的每个步骤可以包括并行或单独 执行的处理(例如，并行处理或对象的处理)。而且，可以创建使被包含在显示控制装置10中的诸如CPU、R0M和RAM之类的硬件 呈现与上述显示控制装置10的每个单元的功能等效的功能的计算机程序。还提供了使得 存储计算机程序的存储介质。本申请包含与2009年7月3日提交于日本专利局的日本优先权专利申请JP 2009-159149中公开的主题相关的主题，其全部内容通过引用合并于此。
1权利要求
一种显示控制装置，包括拾取图像获取单元，其获取观看显示图像的观看者的拾取图像；检测单元，其基于由所述拾取图像获取单元获取的观看者的拾取图像来检测观看者相对于显示图像的观看位置和观看距离；以及显示控制单元，其根据由所述检测单元检测的观看者的观看距离来改变显示图像的大小，同时将由所述检测单元检测的观看者的观看位置与显示图像的显示位置相关联。
2.根据权利要求1所述的显示控制装置，其中所述显示控制单元使显示屏幕显示多个 显示图像，以及将所述多个显示图像中的一个显示图像的显示位置与观看者的观看位置相关联，以使 所述显示屏幕将其他显示图像显示在所述一个显示图像周围。
3.根据权利要求2所述的显示控制装置，其中所述显示控制单元根据观看者的观看距 离来控制所述多个显示图像的显示数量。
4.根据权利要求3所述的显示控制装置，其中所述显示控制单元根据观看者的观看距 离来改变所述多个显示图像的显示数量，同时将所述多个显示图像中的一个显示图像的显 示位置与观看者的观看位置相关联。
5.根据权利要求2所述的显示控制装置，其中所述一个显示图像是正被再现的内容。
6.根据权利要求2所述的显示控制装置，其中所述一个显示图像是在所述显示屏幕的 全屏幕上显示的显示图像。
7.根据权利要求2所述的显示控制装置，其中所述检测单元基于所述拾取图像获取单 元所获取的观看者的拾取图像来检测观看者的视线位置，以及所述显示控制单元根据所述检测单元检测的观看者的视线位置而从所述多个显示图 像中选择一个显示图像并显示。
8.根据权利要求7所述的显示控制装置，其中如果根据观看者的视线位置选择所述一 个显示图像并显示了预定时间或更长，则所述显示控制单元使所述显示屏幕再现与所述一 个显示图像相关的内容。
9.根据权利要求8所述的显示控制装置，其中所述检测单元基于所述拾取图像获取单 元所获取的观看者的拾取图像来检测观看者的脸部方向，以及所述显示控制单元根据观看者的脸部方向或观看者的视线位置而使显示在所述显示 屏幕上的所述多个显示图像滚动。
10.根据权利要求2所述的显示控制装置，其中所述显示控制单元在使所述多个显示 图像在水平方向上滚动之后删除位于所述显示屏幕的可显示区域之外的显示图像，并使所 述显示屏幕将不同于所述多个显示图像的其他显示图像显示在所述显示屏幕的没有显示 所述多个显示图像的可显示区域中。
11.一种显示控制方法，包括如下步骤获取观看显示图像的观看者的拾取图像；基于所获取的观看者的拾取图像，检测观看者相对于所述显示图像的观看位置和观看 距离；以及根据所检测的观看者的观看距离来改变所述显示图像的大小，同时将所检测的观看者 的观看位置与所述显示图像的显示位置相关联。
全文摘要
提供了一种显示控制装置，包括拾取图像获取单元，其获取观看显示图像的观看者的拾取图像；检测单元，其基于由所述拾取图像获取单元获取的观看者的拾取图像来检测观看者相对于显示图像的观看位置和观看距离；以及显示控制单元，其根据由所述检测单元检测的观看者的观看距离来改变显示图像的大小，同时将由所述检测单元检测的观看者的观看位置与显示图像的显示位置相关联。
文档编号G09G5/00GK101944349SQ201010215438
公开日2011年1月12日 申请日期2010年6月24日 优先权日2009年7月3日
发明者村上智之 申请人:索尼公司