数字相框、信息处理系统和控制方法

专利名称：数字相框、信息处理系统和控制方法
技术领域：
本发明涉及数字相框、信息处理系统和控制方法等。
背景技术：
近年来，作为能够轻易地再现由数字静态照相机等数字照相机拍摄 的图像的装置，出现了数字相框。该数字相框是将相架的装嵌照片的部 分置换为液晶显示器的形式的装置，进行经由存储卡或通信装置读入的 数字图像数据(电子照片)的再现处理。
作为数字相框的现有技术，例如有专利文献1所公开的技术。在该 现有技术中，使作为数字相框的数字相架具备电话线路连接装置，从而 实现相架和有线或无线的电话线路之间的传送路径的形成。
但是，在此前的数字相框中，仅具有简单地再现由数字照相机等拍 摄的图像的功能，无法进行反映出用户状态等的显示控制。因此，再现 图像是单调的，无法向用户显示多样的图像。
专利文献1日本特开2000-324473号公报

发明内容
根据本发明的几个方式，能够提供能够实现反映出用户状态的显示 控制的数字相框、信息处理系统和控制方法等。
本发明的一个方式涉及一种数字相框，该数字相框包含显示部， 其显示图像；显示控制部，其进行所述显示部的显示控制；检测信息取 得部，其取得由用户检测传感器检测出的检测信息；以及用户状态判断 部，其根据所取得的所述检测信息，判断用户和所述显示部的位置关系、 用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的 至少一个，所述显示控制部根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一 个，进行改变在所述显示部上显示的图像的显示方式的显示控制。
根据本发明的一个方式，取得由用户检测传感器检测出的检测信息， 根据检测信息来判断用户状态。然后，根据与用户的位置关系、用户的 视觉辨认状态、或用户是否存在于检测范围内等，改变在显示部上显示 的图像的显示方式。这样，在数字相框的显示部上显示反映出用户的位 置关系等用户状态的图像，能够提供此前没有的类型的数字相框。
并且，在本发明的一个方式中，所述用户状态判断部也可以判断用 户和所述显示部之间的距离，来作为用户和所述显示部的所述位置关系， 所述显示控制部根据用户和所述显示部之间的距离，进行改变在所述显 示部上显示的图像的显示方式的显示控制。
这样，根据与用户的距离的大小，来改变显示图像的显示方式，能 够进行反映出距离的多样的图像表现。
并且，在本发明的一个方式中，所述显示控制部也可以迸行用户和 所述显示部之间的距离越近，在所述显示部上显示的图像的详细度越高 的显示控制。
这样，在与用户的距离近的情况下，能够向用户提示包含更多信息 的图像或精细的图像。
并且，在本发明的一个方式中，所述显示控制部也可以进行用户和 所述显示部之间的距离越近，在所述显示部上显示的图像的画面分割数 越多的显示控制。
这样，在与用户的距离近的情况下，增多图像的画面分割数，从而 能够向用户提示包含更多信息的图像或多样的图像。
并且，在本发明的一个方式中，所述显示控制部也可以进行用户和 所述显示部之间的距离越近，在所述显示部上显示的文字的尺寸越小的 显示控制。
这样，在与用户的距离近的情况下，减小文字的尺寸，从而能够提 示显示了更多文字的图像等。
并且，在本发明的一个方式中，所述数字相框也可以包含显示模式切换部，该显示模式切换部根据用户和所述显示部之间的距离，切换所 述显示部的显示模式。
这样，通过切换显示模式这种简单的处理，能够根据与用户的距离 来改变显示图像的显示方式。
并且，在本发明的一个方式中，也可以在用户和所述显示部之间的 距离靠近的情况下，所述显示模式切换部将所述显示模式从简略显示模 式切换为详细显示模式。
这样，在与用户的距离靠近的情况下，通过从简略显示模式切换为 详细显示模式这种简单的控制，能够实现从简略图像到详细图像的显示 切换。
并且，在本发明的一个方式中，所述显示模式切换部也可以在所述 显示模式从所述简略显示模式切换为所述详细显示模式后，等待解除所 述详细显示模式达规定时间的期间。
这样，能够有效防止在显示模式切换为详细显示模式后立即解除详 细显示模式、频繁切换显示模式的情况等。
并且，在本发明的一个方式中，所述用户检测传感器也可以是对用 户进行摄像的摄像传感器，所述用户状态判断部根据来自所述摄像传感 器的摄像信息，检测用户的面部区域，根据所检测出的所述面部区域的 尺寸，判断用户和所述显示部之间的距离。
这样，仅检测面部区域的尺寸就能够判断与用户的距离，并且，能 够确保用户的视线朝向显示部的方向。
并且，在本发明的一个方式中，所述用户检测传感器也可以是对用 户进行摄像的摄像传感器，所述用户状态判断部通过针对用户的自动对 焦处理，判断用户和所述显示部之间的距离。
这样，利用已有的自动对焦，能够判断与用户的距离或用户的存在等。
并且，在本发明的一个方式中，所述用户检测传感器也可以是超声 波传感器，所述用户状态判断部通过所述超声波传感器，来判断用户和 所述显示部之间的距离。并且，在本发明的一个方式中，所述用户状态判断部也可以判断是 否是用户正在注视所述显示部的状态，来作为用户的所述视觉辨认状态， 所述显示控制部根据用户是否正在注视所述显示部，进行改变在所述显 示部上显示的图像的显示方式的显示控制。
这样，根据用户是否正在注视，来改变显示图像的显示方式，能够 进行反映出用户的注视状态的多样的图像表现。
并且，在本发明的一个方式中，所述显示控制部也可以根据用户注 视所述显示部的注视次数信息，进行改变在所述显示部上显示的图像的 显示方式的显示控制。
这样，不仅反映出是否正在注视，还反映出注视次数信息，来改变 显示图像的显示方式，因此，能够实现更加智能的显示控制。
并且，在本发明的一个方式中，也可以是在规定时间内用户对第1 图像的注视次数大于等于规定次数的情况下，所述显示控制部进行切换 到与所述第1图像对应的注视用图像的切换控制。
这样，在规定时间内第1图像的注视次数大于等于规定次数的情况 下，能够在显示部上显示注视用图像。
并且，在本发明的一个方式中，所述显示控制部也可以根据规定时 间内用户对第1图像的注视次数信息，改变所述第1图像或所述第1图 像的关联图像的显示频度。
这样，例如在注视次数多的情况下，能够进行提高第1图像或其关 联图像的显示频度的控制。
并且，在本发明的一个方式中，也可以在判断为用户正在注视第1 图像的情况下，所述显示控制部进行切换到与所述第1图像对应的注视 用图像的切换控制。
这样，在用户注视第1图像的情况下，能够在显示部上显示注视用 图像。
并且，在本发明的一个方式中，也可以在判断为用户没有注视所述 显示部的情况下，所述显示控制部进行在所述显示部上滑动显示第1 第
N (N为大于等于2的整数)图像的控制，当在显示所述第1 第N图像中的第K (l^K^N)图像时判断为用户正在注视所述显示部的情况下， 所述显示控制部进行在所述显示部上显示所述第K图像的关联图像或详 细图像即注视用图像的控制。
这样，在用户注视第1 第N图像中的第K图像的情况下，能够显 示其关联图像或详细图像来作为注视用图像，能够显示用户感兴趣等的 图像的关联图像或详细图像。
并且，在本发明的一个方式中，所述用户状态判断部也可以判断用 户和所述显示部之间的距离，来作为用户和所述显示部的所述位置关系， 当在显示所述注视用图像时判断为用户靠近所述显示部的情况下，所述 显示控制部进行显示所述注视用图像的详细图像的控制。
这样，如果在显示注视用图像时用户靠近，则能够显示其详细图像， 能够向用户提示包含更多信息的图像或精细的图像。
并且，在本发明的一个方式中，也可以在判断为用户没有靠近所述 显示部的情况下，所述显示控制部进行在所述显示部上滑动显示第1 第 M (M为大于等于2的整数)注视用图像作为所述注视用图像的控制， 当在显示所述第1 第M注视用图像中的第L (1SLSM)注视用图像时 判断为用户靠近所述显示部的情况下，所述显示控制部进行在所述显示 部上显示所述第L注视用图像的详细图像的控制。
这样，在用户没有靠近显示部的情况下，滑动显示第1 第M注视 用图像，当用户靠近显示部时，显示此时正在显示的第L注视用图像的 详细图像。
并且，在本发明的一个方式中，所述用户检测传感器也可以是对用 户进行摄像的摄像传感器，所述用户状态判断部根据来自所述摄像传感 器的摄像信息，检测用户的面部区域，设定在内部包含所检测出的所述 面部区域、尺寸大于所述面部区域的计测区域，计测所述面部区域存在 于所述计测区域内的时间，根据所计测的时间，判断用户是否正在注视 所述显示部。
这样，能够有效活用面部检测来检测用户的注视状态。
并且，在本发明的一个方式中，所述数字相框也可以包含显示模式切换部，该显示模式切换部根据用户是否正在注视所述显示部，来切换 所述显示部的显示模式。
这样，通过切换显示模式这种简单的处理，能够实现与用户的注视 状态对应的显示方式的改变。
并且，在本发明的一个方式中，所述显示模式切换部也可以在所述 显示模式切换为注视模式后，等待解除所述注视模式达规定时间的期间。
这样，能够有效防止在显示模式切换为注视模式后立即解除注视模 式、频繁切换显示模式的情况等。
并且，在本发明的一个方式中，所述用户状态判断部也可以判断用 户是否存在于所述检测范围内，在判断为用户存在于所述检测范围内的 情况下，所述显示控制部进行接通所述显示部的显示的显示控制。
这样，在用户存在于检测范围内的情况下，才开始接通显示部，所 以能够实现省电等。
并且，在本发明的一个方式中，所述用户状态判断部也可以在所述 显示部的显示接通后，判断是否是所述显示部进入用户的视野范围内的 状态，来作为用户的所述视觉辨认状态，在判断为所述显示部进入用户 的视野范围内的情况下，所述显示控制部进行在所述显示部上滑动显示
第1 第N图像的控制。
这样，在显示部接通后，在显示部进入用户的视野范围内的情况下， 能够滑动显示第1 第N图像，例如能够进行用户登记的图像等的滑动 显7K。
并且，本发明的另一方式涉及一种信息处理系统，该信息处理系统 包含显示指示部，其进行在数字相框的显示部上显示的图像的显示指 示；检测信息取得部，其取得由用户检测传感器检测出的检测信息；以 及用户状态判断部，其根据所取得的所述检测信息，判断用户和所述显 示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存 在于检测范围内的至少一个，所述显示指示部根据用户和所述显示部的 所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检 测范围内的至少一个，进行改变在所述显示部上显示的图像的显示方式的显示指示。
并且，本发明的又一方式涉及一种数字相框的控制方法，取得由用 户检测传感器检测出的检测信息，根据所取得的所述检测信息，判断用 户和数字相框的显示部的位置关系、用户对所述显示部的视觉辨认状态、 以及用户是否存在于检测范围内的至少一个，根据用户和所述显示部的 所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检 测范围内的至少一个，进行改变在所述显示部上显示的图像的显示方式 的显示控制。


图l (A)、图l (B)是示出数字相框的例子的图。 图2是本实施方式的数字相框的结构例。
图3 (A)、图3 (B)是根据距离来改变显示图像的详细度的手法的 说明图。
图4 (A)、图4 (B)是根据距离来改变显示图像的画面分割数的手 法的说明图。
图5 (A)、图5 (B)是用户和显示部的距离的检测手法的说明图。 图6 (A)、图6 (B)是根据用户是否正在注视显示部来改变显示图
像的显示方式的手法的说明图。
图7 (A)、图7 (B)是根据用户是否正在注视显示部来改变显示图
像的显示方式的手法的说明图。
图8 (A)、图8 (B)是根据用户是否正在注视显示部来改变显示图
像的显示方式的手法的说明图。
图9 (A) 图9 (C)是用户的注视状态的检测手法的说明图。
图IO是本实施方式的显示方式的切换手法的具体例。
图11是用于实现本实施方式的显示方式的切换手法的数据结构例。
图12是用于说明本实施方式的详细处理例的流程图。
图13是用于说明注视状态的检测处理的流程图。
图14是本实施方式的第1变形例。图15是家用传感器的设置例。
图16是本实施方式的第2变形例。 标号说明
200:服务器；202:处理部；204:检测信息取得部；205:传送部； 206:用户状态判断部；216:显示模式切换部；218:显示指示部；220: 存储部；222:内容信息存储部；224:检测信息存储部；226:用户状态 存储部；228:切换标志存储部；238:通信部；250:用户检测传感器(家 用传感器)；260:操作部；300:数字相框；302:处理部；304:检测信 息取得部；306:用户状态判断部；307:位置关系判断部；308:视觉辨 认状态判断部；309:用户存在判断部；316:显示模式切换部；318:显 示控制部；320:存储部；322:内容信息存储部；324:检测信息存储部； 326:用户状态存储部；328:切换标志存储部；330:信息存储介质；338: 通信部；340:显示部；350:用户检测传感器；360:操作部。
具体实施例方式
下面说明本实施方式。另外，下面说明的本实施方式不是不当地限 定权利要求所记载的本发明的内容。并且，并不是本实施方式中说明的 全部结构都是本发明的必需结构要件。
1.结构
图l (A)示出本实施方式的数字相框300 (数字相片播放器、图像 再现装置)的例子。图1 (A)是所谓的相架类型的数字相框的例子。该 数字相框300由用户设置在家中等任意场所。而且，执行数字图像数据 或音频数据等内容信息的再现处理(图像再现、音频再现)。例如，即使 没有用户的明确的再现指示，数字相框300也能够自动再现图像等内容 信息(媒体信息)。例如，自动执行照片的幻灯放映或进行影像的自动再 现。
另外，虽然图1 (A)是相架类型的数字相框的例子，但是，例如图 1 (B)所示，也可以是壁挂类型。作为该壁挂类型的数字相框，例如可 以使用由电泳型显示器等实现的电子纸等。并且，也可以在数字相框300中设置内容信息的再现指示按钮等，或使用遥控器进行再现指示。
数字相框300可以具有例如SD卡等存储卡的接口。或者，可以具 有无线LAN、蓝牙等无线通信的接口、或USB等的有线通信接口。例如， 当用户在存储卡中保存内容信息并将其装到数字相框300的存储卡接口 上时，数字相框300执行保存在存储卡中的内容信息的自动再现(幻灯 放映等)。或者，当数字相框300通过无线通信或有线通信从外部接收到 内容信息时，执行该内容信息的再现处理(自动再现处理)。例如，在用 户所具有的数字照相机或便携电话机等便携型电子设备具有蓝牙等无线 功能的情况下，利用该无线功能从便携型电子设备向数字相框300传送 内容信息。于是，数字相框300执行所传送的内容信息的再现处理。
图2示出数字相框300的结构例。该数字相框300包含处理部302、 存储部320、通信部338、显示部340、用户检测传感器350、操作部360。 另外，能够进行省略其中一部分结构要素(例如通信部、操作部、用户 检测传感器)、或追加其他结构要素(例如扬声器)等各种变形并实施。 处理部302进行各种控制处理和运算处理。例如进行数字相框300 的各部的控制或进行整体的控制。能够通过各种处理器(CPU等)、ASIC (门阵列等)等硬件或存储在信息存储介质330中的程序等，实现该处 理部302的功能。
存储部320是处理部302、通信部338等的工作区域，能够通过RAM 等存储器或HDD (硬盘驱动器)等实现其功能。该存储部320包含存 储图像或音频等内容信息的内容信息存储部322、存储所取得的检测信息 的检测信息存储部324、存储所确定的用户状态的用户状态存储部326、 存储显示模式的切换标志的切换标志存储部328、以及存储用户的注视次 数信息的注视次数信息存储部329。
信息存储介质330 (能够由计算机读取的介质)存储程序和数据等， 能够通过存储卡或光盘等实现其功能。处理部302根据存储在信息存储 介质330中的程序(数据)来进行本实施方式的各种处理。g卩，在信息 存储介质330中存储用于使计算机(具有操作部、处理部、存储部、输 出部的装置)作为本实施方式的各部发挥功能的程序(用于使计算机执行各部的处理的程序)。
通信部338 (通信接口)通过无线或有线通信等与外部器件(例如 服务器、便携型电子设备)之间进行信息交换，能够通过通信用ASIC或 通信用处理器等硬件、通信用固件实现其功能。
显示部340用于显示作为内容信息的图像，例如能够通过液晶显示 器、使用有机EL等发光元件的显示器、电泳型显示器等来实现。
用户检测传感器350 (人体检测传感器)是用于检测用户(用户状 态等)的传感器，根据检测结果输出检测信息。在本实施方式中，将该 用户检测传感器350用作用于判断用户(人物)和显示部340 (显示画面、 数字相框)的位置关系、用户对显示部340的视觉辨认状态、以及用户 是否存在于检测范围内等的传感器。
作为用户检测传感器350，例如能够使用热电传感器(焦電七^廿) 等人感传感器。热电传感器是如下的传感器接收人等产生的红外线， 将红外线转换为热，利用元件的热电效应将该热转换为电荷。通过使用 该热电传感器，能够检测用户(人)是否存在于检测范围(检测区域) 内、以及存在于检测范围内的用户的动作等。
并且，作为用户检测传感器350，例如能够使用CCD、 CMOS传感 器等摄像传感器。摄像传感器(图像传感器)是将一维或二维的光学信 息转换为时间序列的电信号的光传感器。通过使用该摄像传感器，能够 检测用户是否存在于检测范围内、以及存在于检测范围内的用户的动作 等。并且，通过使用摄像传感器的面部检测(面部图像识别)，能够检测 用户和显示部340的距离、用户相对于显示部340的视线角度等位置关 系。或者，能够检测是否是显示部340进入用户的视野范围内的状态、 是否是用户正在注视显示部340的状态等用户的视觉辨认状态。或者， 还能够检测用户是否正在靠近等。
并且，作为用户检测传感器350，例如能够使用超声波传感器等距 离传感器。超声波距离传感器是如下的传感器射出超声波脉冲，接收 由人等反射的超声波脉冲，由此，根据其时间来测定距离。
另外，用户检测传感器350等传感器既可以是传感器器件本身，也可以是除了传感器器件以外还包含控制部和通信部等的传感器设备。并 且，检测信息既可以是从传感器直接得到的一次信息，也可以是对一次 信息进行加工处理(信息处理)而得到的二次信息。
并且，用户检测传感器350既可以直接安装在数字相框300上，也 可以利用家用传感器等作为用户检测传感器350。在将用户检测传感器 350安装在数字相框300上的情况下，如图l (A)所示，能够将用户检 测传感器350安装在数字相框300的例如框部分上。或者，也可以是使 用有线电缆等连接用户检测传感器350和数字相框300的方式。
操作部360用于供用户输入各种信息，例如能够通过操作按钮或遥 控装置等来实现。用户能够使用该操作部360进行用户登记，或进行自 身期望的再现内容(满意的图像)的登记等。
处理部302包含检测信息取得部304、用户状态判断部306、显示 模式切换部316、显示控制部318。另外，能够进行以下的各种变形并实 施省略这些中的一部分结构要素(例如用户状态判断部、显示模式切 换部)、或追加其他结构要素等。
检测信息取得部304进行取得由用户检测传感器350检测出的检测 信息的处理。例如，当通过用户检测传感器350检测出用户的状态等并 输出检测信息(摄像信息)时，检测信息取得部304取入该检测信息。 然后，所取入的检测信息被存储在存储部320的检测信息存储部324中。 另外，在使用家用传感器等外部传感器作为用户检测传感器350的情况 下，通信部338接收该检测信息，检测信息取得部304取得所接收的检 测信息。
用户状态判断部306根据由检测信息取得部304取得的检测信息来 判断用户状态等。例如，根据所取得的检测信息，判断用户(人物)和 显示部340的位置关系、用户对显示部340的视觉辨认状态、以及用户 是否存在于检测范围内的至少一个。然后，表示用户的位置关系、视觉 辨认状态、以及是否存在的用户状态信息被存储在用户状态存储部326 中。
这里，位置关系是用户和显示部340的距离、用户相对于显示部340的视线方向等，位置关系判断部307判断用户和显示部340的位置关系。 例如，判断用户和显示部340之间的距离(距离信息、距离参数)，作为 用户和显示部340的位置关系。
并且，视觉辨认状态是用户的视野范围的状态和注视状态等，具体 而言，是显示部340是否进入用户的视野范围(视见体积(view volume))、 用户是否正在注视显示部340等。视觉辨认状态判断部308判断该用户 的视觉辨认状态。例如，判断是否是用户正在注视显示部340的状态， 来作为用户的视觉辨认状态。并且，用户存在判断部309判断用户是否 存在于检测范围内。
另外，作为用户检测传感器350，假设设置有对用户进行摄像的摄 像传感器。该情况下，用户状态判断部306 (位置关系判断部)根据来自 摄像传感器的摄像信息，检测用户的面部区域(矩形的框区域)。然后， 根据所检测出的面部区域的尺寸，判断(估计)用户和显示部340之间 的距离。并且，用户状态判断部306设定在内部包含所检测出的面部区 域、尺寸大于面部区域的计测区域。即，设定与面部区域重叠的计测区 域。然后，计测面部区域存在于计测区域内的时间，根据所计测的时间， 判断用户是否正在注视显示部340。例如，在存在于计测区域内的时间大 于等于规定时间的情况下，判断为用户正在注视。
或者，如后所述，用户状态判断部306也可以通过针对用户的自动 对焦处理(自动对焦功能)，来判断用户和显示部340之间的距离。例如 在采用有源方式的情况下，在数字相框300等上设置射出红外线或超声 波的器件，并且，设置红外线或超声波的受光传感器作为用户检测传感 器350。然后，通过受光传感器检测来自用户的反射光，由此检测与用户 的距离等。并且，在采用无源方式的情况下，可以设置摄像传感器作为 用户检测传感器350，对摄像图像进行基于相位差检测方式或对比度检测 方式的图像处理，由此检测与用户的距离等。
显示模式切换部316进行显示模式的切换处理。例如，根据用户和 显示部340的位置关系、用户的视觉辨认状态等用户状态，来切换显示 模式。具体而言，显示模式切换部316根据用户和显示部340之间的距离，来切换显示部340的显示模式。例如，在用户和显示部340之间的 距离靠近的情况下(判断为靠近的情况下)，将显示模式从简略显示模式 切换为详细显示模式。并且，根据用户是否正在注视显示部340，来切换 显示部340的显示模式。
并且，显示模式切换部316在切换了显示模式后，进行等待解除切 换后的显示模式达规定时间的期间的处理。例如，在显示模式从简略显 示模式切换为详细显示模式后，等待解除详细显示模式达规定时间的期 间，然后切换为其他显示模式。或者，在显示模式从通常显示模式等切 换为注视模式后，等待解除注视模式达规定时间的期间，然后切换为其 他显示模式。
另外，使用存储在切换标志存储部328中的切换标志来进行显示模 式的切换。具体而言，通过用户状态判断部306判断出用户状态后，根 据该用户状态来设定显示模式的切换标志，将所设定的切换标志存储在 切换标志存储部328中。
并且，对存储在内容信息存储部322中的图像赋予标签。具体而言， 对各图像赋予详细显示模式用标签、简略显示模式用标签、注视模式用 标签、来客模式用标签等各种显示模式用标签、以及内容种类的标签等。 通过使用这样对各图像赋予的标签，在进行显示模式的切换时等，能够 从内容信息存储部322中读出与各种显示模式对应的图像，并将其显示 在显示部340上。
显示控制部318进行显示部340的显示控制。例如进行如下控制 根据存储在内容信息存储部322中的内容信息，在显示部340上显示图 像。具体而言，显示控制部318从切换标志存储部328中读出根据用户 状态而设定的显示模式切换标志。然后，从内容信息存储部322中读出 与所读出的切换标志相关联的图像、音频等内容信息。然后，进行用于 在显示部340上显示所读出的内容信息的图像的控制(对描绘缓冲器的 写入处理等)。
而且，在本实施方式中，显示控制部318进行如下显示控制根据 用户和显示部340的位置关系、用户的视觉辨认状态、以及用户是否存在于检测范围内的至少一个，改变在显示部340上显示的图像的显示方 式。
例如，用户状态判断部306判断用户和显示部340之间的距离，作 为用户和显示部340的位置关系。该情况下，显示控制部318根据用户 和显示部340之间的距离，改变在显示部340上显示的图像的显示方式。 例如，用户和显示部340之间的距离越近，则在显示部340上显示的图 像的详细度越高，或者在显示部340上显示的图像的画面分割数越多， 或者在显示部340上显示的文字的尺寸(字体尺寸)越小。
另外，显示控制部318也可以不需要根据距离本身来改变显示部340 的图像的显示方式，而根据与距离等效的参数(例如面部区域的尺寸等) 来改变显示方式。并且，改变显示方式是指将第1显示方式的第1图像 改变为第2显示方式的第2图像。例如，从第1图像改变为作为第1图 像的详细图像的第2图像，或改变为作为第1图像的简略图像的第2图 像，或改变为分割为多个画面的第2图像。
并且，用户状态判断部306判断用户是否正在注视显示部340，来 作为用户的视觉辨认状态。该情况下，显示控制部318根据用户是否正 在注视显示部340，来改变在显示部340上显示的图像的显示方式。具体 而言，在判断为用户正在注视第1图像的情况下，进行切换为与第1图 像对应的注视用图像的切换控制。例如，在判断为用户没有注视显示部 340的情况下，不进行从第1图像到作为第1图像的关联图像或详细图像 的注视用图像的切换控制。另一方面，在判断为正在注视的情况下，进 行从第1图像到注视用图像的切换控制。或者，在判断为用户没有注视 的情况下，在显示部340上滑动显示第1 第N(N为大于等于2的整数) 图像(顺序显示)。例如，这里，第1 第N图像分别是不同种类或不同 范畴的图像。另一方面，在显示第1 第N图像中的第K (KK$N)图 像时判断为用户正在注视显示部340 (第K图像)的情况下，在显示部 340上显示作为第K图像的关联图像或详细图像的注视用图像。然后， 在显示该注视用图像时判断为用户靠近显示部340的情况下，显示控制 部318显示注视用图像的详细图像。例如，在判断为用户没有靠近显示部340的情况下，在显示部340上滑动显示第1 第M (M为大于等于2 的整数)注视用图像作为注视用图像。另一方面，在显示第1 第M注 视用图像中的第L (15LSM)注视用图像时判断为用户靠近显示部340 的情况下，显示此时显示的第L注视用图像的详细图像。
另外，关联图像是作为与第l图像或第K图像的显示内容相关联的 图像而预先被对应起来的图像。并且，详细图像是作为更详细地表示第1 图像或第K图像的显示内容的图像而预先被对应起来的图像。这些关联 图像和详细图像例如在内容信息存储部322中被与第1图像或第K图像 预先对应起来。
并且，显示控制部318也可以根据用户注视显示部340的注视次数 信息(注视次数本身、或根据注视次数而变化的参数)，改变在显示部340 上显示的图像的显示方式。例如，用户状态判断部306对用户的注视次 数进行计数，作为注视次数信息存储在注视次数信息存储部329中。然 后，在规定时间内用户对第1图像的注视次数大于等于规定次数的情况 下，显示控制部318进行切换到与第1图像对应的注视用图像的切换控 制。例如，在用户的注视次数少于规定次数的情况下，不进行从第1图 像到作为第1图像的关联图像或详细图像的注视用图像的切换控制。另 一方面，在注视次数大于等于规定次数的情况下，进行从第1图像到注 视用图像的切换控制。或者，也可以根据在规定时间内对第1图像的注 视次数信息，改变第1图像或第1图像的关联图像的显示频度。例如， 在注视次数大于等于规定次数的情况下，提高显示频度。
并且，用户状态判断部306判断用户是否存在于用户检测传感器350 的检测范围内。例如，假设使用能够进行更宽范围检测的热电传感器来 检测是否存在用户。于是，在判断为用户存在于检测范围内的情况下， 显示控制部318接通显示部340的显示。例如，接通液晶显示器的后背 灯，使用户能够看到显示部340的图像。另外，在判断为用户不存在于 检测范围内的情况下，显示控制部318断开显示部340的显示。例如， 从通常模式切换为省电模式，节省消耗电力。
另外，例如，用户状态判断部306在显示部340的显示接通后，判断是否是显示部340进入用户的视野范围内的状态，来作为用户的视觉 辨认状态。于是，在判断为显示部340进入用户的视野范围内的情况下， 显示控制部318在显示部340上滑动显示第1 第N图像。这里，第1 第N图像例如是其显示内容的主题互不相同的图像。 2.与位置关系对应的显示方式的变化
在本实施方式中，根据用户和显示部340的位置关系，来改变显示 图像的显示方式。
例如，在图3 (A)、图3 (B)中，根据用户和显示部340 (数字相 框)之间的距离(广义上为位置关系)，来改变显示图像的详细度。具体 而言，在图3 (A)中，用户和显示部340之间的距离远，大于等于规定 距离。该情况下，例如作为天气预报的图像而显示简略图像(通常图像)。 即，使用大尺寸(字体)的文字或大尺寸的图标来显示天气预报的图像。 另外，使用用户检测传感器350来实现距离的检测。
另一方面，在图3 (B)中，用户和显示部340之间的距离近，小于 规定距离。即，用户对显示部340的显示内容感兴趣而靠近。该情况下， 作为天气预报的图像而显示详细图像。艮卩，与图3 (A)相比，在图3 (B) 中，使用小尺寸的文字等，显示告知详细天气预报的图像。
例如在图3 (A)中，为了向处于远处的用户告知容易观看的天气预 报，显示对天气预报进行了图标化后的简略图像。即，将图2的切换标 志存储部328的显示模式的切换标志设定为简略显示模式，显示简略图 像。另一方面，在图3 (B)中，针对认为是关心今天的天气而靠近的用 户，显示用于告知每小时的详细天气预报的详细图像。即，将切换标志 存储部328的显示模式的切换标志切换为详细显示模式，显示详细图像。
如上所述，根据用户和显示部340的距离，来改变显示图像的详细 度，由此能够实现与用户的距离对应的适当的图像显示。另外，在图3 (A)、图3 (B)中，根据与用户的距离，按2个阶段改变显示图像的详 细度，但是，详细度的变化也可以大于等于3个阶段。
在图4 (A)、图4 (B)中，根据用户和显示部340之间的距离(位 置关系)，来改变显示图像的画面分割数。具体而言，在图4 (A)中，用户和显示部340之间的距离远，大于等于规定距离。该情况下，显示 画面分割数例如为1的图像(未进行画面分割的图像)。
另一方面，在图4 (B)中，用户和显示部340之间的距离近，小于 规定距离。该情况下，显示画面分割数例如为4的图像。即，与图4(A) 相比，在图4 (B)中，显示画面分割数多的图像。并且，在图4 (A) 中，显示天气信息的图像，但是，在图4 (B)中，在第l、第2、第3、 第4分割画面上分别显示天气信息、股价信息、交通信息、日历信息的 图像。并且，在图4 (B)中，与图4 (A)相比，针对天气信息等显示 用于告知详细内容的图像，并且，文字尺寸也变小。
例如在图4 (A)中，为了使处于远处的用户容易观看，使用显示部 340的整个画面显示天气预报的图像。即，将切换标志存储部328的显示 模式的切换标志设定为1画面模式，显示画面分割数为1的图像。另一 方面，在图4 (B)中，由于用户靠近，因此对显示部340的画面进行分 割，不仅显示天气预报的图像，还显示股价信息、交通信息、日历的图 像。即，将切换标志存储部328的显示模式的切换标志切换为4画面模 式，显示画面分割数为4的图像。
如上所述，根据用户和显示部340的距离，来改变显示图像的画面 分割数，由此，能够实现与用户的距离对应的适当的图像显示。另外， 在图4 (A)、图4 (B)中，按2个阶段来切换画面分割数，但是，画面 分割数的切换也可以大于等于3个阶段。并且，画面的分割数也是任意 的。
并且，在根据与用户的距离来切换显示方式的情况下，该距离既可 以是用户和显示部340的直线距离，也可以是进深方向的距离(Z方向的 距离)。并且，该情况下的距离还包含在数学上与距离等效的参数(例如 后述的面部区域的面积等)，例如只要是根据距离的变化而变化的参数即 可。
并且，与用户的位置关系不限于距离，例如也可以是用户的视线方 向和显示部340的显示画面所成的角度等。
并且，在图3 (A) 图4 (B)中，作为显示方式的变化，例示出改变详细度、画面分割数和文字尺寸的情况，但是，本实施方式的显示 方式的变化不限于此。例如，也可以根据与用户的位置关系来显示关联
图像，接通/断开显示部340的显示，由此改变显示方式。
接着，使用图5 (A)、图5 (B)说明用户和显示部340之间的距离 (位置关系)的检测手法的一例。在图5 (A)、图5 (B)中，使用CCD、 CMOS传感器等摄像传感器(照相机)作为用户检测传感器350。然后， 根据来自摄像传感器的摄像信息，检测矩形的框区域即面部区域FAR， 求出所检测出的面部区域FAR的尺寸。然后，根据所求出的尺寸，判断 用户和显示部340之间的距离。
例如在图5 (A)中，面部区域FAR的尺寸小(小于等于规定尺寸)， 所以判断为与用户的距离远。因此，该情况下，在显示部340上显示图3 (A)、图4 (A)所示的图像。另一方面，在图5 (B)中，面部区域FAR 的尺寸大(大于规定尺寸)，所以判断为与用户的距离近。因此，该情况 下，在显示部340上显示图3 (B)、图4 (B)所示的图像。.
这里，作为面部区域的检测手法，考虑了各种手法。例如，为了进 行面部检测，需要在利用摄像传感器拍摄的摄像图像中，对存在面部的 场所和其他物体进行区分，切出面部区域。面部由眼睛、鼻子、嘴等构 成，它们的形状/位置关系虽然存在个人差异，但是，具有大致共同的特 征。因此，使用该共同的特征，从其他物体中识别出面部，并将其从画 面中切出。作为其线索，有肤色、面部的动作、形状、大小等。在使用 肤色的情况下，釆用如下手法将RGB数据转换为由色相、亮度、彩度 构成的HSV数据，来提取人的肌肤的色相。
或者，也可以制作由多个人的面部模式生成的平均面部模式来作为 面部模板。然后，在摄像图像的画面上扫描该面部模板，求出与摄像图 像之间的相关性，检测相关值最高的区域作为面部区域。
另外，为了提高检测精度，也可以准备多个面部模板作为辞典数据， 使用这些多个面部模板来检测面部区域。或者，也可以考虑眼睛、鼻子、 嘴的特征、它们的位置关系、面部中的对比度等信息来检测面部区域。 或者，也可以通过使用了神经网络模型的统计模式识别来检测面部区域。根据图5 (A)、图5 (B)的检测手法，具有如下优点通过面部区
域FAR的尺寸，不仅能够检测用户和显示部340的距离，还能够同时检 测用户是否正在观看显示部340。即，在用户的视线没有朝向显示部340 方的情况下，与面部模板的相关值低，所以，没有检测出面部区域FAR。 因此，检测出面部区域FAR与用户的视线朝向显示部340的方向、显示 部340进入用户的视野范围内是等效的。然后，在该状态下，如果检测 出面部区域FAR的尺寸，如图3 (A) 图4 (B)所示改变图像的显示 方式，则能够对正在观看显示部340的图像的用户显示与距离对应的适 当的图像。由此，能够提供此前没有的数字相框300。
另外，用户的检测手法不限于图5 (A)、图5 (B)的手法。例如， 也可以有效活用装配在一般的照相机或便携电话机的照相机等上的自动 对焦功能来检测用户。如果使用该自动对焦功能，则能够判断用户(人 物)是否存在于数字相框300前方、该用户和显示部340的距离等位置 关系。
例如，在谁都不在房间中的状态下，自动对焦的焦点几乎被固定， 但是，在用户横穿过数字相框300的显示部340前方的情况下等，自动 对焦功能动作，由此，能够判断用户是否存在。并且，在用户正在观看 数字相框300的显示部340的情况下，对该用户进行反应，自动对焦动 作，将焦点自动对焦到该用户，所以，能够检测用户和显示部340的大 概距离。
另外，作为自动对焦的方式，有有源方式和无源方式。在有源方式 中，射出红外线或超声波等来测定与用户等被摄体的距离。S卩，通过测 定反射波返回的时间等，来测定与被摄体的距离。根据该有源方式，具 有即使在暗处也能够简单地对焦的优点。
另一方面，在无源方式中，利用CCD传感器等摄像传感器接收被摄 体的亮度信息，通过电气处理来检测与被摄体的距离(焦点位置)。艮P， 使用所拍摄的图像来测定距离。在该无源方式中，具有检测亮度信号的 横向偏移的相位差检测方式、和检测亮度信号的对比度的对比度检测方 式等。3.与视觉辨认状态对应的显示方式的变化
在本实施方式中，根据用户的视觉辨认状态，来改变显示图像的显
示方式。具体而言，根据用户是否正在注视显示部340、显示部340是否 进入用户的视野范围内等，来改变显示方式。
例如，在图6(A)、图6(B)中，根据用户是否正在注视显示部340， 来改变显示图像的显示方式。具体而言，在图6 (A)中，用户的视线方 向没有朝向显示部340的方向，没有注视显示部340。该情况下，例如作 为天气预报的图像而显示通常图像(第l图像)。另外，能够使用用户检 测传感器350来检测用户是否正在注视。
另一方面，在图6 (B)中，用户正在注视显示部340。例如显示部 340进入用户的视野范围内的时间大于等于一定时间。该情况下，显示图 6 (A)的图像的关联图像(第l图像的关联图像即注视用图像)。即，在 图6 (A)中显示天气预报的图像，但是，在图6 (B)中，显示告知花 粉信息的图像来作为与天气预报相关联的图像。
例如，在从图6 (A)的状态成为如图6 (B)那样用户注视显示部 340 —定时间的状态的情况下，如果继续显示图6 (A)的图像，则显示 图像变得单调，缺乏变化。
关于这点，在图6 (B)中，以用户注视了一定时间为条件，显示图 6 (A)的关联图像即花粉信息的图像。这样，由于用户注视，图像的显 示方式变化，能够向用户显示富有变化的图像。并且，能够高效地对用 户提供各种信息。
并且，在图7 (A)、图7 (B)中，以用户正在注视为条件，将显示 图像从简略图像切换为详细图像。具体而言，在图7 (A)中，用户没有 注视显示部340，所以作为股市信息的图像而显示简略图像(第1图像)。 即，简略地显示平均股价和交易动作。
另一方面，在图7(B)中，判断为用户注视了显示部340 —定时间， 所以切换为详细图像(第1图像的详细图像即注视用图像)。具体而言， 显示告知个别交易品种的股价的变化的详细图像。这样，用户通过注视 显示部340，能够知道股价变动的详细情况。另外，用户也可以使用操作部360等预先登记显示多个交易品种中的哪个交易品种(显示多个显示
项目中的哪个显示项目)。这样，通过在显示股市信息的简略图像时用户
注视显示部340,从而显示用于告知作为用户所关心的内容而被登记的交 易品种的股价的详细情况的图像，能够提高用户的便利性。
另外，基于用户的注视状态(广义上为视觉辨认状态)的显示方式 的变化不限于图6 (A) 图7 (B)，能够进行改变文字尺寸或改变画面 分割数等各种变形并实施。
例如，在图8 (A)中，在第l、第2、第3、第4分割画面上分别显 示天气信息、股价信息、交通信息、日历信息的图像。该状态下，例如， 当检测出用户正在注视显示有天气信息的第l分割画面时，如图8 (B) 所示，选择天气信息并显示其图像。这样，通过用户注视分割画面中的 任一个，能够选择该分割画面。另夕卜，例如，当用户进一步注视图8 (B) 的图像一定时间时，也可以显示告知天气信息的详细情况的详细图像， 或显示告知天气的关联信息的关联图像。
根据以上本实施方式的手法，当检测出用户的注视等视觉辨认状态 时，显示图像的显示方式与其对应地发生变化。因此，增加向用户提供 的显示图像的类别，并且，能够进行高效的信息传递，能够提供此前没 有的类型的数字相框。
接着，使用图9 (A)说明用户的注视状态的检测手法的一例。在图 9 (A)中，使用摄像传感器作为用户检测传感器350。而且，如在图5 (A)、图5 (B)中说明的那样，根据来自摄像传感器的摄像信息，检测 用户的面部区域FAR。
接着，设定与所检测出的面部区域FAR对应的计测区域SAR。该计 测区域SAR是内部包含面部区域FAR、尺寸大于面部区域FAR的区域。 例如能够通过对面部区域FAR进行扩界(over sizing),来设定该计测区 域SAR。然后，计测面部区域FAR存在于该计测区域SAR内的时间， 根据所计测的时间，判断用户是否正在注视显示部340。例如，在面部区 域FAR位于计测区域SAR内的时间大于等于一定时间的情况下，判断为 用户正在注视显示部340。然后，如图6 (A) 图8 (B)所示，改变显示图像的显示方式。
根据图9(A)的检测手法，能够使用摄像传感器来实现基于图5(A)、 图5 (B)的手法的与用户的距离的检测和注视状态的检测这双方。由此, 能够削减传感器的部件数量，能够进行高效的处理。
另夕卜，注视状态的检测手法不限于图9 (A)的手法。例如在图9 (B) 中，照射红外光来检测用户的红眼，由此检测注视状态。具体而言，由 红外线器件354照射的红外线被半透半反镜353反射而到达用户的眼睛。 然后，通过设有摄像传感器的照相机352进行拍摄来检测用户的红眼状 态，由此，检测用户的眼睛的瞳孔的位置，检测用户的视线方向，判断 用户是否是注视状态。并且，在图9 (C)中，根据由2台照相机356、 357(立体照相机)拍摄的用户的面部图像的眼睛周边的图像区域的明暗， 来检测瞳孔的位置。然后，根据所检测出的瞳孔的中心位置和眼球的中 心位置，检测用户的视线方向，判断用户是否是注视状态。这样，作为 用户的注视状态的检测手法，能够采用各种手法。
并且，以上说明了检测与用户的距离或用户的注视状态来改变显示 图像的显示方式的情况，但是，本实施方式不限于此。例如，也可以检 测检测范围内用户的靠近程度来改变显示图像的显示方式。例如，求出 图5 (A)的面部区域FAR的尺寸相对于时间的变化率。然后，在尺寸的 变化率大于等于一定值的情况下，判断为用户的靠近程度高，利用与图3 (A) 图4 (B)、图6 (A) 图8 (B)相同的手法来改变显示图像的 显示方式。这样，能够向对数字相框感兴趣而靠近的用户显示各样的图 像。
并且，也可以通过用户检测传感器350检测用户是否存在于检测范 围内，在判断为用户存在于检测范围内的情况下，将显示部340的显示 从断开切换为接通。例如，从省电模式切换为通常模式，在显示部340 上显示图像。并且，在显示部340的显示接通的状态下，在判断为用户 从检测范围内离开而不存在用户的情况下，将显示部340的显示从接通 切换为断开。这样，能够防止在用户没有靠近时在数字相框上显示图像 而白白消耗电力的情况。并且，在检测出用户正在注视显示部340的情况下，可以以检测出 一次注视为条件来切换显示模式，也可以以检测出多次注视为条件来切 换显示模式。例如，根据用户注视显示部340的次数，来改变显示图像 的显示方式。
具体而言，对在规定时间内用户注视显示部340的次数即注视次数 进行计数并记录。然后，在规定时间内的注视次数超过作为阈值的规定 次数(例如2 5次)之前，不切换显示模式，保持显示原来的图像(第 l图像)的状态。另一方面，当规定时间内的注视次数超过规定次数时， 将显示模式切换为例如注视模式等。然后，显示原来的图像的关联图像， 或者显示原来的图像的详细图像。或者，在注视次数多的情况下，增加 该图像的详细图像或关联图像的显示频度等。例如，在某个内容的图像 的显示中，当检测到用户在30秒(规定时间)的期间内注视次数大于等 于2次(规定次数)时，显示该内容的详细内容或关联内容的图像。或 者，当检测到用户在1天(规定时间)内对某个内容的图像注视的次数 大于等于5次(规定次数)时，增加该内容的关联内容的图像的显示频 度。例如，在前一日中第1图像(例如专业棒球的比赛结果的图像)的 注视次数大于等于规定次数的情况下，增加下一日中第1图像或第1图 像的关联图像(例如专业棒球或大联盟的比赛结果的图像)的显示频度。
并且，在如本实施方式那样进行显示模式的切换的情况下，如果刚 刚没有检测到用户的存在或没有检测到用户的视觉辨认状态，就切换显 示模式而返回原来的显示模式，则可能损害用户的便利性。例如，在检 测出用户的面部或检测出用户的注视而将显示模式切换为详细显示模式 或注视模式的情况下，如果只不过由于用户仅在瞬间斜视，就解除该详 细显示模式或注视模式而返回原来的显示模式，则会损害显示的流畅性， 成为难以使用的数字相框。
为了防止这种情况，在要解除切换后的显示模式的情况下，等待一 定时间(例如30秒)，继续维持该显示模式。具体而言，在从简略显示 模式切换成了详细显示模式的情况下，等待该详细显示模式的解除达规 定时间的期间，继续维持详细显示模式。或者，在将显示模式切换成了注视模式的情况下，等待该注视模式的解除达规定时间的期间。然后， 在经过了规定时间后也无法检测出用户的存在的情况下、或无法检测出 用户的注视状态的情况下，从详细显示模式返回简略显示模式，或从注 视模式返回通常显示模式。这样，能够有效地防止由于不经意地频繁切 换显示模式而成为对用户而言看不清楚的显示图像的情况。 4.显示方式的切换手法的具体例
接着，使用图io说明本实施方式的显示方式的切换手法的具体例。
如图IO所示，在判断为用户没有注视显示部340而将注视模式设定 为关闭的情况下，进行图像IM1 IM5 (广义上为第1 第N图像)的滑 动显示。即，每规定时间顺序显示图像IM1 IM5的各图像。这里，图 像IM1 IM5的内容(主题)不同。具体而言，图像IM1、 IM2、 IM3、 IM4、 IM5分别为表示新闻、天气、股价、风景照片、动物照片的内容。
这样，滑动显示图像IM1 IM5，例如设在显示图像IM2 (广义上为 第K图像)时用户注视显示部340。该情况下，将注视模式从关闭切换 为打开，在显示部340上显示图像IM2的关联图像(或详细图像)即注 视用图像IM21A、 IM22A、 IM23A。例如，如果在显示天气的图像IM2 时用户注视该图像，则显示用于告知降水概率或花粉信息等的关联图像。
然后，例如如果在显示(滑动显示)这种注视用图像IM21A IM23A (广义上为第1 第M注视用图像)时用户靠近显示部340，则显示注 视用图像IM21A、 IM22A、 IM23A的详细图像(广义上为第L注视用图 像的详细图像)即IM21B、 IM22B、 IM23B。艮口，当用户和显示部340 的距离小于规定距离时，将显示模式从简略显示模式切换为详细显示模 式，显示详细图像。例如，在图像IM21B中显示每小时的天气的详细情 况，在图像IM22B中显示每小时的降水概率的详细情况，在图像IM23B 中显示花粉信息的详细情况。即使在显示图像IM1、 IM3、 IM4、 IM5时 用户注视这些各图像的情况下，也与上述同样地切换显示模式，显示图 像的显示方式发生变化。
根据图10的显示方式的切换手法，如果在滑动显示图像IM1 IM5 时用户注视感兴趣的图像，则显示该图像的关联图像或详细图像。因此，能够高效地显示与用户的兴趣对应的图像，并且，能够根据用户的注视 或用户的靠近而多样地改变图像的显示方式，能够提供此前没有的类型 的数字相框。
另外，图11示出实现图10的手法所使用的图像的数据结构例。例
如在图11中，图像IM1 IM5与注视模式关闭的标志对应起来。由此， 在用户没有注视时显示图像IM1 IM5。并且，图像IM11A IM53A与 注视模式关闭及简略显示模式打开的标志对应起来，图像IM11B IM53B 与注视模式关闭及详细显示模式打开的标志对应起来。进而，图像 IM11A IM13B与图像IM1对应起来，图像IM21A IM23B与图像IM2 对应起来，图像IM31A IM33B与图像IM3对应起来，图像IM41A IM43B与图像IM4对应起来，图像IM51A IM53B与图像IM5对应起 来。通过采用这种数据结构，如图10所示，在注视图像IM2时，显示图 像IM21A IM23A，该状态下，当用户靠近显示部340时能够显示图像 IM21B IM23B。
5.详细的处理例
接着，使用图12的流程图说明本实施方式的详细的处理例。 首先，使用用户检测传感器即热电传感器判断用户(人物)是否存 在于检测范围内(步骤S1)。即，为了在宽范围内粗略地检测用户是否存 在于数字相框的周边，使用热电传感器。这样，作为用户检测传感器， 区分使用热电传感器和摄像传感器，由此，能够高效地检测用户状态。
然后，在判断为不存在用户的情况下(步骤S2)，断开显示部的显 示而设定为省电模式(步骤S3)。另一方面，在判断为存在用户的情况下， 接通显示部的显示，显示壁纸、钟表、日历等背景图像(步骤S4)。这样， 能够防止用户没有位于数字相框附近却在显示部上显示图像从而白白消 耗电力的情况。
接着，通过使用了用户检测传感器即摄像传感器(照相机)的面部 检测，来判断显示部是否进入用户的视野范围内(步骤S5)。然后，在判 断为进入视野范围内的情况下(步骤S6)，根据面部区域(框区域)的尺 寸来判断用户和显示部(显示画面)的距离(步骤S7)。例如，在如图5(A)、图5 (B)所示检测出面部区域的情况下，判断为显示部进入用户
的视野范围内。然后，检测面部区域的尺寸，判断(估计)用户和显示 部的距离。
在判断为用户和显示部的距离在规定距离以内的情况下(步骤S8)， 打开详细显示模式(步骤S9)。另一方面，在判断为不是规定距离以内的 情况下，打开简略显示模式(步骤SIO)。由此，如在图3 (A)、图3 (B) 中说明的那样，能够进行与距离对应的简略图像和详细图像的切换。
接着，通过使用了摄像传感器的注视检测，来判断用户是否正在注 视显示部(步骤Sll)。然后，在判断为正在注视的情况下(步骤S12)， 打开注视模式(步骤S13)。另一方面，在判断为没有注视的情况下，关 闭注视模式(步骤S14)。由此，如在图6 (A)、图6 (B)中说明的那样， 能够实现与用户是否注视对应的显示方式的切换。
接着，使用图3说明在图9 (A)中说明的注视状态的检测处理的详 细情况。
首先，通过使用了摄像传感器(照相机)的面部检测，检测面部区 域(框区域)(步骤S21)。即，通过在图5 (A)、图5 (B)中说明的手 法来检测面部区域。接着，设定在内部包含所检测出的面部区域、尺寸 大于面部区域的计测区域(步骤S22)。即，如图9 (A)所示，设定对面 部区域进行了扩界的计测区域。然后，使用计时器计测面部区域存在于 计测区域内的时间(步骤S23)。即，在设定计测区域后，开始计时器的 计测，计测面部区域位于计测区域内的时间。然后，判断是否经过了大 于等于规定时间的时间(步骤S24)，在经过了大于等于规定时间的时间 的情况下，打开注视模式(步骤S25)。另一方面，在没有经过大于等于 规定时间的时间的情况下，依然关闭注视模式(步骤S26)。这样，能够 进行用户的注视状态的检测和与其对应的注视模式的设定。
6.变形例
接着，说明本实施方式的变形例。图14示出本实施方式的第1变形 例。在该第l变形例的系统中，设有家用服务器200 (广义上为信息处理 系统)。该家用服务器200包含处理部202、存储部220、通信部238、操作部260。另外，能够进行省略它们中的一部分结构要素、或追加其他结 构要素等的各种变形并实施。另外，针对与图2相同的结构要素，标注
相同的标号并省略其说明。
处理部202进行管理处理等各种处理，能通过CPU等处理器或ASIC 等实现。存储部220是处理部202和通信部238的工作区域，例如能够 通过RAM或HDD等实现。通信部238用于以有线或无线的方式与数字 相框300和外部服务器600进行通信，能够通过通信用ASIC或通信用处 理器等实现。操作部260用于供服务器的管理者输入各种信息。
在图14中，数字相框300和家用服务器200例如利用无线LAN等 网络进行通信连接。并且，在图14中，作为用户检测传感器250，使用 在家的各场所设置的家用传感器。而且，家用服务器200的检测信息取 得部204取得来自家用传感器即用户检测传感器250的检测信息，所取 得的检测信息被存储在检测信息存储部224中。
并且，通过传送部205,经由通信部238、 338将由家用服务器200 取得的检测信息传送到数字相框300。于是，数字相框300的检测信息取 得部304取得所传送来的检测信息，所取得的检测信息被存储在检测信 息存储部324中。然后，用户状态判断部306根据该检测信息来判断用 户状态，显示模式切换部316根据用户状态来切换显示模式。例如，根 据与用户的位置关系、视觉辨认状态等来切换显示模式。然后，显示控 制部318进行在显示部340上显示与显示模式对应的图像的控制。例如， 在简略显示模式、详细显示模式、注视模式分别打开的情况下，与其对 应地，显示简略图像、详细图像、注视用图像(关联图像)。另外，这些 图像等的内容信息被从家用服务器200的内容信息存储部222下载到数 字相框300的内容信息存储部322。或者，也可以从外部服务器600的内 容信息存储部622下载。并且，用于实现数字相框300的处理部302的 程序也可以从外部服务器600或家用服务器200下载到数字相框300。
图15示出用户检测传感器250即家用传感器的设置例。在图15中， 作为家用传感器，例如在房间的天花板的四角设置具有摄像传感器的照 相机251、 252、 253、 254。然后，使用这些照相机251 254拍摄用户10和数字相框300，由此，取得用于判断用户10和数字相框300的显示 部340的位置关系、用户10对显示部340的视觉辨认状态、以及用户10 是否存在于检测范围即房间内等的检测信息。然后，从家用服务器200 向数字相框300传送所取得的检测信息，数字相框300根据检测信息判 断用户状态，在显示部340上显示与用户状态对应的图像。另外，家用 传感器不限于照相机251 254的摄像传感器，能够使用热电传感器、超 声波传感器等各种传感器。
如果使用图14的第1变形例，则能够有效活用例如为了家庭安全等 而设置的家用传感器，取得检测信息，根据该检测信息来判断用户状态， 在数字相框300的显示部340上显示与用户状态对应的图像。
图16示出本实施方式的第2变形例。在图16中，家用服务器200 的处理部202除了检测信息取得部204、传送部205以外，还包含用户状 态判断部206和显示模式切换部216。并且，包含针对数字相框300进行 显示指示的显示指示部218。并且，家用服务器200的存储部220除了内 容信息存储部222、检测信息存储部224以外，还包含用户状态存储部 226、切换标志存储部228、注视次数信息存储部229。
在图16中，家用服务器200的用户状态判断部206根据来自用户检 测传感器250即家用传感器的检测信息，判断位置关系和视觉辨认状态 等用户状态。并且，显示模式切换部216迸行根据用户状态来切换显示 模式的处理。例如，根据与用户的位置关系和视觉辨认状态等来切换显 示模式。然后，显示指示部218进行对数字相框300进行指示的处理， 以显示与显示模式对应的图像。S卩，根据用户和显示部340的位置关系、 用户的视觉辨认状态、以及用户是否存在于检测范围内的至少一个，进 行改变在显示部340上显示的图像的显示方式的显示指示。然后，数字 相框300的显示控制部318根据来自显示指示部218的指示，进行显示 部340的显示控制。由此，根据与用户的位置关系、用户的视觉辨认状 态、用户是否存在于检测范围内，显示部340的显示方式发生变化。
根据图16的第2变形例，家用服务器200进行用户状态的判断处理、 显示模式的切换处理，所以，能够减轻数字相框300的处理负担。因此，即使在数字相框300的处理部302 (CPU)的处理能力低的情况下，也能 够实现本实施方式的处理。另外，也可以通过家用服务器200和数字相 框300的分散处理来实现这些处理。
另外，如上所述详细说明了本实施方式，但是，本领域技术人员能 够容易地理解，能够进行在实体上不脱离本发明的新颖性事项和效果的 多个变形。因此，这种变形例全部包含在本发明的范围中。例如，在说 明书或附图中至少一次与更广义或同义的不同用语(位置关系、视觉辨 认状态等) 一起记载的用语(距离、注视状态等)也能够在说明书或附 图的任意位置置换为该不同用语。并且，数字相框、信息处理系统的结 构、动作、用户状态的判断手法、位置关系的检测手法、视觉辨认状态 的检测手法等也不限于本实施方式中所说明的，能够进行各种变形实施。
权利要求
1.一种数字相框，其特征在于，该数字相框包含显示部，其显示图像；显示控制部，其进行所述显示部的显示控制；检测信息取得部，其取得由用户检测传感器检测出的检测信息；以及用户状态判断部，其根据所取得的所述检测信息，判断用户和所述显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个，所述显示控制部根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个，进行改变在所述显示部上显示的图像的显示方式的显示控制。
2. 根据权利要求1所述的数字相框，其特征在于， 所述用户状态判断部判断用户和所述显示部之间的距离，来作为用户和所述显示部的所述位置关系，所述显示控制部根据用户和所述显示部之间的距离，进行改变在所 述显示部上显示的图像的显示方式的显示控制。
3. 根据权利要求2所述的数字相框，其特征在于， 所述显示控制部进行用户和所述显示部之间的距离越近，在所述显示部上显示的图像的详细度越高的显示控制。
4. 根据权利要求2所述的数字相框，其特征在于， 所述显示控制部进行用户和所述显示部之间的距离越近，在所述显示部上显示的图像的画面分割数越多的显示控制。
5. 根据权利要求2所述的数字相框，其特征在于， 所述显示控制部进行用户和所述显示部之间的距离越近，在所述显示部上显示的文字的尺寸越小的显示控制。
6. 根据权利要求2 5中的任一项所述的数字相框，其特征在于， 所述数字相框包含显示模式切换部，该显示模式切换部根据用户和所述显示部之间的距离，切换所述显示部的显示模式。
7. 根据权利要求6所述的数字相框，其特征在于， 在用户和所述显示部之间的距离靠近的情况下，所述显示模式切换部将所述显示模式从简略显示模式切换为详细显示模式。
8. 根据权利要求7所述的数字相框，其特征在于， 所述显示模式切换部在所述显示模式从所述简略显示模式切换为所述详细显示模式后，等待解除所述详细显示模式达规定时间的期间。
9. 根据权利要求2 5中的任一项所述的数字相框，其特征在于， 所述用户检测传感器是对用户进行摄像的摄像传感器， 所述用户状态判断部根据来自所述摄像传感器的摄像信息，检测用户的面部区域，根据所检测出的所述面部区域的尺寸，判断用户和所述 显示部之间的距离。
10. 根据权利要求2 5中的任一项所述的数字相框，其特征在于， 所述用户检测传感器是对用户进行摄像的摄像传感器， 所述用户状态判断部通过针对用户的自动对焦处理，判断用户和所述显示部之间的距离。
11. 根据权利要求2 5中的任一项所述的数字相框，其特征在于， 所述用户检测传感器是超声波传感器，所述用户状态判断部通过所述超声波传感器，来判断用户和所述显 示部之间的距离。
12. 根据权利要求1 5中的任一项所述的数字相框，其特征在于， 所述用户状态判断部判断是否是用户正在注视所述显示部的状态，来作为用户的所述视觉辨认状态，所述显示控制部根据用户是否正在注视所述显示部，进行改变在所 述显示部上显示的图像的显示方式的显示控制。
13. 根据权利要求12所述的数字相框，其特征在于， 所述显示控制部根据用户注视所述显示部的注视次数信息，进行改变在所述显示部上显示的图像的显示方式的显示控制。
14. 根据权利要求13所述的数字相框，其特征在于，在规定时间内用户对第1图像的注视次数大于等于规定次数的情况 下，所述显示控制部进行切换到与所述第1图像对应的注视用图像的切 换控制。
15. 根据权利要求12所述的数字相框，其特征在于， 所述显示控制部根据规定时间内用户对第1图像的注视次数信息，改变所述第1图像或所述第1图像的关联图像的显示频度。
16. 根据权利要求12所述的数字相框，其特征在于， 在判断为用户正在注视第1图像的情况下，所述显示控制部进行切换到与所述第1图像对应的注视用图像的切换控制。
17. 根据权利要求12所述的数字相框，其特征在于， 在判断为用户没有注视所述显示部的情况下，所述显示控制部进行在所述显示部上滑动显示第1 第N图像的控制，当在显示所述第1 第 N图像中的第K图像时判断为用户正在注视所述显示部的情况下，所述 显示控制部进行在所述显示部上显示所述第K图像的关联图像或详细图 像即注视用图像的控制，其中N为大于等于2的整数，1SK^N。
18. 根据权利要求16所述的数字相框，其特征在于， 所述用户状态判断部判断用户和所述显示部之间的距离，来作为用户和所述显示部的所述位置关系，当在显示所述注视用图像时判断为用户靠近所述显示部的情况下， 所述显示控制部进行显示所述注视用图像的详细图像的控制。
19. 根据权利要求16所述的数字相框，其特征在于， 在判断为用户没有靠近所述显示部的情况下，所述显示控制部进行在所述显示部上滑动显示第1 第M注视用图像作为所述注视用图像的 控制，当在显示所述第1 第M注视用图像中的第L注视用图像时判断 为用户靠近所述显示部的情况下，所述显示控制部进行在所述显示部上 显示所述第L注视用图像的详细图像的控制，其中M为大于等于2的整 数，1"M。
20. 根据权利要求12所述的数字相框，其特征在于， 所述用户检测传感器是对用户进行摄像的摄像传感器，所述用户状态判断部根据来自所述摄像传感器的摄像信息，检测用 户的面部区域，设定在内部包含所检测出的所述面部区域、尺寸大于所 述面部区域的计测区域，计测所述面部区域存在于所述计测区域内的时 间，根据所计测的时间，判断用户是否正在注视所述显示部。
21. 根据权利要求12所述的数字相框，其特征在于， 所述数字相框包含显示模式切换部，该显示模式切换部根据用户是否正在注视所述显示部，来切换所述显示部的显示模式。
22. 根据权利要求21所述的数字相框，其特征在于， 所述显示模式切换部在所述显示模式切换为注视模式后，等待解除所述注视模式达规定时间的期间。
23. 根据权利要求1 5中的任一项所述的数字相框，其特征在于， 所述用户状态判断部判断用户是否存在于所述检测范围内， 在判断为用户存在于所述检测范围内的情况下，所述显示控制部进行接通所述显示部的显示的显示控制。
24. 根据权利要求23所述的数字相框，其特征在于， 在所述显示部的显示接通后，所述用户状态判断部判断是否是所述显示部进入用户的视野范围内的状态，来作为用户的所述视觉辨认状态， 在判断为所述显示部进入用户的视野范围内的情况下，所述显示控 制部进行在所述显示部上滑动显示第1 第N图像的控制。
25. —种信息处理系统，其特征在于，该信息处理系统包含 显示指示部，其进行在数字相框的显示部上显示的图像的显示指示； 检测信息取得部，其取得由用户检测传感器检测出的检测信息；以及用户状态判断部，其根据所取得的所述检测信息，判断用户和所述 显示部的位置关系、用户对所述显示部的视觉辨认状态、以及用户是否 存在于检测范围内的至少一个，所述显示指示部根据用户和所述显示部的所述位置关系、用户的所 述视觉辨认状态、以及用户是否存在于所述检测范围内的至少一个，进 行改变在所述显示部上显示的图像的显示方式的显示指示。
26. —种数字相框的控制方法，其特征在于， 取得由用户检测传感器检测出的检测信息，根据所取得的所述检测信息，判断用户和数字相框的显示部的位置 关系、用户对所述显示部的视觉辨认状态、以及用户是否存在于检测范 围内的至少一 个，根据用户和所述显示部的所述位置关系、用户的所述视觉辨认状态、 以及用户是否存在于所述检测范围内的至少一个，进行改变在所述显示 部上显示的图像的显示方式的显示控制。
全文摘要
本发明提供能够实现反映出用户状态的显示控制的数字相框、信息处理系统和控制方法等。数字相框包含显示部；显示控制部；检测信息取得部，其取得由用户检测传感器检测出的检测信息；以及用户状态判断部，其根据所取得的检测信息，判断用户和显示部的位置关系、用户对显示部的视觉辨认状态、以及用户是否存在于检测范围内的至少一个。显示控制部根据用户和显示部的位置关系、用户的视觉辨认状态、以及用户是否存在于检测范围内的至少一个，进行改变在显示部上显示的图像的显示方式的显示控制。
文档编号G01S15/08GK101609660SQ200910146869
公开日2009年12月23日 申请日期2009年6月17日 优先权日2008年6月18日
发明者井场阳一, 杉原良平, 藤垣勇人, 龙田成示, 龟山末帆 申请人:奥林巴斯株式会社