电子相框及其控制方法

专利名称：电子相框及其控制方法
技术领域：
本发明涉及电子相框及其控制方法。
背景技术：
通过数字照相机所拍摄的照片为数字形式的图像文件(下面称为电子照片或者 简称为照片)，因此具有没必要一定打印输出到纸上，而能够作为图像在任何喜欢的时候 进行显示(放映在个人计算机的显示器上)的优点，但是无法否认，对于对个人计算机不 熟悉的人来说使用起来比较困难。因此，使用被称为电子相框(Digital Photo Frame DPF)的便利的显示装置。
DPF仅通过设置从数字相机中取出的记录介质，就能够自动地显示在该介质中记录的电 子照片，即使对个人计算机不熟悉的人也能够熟练地使用。但是另一方面，DPF只不过是将所设置的记录介质内的电子照片按顺序或者随 机地读出，然后进行显示的装置，因此具有显示不符合欣赏者的喜好的照片的缺点。在日本特开2008-165009号公报及日本特开2009-171176号公报中公开了涉及带 有照相机的DPF的技术。在日本特开2008-165009号公报中，根据观看(识别)显示中 的照片的次数或其时间长度来决定显示照片的优先顺序，另外，在日本特开2009-171176 公报中，针对每个登录者显示该登录者喜欢的照片。但是，在日本特开2008-165009号公报的技术中，至少要根据过去所决定的优 先顺序来显示照片，因此有可能显示与欣赏者当前的心情不符的照片，例如有这样的 缺点当心情愉快时，如果显示有悲伤内容的照片，则会导致情绪低落。在日本特开 2009-171176号公报的技术中，需要针对每个登录者事先选择喜欢的照片，因此有费事而 麻烦的缺点。另一方面，如果将范围扩大到DPF以外来对现有技术进行调查的话，例如有以 下这样的技术。例如，在美国专利第7636456号公报中记载了如下技术在能够针对观看广告 图像的每个人显示最佳的广告图像的显示装置中，通过照相机拍摄正在观看广告图像的 人的面部表情，当该表情表示“厌倦”时，播放预定的影像来唤回注意力。另外，在日本特开2006-251271号公报中记载了如下技术在将歌手的声音(歌 声)和模仿人物的动画图像发送给听众侧的卡拉OK系统中，通过照相机拍摄歌手的表 情，并将该表情反映到动画图像中。另外，在日本特开2008-118527号公报中记载了如下技术拍摄相当于使用者 的视野的图像并保存，同时检测在该保存时刻该使用者的生物体信息(脉搏，心博、心 电等)，并与所述图像关联起来进行保存，然后，当所述使用者要阅览图像时，再次检测该使用者的生物体信息，将已关联了与该生物体信息相同的生物体信息的图像取出，并 进行显示。但是，上述技术存在如下问题。(1)美国专利第7636456号公报当正在观看图像的人的表情表示“厌倦”时，只不过播放预定的影像。即只不 过是在唤回注意力上下功夫而已。(2)日本特开2006-251271号公报只不过是将歌手的表情反映到动画图像中而已。(3)日本特开2008-118527号公报根据生物体信息进行了图像的选择性显示，但是该生物体信息为脉搏、心博、 心电等，而不是要观看图像的人的表情。因此，如果考虑对DPF应用这些技术，则毕竟(2)是卡拉OK的动画技术，因此 不适用于DPF。另外，关于(1)，应该如何选择能够唤回注意力的影像并不明确(在该文献中， 厌倦时播放动作/冒险电影的影像，但是未必说一定如此。当然有对这类影像不感兴趣 的人)。另外，关于(3)，存在如下问题需要用于检测脉搏、心博、心电等生物体信 息的大规模装置，成本高又不实用。

发明内容
因此，本发明的目的在于提供一种电子相框及其控制方法，其通过不费事且简 单的结构，能够显示与当前感情相符合的照片。即，本发明涉及一种电子相框，其具备能够依次显示至少两枚以上的电子照片 的显示部，该电子相框中具备表情判别单元，其对正在观看在所述显示部上显示的电 子照片的人物的面部表情进行判别；以及关联存储单元，其将与通过所述表情判别单元 所判别的面部表情相关的信息和显示中的电子照片关联起来进行存储。另外，本发明涉及另外一种电子相框，其具备能够依次显示至少两枚以上的电 子照片的显示部，该电子相框中具备表情判别单元，其当要在所述显示部上显示所 述两枚以上的电子照片的某一枚时，判别正在将视线朝向该显示部方向的人物的面部表 情；关联判别单元，其判别符合与通过所述表情判别单元所判别的面部表情相关的信息 的信息，是否已与现在要显示的电子照片关联起来；以及显示允许单元，其在所述关联 判别单元的判别结果为肯定时，允许向所述显示部显示电子照片。另一方面，本发明涉及一种电子相框的控制方法，该电子相框具备能够依次显 示至少两枚以上的电子照片的显示部，该电子相框的控制方法中包含表情判别步骤， 其对正在观看在所述显示部上所显示的电子照片的人物的面部表情进行判别；以及关联 存储步骤，其将与通过所述表情判别步骤所判别的面部表情相关的信息与显示中的电子 照片关联起来进行存储。另外，本发明涉及另外一种电子相框的控制方法，该电子相框具备能够依次显 示至少两枚以上的电子照片的显示部，该电子相框的控制方法中包含表情判别步骤，其当要在所述显示部上显示所述两枚以上的电子照片中的某一枚时，对正在将视线朝向 该显示部方向的人物的面部表情进行判别；关联判别步骤，其判别符合与通过所述表情 判别步骤所判别的面部表情相关的信息的信息，是否已与现在要显示的电子照片关联起 来；以及显示允许步骤，其当所述关联判别步骤的判别结果为肯定时，允许向所述显示 部显示电子照片。根据本发明，能够提供一种电子相框及其控制方法，其通过不费事且简单的结 构，能够显示与当前感情相符合的照片。


图1是实施方式的电子相框(DPF)的外观图。图2是DPFl的内部框图。图3是在附加功能中使用的照片列表的概念结构图。图4是表示通过控制部19的CPU20执行的控制程序的图。图5是表示分类处理(图4的步骤S6)的图。图6是分类的概念图。图7是根据类别分类进行的选择性显示的概念图。图8是表示实施方式的照片列表27的改良构造和欣赏者登录数据表的构造的 图。图9是表示实施方式的主流程(参照图4)的改良例的图。图10是实施方式的分类处理(参照图5)的改良例的图。
具体实施例方式下面参照附图对本发明的实施方式进行说明。图IA及B是实施方式的电子相框(DPF)的外观图。在该图中，DPFl具备 显示部2，其使用液晶面板、或者EL面板、或者等离子面板，或者电子纸等显示信息重 写型的显示装置；围绕在该显示部2的周围，适当设计的边框3;设置在边框3的背面的 电子电路收容箱4;以及安装在该电子电路收容箱4的背面的可倒式支架5，并且具备安 装在边框3的前面一侧的任意位置(图中显示部2的上方)的照相机6。在此，将照相机6的摄影角度α设定为能够拍摄欣赏显示在DPFl的显示部2上 的照片的人物(以下称为欣赏者7)的脸的适当值，另外，关于照相机6的焦点距离，也 与到欣赏者7的距离相配合地进行适当的设定。在电子电路收容箱4的侧面设置有操作部12，其包含各种开关类，如电源开 关8或菜单开关9、上箭头开关10及下箭头开关11等；介质插槽13，其用于插入卡式存 储装置(CF卡、SD卡等)或者装卸式硬盘或者磁盘等记录介质；以及电源连接器14，当 使用该DPFl时，将AC适配器15的AC插头16插入未图示的墙壁插座，然后将AC适 配器15的电源插头17插入到电子电路收容箱4的侧面的电源连接器14中，然后将电源 开关8打开。图2是DPFl的内部框图。在该图中，电源部18接受来自AC适配器15的DC 电源供给，产生该DPFl的工作所需的各种电源。
控制部19由CPU(中央处理器)20、RAM (易失性高速存储器)21、ROM (非 易失性存储器)22、PROM(可重写型非易失性存储器)23以及其它的周边电路构成，即 由所谓的微型计算机(或者简称为计算机)构成，将事先写入到ROM22的控制程序(参 照后述的图4)、适当地写入到PROM23中的可变数据(参照后述的图3)读入到RAM21 中，由CPU20来执行该控制程序，由此实现作为电子相框所需的功能。具体来讲，控制部19检查介质I/F部24的介质插槽13中是否插入了记录介质 25，如果插入了记录介质25，则将存储在该记录介质25中的图像文件(下面为了方便， 称为“照片”)读出并显示在显示部2上。另一方面，当未插入记录介质25时，实现将在作为内部存储器的存储部26中存 储的照片(出厂时所存储的样本照片或者事先从记录介质25转移并改变了的照片)读出 并显示在显示部2上这样的作为电子相框的基本功能。另外，本实施方式，如后面详细说明那样，与开头所说明的现有技术不同的 是当在显示部2上显示照片时，并不是简单地将多枚照片按顺序或者随机地进行显 示，而是实现了根据通过照相机6所拍摄的欣赏者的表情，选择适当的照片来显示的特 有功能(下面称为附加功能)。图3是在附加功能中使用的照片列表的概念结构图。该照片列表27保存在控制 部19的PROM23中，根据需要对内容进行更新(重写)。照片列表27由与照片的保存枚数相当的多个记录构成，各记录由用于存储各照 片的识别号(一般是文件名，但是在此为了方便，是三位数列)的序号字段27a、和用于 存储各照片的类别信息的类别字段27b构成。所谓类别信息，是表示当欣赏者看到各照片时露出了怎样的表情的信息，在此 为了方便，设为“大笑”、“中笑”、“无表情”。但是，这些类别(大笑、中笑、无表情)只不过是一个例子。如上所述，只要 是“表示当欣赏者看到各照片时露出了怎样的表情的信息”即可。例如，可以追加“微 笑”，或者也可以追加“愤怒表情”、“哭泣表情”、“悲伤表情”等其它表情。另外，关于这些其它表情，也可以细分为“大”、“中”、“小”等。或者包 含上述的笑容在内，也可以不用“大”、“中”、“小”等阶段性的表现来表示表情的 程度，而用数值来表示。例如，可以把最大设为100，把最小设为0，两者之间用从99 到1的范围来表示等。或者可以用0表示无表情，用加号(+)来表现笑容，用减号(-) 来表现愤怒表情或哭泣表情。图4是表示通过控制部19的CPU20执行的控制程序(下面称为主流程)的图。在该图中，如果DPFl的电源开关8打开，则首先把照片选择用的计数器变量i 设定为初始值“1”(步骤Si)，然后判断在卡槽13中是否插入了记录介质25(步骤S2)。然后，如果未插入记录介质25，则读出在存储部26中存储的第i枚照片(步骤 S3)，如果插入了记录介质25，则读出在记录介质25中存储的第i枚照片(步骤S4)。接下来，参照PROM23的照片列表27，判断该第i枚照片是否为已被分类的照 片(步骤S5)，如果还没有被分类，则执行下面详细说明的“分类处理”(步骤S6)，另 一方面，如果已经被分类，接下来则启动照相机6，取得其摄影图像，判断该图像中是否 拍到了欣赏者7的脸(步骤S7)。
然后，如果没有拍到欣赏者7的脸，则直接将第i枚照片输出到显示部2，进行 显示(步骤S9)，但是，如果拍到了欣赏者7的脸，则判别该欣赏者7的面部表情(具体来 讲，判别是笑容、还是笑容以外的愤怒表情、哭泣表情或者悲伤表情，还是无表情等)， 并判断第i枚照片的类别是否是符合该判别结果的类别(步骤S8)。例如，当假设第i枚照片的序号为“001”时，如果根据照片列表27，该序号 “001”的照片的类别为“大笑”，因此，此时如果照相机6的摄影图像中的欣赏者7的
表情与其相同(大笑)，则步骤S8的判断结果为“是”，如果为其它的表情，则步骤S8 的判断结果为“否”。当步骤S8的判断结果为“是”时，即第i枚照片的类别为与照相机6所拍摄的 欣赏者7的面部表情相符合的类别时，将该第i枚照片输出到显示部2来进行显示(步骤 S9)，并将计数器变量i加1(步骤S10)，然后判断是否i>imax(imax为照片的总数)(步 骤 S11)。然后，如果i>irmx，则为了进行照片的循环显示，返回到步骤Si，如果不是i > imax,则为了对下一枚照片(新的第i枚照片)进行同样的处理，返回到步骤S2。另外，在欣赏者7的表判别断中，例如能够使用通过多枚的面部图像的模板 (template)与所检测到的面部图像的匹配来评价表情的公知方法。或者，可以使用被称为“费希尔(Fisher)线性判别分析”的公知方法。该方法 事先准备大量分别具有两个表情的面部的样本图像，根据这些样本图像的数据，考虑两 个表情间的两类(Classs)问题，进行线性判别分析(LDA Linear Discriminate Analysis)， 由此，事先形成用于良好地判别这两个表情的判别轴，在进行表情评价时，通过求出所 输入的面部图像的数据与判别轴的内积，计算表情评价值。另外，在欣赏者7的脸部检 测中也可以使用公知方法。例如可以使用如下公知方法等学习面部图像中的两个像素间的亮度差，作为 特征量事先保存起来，然后，对输入图像依次应用具有恒定大小的窗口，根据特征量来 推测窗口中的图像中是否包含脸，并输出脸部检测的推测值。在该方法中，依次缩小输入图像来进行同样的处理，由此能够使用恒定大小的 窗口进行脸部检测的推测，能够根据通过这些动作所获得的推测值，最终判别脸部存在 的区域。图5是表示分类处理(图4的步骤S6)的图。在该图中，在分类处理中，首先 将第i枚照片输出到显示部2并进行显示(步骤S21)，并且在该显示状态下启动照相机 6，取得其摄影图像，判断在该图像中是否拍到了欣赏者7的脸(步骤S22)。然后，如果没有拍到欣赏者7的脸，则直接跳出流程，返回到图4的主流程(前 进到步骤S10)，但是如果拍到了欣赏者7的脸，则对该欣赏者7的面部表情进行判别(具 体来讲，判别是笑容、笑容以外的愤怒表情或者哭泣表情或悲伤表情，还是无表情)(步 马聚S23)ο然后，将与该判别结果对应的类别信息写入到照片列表27的第i枚照片的类别 字段27b(步骤S24)，跳出流程，返回到图4的主流程(前进到步骤S10)。如此，根据图4的主流程(以及图5的分类处理)，能够从存储部26或者记录介 质25依次读入照片，在未对这些照片进行分类时，执行图5的分类处理，进行与正在观看该照片的人物(欣赏者7)的面部表情对应的分类。另外，当要对如此分类后的照片进行显示时，能够仅将与该时刻的欣赏者7的 面部表情相符合的类别的照片取出，有选择地进行显示。图6及图7是本实施方式的作用概念图，图6是分类的概念图，图7是根据类别 分类有选择地进行显示的概念图。如图6所示，当观看了序号“001”的照片的欣赏者7的表情为最大的笑容时， 在照片列表27的序号“001”的类别字段27b中写入“大笑”，同样，当观看了序号
“002”的照片的欣赏者7的表情为中等程度的笑容时，在照片列表27的序号“002”的 类别字段27b中写入“中笑”。另外，当观看了序号“003”的照片的欣赏者7的表情 为无表情时，在照片列表27的序号“003”的类别字段27b中写入“无表情”。然后，当要欣赏这些分类后的照片时，如果此时欣赏者7的表情为最大的笑 容，则仅将存储部26或者记录介质25中存储的照片中的、类别为“大笑”的照片显示 到显示部2上(图7A)。另外，如果此时欣赏者7的表情为中等程度的笑容，则仅将存储部26或者记录 介质25中存储的照片中的、类别为“中笑”的照片显示到显示部2上(图7B)。或者，如果此时欣赏者7的表情为无表情，则仅将存储部26或者记录介质25中 存储的照片中的、类别为“无表情”的照片显示到显示部2上(图7C)。如此，在本实施方式中，能够选择与欣赏者7当前的感情(实际上为面部表情) 相符合的照片进行显示，因此能够克服在开头所说明的专利文献1的缺点。并且，当 显示未分类的照片时，自动进行用于区别感情的分类作业，因此，不需要人为的费事操 作，也能够克服在开头所说明的专利文献2的缺点。而且，在欣赏者7的当前感情和所显示的照片之间，具有类别的一致这样的一 定相关性，因此，与开头所说明的专利文献3那样，播放不确定是否能够唤回感到厌倦 的人的注意力的影像相比，很明显能够吸引欣赏者7的注意力，另外，不需要用于检测 脉搏、心博、心电、肌肉电...等等生物体信息的大规模的装置。如上所述，根据本实施方式，能够不费事且通过简单的结构实现能够显示与当 前感情相符合的照片的电子相框(DPF)。另外，上述的实施方式只不过是表示发明的实施方式的一个例子。能够在发明 的技术思想范围内考虑各种变形例或拓展例。例如，可以对实施方式进行改良，以便能够区别每个欣赏者7。图8是表示实施方式的照片列表27的改良构造和欣赏者登录数据表的构造的 图。在该图中，图8A所示的照片列表127是对实施方式的照片列表27进行改良后的 表，不同之处在于设置了每个欣赏者7的类别字段。S卩，该照片列表127具备用于存储各照片的识别号的序号字段127a和每个欣赏 者7的类别字段127b，另外，将每个欣赏者7的类别字段127b细分为多个子类别字段 127c、 127d、 127e、.…。在此，在图示的例子中，为了方便而细分为三个子类别字段127c、127d、 127e,并且将子类别字段127c设为“欣赏者A”用、子类别字段127d设为“欣赏者B”用、子类别字段127e设为“欣赏者C”用。另一方面，欣赏者登录数据表128是用于事先登录欣赏者A、B、C、...的脸部 数据的表，该欣赏者登录数据表128具有ID字段128a，其用于存储欣赏者ID;以及欣 赏者脸部数据字段128b，其用于存储欣赏者A、B、C、...的各自的脸部数据(通过照相 机6所拍摄的脸部照片或者表示脸部的特征的数据)。图9及图10是表示实施方式的主流程(参照图4)的改良例和分类处理(参照图 5)的改良例的图。首先，如图9的由虚线包围的部分所示，在实施方式的主流程的步骤S7的后面 追加了新的步骤S31，并且将主流程的步骤S8进行部分变更，作为步骤S8a。即进行了如下改良在步骤S31中判断通过照相机6正在拍摄的欣赏者7是否 为欣赏者登录数据表128中已经登录的欣赏者7 (即欣赏者A、B、C、...中的某一个)， 如果为未登录的欣赏者7，则直接显示照片，如果为已经登录的欣赏者7，则前进到步骤 S8a,参照照片列表127，判断是否是与该欣赏者7的脸部表情相符合的类别的照片。另外，如图10的由虚线包围的部分所示，在实施方式的分类处理的步骤S22的 后面追加了新的步骤S32，并且将相同处理的步骤S23和步骤S24进行了部分变更，分别 将其作为步骤S23a和步骤S24a。即进行了如下改良在步骤S32中判断通过照相机6正在拍摄的欣赏者7是否 是在欣赏者登录数据表128中已经登录的欣赏者7 (即，欣赏者A、B、C、...中的某一 个)，如果是未登录的欣赏者7，则直接返回到主流程，另一方面，如果是已经登录的欣 赏者7，则在步骤S23a中确定该欣赏者7的面部表情，然后，在步骤S24a中，将照片分 类为与该欣赏者7的脸部表情相符合的类别。通过进行上述改良，能够使用与欣赏者A、B、C、...的每一个所对应的类别来 进行照片的选择显示，能够获得与针对个人的照片的不同的感性所对应的极其细致的照 片的显示选择特性。因此，例如将家庭或者工作单位等的组成成员分别作为欣赏者A、B、C、...事 先进行登录，并且，如果针对这些每个人对照片进行了分类，则当该组成成员的某一个 人来到DPFl前面时(想要欣赏照片时)，能够选择显示与该欣赏者此时的感情相符合的 照片，普遍来讲，能够做成更具有实用性的产品。另外，在上述说明中表示了对电子相框(DPF)的应用，但是，这只不过是一个 例子。只要是能够显示电子照片(数字形式的图像文件)的电子设备，什么设备都可以， 例如可以是具备图像再生用的显示器的数字照相机或者数字摄像机、图像存储装置、游 戏机、个人计算机、或者便携式电话以及其它的图像显示装置。另外，在实施方式中，对照片进行选择显示时的显示顺序，既可以是顺序显 示，也可以是随机显示。当进行顺序显示时，只要将照片选择用的计数器变量i的值与照片列表27的记 录号进行一一对应即可。即，将i = l作为第一记录、i = 2作为第二记录、…、i = n作 为第η记录即可。每当对i的值进行更新时，能够从照片列表27的第一个记录开始“顺 序”地将照片读出。当进行随机显示时，只要对计数器变量i的值进行不规则更新即可。例如，如果使i = l、i = 5、i = 3、...等，则能够如照片列表27中的第1记录、第5记录、第3 记录、...那样“不规则”(即随机)地将照片读出。另外，在实施方式中，关于执行照片的分类处理(参照图5)的条件，是该照片 还没有进行分类的情况，但是并不限于此。例如，也可以在进行分类后，对经过了一定 期间后的照片再次执行分类处理(参照图5)。这是因为，对照片所怀有的感情并不是一 成不变的，会随着各人的身体状况、生活环境、或者季节等有微妙或者明显的变化。另外，在实施方式的所述改良例(能够对欣赏者进行个别区别)中，当未登录者 成为欣赏者时，无视类别地直接对照片进行显示(图9的步骤S31的“否”一步骤S9)， 但是并不限于此，也可以考虑类别地进行变更。如果将人物X作为未登录的欣赏者，将人物a、b、C、...作为已经登录的欣赏者 (即照片列表127中已经登录的欣赏者A、B、C、...),则此时，照片列表127中存储的 类别为与人物a、b、c、...的表情相符合的类别，与人物X完全无关。但是，虽然不能说对所有的人来讲对照片所怀有的感情相同，但是，在大多数 情况下，具有某种程度的一般性也是事实(例如，观看了令人快乐的内容的照片的大多 数人同样会怀有快乐的感情)。因此，人物a、b、c、...(即，已经登录的欣赏者A、B、C、…)的全部成员或
者其中的大多数共同怀有的感情，也大体符合其他人物X，基于这样的考虑，即使在未 登录者(人物X)成为欣赏者时，使用已经登录的类别对照片进行选择显示也无关紧要。当然，这样做并不能说完美，但是能够选择显示与未登录者(人物X)的面部表 情“大体”相符合的类别的照片，因此，与无视类别的情形相比，在能够提高显示的照 片的统一感方面，能够成为优选的方式。另外，在实施方式中，对作为内部存储器的存储部26或者装卸式的记录介质25 中保存的电子照片进行显示，但是除此之外，例如可以对在LAN或WAN等网络上保存 的电子照片、或者通过红外线或蓝牙等近距离通信所传送的电子照片进行显示。另外，在实施方式中，对与欣赏者的面部表情一致的类别的照片进行显示，但 是，例如当欣赏者的表情为“悲伤的表情”时，为了排遣悲伤，可以显示该欣赏者为
“笑容”时的照片。另外，在实施方式中，根据通过设置在电子相框前面的照相机部所拍摄的图 像，对正在观看该电子相框的显示部上所显示的电子照片的人物进行了判断，但是，即 使电子相框中没有装备照相机部，也可以根据从外部输入的信息，对正在观看该电子相 框的显示部上所显示的电子照片的人物的存在或者个人进行判断。另外，也可以不根据照相机部所拍摄的图像，而根据通过麦克风部所输入的声 音等来判断人物的存在或者个人。另外，也可以不仅在通过照相机部所拍摄的图像中检测人物的脸，也根据所检 测到的人物的脸部图像检测视线方向，仅当视线方向朝向电子相框的方向时，判断为正 在观看在该电子相框的显示部上所显示的电子照片。另外，在实施方式中，在确定了要在电子相框的显示部上显示的电子照片后， 根据面部表情来决定是否对该电子照片进行显示，但是，也可以根据正在观看电子照片 的人物的面部表情，从多枚电子照片中选择要显示的电子照片。
权利要求
1.一种电子相框，其具备能够依次显示至少两枚以上的电子照片的显示部，该电子 相框的特征在于，具备表情判别单元，其对正在观看在所述显示部上显示的电子照片的人物的面部表情进 行判别；以及关联存储单元，其将与通过所述表情判别单元所判别的面部表情相关的信息和显示 中的电子照片关联起来进行存储。
2.根据权利要求1所述的电子相框，其特征在于，还具备显示控制单元，其当对在所述关联存储单元中存储的电子照片进行显示 时，将与各电子照片相关联地存储的与面部表情相关的信息、和通过所述表情判别单元 所判别的人物的面部表情进行比较，根据其比较结果，对在所述关联存储单元中存储的 各电子照片的显示进行控制。
3.根据权利要求2所述的电子相框，其特征在于，所述显示控制单元包含关联判别单元，其当要在所述显示部上显示所述两枚以上的电子照片中的某一枚 时，判别符合与通过所述表情判别单元所判别的面部表情相关的信息的信息，是否已与 现在要显示的电子照片关联起来；以及显示允许单元，其在所述关联判别单元的判别结果为肯定时，允许向所述显示部显 示电子照片。
4.根据权利要求2所述的电子相框，其特征在于，所述显示控制单元根据通过所述表情判别单元所判别的人物的面部表情，从在所述 关联存储单元中存储的多枚电子照片中选择要在所述显示部上显示的电子图像。
5.根据权利要求1所述的电子相框，其特征在于，当在所述显示部上显示电子照片时，所述表情判别单元将视线朝向该显示部方向的 人物确定为正在观看在该显示部上所显示的电子照片的人物。
6.根据权利要求1所述的电子相框，其特征在于，还具备摄像单元，其拍摄被拍摄体来取得图像，当在所述显示部上显示电子照片时，所述表情判别单元将在通过所述摄像单元所取 得的图像内检测出的人物确定为正在观看在所述显示部上所显示的电子照片的人物，通 过基于该图像的图像识别处理，判别该人物的表情。
7.根据权利要求1所述的电子相框，其特征在于，还具备人物确定信息保持单元，其保持与人物的脸相关的信息；以及人物确定单元，其根据在所述人物确定信息保持单元中保持的信息，确定正在观看 在所述显示部上所显示的电子照片的人物，所述关联存储单元，将与通过所述表情判别单元所判别的面部表情相关的信息，作 为与通过所述人物确定单元所确定的人物相关的信息，与显示中的电子照片关联起来进 行存储。
8.根据权利要求3所述的电子相框，其特征在于，所述人物确定信息保持单元，将与可能观看所述电子照片的人物的脸相关的信息任 意地进行登录，并进行保持。
9.根据权利要求1所述的电子相框，其特征在于， 还具有人物确定单元，其当要在所述显示部上显示所述两枚以上的电子照片中的某一枚 时，确定正将视线朝向该显示部方向的人物，所述表情判别单元对通过所述人物确定单元所确定的人物的面部表情进行判别。
10.根据权利要求1所述的电子相框，其特征在于，所述关联存储单元，在对于应该显示的电子照片未关联地存储与所述面部表情相关 的信息的情况下，将与所述面部表情相关的信息关联地存储。
11.根据权利要求1所述的电子相框，其特征在于，所述关联存储单元，即使在已经与应该显示的电子照片相关联地存储与所述面部表 情相关的信息的情况下，在从存储该信息开始经过了一定期间后，重新关联地存储与所 述面部相关的信息。
12.根据权利要求9所述的电子相框，其特征在于，所述表情判别单元，当所述人物确定单元确定的结果为，根据所述人物确定信息保 持单元中保持的信息没有确定出正在将视线朝向所述显示部方向的人物时，不管所述人 物确定单元的确定结果如何，对该人物的面部表情进行判别，所述关联存储单元，判别符合与通过所述表情判别单元所判别的面部表情相关的信 息的信息，是否已与现在要显示的电子照片关联起来。
13.—种电子相框，其具备能够依次显示至少两枚以上的电子照片的显示部，该电子 相框的特征在于，具备表情判别单元，其当要在所述显示部上显示所述两枚以上的电子照片的某一枚时， 判别正在将视线朝向该显示部方向的人物的面部表情；关联判别单元，其判别符合与通过所述表情判别单元所判别的面部表情相关的信息 的信息，是否已与现在要显示的电子照片关联起来；以及显示允许单元，其在所述关联判别单元的判别结果为肯定时，允许向所述显示部显 示电子照片。
14.根据权利要求13所述的电子相框，其特征在于， 还具备人物确定信息保持单元，其保持与人物的脸相关的信息；以及 人物确定单元，其根据所述人物确定信息保持单元中保持的信息，确定正在观看在 所述显示部上所显示的电子照片的人物，所述关联判别单元，判别符合与通过所述表情判别单元所判别的面部表情相关的信 息的信息，作为与通过所述人物确定单元所确定的人物相关的信息，是否已与现在要显 示的电子照片关联起来。
15.一种电子相框的控制方法，所述电子相框具备能够依次显示至少两枚以上的电子 照片的显示部，该电子相框的控制方法的特征在于，包含表情判别步骤，其对正在观看在所述显示部上所显示的电子照片的人物的面部表情 进行判别；以及关联存储步骤，其将与通过所述表情判别步骤所判别的面部表情相关的信息与显示 中的电子照片关联起来进行存储。
16. 一种电子相框的控制方法，所述电子相框具备能够依次显示至少两枚以上的电子 照片的显示部，该电子相框的控制方法的特征在于， 包含表情判别步骤，其当要在所述显示部上显示所述两枚以上的电子照片中的某一枚 时，对正在将视线朝向该显示部方向的人物的面部表情进行判别；关联判别步骤，其判别符合与通过所述表情判别步骤所判别的面部表情相关的信息 的信息，是否已与现在要显示的电子照片关联起来；以及显示允许步骤，其当所述关联判别步骤的判别结果为肯定时，允许向所述显示部显 示电子照片。
全文摘要
本发明提供一种电子相框及其控制方法，该电子相框具备能够依次显示至少两枚以上的电子照片的显示部，并对正在观看在所述显示部上显示的电子照片的人物的面部表情进行判断。将与所判断出的面部表情相关的信息和显示中的电子照片关联起来，并进行存储。另外，当对该存储的电子照片进行显示时，将与各电子照片关联存储的与面部表情相关的信息和所判断的人物的面部表情进行比较，根据其比较结果对存储的各电子照片的显示进行控制。
文档编号H04N1/21GK102014237SQ201010275698
公开日2011年4月13日 申请日期2010年9月3日 优先权日2009年9月4日
发明者上原直隆, 半田哲也, 小金孝行, 布川佑人, 水野公靖, 相原岳浩, 筱原纯人, 雨谷一志 申请人:卡西欧计算机株式会社