信息处理设备和图像处理设备的制作方法

本发明涉及信息处理设备和图像处理设备。

背景技术：

jp-a-2010-157789公开了当运动传感器检测到站在设备的操作面板附近的人时请求重新激活该设备的技术。

技术实现要素：

在jp-a-2010-157789中公开的这种技术中，例如当运动传感器检测到正在接近的人时，设备的模式从休眠模式切换至正常模式。在设备安装在多数人经过的位置中的情况下，设备可能检测到只是从设备旁边经过而不使用该设备的人的接近从而将设备的模式切换至正常模式。由于设备几乎不处于休眠模式，可能难以实现节能效果。

至少本发明的实施例的目的在于提供一种设备，其中当用户使用设备时，过渡到与功耗相关的状态。与当检测到正在接近的人时切换模式的情况相比，设备的模式几乎不会由于路过的人而切换。

[1]根据本发明的一方面，提供了一种信息处理设备，包括：控制器，其通过如下方式控制信息处理设备：使信息处理设备的与信息处理设备的功耗相关的状态从第一状态过渡至功耗高于第一状态的第二状态；以及视线检测器，其检测朝向信息处理设备的视线，其中控制器在视线检测器检测到朝向信息处理设备的视线时进行从第一状态至第二状态的过渡。

[2]根据[1]所述的信息处理设备，在预定时间内检测到朝向信息处理设备的视线的情况下，视线检测器可确定检测到朝向信息处理设备的视线。

[3]根据[2]所述的信息处理设备还可包括：验证单元，其基于其视线被检测到的人的脸或眼睛虹膜来对人进行验证。

[4]根据[1]所述的信息处理设备还可包括：接近检测器，其检测是否有人接近信息处理设备，并且，在接近检测器检测到人的情况下，视线检测器检测该人的朝向信息处理设备的视线。

[5]在根据[4]所述的信息处理设备中，接近检测器可基于人的脚尖的方向来检测是否有人接近信息处理设备。

[6]在根据[4]述的信息处理设备中，接近检测器可基于人的脸的方向来检测是否有人接近信息处理设备。

[7]根据本发明的另一方面，提供了一种图像处理设备，包括：根据[1]所述的信息处理设备。

根据[1]的信息处理设备和[7]的图像处理设备，相比当检测到接近的人时将模式从第一状态切换至第二状态的情况，可以改善节能效果。

根据[2]的信息处理设备，相比当连续地检测到视线时将模式从第一状态切换至第二状态的情况，可以高准确度确定用户使用设备的意图。

根据[3]的信息处理设备，可以在未意识到验证的情况下对用户执行验证处理。

根据[4]、[5]和[6]的信息处理设备，可以准确地确定人是否有使用设备的意图。

附图说明

将基于下面的附图来详细描述本发明的示例，其中：

图1是示出根据示例的图像处理设备的硬件配置的示图；

图2是示出图像处理设备的外观的示图；

图3是示出数码相机的视角的实例的示图；

图4是示出拍摄的图像的实例的示图；

图5是示出通过图像处理设备实现的功能配置的示图；

图6是示出拍摄时刻的实例的示图；

图7是示出模式切换处理中的图像处理设备10的操作序列的实例的示图；

图8是示出各分割区域的实例的示图；

图9是示出用户的路径与各分割区域之间的关系的实例的示图；

图10是示出检测周期表的实例的示图；

图11是示出根据变形例的图像处理设备的硬件配置的示图；

图12是示出通过图像处理设备实现的功能配置的示图；

图13是示出根据变形例的图像处理系统的硬件配置的示图；以及

图14是示出通过图像处理设备实现的功能配置的示图。

具体实施方式

[1]示例

图1示出了根据一个示例的图像处理设备10的硬件配置。图像处理设备10提供图像处理功能，诸如扫描、打印、复印、和传真。图像处理设备10是包括cpu(中央处理单元)11、ram(随机存取存储器)12、rom(只读存储器)13、hdd(硬盘驱动器)14、操作面板15、图像扫描仪16、打印机17、传送机构18、和数码相机19的计算机。

cpu11使用ram12作为工作区来执行存储在rom13或hdd14中的程序，以控制各个单元的操作。hdd14是存储cpu11的控制中使用的数据和程序的存储器。存储器不限于hdd，并且可以是另一记录介质，诸如ssd(固态驱动器)。

操作面板15设置有触摸屏和按钮。操作面板15显示指示自身设备(图像处理设备)的状态和处理的状态的信息，并且显示诸如操作者的图像以接收用户的操作，并且在按钮被按下时接收操作。这样，操作面板15是接收自身设备的操作的操作接收单元的实例。图像扫描仪16设置有图像传感器，并且光学地读出显示在纸张表面上的图像。图像扫描仪16向cpu11提供示出读取的图像的图像数据。

打印机17例如通过电子拍照处理在纸张上形成图像。图像扫描仪16和打印机17均为在纸张上执行处理的处理单元的实例。传送机构18是传送纸张的机构，并且传送图像扫描仪16从中读出图像的纸张以及打印机17在其上形成图像的纸张。数码相机19设置有镜头和图像拍摄装置，并且拍摄通过镜头的入射光所表现的人或周围场景。本示例中的数码相机19是用可见光拍摄图像的可见光相机。数码相机19可以是用红外光拍摄图像的红外相机，或者可以是使用红外光和可见光两者来拍摄图像的混合型相机。

图2示出了图像处理设备10的外观。假设图像处理设备10具有设置有操作面板15的前端面，并且由站在前端面前的用户来使用。纸张输送托盘181设置在图像处理设备10的正面。另外，原始文档输送单元182和原始文档接收单元183设置在图像处理设备10的上部。纸张排出单元184设置在图像处理设备10的侧面。

待形成图像的纸张存储在纸张输送托盘181中。待扫描的原始文档设在原始文档输送单元182中。纸张输送托盘181和原始文档输送单元182均为向诸如上述图像扫描仪16和打印机17的处理单元供应纸张的纸张输送单元的实例。扫描后的原始文档被排出至原始文档接收单元183。形成图像的纸张被排出至纸张排出单元184。原始文档接收单元183和纸张排出单元184均是向其排出处理单元处理后的纸张的排出单元的实例。

数码相机19的镜头191设置在操作面板15中。数码相机19通过镜头191拍摄站在图像处理设备10前的用户。

图3示出了数码相机19的视角的实例。在图3中，图像处理设备10前的介于双点划线之间的区域示出了数码相机19的拍摄区域a1，外部区域示出了非拍摄区域a2。

例如，当非拍摄区域a2中的用户u1前来使用图像处理设备10时，用户u1进入拍摄区域a1以操作操作面板15并且站在图像处理设备10前。数码相机19设置为朝向位于将要拍摄使用图像处理设备10的用户的方向上的位置处的该用户的拍摄方向。

图4示出了拍摄到的图像的实例。图4中，在拍摄图像b1中显示了用户u1的脸f1和眼睛e1。在图像处理设备10中，为易于操作，操作面板15设置在低于成人身高的位置处。例如，设置在操作面板15中的数码相机19的镜头191以仰望方向设置以拍摄用户的脸。因此，在图像b1中显示了天花板和附接至天花板上的荧光灯9。

图像处理设备10的cpu11执行程序以控制各个单元，从而实现将在下面描述的功能。

图5示出了通过图像处理设备10实现的功能配置。图像处理设备10设置有图像拍摄单元101、视线检测单元102、检测状态确定单元103、和模式切换单元104。例如，图像拍摄单元101具有拍摄自身设备的周围环境的功能，并且通过图1所示的cpu11和数码相机19来实现。

图像拍摄单元101拍摄图3所示的拍摄区域a1并且拍摄图4所示的使用自身设备的用户的脸。图像拍摄单元101以特定周期重复拍摄图像。图像拍摄单元101拍摄的图像中显示的荧光灯9相对于家用电源以双倍频率闪烁(例如，当家用电源为50hz时以100hz闪烁)。图像拍摄单元101的拍摄时刻可设置在荧光灯9的背光效应较弱时的非闪烁期间内。

图6示出了拍摄时刻的实例。图6中，荧光灯9在每个周期t1重复地开启和关闭。对此，图像拍摄单元101以抽样周期t2重复拍摄图像。周期t2为周期t1×n(n为自然数)。此外，图像拍摄单元101以抽样时间c1拍摄图像，从而使拍摄时间处于荧光灯9关闭的期间内。当开启期间和关闭期间各半分享周期t1时，抽样时间c1对应于短于周期t1÷2的速度(当100hz的频率下周期t1为0.01秒时，抽样时间变成短于0.005秒的1/250秒或1/500秒)。图像拍摄单元101向视线检测单元102提供所拍摄的图像。

视线检测单元102具有检测相对于自身设备的视线的功能，并且执行用于检测视线的操作(视线检测操作)。视线检测单元102是“视线检测器”的实例。视线检测单元102分析从图像拍摄单元101提供的图像。在本示例中，由于用可见光拍摄图像，基于参考点(例如，头)与运动点(例如，虹膜)之间的位置关系来检测视线。换言之，视线检测单元102基于所拍摄的自身设备的周围环境的图像来检测视线。

在用红外光拍摄图像的情况下，视线检测单元102可通过设置角膜反射点作为参考点并且设置瞳孔作为运动点来检测视线。视线检测单元102可使用上述技术之外的公知技术来检测视线。

另外，本示例中的视线检测单元102检测朝向预定位置的视线。预定位置例如是自身设备中用户所感兴趣的感兴趣位置(具体地，图2所示的操作面板15、纸张输送托盘181、原始文档输送单元182、原始文档接收单元183、和纸张排出单元184)。视线检测单元102存储各个感兴趣位置的坐标。当检测到的视线大致朝向感兴趣位置之一或者自身设备时，视线检测单元102向检测状态确定单元103提供检测到视线朝向自身设备的信息(检测结果信息)。当在预定时间内检测到朝向自身设备的视线时，视线检测单元102确定检测到了朝向自身设备的视线。

在检测到的视线未朝向感兴趣位置或自身设备的情况下，或者在未检测到视线本身的情况下，视线检测单元102向检测状态确定单元103提供指示未检测到朝向感兴趣位置的视线的事实的信息(检测结果信息)。当从图像拍摄单元101提供图像时，视线检测单元102重复执行视线检测操作并将当时的检测结果信息提供给检测状态确定单元103。

检测状态确定单元103基于视线检测单元102对视线的检测状态来确定用于将自身设备的模式从省电模式切换至正常模式的切换条件是否满足。正常模式是向自身设备的各个单元供电用于使正常操作成为可能的模式。省电模式是被供电的单元受限以尽可能节省功耗的模式，或者是相比正常模式的情况减少供电的模式。在省电模式下，功耗小于正常模式下的功耗。

然而，即使在省电模式下，也会给图5所示各个单元(即，图像拍摄单元101、视线检测单元102、检测状态确定单元103、和模式切换单元104)供电。换言之，省电模式是用于操作至少图5所示各个单元的模式。图像处理设备10在省电模式下操作的状态是“第一状态”的实例。图像处理设备10在正常模式下操作的状态是“第二状态”的实例。第一状态和第二状态均是图像处理设备10的与功耗有关的状态。第二状态是相对于第一状态具有更高功耗的状态。

例如，当视线检测单元102检测到朝向感兴趣位置的视线时，检测状态确定单元103基于检测状态来确定从省电模式切换至正常模式的切换条件是否满足。

例如，在预定检测周期为2.0秒、比例为70％、以及抽样周期t2为0.1秒的情况下，当从视线检测单元102提供了指示检测到朝向感兴趣位置的视线的检测结果信息之后在2.0秒期间提供的20条检测结果信息中的十四条以上检测结果信息表明检测到朝向感兴趣位置或自身设备的视线时，检测状态确定单元103确定满足了切换条件。当检测到指示视线朝向感兴趣位置的十四条以下检测结果信息时，检测状态确定单元103确定切换条件不满足。在确定了满足切换条件的情况下，检测状态确定单元103向模式切换单元104通知该事实。

模式切换单元104具有切换自身设备的模式的功能。例如，在自身设备中无用户操作的期间超过预定长度的情况下，模式切换单元104将自身设备的模式从正常模式切换至省电模式。模式切换单元104根据视线检测单元102的检测状态来执行从省电模式至正常模式的切换。

具体地，在从检测状态确定单元103通知满足切换条件的事实的情况下(也就是，在检测周期期间执行的视线检测当中检测到预定比例的朝向感兴趣位置或自身设备的视线的情况下)，模式切换单元104执行从省电模式至正常模式的切换。当视线检测单元102检测到所述视线时，模式切换单元104执行切换以控制自身设备从第一状态过渡到第二状态。模式切换单元104是“控制器”的实例。

图像处理设备10基于上述配置来执行切换自身设备的模式的模式切换处理。

图7示出了图像处理设备10的模式切换处理中的操作序列的实例。操作序列在图像处理设备10从正常模式切换至省电模式时开始。

首先，图像处理设备10(图像拍摄单元101)拍摄自身设备的周围环境的图像(步骤s11)。接下来，图像处理设备10(视线检测单元102)执行用于检测朝向感兴趣位置的视线的视线检测操作(步骤s12)。随后，图像处理设备10(检测状态确定单元103)确定视线检测状态是否满足切换条件(步骤s13)。

在于步骤s13中确定不满足切换条件的情况下(否)，图像处理设备10返回到步骤s11并继续操作。在于步骤s13中确定满足切换条件的情况下(是)，图像处理设备10(模式切换单元104)将自身设备的模式从省电模式切换至正常模式(步骤s14)。

如上所述，当自身设备被用户使用时，图像处理设备10用于将自身设备的供电相关模式从省电模式切换至正常模式。在现有技术中，存在例如当运动传感器检测到人的接近时切换模式的方法。在此情况下，当人只是经过时也有可能切换模式。在本示例中，与当检测到人的接近时切换模式的情况相比，由于在检测到视线的情况下切换模式，所以当人只是经过时几乎不会切换模式。

在本示例中，检测朝向感兴趣位置的视线。例如，当检测到朝向操作面板15的视线时，就检测到试图操作自身设备的用户的接近。另外，当检测到朝向纸张输送托盘181和原始文档输送单元182的视线时，就检测到试图在自身设备中设置纸张的用户的接近。

在本示例中，在检测周期内执行的视线检测操作当中预定比例的操作中检测到视线的情况下，即使在试图使用图像处理设备10的正在接近的用户瞬间从感兴趣位置或自身设备转移视线时，供电相关模式还是从省电模式切换至正常模式。

在本示例中，在很少受到荧光灯的发光影响的周期内检测视线。因此，用户的脸不会被荧光灯从背后照亮，从而与不考虑荧光灯的发光周期的情况相比改善了视线的检测准确度。

[2]变形示例

上述示例仅作为实例而给出，并且可如下地变形。另外，所述示例和各个变形示例可按照需要相互组合实施。

[2-1]检测周期

在示例中，可改变在对切换条件的确定中使用的检测周期。例如，可根据视线检测单元102在用于检测朝向感兴趣位置的视线的图像中检测到其视线的眼睛的位置来改变检测周期。在此情况下，图像处理设备10将图像分割成多个区域并存储指示各分割区域的区域信息。

图8示出了各分割区域的实例。在图8的实例中，示出了图像拍摄单元101所拍摄的图像b1。在图像b1中，显示了在图像处理设备10的前向上延伸的走廊g1和在图像处理设备10的横向上延伸的走廊g2。在本实例中，图像被分割成显示走廊g1的区域d1和显示走廊g2的区域d1之外的区域中的区域d2。

图9示出了用户的路径与各分割区域之间的关系的实例。在图9中，示出了从天花板观看时的走廊g1和走廊g2、拍摄区域a1-1、拍摄区域a1-2、以及非拍摄区域a2。在图像拍摄单元101拍摄的实际空间中，拍摄区域a1-1对应于图8所示的区域d1。在图像拍摄单元101拍摄的实际空间中，拍摄区域a1-2对应于图8所示的区域d2。

在用户u1通过走廊g1来使用图像处理设备10的情况下，以及当位于图中区域j1中的用户u1将视线转向图像处理设备10的感兴趣位置时，就检测到视线。另一方面，在用户u1通过走廊g2的情况下，以及当位于图中区域j2中的用户u1将视线转向图像处理设备10的感兴趣位置时，就检测到视线。由于通过走廊g1的距离比通过走廊g2的距离更远，因此拍摄到用户u1的脸。因此，区域j1大于区域j2。

本变形例中的检测状态确定单元103使用检测周期表，在该表中，图像中的区域与检测周期关联。

图10示出了检测周期表的实例。在图10的实例中，检测周期“h1”与图8的区域“d1”关联，检测周期“h2(h2＜h1)”与图8的区域“d2”关联。例如，当检测到朝向感兴趣位置的视线时的眼睛的位置第一次位于区域d1中时，检测状态确定单元103基于检测周期h1执行对切换条件的确定。在当时的眼睛的位置位于区域d2中时，检测状态确定单元103基于检测周期h2执行对切换条件的确定.

检测状态确定单元103不仅可使用第一次检测时的眼睛的位置，还可使用第二次检测时的眼睛的位置或者前两个检测位置的中间位置，来执行对切换条件的确定。无论哪个情况，在检测到视线后，模式切换单元104根据拍摄图像中其视线被检测到的眼睛的位置，当在检测周期内执行的视线检测操作当中符合条件的视线检测操作中检测到视线时，来切换模式。

当一致地使用符合图9所示的区域j1的长度的检测周期h1时，相比使用检测周期h2的情况，直到通过走廊g2走近图像处理设备10的用户等待模式改变之前所用的时间变长。另一方面，当使用符合区域j2的长度的检测周期h2时，相比使用检测周期h1的情况，容易发生由于检测到通过走廊g1而来但在图像处理设备10前经过而后继续走到走廊g2的用户的视线而导致的模式切换。

在本变形示例中，根据拍摄的图像中其视线被检测到的眼睛的位置的周期被用作检测周期。因此，直到用户等待模式切换之前所用的时间变短。由于检测到不会使用图像处理设备10的用户的视线而导致的模式切换得到抑制。根据眼睛的位置的周期还可用于针对变形示例中描述的过去的切换条件而确定的周期(变形示例中的检测周期)。即使在这种情况下，等待模式切换的时间也会变短，并且抑制了错误的模式切换。

[2-2]接近的检测

图像处理设备可设置有运动传感器以检测正在接近的用户。

图11示出了根据本变形示例的图像处理设备10a的硬件配置。图像处理设备10a除图1所示硬件配置外还设置有运动传感器20。运动传感器20是用于通过测量红外光、超声波、或可见光的反射量来检测是否有人接近的传感器。当测量的反射量指示有人接近时，运动传感器20向cpu11通知该事实。

图12示出了通过图像处理设备10a实现的功能配置。图像处理设备10a除图5所示各个单元外还设置有接近检测单元105和操作开始指令单元106。接近检测单元105检测是否有人接近自身设备。接近检测单元105是“接近检测器”的实例。当运动传感器20检测到有人接近时，接近检测单元105向操作开始指令单元106通知该事实。

在接近检测单元105检测到有人接近的情况下，操作开始指令单元106指令图像拍摄单元101、视线检测单元102、检测状态确定单元103、和模式切换单元104开始它们的操作。例如，在接近检测单元105配置有相机并且例如在正在接近的人的脚尖处于接近自身设备的方向上时监控脚尖的情况下，通过检测该人的视线可更准确地执行对该人是否将使用自身设备的确定。

或者，在代替监控正在接近的人的脚尖而监控正在接近的人的脸的方向并且脸朝向自身设备的情况下，通过检测该人的视线可更准确地执行对该人是否将使用自身设备的确定。另外，在安装有验证单元的图像处理设备中，用于确定脸方向的脸可用于确定验证，或者在视线检测单元中使用的眼睛的虹膜可用于确定验证，从而可减轻验证的麻烦。

当接收到指令时，图像拍摄单元101开始拍摄周围环境。当接近检测单元105检测到人朝向自身设备的接近时，视线检测单元102开始视线检测操作。因此，视线检测单元102针对接近检测单元105检测到的人检测朝向自身设备的视线。检测状态确定单元103开始确定视线检测的状态，并且模式切换单元104开始切换模式。当由操作开始指令单元106发出指令时，接近检测单元105和操作开始指令单元106结束它们的操作。

因此，直到人接近自身设备之前不会执行图像拍摄单元101的拍摄和视线检测单元102的视线检测操作。另外，例如，当图5所示各个单元的功耗大于接近检测单元105和操作开始指令单元106的操作所消耗的功率时，模式切换至省电模式，省电模式下的功耗相比图5所示各个单元的操作开始的情况要降低。

[2-3]视线检测

上面示例中对视线检测单元102检测朝向感兴趣位置的视线进行了描述。然而，视线检测单元102不仅可检测局部感兴趣位置还可检测甚至在视线大得足以覆盖自身设备的尺寸时的视线。

[2-4]图像拍摄

图像处理设备可不拍摄图像。

图13示出了根据本变形例的图像处理系统1b的硬件配置。图像处理系统1b设置有图像处理设备10b和数码相机30。图像处理设备10b设置有图1所示的从cpu11至传送机构18的配置、以及接口21。

接口21中继与数码相机30的数据交换。数码相机30设置在图像处理设备10b的周围，并且拍摄图像处理设备10b的周围环境，包括用户站立以使用图像处理设备10b的位置。

图14示出了通过图像处理设备10b实现的功能配置。图像处理设备10b设置有视线检测单元102、检测状态确定单元103、模式切换单元104、和图像获取单元107。图像获取单元107从外部拍摄装置(本实例中的数码相机30)获取通过拍摄自身设备的周围环境而获得的图像。视线检测单元102基于图像获取单元107拍摄的图像(即，包含自身设备的周围环境的图像)来执行视线检测操作。

[2-5]模式

模式切换单元104所切换的模式不限于示例中描述的那些。例如，正常模式被描述为向自身设备的各个单元的供电不受限的模式。然而，正常模式可以是针对特定功能的供电受限的模式。另外，在省电模式下除图5所示的各个单元外还可向其它功能供电。甚至在任何情况下，模式切换单元104都可根据视线检测单元102的检测状态将模式从第一模式切换至第二模式(在此情况下，第二模式是功耗大于第一模式的模式)。

[2-6]信息处理设备

上面各个实例中对执行图像处理的图像处理设备进行了描述，但是本发明可不限于此地应用于另一信息处理设备。例如，当本发明应用于安装在非指定的大量用户来访使用的位置处的诸如售货亭终端、atm(自动取款机)、和自动售票机的信息处理设备时，像示例中描述的那样模式不会被仅是经过的用户改变，因此很方便。

[2-7]发明的类型

本发明被实施为实现信息处理设备的处理的信息处理方法，以及类似于上述图像处理系统的用于实现图5所示各个单元的信息处理设备，并且实施为程序，其当由计算机执行时，使得计算机执行控制信息处理设备的功能。该程序可以记录介质(例如其中存储该程序的光盘)的形式提供，或者可通过经由诸如互联网的网络下载至计算机来安装和使用。

提供前面对本发明的示例性实施例的描述是为了说明和描述的目的。其不旨在穷尽或者将本发明限制于所公开的精确形式。显然，许多修改和变化对本领域技术人员而言将是显而易见的。选择并描述实施例是为了解释本发明的原理及其实际应用，从而使得本领域其他技术人员能够理解用于各种实施例的本发明以及适合于考虑的具体用途的各种修改。本发明的范围旨在由随附的权利要求及其等价物来限定。