显示装置、显示方法、集成电路、程序的制作方法

文档序号:2527415阅读:166来源:国知局
专利名称:显示装置、显示方法、集成电路、程序的制作方法
技术领域
本发明涉及显示装置,该显示装置具备输出光的光源、对利用者的眼睛的位置进行识别的位置识别部、使所输出的上述光的方向向上述位置识别部识别出的上述眼睛的位置的方向偏转的光偏转部、以及接受来自上述光偏转部的出射光而形成图像的显示部。
背景技术
以往,有如下显示装置,该显示装置具备输出光的光源、对利用者的眼睛的位置进行识别的位置识别部、使所输出的上述光的方向向上述位置识别部识别出的上述眼睛的位置的方向偏转的光偏转部、以及接受来自上述光偏转部的出射光而形成图像的显示部(参照专利文献1、2等)。
现有技术文献
专利文献
专利文献I :日本特表2010 - 524047号公报
专利文献2 日本特开平7 - 98439号公报
发明概要
发明要解决的技术问题
但是,存在利用者是不适于对图像进行视觉辨认的人物、不适当的人物对图像进行了视觉辨认的情况。发明内容
因此,本发明是鉴于上述问题做出的,其目的在于,提供一种显示装置、显示方法等,使图像不被不适当的人物进行视觉辨认,能够更可靠地使对所显示的图像进行视觉辨认的人物是适当的人物。
用于解决技术问题的手段
为了达成上述目的,本发明的一个实施方式涉及的显示装置具备将光输出的光源、对利用者的眼睛的位置进行识别的位置识别部、使所输出的上述光的方向向上述位置识别部识别出的上述眼睛的位置的方向偏转的光偏转部、确定上述利用者是多个人物中的哪个人物的确定部、按照所确定的上述人物来控制上述光偏转部对上述光进行偏转的方向的控制部、和接受来自上述光偏转部的出射光而形成图像的显示部。
另外,普遍的或具体的方式可以利用系统、方法、集成电路、计算机程序或记录介质来实现,也可以利用系统、方法、集成电路、计算机程序以及记录介质的任意的组合来实现。
发明效果
根据本发明的显示装置,能够使图像不被不适当的人物进行视觉辨认,更可靠地使对所显示的图像进行视觉辨认的人物是适当的人物。


图1是现有文献中的液晶显示装置的构成例。图2是表不光对多个利用者的偏转的不例。图3是本发明的实施方式1中的液晶显示装置的构成例。图4是表示本发明的实施方式1中的显示控制部的功能模块的示例。图5是表不光对两个利用者的偏转顺序的不例。图6是表示访问级别(access level)不同的信息被同时显示的示例的图。图7是表示本发明的实施方式1中的显示方法判断部的功能模块的示例。图8是本发明的实施方式1中的光的偏转方向的控制流程的示例。图9是表示两个利用者等的图。图10是表示由眼睛摄像机(eye camera)得到的利用者的拍摄图像的示例。图11是表示来自由眼睛摄像机得到的利用者的拍摄图像的轮廓提取的示例。图12是表示来自由眼睛摄像机得到的利用者的拍摄图像的瞳孔图像提取的示 例。图13是表示用于认证利用者的信息管理表的示例。图14是表示对信息的访问级别进行管理的表的示例。图15是表示光对访问级别低的利用者的偏转的示例。图16是表示对访问级别低的利用者的信息显示的示例。图17是表不光对访问级别闻的利用者的偏转的不例。图18是表不光对两个利用者的偏转顺序的不例。图19是本发明的实施方式2中的液晶显示装置的构成例。图20是表示本发明的实施方式2中的位置识别部的功能模块的示例。图21是表示光对利用者的偏转履历的示例。图22是本发明的实施方式2中的对利用者的眼睛的位置进行识别的动作流程的 示例。图23是本发明的实施方式3中的液晶显示装置的构成例。图24是表示本发明的实施方式3中的位置识别部的功能模块的示例。图25是生成基准图像时向利用者显示的显示画面的示例。图26是表示在利用者的标准的视距下拍摄的基准图像的示例。图27是表示在比利用者的标准的视距近的场所拍摄的利用者图像的示例。图28是本发明的实施方式4中的液晶显示装置的构成例。图29是表示本发明的实施方式4中的显示方法判断部的功能模块的示例。图30是表示确定用户的第1方法的示例的图。图31是表示确定用户的第2方法的示例的图。图32是表示确定用户的第3方法的示例的图。图33是表示确定用户的第4方法的示例的图。
具体实施例方式以下,参照

本发明的实施方式。另外,有对相同要素附加相同符号而省略说明的情况。并且,附图为了容易理解,以各自的构成要素为主体而示意性地进行表示。
本实施方式的技术涉及能够作为三维液晶显示装置或隐私性显示器(privacy display)使用的、可将出射方向偏转的光照射装置、以及使用其的液晶显示装置。
(作为本发明的基础的知识)
首先,对作为本发明的基础的知识进行叙述。也就是说,作为图像显示装置之一, 有液晶显示装置。液晶显示装置采用液晶面板作为空间调制元件,通过用面状照明装置(背光)从液晶面板的背面进行照明并对透过的光进行空间调制,来形成图像。
近年来,为了进一步提高图像显示装置的临场感,进行了可显示3D图像的3D图像显示装置的开发。该显示能够通过使进行视觉辨认的人的左右两眼看到相互不同的两个图像而带来视差从而达成。作为这样的3D图像的显示方式,在此之前还提出了各种方式。
例如,提出了使眼镜具有特殊的光学作用的眼镜式的3D图像显示装置,现已从各公司销售。
但是,视听时需要佩戴眼镜。因此,存在不佩戴眼镜而可进行3D图像的视听的裸眼3D显示装置的需求。
作为该裸眼3D显示装置,例如有在导光板的两侧面配置光源、在导光板的形状上反复研究的装置。由此,构成为,在使单侧(例如这里称为“右侧”)的光源点亮时,使从导光板出射的光聚光到右眼,在使另一单侧(这里称为“左侧”)的光源点亮时,使从导光板出射的光聚光到左眼(例如专利文献I)。
并且,还有采用改变光的朝向的光偏转部、动态地变更来自导光板的光聚光的位置的方法。也就是说,由此还提出了通过对显示光仅向右眼入射的状态和显示光仅向左眼入射的状态进行切换、从而能够实现裸眼立体视的方法(例如专利文献2)。
图I是表示采用光偏转部的裸眼3D显示装置的示例的图。
液晶显示装置100由将面状的照明光105出射的光源101、光偏转部102、液晶面板103构成。
作为光偏转部102,能够采用通过施加电压而可变更折射率的元件、或由MEMS (Micro Electro Mechanical Systems,微机电系统)反射镜构成的元件。
从光源101出射的照明光105在规定的时间期间,以向利用者104的右眼104a的位置入射的方式,利用光偏转部102向光105a的方向偏转。另一方面,在经过了规定的时间后,以向利用者104的左眼104b的位置入射的方式,利用光偏转部102向光105b的方向偏转。
在光偏转部102和利用者104之间,如图I所示,配置有液晶面板103,通过被从光偏转部102出射的光照明,形成显示图像。
此时,在光105a朝向右眼104a偏转的时刻,在液晶面板103上设定右眼用图像, 在光105b朝向左眼104b偏转的时刻,在液晶面板103上设定左眼用图像。由此,利用者 104能够识别3D图像。
这样的图像显示装置能够限定显示光可视觉辨认的范围。因此,除了 3D图像显示装置以外,还能够作为隐私性显示器(可防止从第三者窥见显示图像的图像显示装置)来应用。
但是,在上述说明的技术中,利用者的视点位置的检测及向多个视点的对应是困难的。
例如,在采用光偏转部的方式中,为了决定光的偏转方向,需要检测利用者的视点位置。
通常,在视点的检测中使用立体摄像机等。另一方面,在由于暗处或摄像机的动作不良而不能拍摄利用者的视点位置的情况下,会产生显示装置不能将显示光朝向利用者的眼睛正确地偏转的情况。该情况下,会产生该利用者不能观看显示的问题。
并且,在专利文献I的示例中,有视点位置被固定、在规定位置以外不能对3D图像进行视觉辨认的制约。因此,多个利用者同时观看3D图像是困难的。
本发明者对于这样的采用光偏转部的方式想到了如下的情况。也就是说,在该方式中,对于多个视点,通过依次使显示光偏转,能够使这些多个利用者同时观看3D图像。作为该示例可以考虑图2中所示的示例。
图2是表示两个利用者201及202使用液晶显示装置200的情况的图。
此时,图2的液晶显示装置200具备与图I的光偏转部相同的光偏转部,但在进行下面的动作这一点上不同。也就是说,图2的液晶显示装置200与图I的液晶显示装置100 不同,利用该液晶显示装置200的光偏转部,按照位置20la、202a、20Ib、202b的顺序来变更显示光入射的位置。
通过进行这样的控制,图2的液晶显示装置200能够对多个利用者执行显示。
但是,仅根据这样的图2的技术会产生如下的问题。即,若对多个利用者的视点无限制地使光偏转,则信息会被显示给对画面进行窥视的全部利用者。因此,难以作为隐私性显示器进行利用。
可以考虑在图2的示例中当利用者201使用液晶显示装置200作为隐私性显示器时、利用者202对液晶显示装置200进行了窥视的情况。该情况下,会对利用者202也进行显示。这种事态作为隐私性显示器是不理想的。
本技术用于解决上述以往的问题。也就是说,通过本技术,能够利用简便的方法确定利用者的视点位置,并且能够提供可提高多人利用时的便利性的液晶显示装置。
为了解决上述问题,本发明的显示装置(300)(信息显示装置、液晶显示装置)具备将光(图3的光305)输出的光源(光源301)、对利用者(图3的利用者304)的眼睛的位置进行识别的位置识别部(位置识别部402)、使所输出的上述光的方向向上述位置识别部识别出的上述眼睛的位置的方向偏转的光偏转部(光偏转部302)、确定上述利用者是多个人物(参照图13的用户1、2)中的哪个人物的确定部(用户判断部502)、按照所确定的上述人物来控制上述光偏转部对上述光进行偏转的方向的控制部(偏转控制部403)、和接受来自上述光偏转部的出射光而形成图像的显示部(液晶面板303)。
根据该结构,能够按照显示内容或利用者的访问权等来控制光的偏转方向、更适当地进行信息显示。
例如,由此,在确定了利用者是不适于对图像进行视觉辨认的人物的情况下,不进行向该利用者的位置的、图像的光的偏转。由此,能够避免向不适当的人物显示图像而使不适当的人物对图像进行视觉辨认。由此,能够更可靠地使对图像进行视觉辨认的人物是适当的人物。
并且,可以是,具备对信息(表502t、503t)进行保持的显示信息管理部(显示信息管理部503),该信息表示各个上述人物是否具有对显示信息(例如图6的图像612)进行访问的权限,该显示信息是上述图像的至少一部分,在表示由上述确定部确定了的上述人物 (例如图13的利用者2)不具有上述权限的情况下,上述控制部对上述光偏转部的偏转方向进行控制,以使作为上述光(光305)的至少一部分的、上述显示信息(图像612)的光(图15 的光1303)不向上述利用者(利用者192)的上述眼睛的位置入射。
根据该结构,能够防止对没有访问权的利用者显示信息,能够进一步提高隐私性。
并且,可以是,具备对上述利用者的图像进行拍摄的利用者拍摄部(眼睛摄像机 306a、306b),上述确定部根据上述利用者拍摄部拍摄到的上述图像,确定上述人物是上述多个人物中的哪个人物。
根据该结构,能够不对利用者强加密码输入等负担而简便地确定利用者。
并且,可以是,具备形状判断部(瞳孔形状判断部501),该形状判断部根据上述利用者拍摄部拍摄到的上述图像,识别上述利用者的轮廓、瞳孔形状中的至少一个,上述确定部(用户判断部502)利用所识别到的上述至少一个来进行确定。
根据该结构,能够利用利用者的特征更正确地确定利用者。
并且,可以是,上述利用者佩戴发送装置,该发送装置发送上述确定部进行的确定所用的信息,上述确定部通过接收上述发送装置发送的上述信息,确定上述利用者是上述多个人物中的哪个人物。
根据该结构,即使在暗处等利用者难以进行拍摄的情况下也能够更正确地确定利用者。
并且,可以是,上述确定部确定二个以上的上述利用者中的每个,上述控制部使由上述光源输出的上述光依次对两个以上的上述利用者偏转。
根据该结构,能够对多个利用者同时地进行安全性高的信息显示。
并且,可以是,上述显示部能够将访问权限互不相同的上述显示信息至少同时显示两个(图像611、612),所保持的上述信息(表502t、503t)确定各个上述人物(用户1、2···) 是否具有对各个上述显示信息进行访问的权限,上述控制部根据所确定的上述人物是否具有各个上述显示信息(图像611、612)的上述权限,控制上述光偏转单元的偏转方向。
根据该结构,能够提高信息显示的自由度并使信息的安全性提高。
并且,可以是,上述显示部能够将用于实现三维显示的右眼用视差图像和左眼用视差图像(图18的各图像)交替显示,上述确定部保持用于决定对各个上述利用者(图18的 A、B)进行二维显示和上述三维显示中的哪一个的信息,上述控制部基于上述信息来控制上述光偏转部的偏转方向,以使对决定为进行上述二维显示的上述利用者(图18的B)的左右眼睛的位置,仅入射上述右眼用视差图像或上述左眼用视差图像中的某一个(图18的右视差图像)的光。
根据该结构,能够容易地进行2D/3D显示的切换。
并且,可以是,本发明的液晶显示装置具备取得终端信息(图21的第4 6列)的终端状态取得部(终端状态取得部1702),该终端信息表示上述利用者保持终端的手的位置或终端的倾斜度中的至少一个,上述位置识别部具备偏转履历积累部(偏转履历积累部 1803),该偏转履历积累部将与上述利用者的眼睛的位置相关的信息(第2 3列)和上述终端信息(第4 6列)建立关联而进行记录,上述位置识别部通过检索与所取得的上述终端信息(第4 6列)建立了关联的上述信息(第2 3列),推定上述利用者的眼睛的位置。
根据该结构,在不能使用眼睛摄像机等的状况下,在不能拍摄利用者的眼睛的位置的情况下,也能够推定利用者的眼睛的位置。
并且,可以是,本发明的液晶显示装置中,与上述利用者的眼睛的位置相关的上述信息(第2 3列)是上述光偏转部的动作履历。
根据该结构,能够容易地求取用于使光向利用者的眼睛入射的光的偏转方向。也就是说,例如,图21的各行中的右眼角度等可以是显示装置的过去的动作时所记录的、该动作中的右眼角度等。
并且,可以是,本发明的液晶显示装置中,具备手动偏转调节部,该手动偏转调节部可使上述利用者调节上述光偏转部的偏转方向。
根据该结构,能够使利用者自己决定最佳的光的偏转方向。另外,该手动偏转调节部例如是进行用户的操作的键、按钮等。通过进行上述操作,能够对偏转方向进行调节或修正。
并且,可以是,本发明的液晶显示装置具备用于拍摄上述利用者的图像的利用者拍摄部(眼睛摄像机2102),上述位置识别部保持基准图像(图像2401 ),通过比较由上述利用者拍摄部拍摄到的图像(图像2402)和上述基准图像来推定利用者的视距(L2),判断上述利用者的眼睛的位置,上述基准图像是在上述利用者视觉辨认上述显示装置时的标准视距下(图26的LI)对利用者进行拍摄而得到的图像。
根据该结构,在不采用立体摄像机的情况下,也能够推定利用者的视距,具有削减终端的成本的效果。
并且,可以是,本发明的液晶显示装置具备判断来自上述光源的上述光的强度的输出判断部(输出判断部2602),在上述输出判断部的判断结果超出了基准值的情况下,上述光偏转部以使上述出射光不向上述利用者的眼睛入射的方式来决定上述光偏转部的偏转方向。
根据该结构,能够向利用者提供安全性更高的显示装置。
若采用本发明的光照射装置以及使用了该光照射装置的液晶显示装置,则能够简易地推定利用者的视点位置,并且在多个人使用的情况下也能够实现隐私性高的显示器。
图像的光能够更可靠地入射到适当的位置。
并且,可以是,上述确定部对位置被识别出的上述利用者是相对于经过上述显示装置的显示面的中心的直线(图30的直线2903)更近的人物2901还是更远的人物2902进行确定,在确定为是近的上述人物的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是远的上述人物的情况下,上述控制部不使上述光入射。
由此,能够比较精度良好地避免光所入射的人物是不适当的人物。
并且,可以是,上述确定部对位置被识别出的上述利用者是视距在事先决定的范围3003 (图31)内的人物3001还是视距不在上述范围3003内的人物3002进行确定,该视距是位置被识别出的上述利用者到上述显示装置的距离,在确定为是上述范围内的上述人物的情况下,上述控制部使上述光(图3的305)向被识别出的上述位置入射,在确定为是不在上述范围内的上述人物的情况下,上述控制部不使上述光入射。
由此,能够比较精度良好地避免光所入射的人物是不适当的人物。
并且,可以是,上述确定部对位置被识别出的上述利用者的从一只眼睛向另一只眼睛的方向是与规定方向(图32的方向3101d)相同方向的人物3101还是不同方向的人物 3102进行确定,在确定为是上述相同方向的人物的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是上述不同方向的人物的情况下,上述控制部不使上述光入射。
由此,能够比较精度良好地避免光所入射的人物是不适当的人物。
并且,可以是,上述确定部对位置被识别出的上述利用者是上述显示装置的视场角3203 (图33)内的位置的人物3201还是不在上述视场角3203内的位置的人物3202进行确定,在确定为是上述视场角内的位置的上述人物3201的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是不在上述视场角内的位置的上述人物3202的情况下,上述控制部不使上述光入射。
由此,能够比较精度良好地避免光所入射的人物是不适当的人物。
另外,这些普遍的或具体的方式可以利用系统、方法、集成电路、计算机程序或记录介质来实现,也可以利用系统、方法、集成电路、计算机程序或记录介质的任意的组合来实现。
另外,以下说明的实施方式都表示本发明的优选的一个具体例。以下的实施方式所示的数值、形状、材料、构成要素、构成要素的配置位置以及连接形态、步骤、步骤的顺序等是一个示例,而不限定本发明的主旨。并且,对于以下的实施方式中的构成要素中、表示本发明的最上位概念的独立权利要求中未记载的构成要素,被作为构成更优选的形态的任意的构成要素而说明。
(实施方式I:安全性对策)
本实施方式I中,在利用光偏转元件而能够对多个利用者同时进行3D显示的液晶显示装置中,对用于确保所显示的信息的安全性或隐私性的构成进行表示。
图3是表示本实施方式的液晶显示装置300的示意图的图。
液晶显示装置300由将面状的光(照明光)305出射的光源301、光偏转部302、液晶面板303、从利用者304来看位于右侧的右侧眼睛摄像机306a、从利用者304来看位于左侧的左侧眼睛摄像机306b、和显示控制部307构成。
光源301为了将液晶面板303照明而对利用者304形成显示光,出射面状的照明光 305。
另外,光源301可以是例如将白色LED(light_emitting diode,发光二极管)等排列多个而成的光源,也可以采用将红、蓝、绿的LED排列多个而成的光源。该情况下,可不使用导光板而构成液晶显示装置。并且,光源301可以是使配置于导光板的侧面的LED、CCFL (Cold Cathode Fluorescent Lamp,冷阴极萤光灯)、激光等光源点亮的结构,这里不对其进行限定。
光偏转部302是用于将照明光305朝向利用者偏转的部分。在本实施方式中,光偏转部302由通过施加电压而可变更折射率的元件构成。通过利用可变更折射率的元件作为光偏转部302,不需要在光偏转部302中具备可动部。因此,能够使液晶显示装置300的可靠性及耐久性提高。
另外,可以在光偏转部302和液晶面板303之间具备将偏转角度扩大的透镜。另外,这样,可以设置例如由上述的透镜和上述的光偏转部302构成的光偏转部。该情况下, 即使液晶面板303和利用者304之间的间隔比较窄也能够适当地观看显示。这样,3D液晶显示装置、隐私性显示器具有可视觉辨认的范围变广的效果。
另外,作为光偏转部302,也可以使用由MEMS (Micro Electro Mechanical Systems)反射镜构成的元件。该情况下,能够使将照明光305偏转的角度成为比较大的角度,即使利用者304较大地移动头也能够连续观看显示。
眼睛摄像机306a及眼睛摄像机307b分别对利用者304的眼睛进行拍摄,将拍摄到的图像的信息通知给显示控制部307。
显示控制部307根据被通知的信息,判断利用者304的眼睛的位置,并决定由光偏转部302引起的照明光305被偏转的方向。
图4是本实施方式中的显示控制部307的功能框图。
在存在多个利用者的情况下,显示方法判断部401决定对各个利用者的显示方法。另外,关于显示方法判断部401的具体动作,后面详细叙述。
位置识别部402根据从眼睛摄像机306a、306b通知的拍摄图像,判断利用者304 的右眼304a及左眼304b相对于液晶显示装置303的位置。例如,根据来自眼睛摄像机306a 的一个拍摄图像和来自眼睛摄像机306b的另一个拍摄图像这两个拍摄图像,进行该判断。
偏转控制部403进行如下动作。即,有上述位置识别部402根据来自两个眼睛摄像机306a、306b的拍摄图像而判断的、利用者304的两个眼睛的位置的信息。在该动作中利用该信息。在该动作中,利用该信息,以使从光源301 (图3)出射的光305在规定的时间期间向右眼304a的位置入射的方式,由光偏转部302将照明光305向光305a的方向偏转。
并且,偏转控制部403以在经过了规定时间后使光305向左眼304b的位置入射的方式,由光偏转部302将照明光305向光305b的方向偏转。
液晶面板303 (图3)配置于光偏转部302和利用者304之间,被从光偏转部302 出射的光照明,由此形成显示图像。
此时,液晶面板303在光305a朝向右眼304a偏转的时刻,在液晶面板303上设定右眼用图像。并且,液晶面板303在光305b朝向左眼304b偏转的时刻,在液晶面板303上设定左眼用图像。由此,利用者304能够识别3D图像。
并且,本实施方式中的液晶显示装置,即使在有多名利用者的情况下,也对所检测到的这些多个利用者的多个眼睛中的全部眼睛,将光一边偏转一边聚光。也就是说,通过在各个时刻在液晶面板上显示适当的图像,即使在存在多个利用者的情况下,任一个利用者也都能够识别3D图像。由此,与仅存在一个利用者的情况相同,能够使该显示器作为3D显示器来发挥功能。该示例在图5中表示。
图5是表示动作例的图。
由图5的上段、中段、下段中的下段表示时间轴。如该时间轴的最右端的箭头所示的那样,图5中,在更靠右侧的位置上示出了更靠后的时刻下的动作。在上段的各个位置上,示出了该位置的时刻下的、由液晶面板303显示的图像是右眼用和左眼用中的哪个图像。在中段的各个位置上,示出了该位置的时刻下的、所偏转的方向是向利用者A、B中的哪个利用者的、左右中的哪个眼的方向。
在图5的例子中,如图示的那样,在液晶面板303显示右眼用的图像的期间,光偏转部302将照明光305交替地向两个利用者A、B的右眼偏转。并且,在液晶面板303显示左眼用的图像的期间,光偏转部302将照明光305交替地向两个利用者A、B的左眼偏转。 通过进行这些处理,对两个利用者A、B的任意一个都能进行3D显示。
但是,在利用者存在多个的情况下,若在液晶显示装置300上显示秘密性高的信息(例如后述的图6的图像612),则有可能产生问题。
图6表示包含秘信息的显示的示例。
这里,图6所示的“秘”以及“一般”的文字分别表示信息的访问级别。
本实施方式中,秘信息是能够阅览的利用者被限制的信息,一般信息是所有的利用者可阅览的信息。
当液晶显示装置300进行该图6的显示时,存在可对秘信息进行访问的一个利用者(例如上述的利用者A)和不能对秘信息进行访问的另一个利用者(例如利用者B)同时对画面进行了视觉辨认的情况。
在液晶显示装置300中,在该情况下,对两个利用者的眼睛,通过利用光偏转部 302将显示光偏转,可避免产生不适当的状况。也就是说,在液晶显示装置300中,可避免对秘信息无访问权限的另一个利用者(利用者B)也对秘信息(图像612)进行视觉辨认。
本实施方式I中,为了应对这样的问题,当多个利用者同时地对液晶显示装置300 进行视觉辨认时,显示控制部307进行用于使所显示的信息的安全性提高的显示控制。
以下,对于显示控制部307使所显示的信息的安全性提高的处理,示出具体的顺序。
图7是表示本实施方式的显示控制部307 (图3、图4)中包含的显示方法判断部 401 (图4)具有的功能模块构成等的图。对图7的各功能模块的说明在后面进行详述。
图8是表示由显示控制部307进行的处理的流程的图。
图9是表示实施方式I的液晶显示装置300和两个利用者191、192的图。
并且,显示控制部307通过进行图8所示的步骤S61 S65的处理,使所显示的信息的安全性提高。并且,以下为了简单,如图9所示,将两个利用者191、192同时使用液晶显示装置300的情况作为处理的示例来表示。
<步骤S61利用者图像拍摄>
在本步骤S61中,眼睛摄像机306a、306b分别拍摄利用者304 (两个利用者191、 192)的眼睛。
另外,如上所述,为了通过位置识别部402进行位置的识别,利用者304的两个拍摄图像被利用。在该S61中,例如拍摄被位置识别部402所利用的这两个拍摄图像。
图10是表示本实施方式中的拍摄图像的示例的图。
图10的拍摄图像是眼睛摄像机306a的拍摄图像。该拍摄图像中,同时拍摄了两个利用者191、192的脸的脸图像(图像191a、192a)。眼睛摄像机306a、306b分别将拍摄的拍摄图像(图像)通知给瞳孔形状判断部501 (图7)。
另外,本实施方式中,如图10那样示出了将多个利用者同时拍摄到一个拍摄图像中的示例。另一方面,也可以对每个利用者进行分别的拍摄。例如,可以利用眼睛摄像机 306a、306b分别进行对利用者191、192单独拍摄那样的处理,也可以是,采用能够将眼睛摄像机306a、306b的拍摄方向变更的结构,在对利用者191、192进行拍摄时,将眼睛摄像机的方向变更来拍摄。该情况下,由于在一个拍摄图像中仅映出一个利用者,因此有以后的利用者的脸识别等变简单的效果。
<步骤S62瞳孔形状识别(认证数据生成)>
在本步骤S62中,瞳孔形状判断部501根据在上述步骤S61中取得的利用者的拍摄图像,生成用于认证各利用者而需要的认证数据。另外,以下为了说明方便,详细说明仅根据通过S61取得的、位置识别部402所利用的两个拍摄图像中的一个来生成认证数据的例子。另外,如在后面详细说明的那样,例如也可以根据两个拍摄图像双方来生成认证数据。
本实施方式I中,为了认证各利用者,使用利用者的瞳孔图像。因此,瞳孔形状判断部501根据由眼睛摄像机得到的拍摄图像(例如,图10中所示的眼睛摄像机306a的拍摄图像),进行将利用者191、192的轮廓(后述的图11的轮廓191b、192b)提取的处理。瞳孔形状判断部501在进行了该处理后,识别位于所提取到的各个利用者的轮廓内的瞳孔,分别生成利用者191的瞳孔图像数据以及利用者192的瞳孔图像数据(参照后述的图12)。
图11是表示根据从眼睛摄像机取得的拍摄图像进行了利用者的轮廓提取的结果的图。如图11所示,利用者191、192各自的轮廓形状被识别,利用者的脸的部分(轮廓191b、 192b)的数据被提取。
图12是表示根据图11中表示的利用者的轮廓、进一步提取了各利用者的瞳孔图像的示例的图。
如图12所示,对于利用者191、192,分别生成了瞳孔图像数据901、902 (图7的信息 5011)。
瞳孔形状判断部501将生成的认证数据(图7的信息5011)通知给用户判断部 502。
<步骤S63用户判断>
在本步骤S63中,用户判断部502利用在之前的步骤S62中生成的认证数据,进行各利用者的认证判断,进行各利用者可利用的信息的判断。
本实施方式中,用户判断部502将用于根据瞳孔图像数据来确定利用者的信息保持在后述的用户管理表(图13等)中。用户判断部502通过利用该表来进行利用者的认证。
图13是表不本实施方式中的用户管理表的例子(表502t)的图。
图13中,记录了登记到液晶显示装置300的利用者的用户名(第I列)、表示该用户对信息的访问级别的信息(第2列)、以及认证所使用的认证数据(第3列)。
本实施方式中,作为认证数据,采用瞳孔图像数据。因此,在图13中表示的用户管理表的各利用者的认证数据栏(第3列)中,保存有用于认证各利用者的图像文件名(图13 的文件A、文件B)。
用户判断部502对从瞳孔形状判断部501通知的瞳孔图像数据(图12)、和保存在用户管理表中的上述图像文件名(图13的第3列)的文件即瞳孔图像文件进行比较。通过该比较,若存在一致的瞳孔图像数据及瞳孔图像文件的组合,则用户判断部502进行如下判断。该判断中,判断为当前正在对液晶显示装置300进行视觉辨认的利用者是登记在用户管理表中的、与该瞳孔图像文件的文件名(图13的第3列)建立了关联的用户名(第I列) 的用户。
图12及图13的例子中,利用者191 (图9)的瞳孔图像数据901和保存在文件A 中的瞳孔图像数据一致。因此,对于利用者191,判断为,用户名是用户I (图13的第2行第I列),是能够访问秘信息的用户(第2行第2列)。同样地,对于利用者192,判断为,用户名是用户2 (第3行第I列),是能够访问一般信息的用户(第3行第2列)。
用户判断部502将对各利用者判断出的访问级别的信息(图7的信息5021)对偏转控制部403进行通知。
另外,图13中表示的认证数据(第3列)如上所述可以是文件名。也就是说,可以采用通过这样使认证数据是文件名等而将瞳孔图像数据不直接保存到表中的方法。另一方面,也可以相反地采用进行直接保存的方法。在后者的直接保存的情况下,由于不需要检索瞳孔图像数据的文件,因此能够更高速地进行利用者的认证。
<步骤S64显示信息判断>
在本步骤S64中,显示信息管理部503 (图7)确定在液晶面板303上显示的各信息(参照后述的图14的各行)。并且,在S64中,显示信息管理部503进行所确定的被显示的各信息的访问级别(参照第2列)的判断。
本实施方式中,显示信息管理部503保持针对各信息对该信息的访问级别和该信息的当前的显示范围(参照图6)进行管理的信息管理表(图14的表503t)。
图14是表不本实施方式中的信息管理表的不例的图。
图14的示例中,示出了信息I (第2行)的访问级别(第2行第2列)是秘信息的访问级别。
并且,图14的示例中,显示区域(第3列)用以画面左下为原点的坐标系来表现。 也就是说,信息的显示区域用该坐标系中的、该显示区域的左下的坐标和右上的坐标的组来表现。并且,各个坐标的数值将液晶面板的I像素的长度作为I来表现。并且,对于当前未显示的信息,如信息3的行(第4行)所示那样,该信息的显示区域的信息不存在,是空栏 (第4行第3列)。
显示信息管理部503根据信息管理表503t,提取与当前的显示信息相关的数据 (图7的数据503d),通知给偏转控制部403。例如,根据图14的表503t,提取与图6的图像 612 (例如信息I)建立了关联的信息(第2行第2、第3列)和与图像611 (例如信息2)建立了关联的信息(第3行第2、第3列)并通知。
另外,本实施方式中,虽然显示区域的表现如上述那样用左下的坐标和右上的坐标的组进行了表现,但显示区域的表现方法无需限定于该方法。并且,显示区域的信息也可以仅对需要限制显示的信息(本实施方式的例子中为秘信息)进行保持。该情况下,能够削减信息管理表的信息量、并且削减与显示区域相关的信息更新的频度。
<步骤S65偏转控制>
本步骤S65中,进行基于如下信息的动作。该信息是指,在上述步骤S63中取得的各利用者的访问级别(图13第2列)、以及在上述步骤S64中提取的被显示的信息的访问级别(图14的第2列)和显示区域的信息(图14的第3列)。该动作中,基于这些信息,偏转控制部403对于在液晶显示装置300上显示的上述各信息,控制在显示各信息时进行照明的照明光305 (图3)的偏转方向。
本实施方式中,偏转控制部403按照由位置识别部402识别到的各个利用者的位置,控制光的偏转方向。
并且,如上述的图5所示,对多个利用者交替地进行照明光向各个利用者的方向的偏转。
此时,偏转控制部403对访问级别是一般的访问级别的利用者,以使对访问级别是秘的访问级别的信息进行照明的照明光不偏转的方式进行光的偏转。
图15是表示对访问级别是一般的访问级别的利用者的光偏转的示例的图。
图15的区域1301是液晶面板303 (参照图3等)上的显示有秘信息的部分。存在照射该区域1301的照明光1303。另外,图15中,附加该符号1303而描绘了两条引出线。 区域1301中的照明光1303示意性地通过由这两条引出线所指的两个箭头线来表示。该照明光1303向不向利用者192的眼睛入射的、朝向该眼睛的方向以外的其他方向303d偏转。 另外,在图15的示例中,例示了其他方向303d是相对于液晶面板303的显示面垂直的方向 (图15的方向303d)的情况。另外,还可以考虑利用者192的眼睛的位置是从区域1301垂直的方向的位置的情况等。例如,在这些情况等下,上述的其他方向303d可以不是垂直的方向。
另一方面,图15的区域1302是显示有访问级别是一般的访问级别的信息的区域。 对该区域1302进行照明的照明光1304以向利用者192的眼睛入射的方式偏转。此时,将利用者192视觉辨认的显示图像的示例在图16中表示。
图16是示出了图6中所示的秘信息部分(部分712)不对利用者192显示的图。这样,在利用者192识别的图像71中,仅显示一般信息的部分711,不显示秘信息的部分712。 另外,秘信息的部分712例如也可以被识别为全黑的部分。
图17是表不光对具有对秘/[目息的访问级别的利用者191的偏转的不例的图。
如该例所示,对于该利用者191,以使画面上的全部的显示向眼睛入射的方式进行偏转。由此,区域1301的显示和区域1302的显示都向眼睛入射。因此,该利用者191如图 6所示,能够对包含秘信息(图像612)的全部的信息进行视觉辨认。
通过进行以上的S61 S65的处理,即使在多个利用者对液晶显示装置300进行视觉辨认的情况下,也能够使显示的安全性提高。
另外,本实施方式中,为了简单而示出了利用者是二人的情况,但即使液晶显示装置300的利用者是三人以上,也能够通过执行同样的处理来确保所显示的信息的安全性。
另外,为了简单而示出了采用图10所示的由眼睛摄像机306a拍摄到的图像来进行显示控制的示例。另一方面,也可以进行根据眼睛摄像机306a的拍摄图像、眼睛摄像机 306b的拍摄图像这两个拍摄图像分别生成认证数据等、并附加于各自的拍摄图像来进行利用者的识别。该情况下,能够更正确地识别利用者。
另外,本实施方式中,采用了瞳孔图像数据作为用于认证利用者的认证数据,但也可以利用其他数据来进行利用者的认证。例如,可以如图11所示的那样,将利用者的轮廓或脸数据利用为用于认证利用者的数据。该情况下,由于能够更详细地判断利用者的特征, 因此能够使认证利用者的精度提高。并且,也可以采用脸图像以外的数据来进行利用者的认证。例如,可以通过利用者佩戴发出红外线信号等用于认证的信号的眼镜或耳机等发送装置,来进行利用者的认证。该情况下,能够更正确地识别利用者。并且,也可以通过对眼镜等安装不发出直接信号的识别部(例如QR码(注册商标))等、并利用眼睛摄像机将它们识别来进行利用者的识别。该情况下,能够不对眼镜等设置多余的装置而识别利用者。
另外,本实施方式中,将信息的访问级别用秘或一般这两个种类来表现,但也可以更详细地规定访问级别,也可以能够按照每个信息单独地设定可访问的用户。该情况下,能够使显示装置的安全性进一步提高。
另外,本实施方式中,以图6所示的秘信息和一般信息混合存在的形式下的信息显示为例进行了举例,但也可以进行在液晶面板303上显示的信息全部是秘信息或一般信息中的某一种那样的显示。该情况下,由于不需要按照各个信息的每个来进行显示区域的管理等,因此能够削减显示控制时的处理成本。
另外,步骤S61 S63的处理和步骤S64的处理的顺序可以是相反的,也可以同时处理。
另外,在位置识别部402的右眼、左眼的位置检测中,本实施方式采用了两个摄像机,但当然也可以采用其他手段,本实施方式不限定眼睛位置的检测手段。
另外,如上所述,可以考虑使用通过施加电压来控制折射率的元件作为光偏转部 302的情况。该情况下,例如,光源采用红色激光(波长640nm)、绿色激光(波长532nm)、蓝色激光(450nm)的各激光来作为光305。一边将这些各激光按时间序列依次照射,一边将照射各个激光时的光偏转部302的折射率调整为适当的折射率。由此,能够使对各色激光的偏转角相同。这样,能够构成没有颜色偏差的均匀的液晶显示装置。
图18是表示利用本技术的控制的一例的图。
并且,本实施方式中,示出了通过认证利用者而按照每个利用者进行访问级别不同的信息的显示的示例。另一方面,可以采用同样的利用者认证方法来按每个利用者进行将2D显示和3D显示切换的显示。例如,可以考虑在对两个利用者A、B进行显示时希望对利用者A进行3D显示而对利用者B进行2D显示的情况。该情况下,通过执行本实施方式中的步骤S61 S63 (图8)的处理,能够识别多个视点与哪个利用者相对应。之后,例如如图18所示,通过控制光偏转部302,能够对利用者A进行3D显示并对利用者B进行2D显/Jn ο
另外,图18中表示的偏转顺序是单纯的一例,也可以通过其他偏转顺序来进行每个利用者的2D/3D显示的切换。例如,能够通过对利用者A增加将光偏转的时间来对利用者A进行闻売度的显不。
另外,本实施方式中,虽然通过立体摄像机(两个眼睛摄像机306a、306b )测定了利用者的眼睛的位置,但也可以采用别的方法。例如可以对各个眼睛摄像机306a、306b使用红外线摄像机。并且,光源301除了 RGB的显示光还同时出射红外线。由此,可以通过对利用者偏转红外线并利用该红外线摄像机测定来自利用者的瞳孔的红外线的反射光,从而测定利用者的眼睛的位置。该情况下,即使在暗处也能够测定利用者的眼睛的位置。并且,也可以采用使在利用者的眼睛的位置具备眼镜形状的红外线发生装置、通过测定其红外线来推定利用者的眼睛的位置的方法。该情况下,能够更正确地推定利用者的眼睛的位置。
另外,本实施方式中,虽然例示了利用者是两人的情况,但利用者的数量也可以是三人以上。例如,在访问级别高的利用者A、B和访问级别低的利用者C这三人视觉辨认显示装置的情况下,可以进行仅对利用者A、B进行信息显示等的处理。该情况下,有能够多人安全地共有秘密性高的信息等的效果。
这样,例如也可以确定利用者(参照图3的利用者304)的位置。
具体来说,所确定的位置是该利用者的眼睛的位置等(参照右眼304a的位置等)。
该光的方向可以向所确定的位置、图像(例如图6的图像612)的光入射的方向偏转。
但是,也可以考虑作为利用者而存在第一利用者(图17的利用者191,图13的用户I)和与第一利用者不同的第二利用者(利用者192,用户2)的情况(参照图9等)。
并且,还可以考虑图像是仅适合被第一利用者看到而不适合被第二利用者看到的图像(参照图像612等)。
因此,可以判断所确定的位置是第一利用者的位置还是第二利用者的位置。
可以是,仅在判断为是第一利用者的位置的情况下,向该位置和向使图像(例如图 6的图像612)的光(参照图17的光1304)入射的方向进行偏转,在判断为是第二利用者的位置的情况下,不进行偏转(参照图15的光1303)。也就是说,在判断为是第二利用者的位置的情况下,可以向利用者的位置的方向以外的其他方向303d (图15)进行偏转。可以通过变更控制部403进行实现这样的偏转的控制。
由此,直到判断为是第二利用者的位置的情况为止,进行光向所确定的位置入射的偏转,避免光向不适当的位置入射,能够可靠地将光向适当的位置入射。
另外,所确定的利用者的位置可以是右眼及左眼中的预先确定的一侧的眼睛的位置。
并且,上述图像可以是3D影像中的由该一侧的眼睛观看的图像。并且,可以是,在该3D影像被第一利用者观看的同时,该3D影像以外的其他影像(例如3D影像)被第二利用者观看。
可以是,仅第一利用者是具有上述的图像的访问权的利用者,第二利用者不具有访问权,或仅第一利用者是被认证了观看上述图像的利用者,第二利用者是未被认证的利用者。
上述图像可以是在全体的图像(参照图6的图像61)中包含的、第一图像(图像 611)和第二图像(图像612)中的第二图像(参照图12)。
例如,可以是,第一图像是图6中的一般信息的区域的图像,另一方面,第二图像是由阴影所示的秘信息的区域的图像612。
S卩,可以是,第一利用者不仅看到第一图像还看到第二图像,另一方面,第二利用者仅看到第一图像而看不到第二图像(参照图16等)。
(实施方式2:瞳孔位置履历积累)
本实施方式中,在能够通过光偏转元件进行3D显示的液晶显示装置1701 (图19 等)中,示出了能够简便地判断利用者的眼睛位置的结构。
图19是表示本实施方式中的液晶显示装置1701的构成图的图。
另外,对与实施方式I相同的构成要素,采用相同的符号,适当地省略详细说明。
本实施方式中,液晶显示装置1701具有终端状态取得部1702。终端状态取得部 1702具备用于检测利用者304在终端(液晶显示装置1701)上触摸的画面上(液晶面板303 上)的位置的接触式传感器、以及用于检测液晶显示装置300相对于水平方向的倾斜角度的倾角传感器等。终端状态取得部1702具备采用这些来对利用液晶显示装置1701的状态进行识别的功能。本实施方式中,接触式传感器被设置在液晶面板303上,还作为接触面板向利用者304进行输入功能的提供。
图20是表示本实施方式2的位置识别部402 (参照图4)的功能模块等的图。
本实施方式2中,显示控制部307与实施方式I相同,具有图4所示的功能模块。 进而,在本实施方式2中,位置识别部402为了简便地识别利用者的眼睛的位置而具有图20 所示的功能模块。对图20的各功能模块1801 1803的详情在后面进行详述。
本实施方式中,液晶显示装置1701与实施方式I同样,通过眼睛摄像机306a、307b 来确定利用者的眼睛的位置。并且,基于所确定的位置的信息,光偏转部302将照明光305 偏转,从而实现3D显示。
但是,可以考虑,在液晶显示装置1701在暗处被利用的情况下、或在眼睛摄像机 306a、306b的一方或双方发生了故障等情况下,难以通过这些眼睛摄像机306a、306b来推定利用者的眼睛的位置。该情况下,由于无法推定利用者的眼睛的位置、无法将照明光305 正确地入射到利用者的眼睛,因此会发生无法对利用者进行信息显示的情况。
为了防止这样的情况,本实施方式的位置识别部402具有偏转履历积累部1803 (图20)。该偏转履历积累部1803将光偏转部302对光进行了偏转的方向(参照信息4031) 和能够从终端状态取得部1702取得的信息(信息1701a)建立关联,并存储为偏转履历管理表(表 1803t)。
图21是表示偏转履历积累部1803具有的偏转履历管理表的示例(表1803t)的图。
本实施方式2中,光偏转部302 (图19)进行的照明光的偏转的履历利用下面的角度而被记录。即,为了使液晶面板303的中央的、相对于液晶面板303的显示面垂直入射的光向利用者的右眼或左眼入射,向作为垂直方向以外的其他方向等的偏转后的方向偏转。 利用该变更后的方向与偏转前的垂直方向之间的角度而被记录。
在图21的示例中记录有,通过使照明光相对用户I (第2行)向右方向偏转15度, 而使照明光向利用者的右眼入射(第2行第2列)。并且记录有,通过使照明光向左方向偏转15度,而能够使照明光入射到该利用者的左眼(第2行第3列)。
并且,从终端状态取得部1702取得的数据作为右手位置(第4列)、左手位置(第5 列)、以及终端倾斜(第6列)的信息而被记录。右手位置、左手位置分别用以液晶面板303 的左下角为原点的坐标来表现。并且,各个坐标的数字是以液晶面板的一个像素的长度为单位的数字。
在图21的用户I (第2行)的示例中示出了,在进行3D显示时,利用者304的右手触摸到从画面的左下起向右离开1000像素、向上离开500像素的位置(第2行第4列)。并且,示出了,左手触摸到从画面的左下起向上离开500像素的位置(第5列)。并且,示出了, 对于终端倾斜(第2行第6列)而言,在利用者304视觉辨认信息时,将液晶显示装置1701 从水平方向倾斜20度而进行了视觉辨认。通常,可以认为,对于日常使用的显示装置(平板电脑或PC显示器、电视机)而言的、利用者到液晶显示装置1701的视距不发生较大变化。 因此,通过事先保持这些履历信息,即使在眼睛摄像机不发挥功能的情况下,也能够推定利用者304与液晶显示装置1701之间的位置关系。
另外,本实施方式中,偏转履历积累部1803如上所述地利用针对将液晶面板303 中央的像素照明的光的偏转角度而记录了光偏转部302的偏转的信息,但也可以采用别的方法。例如,也可以利用使画面右端的光向利用者304的眼睛入射所需的偏转角度来记录。 并且,对于多个像素中的各个像素,也可以记录将显示光向利用者的眼睛入射所需要的、该像素的偏转角度。该情况下,能够使推定利用者的眼睛的位置时的精度提高。
并且,同样地,对于来自终端状态取得部1702的信息,也可以采用不记录右手位置、左手位置双方的方法,并且,也可以采用在信息的表现中使用以画面左下为原点的坐标系的方法以外的方法。例如可以用以液晶面板303为中心的坐标系来表现。
本实施方式中,位置识别部402采用上述的偏转履历积累部1803管理的信息。由此,在上述的故障等情况下的、通过眼睛摄像机306a等无法识别利用者的眼睛的位置的情况下,也能够推定利用者的眼睛位置,使3D显示的继续成为可能。以下,具体例示了此时的处理。
图22是表示此时的处理的流程的图。
本实施方式中,位置识别部402通过进行图22的步骤S201 S204的处理,来进行利用者的眼睛位置的推定。
< 步骤 S201>
本步骤S201中,以两个眼睛摄像机306a、306b对利用者304的眼睛进行拍摄而得到的两个数据为基础,图像判断部1801进行利用者304的眼睛位置的推定。如图19所示, 眼睛摄像机306a、306b构成为立体摄像机。因此,通过比较来自两个摄像机的两个图像,能够确定利用者304距液晶显示装置1701的距离、利用者304的右眼304a、左眼304b这两个眼睛的位置。
另外,这样,在该S201中,进行推定眼睛的位置的处理。如下述中详细说明的那样,作为进行该处理的情况,有该处理成功而推定了位置的情况、和该处理不成功而位置未被推定的情况。
< 步骤 S202 >
本步骤S202中,判断在前步骤中图像判断部1801是否判断出利用者的眼睛的位置,即判断S201的处理是成功了还是没有成功。
在来自立体的眼睛摄像机306a、306b的输入图像中没有异常的情况下(S202的 Y),图像判断部1801能够推定利用者的眼睛的位置。因此,该情况下,将该推定的结果通知给偏转控制部403。
相反,在由于眼睛摄像机的异常或周边光量不足等而无法从眼睛摄像机的拍摄图像推定利用者304的眼睛的位置的情况下(S202的N),图像判断部1801向位置推定部1802 通知无法进行眼睛位置的检测这一情况,进行步骤S203的处理。
< 步骤 S203 >
本步骤S203中,位置推定部1802从终端状态取得部1702取得当前的终端信息 (图20的信息1701b)。本实施方式中,取得与利用者304触摸到终端状态取得部1702的接触式传感器的位置相关的信息、以及与液晶显示装置1701相对于水平方向的倾斜度相关的信息。
在从终端状态取得部1702取得了信息后,位置推定部1802执行步骤S204的处理。
< 步骤 S204 >
本步骤中,位置推定部1802采用在前步骤中取得的、与终端状态相关的信息,检索偏转履历积累部1803管理的信息,推定利用者304的眼睛的位置。
本实施方式中,根据图21所示的偏转履历管理表,根据当前正在利用终端的利用者304的用户名、以及当前正在触摸终端的手的位置、终端倾斜的信息,检索一致的或最接近的信息。
假定如下情况,即通过前面的步骤S203取得的与终端状态相关的信息表示,右手的位置是(1000,500),没有与左手相关的信息,终端倾斜20度,利用者304的用户名是用户I。该情况下,确定为图21的第一行的数据与对应于该信息的数据相符并加以利用。
本实施方式中,用户名的判断不限于特定的方法,例如也可以采用在利用液晶显示终端1701时促使用户名的输入并利用该信息的方法。
位置推定部1802从选择出的偏转履历提取与偏转相关的信息(该情况下,向右眼偏转15度,向左眼偏转一 15度),并将该信息通知给偏转控制部403。
通过执行以上的处理,在基于眼睛摄像机的、利用者的眼睛位置的检测未正常进行的情况(图22的S202的N)下,也能够推定利用者的眼睛的位置(S204),使显示继续。
另外,本实施方式中,终端状态取得部1702由接触式传感器和倾角传感器构成, 但也可以通过用于取得其他状态的传感器来构成。例如,也可以是,除了液晶面板前面以外,在液晶显示装置1701的背面具备接触式传感器。该情况下,利用者能够更正确地取得在液晶显示终端上触摸的位置。
另外,本实施方式中,液晶显示装置1701可以具备利用者304对光偏转部302的偏转角度进行调节的部分。例如,该部分可以是由利用者304操作的开关、按钮等操作部。 可以通过进行该操作来调节偏转角度。该情况下,能够对利用者的眼睛位置的识别结果进行修正,进行无串扰(cross talk)的3D显示。并且,通过将基于利用者304的、光偏转部 302的偏转角度的修正值反映给偏转履历积累部1803的信息,能够更正确地推定利用者的眼睛的位置。
(实施方式3:单眼摄像机)
本实施方式中,示出不通过立体摄像机、通过单一的摄像机而能够检测利用者的眼睛的位置的液晶显示装置2101 (图23等)的构成。
图23是本实施方式中的液晶显示装置2101的构成图。
另外,对于与实施方式I相同的构成要素,采用相同的符号,适当地省略详细说明。
本实施方式中,液晶显示装置2101具备眼睛摄像机2102以用来识别利用者304 的眼睛的位置。与实施方式1、2不同,本实施方式中,眼睛摄像机2102是单体的摄像机,与如立体摄像机那样难以通过其单独得到的一个拍摄图像来推定被摄体的距离等相反,能够削减成本。
图24是本实施方式3的位置识别部402的功能框图。
本实施方式3中,显示控制部307与实施方式I同样,具有图4所示的功能模块。 进而,在本实施方式3中,位置识别部402为了采用单体的摄像机2102来识别利用者304 的眼睛的位置,具有图24所示的功能模块。
基准图像管理部2201通过单体摄像机2102来生成用于推定利用者的眼睛的位置的基准图像并进行管理。本实施方式3中,在利用者304最初使用液晶显示装置2101时, 实施用于生成基准图像的显示。将该显示的示例在图25中表示。
图25是表示被3D显示的图像2301等的图。
利用者304将自身的头的位置调节到该图像2301最容易视觉辨认的视距,按压确认按钮2302。
确认按钮2302是显示于液晶面板303的显示图像,对该按钮的输入通过设置在液晶面板303上的接触式传感器而被感知。
若确认按钮2302被按压,则基准图像管理部2201向单体摄像机2102进行通知, 拍摄此时的利用者304的脸照片,将该数据作为基准图像进行保存。并且,此时,还一起记录与光偏转部302的偏转角度有关的信息。
图26是表示基准图像管理部2201中记录的信息22011 (图24)的图。
基准图像管理部2201中记录的信息22011包含基准图像及偏转角度信息。将该基准图像等的示例在图26的2401中表示。在该例中,在信息22011中,利用者304的脸图像以Dl的大小被记录下来。并且,将对液晶面板303的中央的像素进行照明的照明光305 向利用者的右眼入射所需的偏转角度α作为偏转角度信息而被记录下来。基准图像管理部2201根据这些脸图像的大小Dl以及偏转角度信息α,利用公式「L1=D1 / (2Xtana )J (式I)计算利用者304与液晶显示装置2101之间的基准图像视距LI。
基准图像比较部2202在实际的3D影像的显示中,根据单体摄像机2102的拍摄图像、和基准图像管理部2201保持的基准图像及偏转角度信息,推定利用者304的眼睛的位置。并且,基准图像比较部2202按照所推定的位置来控制光偏转部302将光偏转的角度。
图27是表示单体摄像机2102拍摄到的利用者304的拍摄图像的示例(图像2402) 的图。
该例中,利用者304比对图26的基准图像进行拍摄时更靠近液晶显示装置2101。 因此,拍摄图像内的脸的尺寸D2比基准图像中的脸的尺寸Dl大。
基准图像比较部2202利用上述的尺寸Dl、D2以及偏转角度信息a、基准图像视距LI,计算用于使光向当前位置的利用者304的眼睛入射的偏转角度β。
在本实施方式3的计算中,通过采用公式「β =arctan ((D2Xtan α ) / D1)」(式2)的计算式,进行偏转角度β的计算。
基准图像比较部2202将算出的偏转角度β的值通知给偏转控制部403。
偏转角度β是将液晶面板中央的像素的光向利用者的眼睛偏转所需的偏转角度。因此,通过利用该信息,能够以使液晶面板303上的各像素的光向利用者304的眼睛入射的方式将光偏转。
另外,在本实施方式中,示出了利用者比基准图像拍摄时更靠近液晶显示装置 2101的情况的示例。另一方面,即使在利用者从液晶显示装置2101远离的情况下,也能够通过进行同样的计算来判断利用者的眼睛的位置。并且,通过计算基准图像中的利用者的头的位置、和由当前的单体摄像机得到的利用者的拍摄图像中的头的左右位置的偏差,能够更正确地确定利用者的眼睛的位置。
并且,本实施方式中,作为基准图像而使用了利用者304的脸图像,但也可以作为基准图像而利用其他的数据。例如,也可以利用两眼的图像,也可以通过使利用者佩戴眼镜而将眼镜的图像作为基准图像来进行利用。该情况下,能够削减处理脸图像的数据的量。
(实施方式4:激光安全性)
本实施方式中,示出能够提高利用者的安全性的液晶显示装置的构成。
图28是本实施方式中的液晶显示装置2601的构成图。
另外,对于与实施方式I相同的构成要素,采用相同的符号,并适当地省略详细说明。
本实施方式中,光源301通过将激光光源和导光板进行组合,形成向光偏转部302 均匀地入射的照明光305。
输出判断部2602为了测定照明光305的强度而形成在光偏转部302和液晶面板 303之间。
图29是表示实施方式4中的显示控制部307的构成等的图。本实施方式4中,显示控制部307与实施方式I同样,具有图4所示的功能模块。
进而,在本实施方式中,显示方法判断部401取得来自输出判断部2602的数据。假定照明光305的强度在一定值以上且过强的情况。该情况下,显示方法判断部401对偏转控制部403进行通知,以使过强的光不进入利用者304的眼睛。此时,偏转控制部403将照明光305向不进入利用者的眼睛的、利用者的眼睛的方向以外的其他方向偏转。由此,能够防止利用者对强光进行视觉辨认。
另外,在本实施方式中,输出判断部2602设置在光偏转部302与液晶面板303之间,但也可以设置在其他场所。例如可以设置在光源301与光偏转部302之间。该情况下, 能够更正确地测定来自光源的光的强度。
并且,可以进行以下的动作。
图30是表示确定用户的第I方法的示例的图。
图30中,示出了经过液晶显示装置(例如液晶显示装置300)的液晶面板的显示面的画面中心的、与该显示面垂直的直线2903。另外,该直线2903为了单纯的说明上的方便, 仅是图30中表示的线,不是液晶显示装置300的构成要素等。
图30所示的左右两个用户2901、2902是相对画面中心的直线2903较近的用户 2901和较远的用户2902。
S卩,可以是,用户判断部502确定位置被识别出的用户是较近的用户2901还是较远的用户2902。
在确定是较近的用户2901的情况下,偏转控制部403可以将该用户判断为装置利用者。也就是说,偏转控制部403在该情况下可以使光105向所识别出的该用户的位置偏转。另一方面,在确定是较远的用户2902的情况下,偏转控制部403可以判断为不是装置利用者。即,偏转控制部403在该情况下,可以不使光105向该用户2902的位置偏转。
图31是表示确定用户的第2方法的示例的图。
图31中,示出了左右两个用户3001、3002是距画面中心的直线2903的距离彼此相同的两个用户的情况。
另一方面,存在距液晶显示装置300的视距。图31中示出了适当的视距的范围 3003。
可以是,用户判断部502确定位置被识别出的用户是位于该范围3003内的视距的位置上的用户3001还是位于不在该范围3003内的视距的位置上的用户3002。
在判断为该范围3003内的用户3001的情况下,偏转控制部4003可以将该用户判断为装置利用者,在判断为不在该范围3003内的用户3002的情况下,不判断为装置利用者。
另外,还可以考虑范围3003内的视距的用户3001存在多个用户的情况。该情况下,可以是,对于到液晶显示装置300的视距是更短视距的、更靠近液晶显示装置300的用户的位置,使光105偏转,且不使光105向更远的用户的位置偏转。由此,可以仅对更近的用户进行图像的显示,对更远的用户不进行图像的显示。
图32是表示确定用户的第3方法的示例的图。
图32中,示出了存在从相互不同的两个方向观察液晶显示装置300的画面的两个用户3101、3102的情况。
S卩,图32中示出了规定的方向3101d。该方向3101d是规定的平面相对于液晶显示装置300的显示面305q交叉的直线的方向。
该规定的平面是偏转后的方向的光305e经过并且与显示面305q垂直的平面。
用户3101的从一只眼睛向另一只眼睛的方向,与该方向3101d相同(大致相同)。
另一用户3102的从一只眼睛向另一只眼睛的方向,不与该方向3101d相同(大致相同)。
因此,对于用户3101,能够将光105向左右眼睛偏转,但对于用户3102,不能偏转。
因此,可以是,确定位置被识别出的用户是可偏转的用户3101还是不可偏转的用户 3102。
可以是,在确定为是可偏转的用户3101的情况下,选择该用户作为装置利用者, 在确定为是不可偏转的用户3102的情况下,不选择为装置利用者。
图33是表示确定用户的第3方法的示例的图。
该例是液晶显示装置300被置于桌子等上的情况的示例。
图33的两个用户3201、3202从液晶显示装置的上方(例如图33的左侧的方向)观看的用户和从下方(例如右侧的方向)观看的用户。在存在这样的两个用户3201、3202等情况下,可以进行如下的动作。
即,存在液晶显示装置300的视场角3203。上述的两个用户3201、3202例如是在该视场角3203内有视点、眼睛的位置在视场角3203内的用户3201和在该视场角3203内没有视点、眼睛的位置不在视场角3203内的用户3202。
可以是,确定位置被识别出的用户是视场角3203内的用户3201还是不在视场角 3203内的用户3202。
在确定为是视场角3203内的用户3201的情况下,可以将该用户视为装置利用者而进行与该用户对应的显示。也就是说,在确定为是不在视场角3203内的用户3202的情况下,可以不视为装置利用者,不进行向该用户的显示。
另外,还可以考虑作为视场角3203内的视点的用户3201而存在多个用户的情况。 在这样的、视场角3203内的视点的多个用户存在的情况下,可以将相对于画面(液晶面板 303)的中心轴3204更近的用户视为装置利用者,对该用户进行显示。也就是说,可以将更远的用户不视为装置利用者,向该用户不进行显示。
可以将水平方向的判断方法的技术(图30、31、32)和垂直方向的判断方法的技术 (图33)组合来进行装置利用者的判断。
另外,到此为止说明的实施方式是一例,在不脱离本发明的主旨的范围内可采用各种方式。
另外,在上述各实施方式中,各构成要素可以由专用的硬件构成,或通过执行与各构成要素相适应的软件程序来实现。各构成要素可以通过由CPU或处理器等的程序执行部读出并执行在硬件或半导体存储器等记录介质中记录的软件程序来实现。
另外,例如可以使用在上述显示装置中设置的集成电路,该显示装置具备将光输出的光源、将所输出的上述光的方向向显示装置利用者的眼睛位置的方向偏转的光偏转部、以及接受来自上述光偏转部的出射光而形成图像的显示部,该集成电路具备识别上述利用者的上述眼睛的位置的位置识别部、确定上述利用者是多个人物中的哪个人物的确定部、以及按照所确定的上述人物来控制上述光偏转部将上述光偏转的方向的控制部。
并且,用于实现上述各实施方式的显示装置等的程序例如是使作为上述显示装置的计算机执行步骤的程序,该显示装置具备将光输出的光源、将所输出的上述光的方向向显示装置利用者的眼睛位置的方向偏转的光偏转部、以及接受来自上述光偏转部的出射光而形成图像的显示部,上述步骤包括识别上述利用者的上述眼睛的位置的位置识别步骤、 确定上述利用者是多个人物中的哪个人物的确定步骤、以及按照所确定的上述人物来控制在上述光偏转步骤中上述光所偏转的方向的控制步骤。
工业实用性
本实施方式的光照射装置以及采用该光照射装置的液晶图像显示装置,能够以简单的结构来构成可追踪视点且视场角广、低功耗、并且可使从视觉辨认者到液晶面板的距离变近的、高品质且高临场感的3D液晶图像显示装置或隐私性显示器,并且可构成2D图像和3D图像之间的切换也简便的液晶图像显示装置。因此,可适用于可进行2D和3D的切换的、3D图像或作为隐私性显示器而使用的液晶显示装置全体,从而具有实用性。
本实施方式中,能够使不适当的人物不对图像进行视觉辨认,更可靠地使对所显示的图像进行视觉辨认的人物成为适当的人物。
符号说明
300液晶显示装置
301光源
302光偏转部
303液晶面板
304利用者
304a右眼
304b左眼
305照明光
305a右眼用显示光
305b左眼用显示光
306a、306b眼睛摄像机
307显示控制部
402位置识别部
403偏转控制部
502用户判断部
权利要求
1.一种显不装直,具备光源,将光输出;位置识别部,对利用者的眼睛的位置进行识别;光偏转部,将所输出的上述光的方向向上述位置识别部识别出的上述眼睛的位置的方向偏转;确定部,确定上述利用者是多个人物中的哪个人物;控制部,按照所确定的上述人物,控制上述光偏转部对上述光进行偏转的方向;以及显示部,接受来自上述光偏转部的出射光而形成图像。
2.如权利要求I所述的显示装置,该显示装置具备对信息进行保持的显示信息管理部,该信息表示各个上述人物是否具有对显示信息进行访问的权限,该显示信息是上述图像的至少一部分,在表示由上述确定部确定了的上述人物不具有上述权限的情况下,上述控制部对上述光偏转部的偏转方向进行控制,以使作为上述光的至少一部分的、上述显示信息的光不向上述利用者的上述眼睛的位置入射。
3.如权利要求2所述的显示装置,该显示装置具备对上述利用者的图像进行拍摄的利用者拍摄部,上述确定部根据上述利用者拍摄部拍摄到的上述图像,确定上述利用者是上述多个人物中的哪个人物。
4.如权利要求3所述的显示装置,该显示装置具备形状判断部,该形状判断部根据上述利用者拍摄部拍摄到的上述图像,识别上述利用者的轮廓、瞳孔形状中的至少一个,上述确定部利用所识别出的上述至少一个来进行确定。
5.如权利要求2所述的显示装置,上述利用者佩戴发送装置,该发送装置发送上述确定部进行的确定所用的信息,上述确定部通过接收上述发送装置发送的上述信息,确定上述利用者是上述多个人物中的哪个人物。
6.如权利要求4所述的显示装置,上述确定部确定两个以上的上述利用者中的每一个,上述控制部使由上述光源输出的上述光依次对两个以上的上述利用者偏转。
7.如权利要求2所述的显示装置,上述显示部能够将访问权限互不相同的上述显示信息至少同时显示两个,所保持的上述信息确定各个上述人物是否具有对各个上述显示信息进行访问的权限, 上述控制部,根据所确定的上述人物是否具有各个上述显示信息的上述权限,来控制上述光偏转单元的偏转方向。
8.如权利要求2所述的显示装置,上述显示部能够将用于实现三维显示的右眼用视差图像和左眼用视差图像交替显示, 上述确定部保持用于决定对各个上述利用者进行二维显示和上述三维显示中的哪一个的信息,上述控制部,基于上述信息来控制上述光偏转部的偏转方向,以使对决定为进行上述二维显示的上述利用者的左右眼睛的位置,仅入射上述右眼用视差图像或上述左眼用视差图像中的某一个的光。
9.如权利要求I所述的显示装置,该显示装置具备终端状态取得部,该终端状态取得部取得终端信息,该终端信息表示上述利用者保持终端的手的位置或终端的倾斜度中的至少一个,上述位置识别部具备偏转履历积累部,该偏转履历积累部将与上述利用者的眼睛的位置相关的信息和上述终端信息建立关联而进行记录,上述位置识别部通过检索与所取得的上述终端信息建立了关联的上述信息,推定上述利用者的眼睛的位置。
10.如权利要求9所述的显示装置,与上述利用者的眼睛的位置相关的上述信息是上述光偏转部的动作履历。
11.如权利要求10所述的显示装置,该显示装置具备手动偏转调节部,该手动偏转调节部可使上述利用者调节上述光偏转部的偏转方向。
12.如权利要求I所述的显示装置,该显示装置具备利用者拍摄部,该利用者拍摄部用于拍摄上述利用者的图像,上述位置识别部保持基准图像,通过比较由上述利用者拍摄部拍摄到的图像和上述基准图像来推定利用者的视距,判断上述利用者的眼睛的位置,上述基准图像是在上述利用者视觉辨认上述显示装置时的标准视距下对利用者进行拍摄而得到的图像。
13.如权利要求I所述的显示装置,该显示装置具备输出判断部,该输出判断部判断来自上述光源的上述光的强度,在上述输出判断部的判断结果超出了基准值的情况下,上述光偏转部以使上述出射光不向上述利用者的眼睛入射的方式来决定上述光偏转部的偏转方向。
14.如权利要求I所述的显示装置,上述确定部,对位置被识别出的上述利用者是相对于经过上述显示装置的显示面的中心的直线更近的人物还是更远的人物进行确定,在确定为是近的上述人物的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是远的上述人物的情况下,上述控制部不使上述光入射。
15.如权利要求I所述的显示装置,上述确定部,对位置被识别出的上述利用者是视距在事先决定的范围内的人物还是视距不在上述范围内的人物进行确定,该视距是位置被识别出的上述利用者到上述显示装置的距离,在确定为是上述范围内的上述人物的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是不在上述范围内的上述人物的情况下,上述控制部不使上述光入射。
16.如权利要求I所述的显示装置,上述确定部,对位置被识别出的上述利用者的从一只眼睛向另一只眼睛的方向是与规定方向相同方向的人物还是不同方向的人物进行确定,在确定为是上述相同方向的人物的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是上述不同方向的人物的情况下,上述控制部不使上述光入射。
17.如权利要求I所述的显示装置,上述确定部,对位置被识别出的上述利用者是上述显示装置的视场角内的位置的人物还是不在上述视场角内的位置的人物进行确定,在确定为是上述视场角内的位置的上述人物的情况下,上述控制部使上述光向被识别出的上述位置入射,在确定为是不在上述视场角内的位置的上述人物的情况下,上述控制部不使上述光入射。
18.一种显示方法,包括如下步骤位置识别步骤,对显示装置的利用者的眼睛的位置进行识别;光偏转步骤,将通过光源输出的光的方向向在上述位置识别步骤中识别出的上述眼睛的位置的方向偏转;确定步骤,确定上述利用者是多个人物中的哪个人物;控制步骤,按照所确定的上述人物,控制在上述光偏转步骤中上述光被偏转的方向;以及 显示步骤,接受上述光偏转步骤中的出射光而形成图像。
19.一种集成电路,是显示装置所设置的集成电路,该显示装置具备光源,将光输出;光偏转部,将所输出的上述光的方向向上述显示装置的利用者的眼睛的位置的方向偏转;以及显示部,接受来自上述光偏转部的出射光而形成图像,该集成电路的特征在于,具备位置识别部,对上述利用者的上述眼睛的位置进行识别;确定部,确定上述利用者是多个人物中的哪个人物;以及控制部,按照所确定的上述人物,控制上述光偏转部对上述光进行偏转的方向。
20.一种程序,使作为显示装置的计算机执行步骤,该显示装置具备光源,将光输出;光偏转部,将所输出的上述光的方向向上述显示装置的利用者的眼睛的位置的方向偏转;以及显示部,接受来自上述光偏转部的出射光而形成图像,上述作为显示装置的计算机执行的步骤是位置识别步骤,对上述利用者的上述眼睛的位置进行识别;确定步骤,确定上述利用者是多个人物中的哪个人物;以及控制步骤,按照所确定的上述人物,控制上述光偏转步骤中上述光被偏转的方向。
全文摘要
液晶显示装置(300)具备将光输出的光源(301)、对利用者的眼睛的位置进行识别的位置识别部(402)、将所输出的上述光的方向向上述位置识别部识别出的上述眼睛的位置的方向偏转的光偏转部(302)、确定上述利用者是多个人物中的哪个人物的用户判断部(502)、按照所确定的上述人物来控制上述光偏转部对上述光进行偏转的方向的偏转控制部(403)、以及接受来自上述光偏转部的出射光而形成图像的液晶面板(303)。
文档编号G09G5/00GK102986235SQ20128000193
公开日2013年3月20日 申请日期2012年5月2日 优先权日2011年5月10日
发明者杉山圭司, 式井慎一, 林克彦 申请人:松下电器产业株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1