透明显示设备和提供对象信息的方法

专利名称：透明显示设备和提供对象信息的方法
技术领域：
本发明涉及透明显示设备以及提供对象信息的方法，更具体地讲，涉及一种透明显示设备和一种可经由透明显示器来提供信息的方法。
背景技术：
包括广播接收机、个人计算机、笔记本电脑、移动电话等的电子设备可被设置为执行多种功能。这些多种功能可以是广播接收功能、数据和音频通信功能、通过使用相机的运动图像拍摄功能、音频存储功能、经由扬声器系统的音乐文件播放功能、图像或者视频显示功能等。一些终端还可以具有附加的游戏实现功能。另外，作为最近开发的图像技术和透明电子设备技术，活跃地研究了能够看到后部的对象同时显示图像的透明显示板，而电子设备使用这种透明显示板作为显示板来显示图像和数据。这种透明显示器可以是有机发光板或者使用自发光的等离子体板。

发明内容
因此，本发明关注于一种透明显示设备和提供对象信息的方法。本发明的目的是提供一种透明显示设备和提供对象信息的方法，其能够提供与经由透明显示器看到的后部对象有关的信息。本发明的另一个目的是提供一种透明显示设备和提供对象信息的方法，其能够根据用户的姿势来改变对象信息在透明显示器上显示的位置。本公开的其它优点、目的及特征一部分将在以下的说明书中进行阐述，并且一部分对于本领域的技术人员来说将在研读以下内容后变得清楚，或者可以从本发明的实践获知。本发明的这些目的和其它优点可以通过在本书面描述及其权利要求书及附图中具体指出的结构来实现和获得。为了实现这些目的和其它优点，并且根据本发明的目的，如这里所具体实施和广泛描述的，一种提供对象信息的方法包括以下步骤识别朝向透明显示器的人的眼睛方向； 检测在所识别的眼睛方向上经由所述透明显示器看到的对象；获取与被检测对象有关的信息；以及在所述透明显示器上显示所获取的信息。在此，该对象可以包括人、动物、物体、交通工具、建筑物或者自然对象中的至少一个。与对象有关的信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息和对象的详细描述中的至少一个。这种提供对象信息的方法还可以包括以下步骤确定眼睛方向是否发生了改变； 以及检测在改变后的眼睛方向上经由所述透明显示器看到的对象。该眼睛方向确定步骤还可以包括从拍摄装置成像的图像中检测面部区域；以及使用所检测的面部区域来识别眼睛方向。该获取步骤可以包括从存储在存储器中的数据中搜索所述与对象有关的信息。 该获取步骤可以包括以下步骤向服务器发送搜索所述与对象有关的信息的请求；以及从
4服务器接收搜索结果。在此，当所述与对象有关的信息没有存储在存储器中时，可以向服务器发送搜索所述与对象有关的信息的请求。在搜索请求步骤中可以发送所检测的图像的图像或者位置信息中的至少一个。在显示步骤中可以在透明显示器上、所述对象占据的区域附近显示所获取的信息。可以根据所述信息的显示位置和所识别的姿势来移动所显示的信息。在本发明的另一个方面中，一种透明显示设备可以包括透明显示器，其被设置为允许透射对象的形状；以及控制器，其被设置为识别朝向透明显示器的人的眼睛方向、检测在所识别的眼睛方向上经由所述透明显示器看到的对象以及获取与所检测对象有关的信息；其中，该透明显示器显示所获取的信息。在此，该对象可以包括人、动物、物体、交通工具、建筑物或者自然对象中的至少一个。与对象有关的信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息、和对象的详细描述中的至少一个。该控制器可以确定眼睛方向是否发生了改变，并且该控制器可以检测在改变后的眼睛方向上经由透明显示器看到的对象。该控制器可以从拍摄装置成像的图像中检测面部区域，并且该控制器可以使用所检测的面部区域来识别眼睛方向。该控制器可以从存储在存储介质中的数据中搜索与对象有关的信息。该控制器可以向服务器发送请求搜索与对象有关的信息的搜索请求信号，并且该控制器可以控制从服务器接收搜索结果。在此，当存储器中找不到与对象有关的信息时，可以发送该搜索请求信号。该搜索请求信号可以包括所检测对象的图像或者位置信息中的至少一个。该透明显示设备可以在透明显示器上被对象占据的区域附近显示所获取的信息。 在此，可以根据该信息的显示位置和所识别的姿势来移动所显示的信息。根据本发明和提供对象信息的方法，识别人的眼睛方向并且提供与在所识别的眼睛方向上经由透明显示器看到的对象有关的信息。结果，用户可以观察到与透明显示器后部的对象有关的信息以及该对象的形状，而无需针对与对象有关的信息的辅助搜索请求。 另外，识别了用户的姿势并且根据所识别的姿势来移动显示了该信息的区域。结果，甚至是在观察对象和与对象有关的信息时，用户也可以做出姿势来移动与对象有关的信息或者将其从屏幕上删除，而无需辅助地改变他或者她的眼睛方向。根据本发明的实施方式，一种提供对象信息的方法包括以下步骤确定朝向透明显示器的第一区域的人的眼睛方向；选择在所确定的眼睛方向上经由所述透明显示器看到的至少一个对象；获取与所选择的对象有关的信息；以及在所述透明显示器上显示所获取的信息。根据本发明的实施方式，一种透明显示设备包括透明显示器；以及控制器，其被设置为确定朝向所述透明显示器的第一区域的人的眼睛方向；选择在所确定的眼睛方向上经由所述透明显示器看到的至少一个对象；获取与所选择的对象有关的信息；以及控制所述透明显示器来显示所获取的信息。应该理解，对本发明的以上概述和以下详述都是示例性和解释性的，并旨在对所要求保护的本发明提供进一步的解释。


附图被包括在本申请中以提供对本发明的进一步理解，并结合到本申请中且构成本申请的一部分，附图示出了本发明的实施方式，且与说明书一起用于解释本发明的原理。附图中图1是例示根据本发明的示例性实施方式的对象信息提供系统的构造的图；图2是例示其中显示了与通过眼睛跟踪而检测到的对象有关的信息的情形的图；图3是例示其中根据眼睛跟踪来改变所显示的对象信息的情形的图；图4是例示显示所检测对象信息的画面的图；图5是例示根据本发明示例性实施方式的透明显示设备的构造的框图；图6是例示该透明显示设备的控制器的框图；图7是例示根据本发明示例性实施方式的提供对象信息的方法的处理步骤的流程图；图到图8e是例示显示所检测的对象信息和所识别的姿势的画面的图；图9是例示显示了被设置为请求显示所检测的对象信息的姿势的画面的图；图10是例示根据本发明示例性实施方式的识别眼睛方向的方法的处理步骤的流程图；图11是例示根据本发明示例性实施方式的检测对象的方法的处理步骤的流程图；图12是例示根据本发明示例性实施方式的获取对象信息的方法的处理步骤的流程图；图13是例示根据本发明另一个实施方式的获取对象信息的方法的处理步骤的流程图；图14是例示根据本发明另一个实施方式的提供对象信息的方法的处理步骤的流程图；图15是例示根据本发明另一个实施方式的透明显示设备的构造的框图。
具体实施例方式下面将详细描述本发明的具体实施方式
，在附图中例示出了本发明的优选实施方式的示例。在整个附图中尽可能地用相同的附图标记代表相同或类似部件。图1是例示根据本发明示例性实施方式的对象信息提供系统的构造的图。参照图1，根据本发明的实施方式的对象信息提供系统1包括对象信息提供服务器10、位置应用服务器20、网络50和60以及透明显示设备100。对象信息提供服务器10存储有对象图像、位置信息、与对象有关的信息、对象图像以及与对象有关的信息的相关信息、位置信息和与对象有关的信息的相关信息。在此，该对象可以包括人、动物、物体、交通工具、建筑物或者自然对象中的至少一个。与对象有关的信息可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息、或者对象的详细描述中的至少一个。在此，与对象有关的信息将称为“对象信息”，并且对象图像是包括对象的形状的图像。相关信息是被设置为将信息映射到信息的信息。例如，相关信息可以是关系数据库系统中的单个表名称。对象信息提供服务器10可以经由相关信息来搜索映射在特定对象图像上的对象信息，并且它可以经由相关信息来搜索映射在位置信息上的对象信息。对象信息提供服务器10可以从透明显示设备100接收搜索请求信号。在此，搜索请求信号可以包括所检测对象的图像或者位置信息中的至少一个。所检测对象的图像可以是透明显示设备100所成像的照片或者从成像照片中提取的对象图像。当从透明显示设备100接收到包括所检测对象的图像的搜索请求信号时，对象信息提供服务器10可以从所接收的图像中识别对应的对象，并且它可以搜索与所识别的对象有关的信息。对象信息提供服务器10可以讲所检测的与对象有关的信息发送给透明显示设备100。在此，对象信息提供服务器10将所接收的图像与存储的对象图像进行比较，以识别对象。换句话说，对象信息提供服务器10找到与所接收的图像中包括的对象图像相同或者最类似的对象图像，并且它基于找到的对象图像和所存储的相关信息来搜索与所识别的对象有关的信息。当从透明显示设备100接收到包括与所检测的对象有关的位置信息的搜索请求信号时，对象信息提供服务器10识别映射到所接收的位置信息上的对象并且搜索与所识别的对象有关的信息。对象信息提供服务器10可以将搜索到的与所检测对象有关的信息发送给透明显示设备100。在此，对象信息提供服务器10可以基于所接收的位置信息和所存储的相关信息来搜索与所识别的对象有关的信息。当从透明显示设备100接收到包括所检测对象的图像和位置信息的搜索请求信号时，对象信息提供服务器10基于所接收的图像和对象的位置信息来识别对应的对象并且搜索与所识别的对象有关的信息。对象信息提供服务器10可以将搜索到的对象的信息发送给透明显示设备100。在此，对象信息提供服务器10可以从与被映射到所接收的图像中包括的对象图像中的对象有关的信息中检测与映射到所接收的位置信息的对象信息相对应的对象信息，作为与所识别的对象有关的信息。位置应用服务器20可以向透明显示设备100提供基于位置的服务(LBQ。位置应用服务器20可以向透明显示设备100提供与特定对象有关的位置信息和特定位置的地图及地理信息。对象信息提供服务器10、位置应用服务器20和透明显示设备100可以与网络相连接。在此，网络可以是因特网或者局域网和宽带融合网络(BCN)或者超宽带融合网络。网络可以由骨干网60和用户网50构成。骨干网60可以是X. 25网络、帧中继网络、ATM网络、多协议标签交换(MPLS)网络或者通用多协议标签交换网络中的一个或者至少两个的组合。用户网50可以是光纤到户(FTTH)、非对称数字用户线(ADSL)、有线电视网络、无线 LAN(IEEE 802. 11B、IEEE 802. 11A、IEEE 802. IlG 和 IEEE 802. 11N)、无线宽带 (WIBro)、Wimax或者高速下行包接入(HSPDA)中的一种。透明显示设备100可以与用户网 50相连接。透明显示设备100识别朝向自己的人的眼睛方向并且检测在所识别的眼睛方向上经由透明显示器可见的对象。另外，透明显示设备100显示与所检测对象有关的信息。图2是例示其中显示了与根据眼睛跟踪而检测到的对象有关的信息的情形的图。参照图2，如果人230在看经由透明显示器可见的对象，则透明显示设备100识别此人230的眼睛方向并且检测在所识别的眼睛方向上经由透明显示器可见的对象210。透明显示设备100可以在透明显示器上显示与所检测对象有关的信息215。图3是例示其中根据眼睛移动而改变所显示的与对象有关的信息的情形的图。参照图3，当人330在看经由透明显示器可见的对象310时，透明显示设备100识别人330的眼睛方向332并且检测经由透明显示器可见的对象310，在透明显示器上显示与所检测对象310有关的信息315。如果人330的眼睛方向从眼睛方向332变为另一个眼睛方向334，则透明显示设备 100识别改变后的眼睛方向334并且检测经由透明显示器可见的对象320，显示与所检测对象320有关的信息325。图4是例示显示了与所检测对象有关的信息的画面的图。参照图4，如果检测到动物410，则透明显示设备100可以显示与所检测动物410 有关的信息415。透明显示设备100显示“约克夏梗”作为对象种类信息，“英国”作为对象历史信息，“大约23cm”作为对象外观信息，“3. ^g”作为对象重量信息，和作为对象详细说明的介绍信息、外观信息和特性信息。透明显示设备100可以直接从存储装置中搜索和获取与所检测对象有关的信息， 或者可以向对象信息提供服务器10请求搜索以获取与所检测对象有关的信息。透明显示设备100可以向对象信息提供服务器10发送搜索请求信号以请求搜索所检测的对象。所发送的搜索请求信号可以包括所检测对象的图像或者所检测对象的位置信息。所检测对象的图像可以是通过成像图像成像的原始图像或者在从原始图像中提取了对象所占据的区域之后由透明显示设备100生成的图像。透明显示设备100可以从位置应用服务器20获取所检测对象的位置信息并且可以根据由此处理过的位置信息来计算所检测对象的位置信息。透明显示设备100可以根据基于网络的技术例如Cell ID、AOA和TDOA系统等经由从基站40接收的无线电波来定位其位置。另外，透明显示设备100可以根据基于手持定位技术例如Τ0Α(到达时间)、GPS(全球定位系统)和混合定位系统等经由从卫星30接收的信号来定位其位置。可以通过使用基于图像识别的技术来定位所检测对象的相对于透明显示设备100 可放置的位置。透明显示设备100可以基于监督学习算法从多个拍摄装置拍摄的具有该对象的照片中定位对象的位置。另选地，透明显示设备100可以通过使用基于Vision VR的技术来定位对象的位置。如果使用基于图像识别的技术来定位对象的位置，则透明显示设备100可以在数厘米的精确度上检测对象的位置并且可以更精确地检测对象的位置。可以使用基于超声波的技术来定位所检测对象相对于透明显示设备100的位置。 透明显示设备100向所识别的眼睛方向发射超声波并且可以基于发射的超声波来计算所检测对象的距离。另外，透明显示设备100可以基于超声波的发射方向来确定对象的方位角。透明显示设备100可以基于所计算的距离和所确定的方位角来定位所检测对象的位置。图5是例示根据本发明示例性实施方式的透明显示设备的构造的框图。参照图5，透明显示设备100包括调谐器110、解调器120、网络接口 130、信号处理器140、透明显示器150、音频输出单元160、输入装置170、存储器180、控制器190和外部信号接收器135。透明显示设备100可以是桌上型、膝上型、平板或者手持接收机等的个人计算机系统。另选地，透明显示设备100可以是移动终端，例如移动电话、智能电话、用于数字广播的终端、PDA (个人数字助理)、PMP (便携式多媒体播放器)、导航仪等，或者其可以是固定型电子设备，例如数字TV等。调谐器110从经由天线接收的RF(射频)广播信号中选择一个与用户选择的频道相对应的RF广播信号并且将所选择的RF广播信号转换为中频信号或者基带视频或音频信号。例如，当所选择的RF广播信号是数字广播信号时，调谐器110将该RF广播信号转换为数字IF(DIF)信号。当它为模拟广播信号时，调谐器110将所选择的RF广播信号转换为模拟基带视频或音频信号(CVBS SIF)。也就是说，调谐器110可以处理数字广播信号或者模拟广播信号。从调谐器110输出的模拟基带视频或者音频信号(CVBS SIF)可以被直接输入到信号处理器140。另外，调谐器110可以根据ATSC(先进电视系统委员会)用单个载波来接收RF广播或者根据DVB (数字视频广播)用多个载波来接收RF广播信号。根据本发明另一个实施方式的透明显示设备100可以包括至少两个调谐器。当设置至少两个调谐器时，第二调谐器选择经由天线接收的RF广播信号中的与用户选择的频道相对应的一个广播信号，类似于第一调谐器，并且第二调谐器将所选择的RF广播信号转换为中频信号或者基带视频或音频信号。另外，第二调谐器经由频道存储器功能顺序地选择所接收的RF信号的与所有存储的广播频道相对应RF广播信号，接着将它们转换为中频信号或者基带视频/音频信号。 第二调谐器可以周期地进行全部广播频道的转换。因此，透明显示设备100可以提供被第一调谐器转换的广播信号的图像并且可以同时提供被第二调谐器转换的缩略图型图像。在此情况下，第一调谐器将用户选择的主RF广播信号转换为中频信号或者基带视频/音频信号，第二调谐器顺序且周期地选择除了主RF广播信号之外的其它RF广播信号并且将它们转换为中频信号或者基带视频/音频信号。解调器120接收被调谐器110转换的数字IF(DIF)信号并且进行DIF的解调。例如，当从调谐器110输出的数字IF信号为ATSC系统时，解调器120进行8-VBS (8残余边带)解调。另选地，当从调谐器110输出的数字IF信号为DVB系统时，解调器120进行 COFDMA (编码正交频分调制)解调。解调器120可以执行频道解码。为此，解调器120可以包括特里里斯解码器、解交织器和里德所罗门解码器以进行特里里斯解码、解交织和里德所罗门解码。在解码和频道解码之后，解调器120可以输出流(化)信号。此时，流信号可以是复用了视频、音频和数据信号的信号。例如，流信号可以是复用了 MPEG-2格式视频信号、杜比AC-3格式音频信号的MPEG-2TS (传输流)。具体来讲，MPEG-2可以包括4个比特的报头和184个比特的有效载荷。从解调器120输出的流信号可以被输入到信号处理器140。在进行解复用和信号处理之后，信号处理器140向透明显示器150输出图像并且向音频输出单元160输出声音。在具有至少两个调谐器的数字广播接收器的情况下，可以提供数量与至少两个调谐器相对应的解调器。可以基于ATSC和DVB系统来独立地提供解调器。网络接口 130从网络接收包并向网络发送所接收的包。也就是说，网络接口 130 经由网络从服务提供服务器接收被设置为传送广播数据的IP包。在此，广播数据可以包括内容、被设置为通知内容更新的更新消息、元数据、服务信息、软件代码和A/V数据。服务信息可以包括与实时广播服务有关的服务信息和与因特网服务有关的服务信息。在此，因特网服务意味着经由有因特网提供的服务，例如Cod(内容点播)服务、YouTube服务、针对天气、新闻、社区信息和搜索的信息服务、针对游戏和卡拉OK的娱乐服务、以及针对TV邮件和 TV SMS(短消息服务)的通信服务。结果，根据本发明的数字广播接收器可以包括网络TV、 网页TV和宽带TV。另外，广播服务可以包括因特网服务以及经由陆地、卫星和有线电视提供的广播服务。控制器190实现命令并且进行涉及透明显示设备100的操作。例如，控制器190 可以使用存储器180中搜索的命令来控制输入和输出和透明显示设备100的部件之间的数据的接收和处理。控制器190可以用单个芯片、多个芯片、或者多个电子部件来代表。可以对控制器190使用例如，包括专用或者嵌入式处理器、单目的处理器、控制器、ASIC等的多个架构。控制器190实现了计算机代码以及操作系统并且产生和使用数据。操作系统是本发明所属领域已知的并且将省略对操作系统的描述。例如，操作系统可以是视窗系列OS、 Unix、Linux、Android和Macintosh等。操作系统、另一计算机代码和数据可以在与控制器 190连接的存储器180中存在。通常，存储器180提供针对透明显示设备100使用的程序代码和数据的存储。例如，存储器180可以用R0M(只读存储器)、RAM(随机存取存储器)、硬盘驱动器代表。程序代码和数据可以在单独的存储介质中存在，或者可以被加载或者安装在透明显示设备100 上。在此，单独的存储介质包括⑶-R0M、PC-卡(PC-Card)、存储卡、软盘、磁带和网络部件。透明显示器150可以开始工作，与控制器190连接。透明显示器150可以用有机发光板或者等离子体板来代表。透明显示器150可以显示图形用户界面(⑶I) 153，其被设置为提供可在透明显示设备的用户和操作系统或者在操作系统上实现的预定应用之间可用的方便界面。GUI 153 将程序、文件和操作选项表示为图形图像。图形图像可以包括窗口、文本框、对话框、菜单、 图标、按钮、光标和滚动条。这些图像可以按照预先定义的布局对齐，或者可以动态地产生以帮助用户进行特定处理。在操作期间，用户可以选择和使能图像以启动涉及多个图形图像的功能和工作。例如，用户可以选择按钮以实现打开、关闭、最小化和最大化窗口，或者选择图标以启动特定程序。输入装置170可以是布置在透明显示器150上或者前面的触摸屏。触摸屏可以与透明显示器150集成或者是独立单元。如果与透明显示器150集成地形成，则触摸屏可以称为触摸屏显示器。当触摸屏被布置在透明显示器150的前面时，用户可以直接操作GUI 153。例如，用户可以将他或者她的手指放置在要控制的对象上，触摸板上并不存在一对一关系。触摸板被放置在另一平面上，与透明显示器150隔开。例如，透明显示器150通常位于竖直平面上，而触摸板位于水平平面中。这造成触摸板的使用相比于触摸屏较不直观并且很难。除了触摸屏，输入装置170可以是多点输入装置。控制器190可以识别应用于输入装置170的姿势171并且可以基于该姿势171来控制透明显示设备100。在此，姿势可以被定义为与输入装置170的预定互动，其被映射成
10至少一个特定计算操作。可以通过多个人手指，具体来讲，人手指的运动来产生姿势171。 另选地，可以除了人手指的运动以外利用触笔来产生姿势。在此，产生姿势171的物体，诸如人手指、触笔可以被称为“对象”。输入装置接收姿势171，控制器190实现被设置为执行涉及姿势171的操作的命令。另外，存储器180可以包括姿势操作程序181，其可以是操作系统的一部分或者是辅助应用。姿势操作程序181包括一系列命令，用于识别产生姿势171和/或向至少一个软件代理(software agent)指令响应于姿势171必须采取哪些步骤。当用户产生一个或者更多个姿势时，输入装置170向控制器190传输姿势信息。使用从存储器180传输的命令，具体地，从姿势操作程序181传输的命令，控制器190翻译该姿势并且控制透明显示设备100的每个部件，如存储器180、透明显示器150、音频输出单元 160、信号处理器140、网络接口 130和输入装置170。姿势171可以被检测为用于进行在存储器180中存储的应用的操作的命令，用于修改在透明显示器150上显示的⑶I对象、用于修改在存储器180中存储的数据、以及用于进行网络接口 130和信号处理器的操作。例如， 这种命令可以涉及缩放、摇摄、卷动、页面翻转、旋转、调整大小、图像频道改变、接收内容和接入因特网。另外，命令可以涉及启动特定程序，打开文件或者文档、菜单浏览、选择、命令实现、登录因特网网站系统、允许经鉴定的人对计算机系统的受限部分的访问、在墙纸中加载涉及用户偏好设置的用户资料等。可以使用多个不同的姿势。例如，姿势可以是单点或者多点姿势，静态或者动态姿势、连续或者分段姿势等。单点姿势是根据单个触摸点执行的姿势。例如，根据诸如单个人手指、手掌或者触笔的单个触摸来执行该姿势。多点姿势是根据多个触摸点执行的姿势。例如，根据诸如多个人手指、人手指和手掌、人手指和触笔、多个触笔和/或其组合的多个触摸来执行该姿势。静态姿势是不具有运动的姿势，而动态姿势是具有运动的姿势。连续姿势根据单个动作执行的姿势，分段姿势是根据步骤或者动作的单独序列执行的姿势。通常触摸屏上的对象和触摸都具有多种不同的模式。另外，触摸屏上的单点姿势包括对象-下事件和跟随的在对象-下事件的相同位置或者几乎相同位置进行的对象-上事件。触摸屏上的动态姿势包括对象-下事件和跟随对象-下事件的至少一个对象-拖动事件和跟随至少一个对象-拖动事件的对象-上事件。根据一些实施方式，使用参数来描述人手指接近触摸屏显示器以触摸该触摸显示屏显示器以及从触摸屏显示器离开的处理。该参数可以是人手指与触摸板显示器之间的距离、人手指施加到触摸屏显示器的压力、人手指与触摸屏显示器的触摸面积、人手指与触摸屏之间的电压、人手指与触摸屏显示器之间的电容以及多个物理参数中的至少一个函数。根据一些实施方式，当人手指与触摸屏显示器之间的参数(例如电容)的大小高于预定阈值级别时，进行对象-下事件。当参数是预定阈值级别或者更高时，通过对应于人手指的光标位置从位置“A”移动到位置“B”，进行对象-拖动事件。当参数低于阈值级别时，进行对象-上事件。控制器190经由从拍摄装置90接收的照片来识别朝向透明显示器的人的眼睛方向，并且检测在所识别的眼睛方向上经由透明显示器看到的对象。之后，控制器190可以控制获取与所检测对象有关的对象信息，并且可以控制透明显示器150来显示所获取的对象 fn息ο
11
外部信号接收器135可以提供接口，其可将外部装置与透明显示设备100连接起来。在此，外部装置可以意味着DVD(数字通用盘)、蓝光、游戏单元、摄像机、计算机(笔记本电脑)和各种视频或者音频输出单元。透明显示设备100可以控制从外部信号接收器 135接收的视频信号和音频信号被显示并且可以存储或者使用数据信号。外部装置可以是拍摄装置90。拍摄装置90可以包括多个相机并且可以对人成像。 拍摄装置90识别人的面部区域并且聚焦面部区域以放大，并且对面部区域成像。在此，拍摄装置100成像的人手形状可以被识别为姿势。也就是说，控制器190可以实现设置为进行涉及所识别的手形状的操作的命令。拍摄装置90可以对透明显示器150的后部对象进行成像。也就是说，拍摄装置90 可以根据透明显示设备100的控制信号对在人的眼睛方向上经由透明显示器150可见的对象进行成像。拍摄装置可以识别并且聚焦在对象区域，并且放大以对对象进行成像。对象可以被多个不同位置的拍摄装置90成像。图6是例示根据本发明示例性实施方式的控制器的构造的框图，该控制器构成了透明显示设备。参照图6，控制器190可以包括眼睛方向识别器610、中央处理器620和对象检测器 630。眼睛方向识别器610可以从拍摄装置92拍摄的图像帧中检测面部区域。眼睛方向识别器610从所检测的面部区域中检测眼睛图像，并且可以通过使用所检测的眼睛图像来确定眼睛方向。根据一个实施方式，为了确定眼睛方向，眼睛方向识别器610计算每个存储的眼睛图像与所检测的眼睛图像之间的差异，并且可以选择与所检测的眼睛图像之间差异最小的眼睛图像。眼睛方向识别器610可以将被映射到所选择的眼睛图像上的眼睛方向信息所指示的眼睛方向确定为所检测的眼睛图像的眼睛方向。中央处理器620可以从拍摄装置92拍摄的图像帧中检测手区域。中央处理器620 比较每个存储的手形状和所检测的手区域，并且可以选择所存储的手形状中与所检测的手区域中显示的手形状相同的一个。中央处理器620可以实现能够进行涉及所选择的手形状的操作的命令。对象检测器630控制拍摄装置94的焦点向在眼睛方向识别器610确定的眼睛方向上经由透明显示器看到的对象的运动，并且控制拍摄装置94的成像。图7是例示根据本发明示例性实施方式的提供对象信息的方法的处理步骤的流程图。参照图7，眼睛方向识别器610识别朝向透明显示器150的人的眼睛方向(S700)。对象检测器630检测在眼睛方向识别器610识别的眼睛方向上经由透明显示器 150看到的对象(S710)。在此，该对象可以包括人、动物、物体、交通工具、建筑物或者自然对象中的至少一个。中央处理器620控制与所检测对象有关的信息的获取(S720)。在此，对象信息，其为与对象有关的信息，可以包括对象名称、对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息、或者对象的详细描述中的至少一个。透明显示器150显示所获取的对象信息(S730)。在此，可以与图2和图4所示的画面一起显示对象信息。中央处理器620确定人的眼睛方向是否发生了改变(S740)。当确定结果为眼睛方向发生了改变时，对象检测器630检测在改变后的眼睛方向上经由透明显示器150看到的对象(S750)。中央处理器620获取在改变后的眼睛方向上检测到的对象的对象信息(S760)。透明显示器150显示由中央处理器620获取的对象信息。在此，可以与图3所示的信息325 —起显示所获取的对象信息。中央处理器620确定是否接收到信息移动命令(S780)。在此，信息移动命令可以是利用拍摄装置92成像的图像帧中包括的手形状所识别的姿势产生的命令，或者可以是利用被识别为对象-下事件、对象-拖动事件和对象-上事件的动态姿势产生的命令。当接收到信息移动命令时，中央处理器620控制在透明显示器150上显示的信息的位置以基于所接收的移动命令进行移动(S790)。图到图8e是例示显示了与所检测对象有关的信息和所识别的姿势的画面的图。图9是例示显示用于显示请求显示与所检测对象有关的信息的姿势的画面的图。参照图到图9，与所检测对象811有关的对象信息813在画面810上位于所检测对象811的形状所处区域。当在显示的画面上识别了姿势815时，画面810转换为画面 820。所识别的姿势815可以在进行涉及姿势815的命令时在画面上显示或者从画面上消失。根据一个实施方式，可以不在画面上显示所识别的姿势815。根据人手指所指示的方向来移动画面上的对象信息813使之显示在区域823中。 当在显示的画面820上识别了姿势825时，画面820转换为画面830。根据姿势825的人手指所指示的方向来移动画面830上的对象信息823使之显示在区域833中。当在显示的画面830上识别了姿势835时，画面830转换为画面840。根据姿势835的人手指所指示的方向来移动画面840上的对象信息833使之显示在区域843中。当在显示的画面840上识别了姿势845时，画面840转换为画面850。根据姿势845的人手指所指示的方向来移动画面850上的对象信息843使之显示在预定区域853中。当在显示的画面850上识别了姿势855时，画面850转换为画面910。根据显示停止命令(它是涉及姿势855的命令)，不在画面910上显示对象信息 853。当在显示的画面910上识别了姿势915时，可以在画面910上显示对象信息853。此时，可以在先前画面850的区域853上或者指定为默认的区域中显示对象信息。图10是例示根据本发明示例性实施方式的识别眼睛方向的方法的处理步骤的流程图。参照图10，眼睛方向识别器610从拍摄装置92成像的图像中检测面部区域 (S1000)。眼睛方向识别器610从所检测的面部区域中检测眼睛图像(S1010)。眼睛方向识别器610将所检测的眼睛图像与存储的眼睛图像进行比较(S1020)。 在此，眼睛方向识别器610基于比较结果来计算每个存储的眼睛图像与所检测的眼睛图像之间的差异。眼睛方向识别器610基于比较结果来选择所存储的眼睛图像中与所检测的眼睛图像最类似的一个(S1030)。在此，眼睛方向识别器610可以从所存储的眼睛图像中选择与所检测的眼睛图像差异最小的眼睛图像。眼睛方向识别器610根据所选择的眼睛图像来确定眼睛方向(S1040)。在此，眼睛方向识别器610可以读取映射到所选择的眼睛图像上的眼睛方向信息并且可以将所读取的眼睛方向信息所指示的眼睛方向确定为所检测的眼睛图像的眼睛方向。图11是例示根据本发明示例性实施方式的检测对象的方法的处理步骤的流程图。参照图11，对象检测器630控制拍摄装置94的焦点进行移动从而拍摄装置可以对对象进行成像。在此，拍摄装置94可以被构造为多个摄像机，并且对象检测器630可以控制每个摄像机的运动。对象检测器630控制拍摄装置94在移动后的焦点处成像(SlllO)。对象检测器630控制从拍摄装置接收拍摄装置94成像的图像(S1120)。对象检测器630可以从拍摄装置94所输出的图像帧中提取对象图像。另外，对象检测器630可以根据拍摄装置94成像的图像帧来计算对象的位置。图12是例示根据本发明的示例性实施方式的获取对象信息的方法的处理步骤的流程图。参照图12，中央处理器620读取存储在存储器180中的图像(S1200)。在此，存储的图像可以是预先接近透明显示设备100的对象的图像。中央处理器620将读取的图像与成像的图像进行比较(S1210)。在此，如果读取的图像中包括的对象的轮廓具有与成像的图像中包括的对象相同的轮廓，则读取的图像中包括的对象和拍摄的图像中包括的对象可以被识别为相同。换句话说，如果在轮廓的模式被控制为具有相同大小时轮廓是匹配的，则读取的图像中包括的对象可以被识别为与拍摄的图像中包括的对象相同。中央处理器620确定是否找到了相同的对象(S 1220)。如果找到了相同的对象，则中央处理器620读取涉及存储器180中找到的图像的信息(S1230)。在此，读取的信息可以用作与拍摄的图像中包括的对象有关的信息，并且读取的信息可以是预存储的接近透明显示设备100的对象的对象信息。图13是例示根据另一个实施方式的获取对象信息的方法的处理步骤的流程图。参照图13，中央处理器620请求服务器搜索与对象有关的信息(S1300)。在此，服务器可以是对象信息提供服务器10。另外，中央处理器620可以向对象信息提供服务器10 发送搜索请求信号。搜索请求信号可以包括对象图像并且可以包括对象位置信息。中央处理器620控制从服务器接收搜索结果(S1310)。图14是例示根据另一个实施方式的提供对象信息的方法的处理步骤的流程图。参照图14，眼睛方向识别器610识别朝向透明显示器150的人的眼睛方向 (S1400)。对象检测器630检测在被眼睛方向识别器610识别的眼睛方向上经由透明显示器 150看到的对象(S1410)o中央处理器620计算所检测的对象的位置信息(S1420)。在此，中央处理器620可以从位置应用服务器20或者从其位置信息获取所检测的对象的位置信息。中央处理器620 可以通过使用诸如Cell ID、AOA、TDOA等基于网络的技术经由从基站40接收的电磁波来定位透明显示设备100的位置。中央处理器620可以通过使用诸如TOA(到达时间)系统、 GPS (全球定位系统)和混合定位系统的手持定位技术经由从卫星30接收的信号来定位其位置。另选地，中央处理器620可以通过使用基于图像识别的技术或者基于超声波的技术来定位所检测的对象相对于透明显示设备100的位置。中央处理器620可以控制与所检测的对象有关的信息的获取(S1420)。在此，中央处理器620可以基于图12的处理或者图13的处理来控制对象信息的获取。透明显示器150显示所获取的对象信息(S1440)。图15是例示根据本发明另一个实施方式的透明显示设备的构造的框图。图15的透明显示设备100包括调谐器110、解调器120、网络接口 130、信号处理器140、透明显示器150、音频输出单元160、输入装置170、存储器180、控制器190、外部信号接收器1535和拍摄装置1590。控制器190控制拍摄装置1590的运动、焦点、放大和缩小和成像。拍摄装置1590根据控制器的控制对经由透明显示器150看到的后部对象和位于邻近透明显示器150的人成像。拍摄单元1590可以包括多个摄像机。不同于图5的透明显示设备100，图15的透明显示设备100包括拍摄装置1590。 图15的透明显示设备100的其它元件分别对应于图5的透明显示设备100的元件，因此将省略对其它元件的详细描述。本发明可以实现为计算机可读记录介质中的计算机可读代码。记录介质包括能够存储可被计算机设备读取的数据的全部种类的记录装置。例如，计算机可读的记录介质可以是R0M、RAM、CD_R0M、磁带、软盘、光学数据存储装置，并且可以实现为载波型(例如，经由因特网传输)。计算机可读的记录介质可以经由网络在计算机单元中分布，并且分布的计算机可读的代码可以存储在要实现的记录介质中。对于本领域技术人员而言，很明显，可以在不脱离本发明的精神或范围的情况下对本发明做出各种修改和变化。因此，本发明旨在涵盖本发明的落入所附权利要求及其等同物范围内的这些修改和变化。相关申请的交叉引用本申请要求2010年9月16日提交的韩国专利申请10-2010-0091193的优选权，
通过引用将其并入本文，如同在此进行了详细阐述一样。
权利要求
1.一种提供对象信息的方法，该方法包括以下步骤 确定朝向透明显示器的第一区域的人的眼睛方向；选择在所确定的眼睛方向上经由所述透明显示器看到的至少一个对象； 获取与所选择的对象有关的信息；以及在所述透明显示器上显示所获取的信息。
2.根据权利要求1所述的方法，该方法还包括以下步骤 确定所述眼睛方向是否发生了改变；以及选择在改变后的眼睛方向上在所述透明显示器的第二区域中看到的至少一个特定对象。
3.根据权利要求1所述的方法，其中，确定眼睛方向的步骤包括 接收由拍摄装置成像的图像，所述图像包括面部区域；根据所述面部区域来确定眼睛图像； 将所确定的眼睛图像与存储器中存储的眼睛图像进行比较； 基于比较结果在所存储的眼睛图像中选择特定眼睛图像；以及根据所选择的特定眼睛图像来确定所述眼睛方向。
4.根据权利要求1所述的方法，其中，获取信息的步骤包括 从存储器中搜索与所选择的对象相关联的对象；基于搜索结果，将所选择的对象与搜索到的对象进行比较；以及基于比较结果，读取和获取搜索到的对象的信息，其中，搜索到的对象的信息对应于与所选择的对象有关的信息。
5.根据权利要求1所述的方法，其中，获取信息的步骤包括 向服务器发送搜索所述与所选择的对象有关的信息的请求，所述请求包括所选择的对象的图像或者位置信息中的至少一个；以及响应于所述请求从所述服务器接收搜索结果。
6.根据权利要求1所述的方法，该方法还包括以下步骤接收将所显示的所选择的对象的信息移动到所述透明显示器的特定区域的信息移动命令；以及响应于所述信息移动命令将所显示的信息移动到所述特定区域。
7.根据权利要求1所述的方法，其中，所述对象包括人、动物、物体、交通工具、建筑物或者自然对象中的至少一种。
8.根据权利要求1所述的方法，其中，所述与所选择的对象有关的信息包括对象名称、 对象种类信息、对象历史信息、对象外观信息、对象重量信息、对象的位置信息或者对象的详细说明中的至少一个。
9.根据权利要求1所述的方法，其中，在所述透明显示器上的所选择的对象的区域附近显示所获取的信息。
10.根据权利要求1所述的方法，其中，根据识别的姿势来移动所显示的信息。
11.根据权利要求1所述的方法，其中，选择至少一个对象的步骤包括 确定所述对象是否位于所述第一区域中；接收由拍摄装置成像的包括所确定的对象的第一区域的图像；以及从所接收的图像中选择所确定的对象。
12.—种透明显示设备，该透明显示设备包括透明显示器；以及控制器，其被设置为确定朝向所述透明显示器的第一区域的人的眼睛方向；选择在所确定的眼睛方向上经由所述透明显示器看到的至少一个对象；获取与所选择的对象有关的信息；以及控制所述透明显示器来显示所获取的信息。
13.根据权利要求12所述的透明显示设备，其中，所述控制器确定所述眼睛方向是否发生了改变，并且选择在改变后的眼睛方向上在所述透明显示器的第二区域中看到的至少一个特定对象。
14.根据权利要求12所述的透明显示设备，其中，所述控制器接收由拍摄装置成像的图像，所述图像包括面部区域，并且所述控制器还根据所述面部区域来确定眼睛图像；将所确定的眼睛图像与存储在存储器中的眼睛图像进行比较；基于比较结果在所存储的眼睛图像中选择特定眼睛图像；以及根据所选择的特定眼睛图像来确定所述眼睛方向。
15.根据权利要求12所述的透明显示设备，其中，所述控制器从存储器中搜索与所选择的对象相关联的对象，基于搜索结果将所选择的对象与搜索到的对象进行比较；以及基于比较结果来读取和获取搜索到的对象的信息，并且其中，搜索到的对象的信息对应于所述与所选择的对象有关的信息。
全文摘要
本发明公开了透明显示设备和提供对象信息的方法。该方法包括以下步骤确定朝向透明显示器的第一区域的人的眼睛方向；选择在所确定的眼睛方向上经由透明显示器看到的至少一个对象；获取与所选择的对象有关的信息；以及在透明显示器上显示所获取的信息。
文档编号G06F3/01GK102402287SQ201110273218
公开日2012年4月4日 申请日期2011年9月15日 优先权日2010年9月16日
发明者朱延珠, 朴喜涓, 朴宣奏 申请人:Lg电子株式会社