控制信息显示的方法与流程

文档序号:16464987发布日期:2019-01-02 22:44阅读:255来源:国知局
相关申请本申请要求于2011年5月10日提交的美国临时专利申请序列号61/484,464的权益。在此通过引用并入上述申请的全部教导。本申请涉及人/机接口,并且更特别地涉及可穿戴头戴式计算机,该可穿戴头戴式计算机接受语音命令、跟踪手部姿势和/或检测头部运动,以便向在头戴式计算机和/或外围设备内运行的控制软件提供输入。
背景技术
::能够存储和显示大量高分辨率计算机图形信息和视频内容的小的便携式电子设备继续变得越来越流行。诸如苹果iphonetm、谷歌androidtm和其他智能手机的设备展现了移动电话、便携式计算机和数字媒体播放器之间的融合趋势(iphone是苹果电脑公司的商标,并且android是谷歌公司的商标)。虽然这些智能电话通常包括显示屏,但是因为手持式形式因素中物理大小限制,无法容易地再现高分辨率、大幅面显示的视觉体验。提供相对于智能电话改进的功能的其他设备具有各种名称,诸如具有嵌入式计算机处理器的头戴式计算机、视频眼镜、头戴式显示器等等。这些设备包括在面部和/或头部上穿戴的框架或者其他支持机制,类似于一副眼镜和/或耳机。框架容纳用于向穿戴者呈现电子图像所需的小的高分辨率微型显示器、光学镜片和其他组件。头戴式计算机中的电路可以包括显示器驱动器、无线接口和全功能个人计算机系统。对于与此类头戴式计算机有关的其他信息,参考在2009年3月27日提交的名称为“handheldwirelessdisplaydeviceshavinghigh-resolutiondisplaysuitableforuseasamobileinternetdevice”的pct国际申请号pct/us09/38601的相应专利申请,在此通过引用并入其全部内容。还在以下文献中进一步描述了此类设备:在2010年2月2日提交的名称为“headmountedvideoeyewearwithaccessorymount”的美国申请号61/300,611;在2010年5月5日提交的名称为“remotecontrolofhostapplicationusingmotionandvoicecommands”的美国申请号12/774,179;在2009年5月8日提交的名称为“remotecontrolofhostapplicationusingtrackingandvoicecommands”的美国申请号61/176,662;在2009年8月28日提交的名称为“remotecontrolofhostapplicationusingmotionandvoicecommands”的美国申请号61/237,884;在2008年1月8日提交的名称为“monoculardisplaydevice”的美国申请号12/008,104,在此通过引用其整体而并入其中每一个的内容。技术实现要素:一种头戴式计算机包括:微型显示器;多个输入设备,诸如头部跟踪加速计和/或相机,用于检测诸如头部运动、手部动作和/或姿势的运动;以及音频处理电路,用于检测语音命令。这些输入提供对于头戴式计算机本身和/或与头戴式计算机相关联的外围设备内运行的应用程序的控制和操作。在一个实现中,从位于头戴式计算机内的传感器接收语音、头部动作和/或手部姿势输入。继而根据语音、头部动作和/或手部姿势输入来确定到3-d虚拟空间的视野。可以通过头戴式计算机设备本地的处理器和/或远程处理器来维护表示3-d虚拟空间的数据。3-d虚拟空间包含表示一个活多个图形对象的数据。图形对象可以包括各种元素,诸如计算机桌面、应用窗口、数字图像、照片、3-d模型或者其他图像数据。语音、头部动作和/或手部姿势输入可以确定用于将视点确定到3-d虚拟空间中的视野和缩放因子二者。基于视野和缩放因子来确定从3-d虚拟空间中选择的图像数据,并且继而将其在微型显示器上呈现。手部姿势、头部动作和/或语音命令不仅可以用于设置视野和缩放因子,还可以用于选择3-d虚拟空间内的若干图形对象中的哪个用于在微型显示器上整体地或者局部地呈现。由此,通过使用这些输入命令,头戴式设备的穿戴者可以通过大幅面3-d空间进行导航,并且完全控制在微型显示器上看到3-d空间的哪些部分。头戴式计算机还可以包括光源和相机。可以通过输入命令来操纵光源和相机的光谱特性,以便提供合成视觉功能。特别地,通过相机来检测光源照亮的场景,并且转而在微型显示器上呈现。光源和相机优选地在包括红外线、近红外线、紫外线、短波红外线或者其他不可见波长的光谱的不可见电磁部分中操作。以这种方式,头戴式计算机的佩戴者能够观看光谱的不可见部分中的场景。语音、头部动作和/或手部姿势可以控制光源和相机的操作波长、来自光源的辐射的强度、相机的敏感度或者微型显示器上的合成视觉功能的呈现的其他方面。光源还可以用于确定测距信息。特别地,光源可以发射高精度光,诸如激光。继而可以通过相机或者能够确定对于光的往返时延的其他传感器来检测由对象对光的反射。头戴式计算机继而可以确定到物理空间中的一个或多个点的测距。这不仅可以提供到给定对象的测距,还可以提供例如两个对象之间的距离。在确定到不止两个点的距离的情况下,可以估计空间的体积。可以将头戴式计算机封装以便与诸如头盔的头戴装置相配合。在一个实现中,处理器和其他电子组件可以安置在第一壳体中,第二壳体可以在吊杆上承载微型显示器,并且第三壳体可以包括电源。继而可以在各个壳体之间提供一个或多个信号和/或电力连接器。壳体单独地可附接至头戴装置,并且从头戴装置可拆卸。这允许将头戴式计算机加装到头盔或者由安全人员、安保人员和军事人员习惯穿戴的其他头戴装置上。这继而消除了他们适应于在其头戴装置内部或者顶部完全聚集的头戴式设备的需要。在特定实施方式中,用于微型显示器和/或处理器的壳体可以包括噪声消除电路,该噪声消除电路可以辅助诸如呼吸器设备等的噪声环境中的操作。头戴式计算机还可以控制远程载具,并且接收和显示从远程载具上的相机返回的图像。源自语音、头部动作和手部姿势输入的控制命令可以用作相关联载具的远程控制。在其他实施方式中,控制命令可以改变位于载具上的相机的位置和/或其他操作特性。从远程载具上的相机返回的图像信息可以在微型显示器上显示。头戴式计算机的穿戴者因此可以如同其是乘坐载具的微型驾驶员一样,来体验使用远程载具、操作载具、同时看到在微型显示器上显示的载具周围的场景。头戴式计算机与载具之间的无线接口可以用于检测用于该载具的控制命令。控制命令还可以控制安装在载具上的控制装置,诸如负载和要通过载具运输的其他设备。在某些方面,语音命令可以生成用于载具的复杂命令,诸如“返回基地”、“在特定高度盘旋”等。附图说明在如附图中所示的本公开的示例实施方式的下文更为具体描述中,上述内容将变得易见,贯穿不同视图,相似的参考符号是指相同的部分。附图未必是按比例的,重点在于示出各个实施方式。图1示出了实现在此描述的若干功能的头戴式计算机。图2绘出了可以利用语音、头部动作或者手部姿势来操纵的到3-d虚拟空间的视口。图3a和图3b绘出了合成增强视觉模式和测距模式。图4a和图4b更加详细地示出了合成视觉模式,图4a是光源关闭的黑屏幕,图4b是光源开启时的视图的场景。图5a和图5b示出了头戴式计算机的组件单独地附接至头盔的实现。图6示出了可与头戴式计算机一起使用以控制诸如载具的另一设备的无线操纵杆和鼠标控制器。图7a、图7b和图7c示出了可以通过操作其上包含的组件的头戴式计算机来控制的载具的多个示例。图8示出了与头戴式计算机一起使用的无线操纵杆。图9是头戴式计算机的更详细视图。图10是由头戴式计算机执行的功能的高层框图。图11是头戴式计算机的组件的更加详细的框图。具体实施方式图1示出了在人的头部穿戴的头戴式计算机100。头戴式计算机100也被称为具有嵌入式计算机的视频眼镜、头戴式显示器(hmd)或者各种其他名称。在该示例中,头戴式计算机100包括装置、处理器和控制微型显示器120上的对象的呈现和外围设备的软件。微型显示器120可以被容纳在显示器壳体125中,该显示器壳体125由附接至框架140的吊杆132所支持。框架140可以附加地包含壳体150,用以容纳其他电子组件;在此处所示的示例中,壳体150定位在穿戴者头部的后部。一个或多个扬声器135向穿戴者的耳朵递送音频信号,并且类似地,一个或多个麦克风137包含在壳体125中和/或包含在检测音频信号的其他区域中。诸如相机160的外围设备可以附接至外围端口165。头戴式计算机100例如也可以通过穿戴者头部上的带子170来支持。如下文结合图9、图10和图11详细解释的,头戴式计算机100是完全包含的个人计算机系统,该个人计算机系统包括一个或多个数据处理器,用于在微型显示器120上生成图像并且执行其他功能。位于头戴式计算机100中的处理器能够解译语音命令、(诸如通过相机)检测穿戴者160的手部运动和/或通过加速计或者其他动作传感器来检测穿戴者的头部运动。这些输入继而被解译为对头戴式计算机100和/或远程设备的命令,头戴式计算机诸如可以通过无线接口与远程设备进行通信。到3-d虚拟空间的视口由头戴式计算机100执行的一个功能是提供到3-d虚拟空间的图形视口和/或窗口。图形视口确定在微型显示器120上呈现哪些信息。以这种模式,例如,穿戴者的头部的运动可以将3-d虚拟空间的不同部分带入到微型显示器120上的视图中。图2示出了其中的某些细节。此处,相对于虚拟3-d空间300示出了穿戴者200。虚拟3-d空间300具有位于其中的多个窗口310、320、330、340、350,这些窗口由头戴式计算机100或者外部主机内的处理器来维护。然而,仅将一个窗口340以无阴影方式示出,以指示其是活跃窗口。其他窗口310、320、330和350示出为灰色的。由此,虽然3-d虚拟空间中存在其他这些窗口,但是穿戴者200不会看到整个3-d虚拟空间,而是,用户200仅在微型显示器120上看到窗口340(或者更典型地,该窗口的选定部分)。窗口340可以是简单的视口,该视口到例如窗口化操作系统中的图形窗口。在此处示出的示例中,图形对象是数字地图图像,并且穿戴者正在查看地图的仅一部分而不是整个地图。可以理解,3-d虚拟空间可以包括各种元素,诸如计算机桌面、应用窗口、照片、3-d对象模型或者任何其他类型的数字图像对象。还应当理解,这些图像对象可以在3-d虚拟空间中彼此相邻、覆盖或者前后或靠近而定位。用户可以通过使用头戴式计算机100给出命令,而操纵各种图像对象。在一个示例中,用户可以要求放大对象之一内感兴趣的特定区域的一定水平。可以通过跟踪头部动作、语音命令和/或手部姿势,来选择窗口区域的位置和大小。例如,用户可以指定要应用于特定应用软件窗口的位置和放大和/或变焦水平。结果类似于使用放大镜跨越大区域无缝地观看某些事物,不同之处在于通过使用头部跟踪器/姿势检测器/语音输入检测,并且确定以什么放大水平来放大正在微型显示器120上看到的区域。由此,使用这一特征,用户可以将其头部向左、向右、向上或者向下移动,并且继而选择图像对象300、310、320到340中的一个特定图像对象被激活。在一个示例中,用户200可以从图2中所示的位置,将他的头转到右边。这一动作继而将产生新的窗口330,并且继而成为活跃窗口,窗口340继而被解激活。用户200还可以发布命令,用以保持其希望放大的大图像片,冻结屏幕上的该部分,并且将其放置在一边,并且继而返回并且观看该图像的另一区域,或者甚至请求针对其他区域的另一水平的放大。以这种方式,用户可以以不同的放大水平来观看图像的相同部分,和/或以不同的放大水平观看较大图像的不同点或者片,并且继而简单地通过将其头部向左或者向右、向上或向下移动而在其之间进行切换。在又一示例中,穿戴者可以发布语音命令来操纵3-d虚拟空间中各个图像对象的位置。例如,穿戴者例如可以通过移动其头部而选择图像对象,但继而发布诸如“向上移动对象”或者“将对象a移动到对象b后方”的语音命令。这使得头部跟踪器继而控制所选择的图像对象在3-d虚拟空间内的相对位置,而不是允许他在3-d空间内的给定单个对象之中导航。应当理解,穿戴者200由此访问虚拟桌面,该虚拟桌面可以按照可以在3-d虚拟空间中呈现的任何形式因素,即,穿戴者200可以在围绕其头部的360°表面中工作,或者可以具有如下印象:他正在长景深的3-d空间中工作。在另一示例中,用户200可以将他的头部转到左下方,从而使得窗口350变得活跃。该窗口可以是诸如引擎的对象的3-d模型。用户继而可以使用语音、头部跟踪和/或手部姿势命令来操纵该3-d模型,用以操纵3-d空间中的视点。穿戴者还可以发布命令用以操纵模型本身,诸如说“水平旋转对象90°”,从而使得马达的表示在3-d空间中旋转。微型显示器120上的显示图像的视图不需要用户物理上定向为如同其正以任何特定方向观看一样。例如,用于可以远程地观看如可以在房间的墙壁上投影的、落座或站立的位置虚拟生成的任何图像,但是穿戴者可以自己物理地面向其他位置,诸如躺下。免手动(hands-free)合成视觉图3a和图3b示出了头戴式计算机100提供的其他模式和功能。在该示例中,诸如光源195的发射器位于头戴式计算机100内,通常在与相机160相同的小壳体内。如果相机1600和光源195的波长是协调的,从而使得相机对由光源发射的相同波长敏感,则可以产生合成视觉功能。例如,光源可以是红外或者紫外的,并且如果相机类似地在这些波长区域中灵敏,则所产生的来自相机的图像可以在微型显示器120上看到。头戴式计算机100中的处理器不仅可以使得图像由相机捕获、并且直接在微型显示器120上观看,而且还可以存储在存储器中和/或向远程系统或者显示器发送。使用头戴式计算机100,穿戴者由此可以体验组合了合成视图的免手动合成视觉,合成视图例如示出个人的热签名或者墙壁或者其他障碍物的其他侧面上的对象的远红外视图。其示例在图4a和图4b中示出。当光源195关闭时,微型显示器上的图像是完全空白的。然而,当光源195打开时,红外相机拾取红外辐射,并且看到否则不可见的图像。使用头戴式计算机100,利用集成的红外光源和相机,穿戴者继而能够在黑暗环境中看到微型显示器120上的内容,但是其本身仍然无法被那些仅依赖于自然的非增强景象的看到。场景中的个人350不能够检测到穿戴者的存在,因为来自光源的红外照明对于肉眼是不可见的。如图3b所示,光源还可以包括激光测距仪198。激光198可以通过用户移动其头部和/或使用语音命令来引导。测距仪可以用于各种功能,诸如发现到物理空间中的对象的距离,确定两个物体之间的相对距离。在后一示例中,用户可以将其头部朝向一个对象,并且测量到第一对象的距离,并且继而移动其头部,否则将使激光瞄准第二对象。用户继而可以要求头戴式计算机100求解其位置与两个对象之间的三角方程,从而估计两个对象之间的距离。在又一示例中,可以通过穿戴者将激光瞄准三个或者更多个点,并且要求头戴式计算机计算出其之间的距离来估计空间的体积。在使用诸如调查或者材料估计时,这些功能可能是有用的。现在,可以在不需要穿戴者实际移动的情况下、或者通过使用除了内置到头戴式计算机100中的激光测距仪之外的测量实现来实现。对头盔可改装的组件图5a和图5b示出了改装到现有头戴装置上的以特定方式封装的头戴式计算机100的另一示例。在这种实现中,头戴式计算机电子设备(包括外围设备,诸如相机和电池电源)、主处理器等可以被封装到一个组件壳体502中,并且具有集成的光学/视觉/音频部分的吊杆被封装为另一组件壳体501。组件501、502单独地可附接至用户熟悉的现有的头戴装置。在所示的该示例中,头盔500可以具有两个velcrotm平板,电子组件502附接至一个平板velcrotm,并且电池503独立地封装并且附接至其他velcrotm平板(velcro是velcro公司的商标)。吊杆元件501诸如经由机械夹具或者紧固件也附接至头盔;吊杆当然包括集成的微型显示器和麦克风。布线系统可以将微型显示器和吊杆501连接至电子设备502和电池503。吊杆501可以固定和/或栓接到头盔的左侧或右侧,这取决于用户的偏好,也取决于用户可能操作的其他设备。相机、激光器和其他外围设备也可以安装到头盔500上。代替穿戴者在头盔之下佩戴专用耳机,该封装解决方案可以实现头戴式计算机功能,而用户不必适应于新的头戴装置。另外,对特定类型的头戴装置(诸如呼吸器)的操作不受影响。如果装载的电子设备还提供噪声消除,则可以改善该特定最终使用。例如,如果穿戴者正在使用呼吸器,则呼吸器常常会制造很多背景噪声,这种背景噪声将会干扰语音输入或者声音录制。装载电子设备可以包括噪声消除电路或者程序,其消除呼吸器的背景噪声。类似的解决方案可以用于消除其他背景噪声,以允许语音或者其他声音的更清楚的录制。头戴式计算机控制远程载具,接收和显示来自和去往远程载具的图像在另一实现中,从位于头戴式计算机100内的传感器接收的语音、头部动作和/或手部姿势输入可以用于导出远程控制命令。该控制命令继而可以通过无线接口发送以控制远程载具机器人或者其他对象。在这一最终使用中,输入设备还可以包括无线操纵杆和/或鼠标用以提供用于控制载具的其他输入。在一个示例中,对头戴式计算机的语音输入可以生成用于控制载具的路径的控制命令。语音命令,诸如“向右转”、“向左转”、“前行”、“后退”、“停止”等等可以包括在头戴式计算机100的处理能力中。类似地,头部跟踪输入可以生成用于控制载具的路径,或者更通常地,用于控制载具上的相机的方向的控制命令。以这种方式,用户可以获得其物理地位于载具上的体验。这通过使得载具上的相机优选地无线地向头戴式计算机传输回视频来实现。在远程载具处接收的视频继而可以在头戴式计算机内的显示器上显示。在另一示例中,诸如图6所示的无线手持式控制器610可以与头戴式计算机100一起使用,以便更加自然地控制载具620的路径位置、姿态和/或方向。使用这一布置,人可以控制诸如无人飞行载具(图7a)、无人地面载具(图7b)或者玩具(图7c)等等的载具。这消除了现有技术中利用需要几乎全部用户注意力和双手来操作的可视游戏类型的控制器来简单地操作远程载具620的问题。通过与可以获得头部动作、语音和手部跟踪命令的可穿戴的头戴式计算机100相结合地使用无线操纵杆,头戴式计算机的控制和电子处理能力可以授予任何人控制权,诸如军人、警察、消防员或者工业工人,来以简单和自然的方式控制一个或多个远程系统或者载具620。在不存在单独的用户输入设备的情况下,头戴式计算机100上的相机可以检测用户的手部姿势作为控制输入。穿戴者还可以给出话音命令,以便给予载具特定命令。例如,如果穿戴者说“冻结”,其可以由头戴式计算机检测到,说出的命令继而被翻译为一个或多个命令用以控制无人飞行载具的飞行路径,停止一切事项,仅是悬停或者围绕当前的感兴趣点遵循圆形飞行路径。在其他示例中,诸如“返回基地”的语音命令可以使得载具遵循复杂的编程飞行路径。另一示例可以是“在特定高度盘旋”,其可以使得载具通常遵循围绕其当前位置的地理稳定的圆形。这可以缓解用户不得不乏味地经由手持式控制器持续地提供命令。其他的语音命令和手持式命令可以用于控制载具的能力、性能和/或行进路径的其他方面。在一个实施方式中,载具620本身包含相机,该相机向头戴式计算机100无线地传输回视频输出。向头戴式计算机输送返回的视频继而在微型显示器120上显示。穿戴者的头部运动和/或姿势继而可以以自然的方式用于控制远程载具上的相机的位置、姿态、摇镜头、变焦、放大、光谱敏感度或者其他能力。用户的头部运动继而可以通过头戴式计算机100的装载的电子设备来跟踪,并且通过头戴式计算机翻译为被发送回无人载具的相机的命令。作为示例,如果穿戴者向左看,则该动作被头戴式计算机的头部跟踪器检测到,被翻译为相机“向左移动”命令。该“向左移动”命令继而被无线地发送至远程载具,使得远程载具上的相机向左摇镜头。通过从载具返回视频流,并且将其显示在微型显示器上,可以给予穿戴者如同其是无人飞行载具内的微型飞行员的体验。在另一功能中,用户例如可以使用话音命令来控制载具本身可能包含的其他外围设备。诸如图8所示的无人飞行载具可以携带负载,诸如要在远程位置降下的相机或者其他传感器。载具能够递送的这些负载、武器或者其他对象可以由头戴式计算机100的用户来控制。对这些负载的控制可以不考虑载具本身被命令做什么而实现。系统描述图9示出了无线头戴式计算机100(也称为视频眼镜设备100),其包括高分辨率(vga或更佳)微型显示器元件和下文描述的其他特征。头戴式计算机100通常包括很多不同类型的集成电路,包括微处理器(单核或者多核)、一个或多个无线接口、相关联的存储器或者其他存储设备、一个或多个相机(光学传感器)和/或各种传感器。这些传感器可以包括音频输入和/或输出设备,诸如一个或多个麦克风输入和输出扬声器,传感器可以包括地理位置感应、3轴到9轴自由度的方向传感器(诸如数字磁力计)、气压传感器、能量传感器、加速、位置、姿态、动作、速率或者光学传感器以及相机(可视、红外灯)。诸如附加无线电、辅助照明、测距仪等,和/或传感器的阵列可以嵌入和/或附接到设备。而且,通常位于设备100内的是诸如“热靴插座”(图9中未示出)的一个或者多个外围安装座,以用于安装诸如相机或者附加传感器的光学附件。相机、动作传感器和/或传感器用于跟踪用户的头部、手部和/或身体在至少第一轴111(水平)上的动作和/或位置,但是优选地,轴还包括第二(垂直)、第三(深度)轴、第四(倾斜)轴、第五(滚动)轴和第六(摇摆)轴。头戴式计算机设备100可以按照多种方式使用。其可以用作完全包含的、头盔式全功能便携式个人计算机/智能电话,其具有通过短距和/或长距无线链路到外部计算机和网络的全部连接,无线链路诸如蓝牙、wifi、蜂窝、lte、wimax或者其他无线电。设备100还可以用作远程显示器,用于流式传输由远程主机提供的视频信号。主机例如可以是膝上型计算机、蜂窝电话、黑莓、iphonetm、或者比设备100本身具有较小或者较大计算复杂度的其他计算设备。主机继而向设备100提供要显示的信息。设备100和主机经由一个或多个适合的无线连接来连接,无线连接诸如由蓝牙wifi、蜂窝、lte、wimax或者其他无线电来提供。主机本身还可以连接到其他网络,诸如通过有线或者无线连接而连接到因特网。虽然图9中示出了利用悬臂式吊杆在用户的面部支持的表示单个固定显示器元件的单眼微型显示器,但是应当理解,用于各种视频眼镜设备100的其他机械配置也是可能的。在图9的实现中,头戴式计算机100一般包括框架1000、带子1002、后部1004、扬声器1006、悬臂或臂1008和微型显示器部件1010。在设备100的与悬臂1008相对的一侧是外围端口1020。外围端口1020向一个或多个外围设备提供相应的连接,所以用户可以可拆卸地将各种附件附接到设备100。作为示例,端口1020提供机械和电气附件安装座,诸如热靴插座。线路通过后部1004将来自端口1020的电信号运载到其中布置的电路。热靴插座1020可以如同相机上的热靴插座一样操作,自动地提供连接以便为附件供电,并且运载去往和来自设备100的其他部分的信号。各种类型的附件由此可以与端口1020一起使用,以便向系统提供手部运动、头部运动和/或声输入,诸如但不限于麦克风、位置、方向和其他先前描述的传感器、相机等。图1是在用户的头部上穿戴的头戴式计算机100的视图,其中附件1060放置在热靴端口1020中。该附件1060是独立相机(或者其他动作传感器)部件。相机1060可以在类似于“子弹相机”的封装中包括音频和视频感应二者、录制和发光能力。其可以通过以下方式连接到设备100中的其余组件:在后部1004中内置布线(如在先前描述的扬声器的情况下),或者可以经由bluetoothtm或者wifitm连接而无线地连接。相机1060可以不必是视频相机,还可以是红外、紫外或者其他波长。相机1060还可以包括用户可调节的辅助光源。利用光源,相机1060还可以在不激活相机部分的情况下用作所需要的光源。以各种方式将对设备100的相机、动作跟踪和音频输入解译为用户命令,用以控制本地处理器、微型显示器或者外部主机的操作。也可以由用户1050提供头部运动跟踪和/或声命令以便操纵相机1060的设置。例如,可以由本地处理器识别用户声命令,诸如“变焦”或者“摇镜头”,以使得相机1060放大或者摄远。图10是更加详细地示出设备100、可选主机200以及其间传输的数据的框图。设备100经由麦克风接收音频信号输入,经由位置和方向传感器、相机或者光学传感器来接收手部运动或者身体姿势,经由头部跟踪电路(诸如3轴到9轴自由度方向传感器)来接收头部运动输入。通过设备100本地的处理器中的软件将这些翻译为命令。继而,通过设备100内部的处理器解译这些命令,用以控制微型显示器上的信息的呈现、或者诸如外围或者远程载具的其他对象的方面。还可以通过蓝牙或者其他无线接口150向主机200发送命令。主机200继而根据其自己的操作系统/应用软件来解译这些翻译的命令,以执行各种功能,或者将信息返回至设备100。在一个示例中,设备100和/或主机200维护其中存储图形对象的3-d虚拟空间。在可以在本地处理器和/或远程主机200上执行的命令之中,一个命令是用于选择虚拟显示内的视野300。由此,应当理解,非常大幅面的虚拟显示区域可以与设备100或者主机200上运行的操作系统或者应用软件相关联。然而,仅返回视野内的大虚拟显示区域的一部分,并且通过由语音、手部姿势或者头部动作命令选择的远程控制显示设备120来实际地显示。图11是头戴式计算机设备100的非限制性示例实施方式的简化高层框图。系统电子设备可以放置在适当位置(诸如后部1004)的设备100也可以包括eyepod部件4000,其包括上述微型显示器4010(例如,图9的微型显示器1010和吊杆1008)、以及一个或多个麦克风4020。一个或多个扬声器4030位于接近用户的耳朵的hmd壳体耳机(图9中的项目1006)中。头部跟踪器电路4106可以包括用于确定由设备100中的传感器检测到的头部运动和姿势的电路,诸如使用霍尔效应传感器、mim二极管、加速计、陀螺仪和/或三极管、或者上文提到的其他传感器而检测到的、沿着x轴、y轴和z轴的横向运动和围绕x轴、y轴和z轴的旋转姿势。设备系统100还可以从外部输入设备接收输入,外部输入设备诸如无线鼠标、轨迹球或者键盘,其可以通过蓝牙接口4108无线地连接。wlan/bt前端4108、omap4100和/或主机200中的软件可以用于解译由相机或者其他传感器检测到的手部姿势。相机板4060也可以可选地提供视频输入。omap处理器4100可以包括中央处理单元和片上存储器(诸如随机存取存储器(ram)),片上存储器可以包括非易失性存储器和/或只读存储器(rom)。omap可以是由德州仪器公司销售的德州仪器型号omap3530处理器或者更新版本,并且使用多媒体处理器。omap4100通常可以执行嵌入式系统,诸如操作microsoft的特定版本。omap4100是一般比wlan/bt接口4108更加强大并且更加耗电的处理器。在该示例中,同样从德州仪器可得的tps65950功率/音频组合芯片向系统提供音频、usb、小键盘控制和电池充电功能。wlan/bt接口4108可以是型号lbee1w8nec接口电路(诸如从英国剑桥的csr公司可得的蓝牙电路)或者具有类似或者较大能力的其他音频模块。显示器驱动器可以是从马萨诸塞州韦斯特伯勒市的kopin公司可得的型号kcd-a910显示器驱动器。从kopin公司可得的微型显示器4010可以包括型号cyberdisplay230k、wqvga、vga、wvga、svga或者其他制造商的可接受的微型显示器。ncs模块4400采用原始麦克风信号数据作为输入,并且输出去除了背景噪声的音频数据。其产生去往音频组合芯片4102以及从其到omap处理器4100的音频信号。使用由ncs4400馈送的经清理的麦克风信号,在omap处理器4100上的软件中执行语音识别。通过引用在此提及的所有专利、公开申请和参考的教导而并入其全部内容。虽然本公开已经描述了若干示例实施方式,但是本领域技术人员可以理解,在不脱离由所附权利要求包括的本发明的范围的情况下,可以在形式和细节上做出各种改变。当前第1页12当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1