一种带有眼控的头戴式显示设备的制作方法

文档序号:15046718发布日期:2018-07-27 22:49阅读:112来源:国知局

本发明属于虚拟现实和计算机视觉技术领域,具体涉及一种带有眼控的头戴式显示设备。



背景技术:

现有技术中的头戴式显示设备体验中,有一部分采用了物理按键的方式进行选择确认,有的采用触摸按键的方式进行选择确认,但是采用触摸或者物理按键的方式需要使用者一直将手臂悬空,长时间操作会导致用户疲劳;有一部分采用陀螺仪的方式通过转动头部进行选择,采用头动的方式需要用户不断移动头部进行选择,体验性较差。



技术实现要素:

本发明提供了一种带有眼控的头戴式显示设备,可以实时的知道用户的实现方向,并且可以通过眼睛的运动来操作头戴式显示设备,并且通过多个处理模块间的协作,提高系统的性能,进而提高系统的反映速度,降低延迟,提高用户的使用体验。存储模块中的加密和解密模块能够保护用户的隐私和数据的安全。

本发明中头戴式显示设备是指:虚拟现实设备(vr)、增强现实设备(ar)和混合现实设备(mr)。

为解决上述问题,本发明采用如下技术方案:

一种带有眼控的头戴式显示设备,包含:显示模块、通信模块、交互模块、电源模块、壳体和处理模块,其特征在于,所述交互模块包含眼控模块,所述眼控模块包含摄像头模块和红外光源,所述处理模块包含第一处理单元和第二处理单元。

其中所述显示模块用于向用户提供视觉信息,显示模块为显示屏和/或投影装置;通信模块用于设备间、设备和基站间以及设备和服务器端的通信,通信模块包含蓝牙单元、wifi单元、gsm单元、gprs单元、cdma单元、tdma单元、zigbee单元、z-wave单元、infrared(ir)单元、rfid单元、nfc单元和wigig单元中一种或几种。

电源模块用于给上述显示模块、通信模块、交互模块和处理模块供电,壳体用于支撑和固定上述部分或全部模块。

所述摄像头采集图像数据,所述第一处理单元连接所述摄像头模块和所述第二处理单元,所述第一处理单元对摄像头模块传来数据进行处理,将处理结果传给第二处理单元。

所述第一处理单元包含:arm、x86、x64、fpga、dsp、mcu、mpu、asic和gpu中一种或几种。

所述红外光源直接连接电源模块或者所述红外光源连接第一处理单元和/或第二处理单元。

所述第二处理单元将第一处理单元的处理结果进行处理,同时第二处理单元还连接显示模块、通信模块、电源模块。

所述第二处理单元包含:所述第二处理单元包含arm、x86、x64、gpu和dsp中一种或几种。

所述第一处理单元与第二处理单元同时工作,即第一处理单元将图像数据处理后的结果传给第二处理单元,第二处理单元对该结果进行处理,并根据程序执行其他操作,与此同时第一处理单元继续处理下一帧的图像数据,直到接收到停止或暂停指令。

所述第一处理单元将图像数据进行处理得到此时视线在显示模块中的落点坐标,将该坐标交给第二处理模块;或者第一处理模块将图像数据进行处理得到一个数据量的兴趣区域的数据,将该数据交由第二处理模块进行处理;或者所述第一处理单元将图像数据进行预处理,将增强后的数据交由第二处理模块进行处理;或者第一处理模块仅对图像数据进行压缩编码,将该压缩编码后的数据交给第二处理模块进行处理。

所述一种带有眼控的头戴式显示设备还包含有存储模块,用于存储用户的个人数据。所述存储模块包含:加密模块和解密模块,用于保护用户数据安全。

所述交互模块包含:按键、触摸模块、脑电模块、骨传导模块、语音识别模块和体感模块中的一种或几种,交互模块用于人机交互。

所述摄像头模块,红外光源和第一处理单元至少有一个。

上述模块可以构成一套方案,所述一种带有眼控的头戴式显示设备还可包含光学透镜构成另一种方案;以及包含反光模块构成一种方案;以及同时包含光学透镜和反光模块构成另一种方案。

所述反光模块为:可反射红外光透过其他波段的光的反光模块或者不可透过红外光可透过其他波段的光的反光模块,所述反光模块与屏幕平行放着或者贴合屏幕或者与屏幕成一定夹角放置。

所述一种带有眼控的头戴式显示设备还包含有:陀螺仪、加速度传感器和定位模块。所述定位模块为:gps、a-gps、北斗和伽利略中一种或几种。

本发明可以实现的技术效果是:通过摄像头模块和红外光源来采集用户的图像,第一处理单元处理连接摄像头模块并处理摄像头的数据将处理结果发送给第二处理单元,第二处理单元连接有显示模块、通信模块和电源模块,可以实时的知道用户的实现方向,并且可以通过眼睛的运动来操作头戴式显示设备,并且通过多个处理模块间的协作,提高系统的性能,进而提高系统的反映速度,降低延迟,提高用户的使用体验。存储模块中的加密和解密模块能够保护用户的隐私和数据的安全。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明的模块连接逻辑关系示意图;

图2为处理单元逻辑关系示意图;

图3为本发明不包含透镜和反光模块的示意图;

图4为本发明包含透镜的示意图;

图5为本发明包含透镜和反光模块且反光模块平行显示模块的示意图;

图6为本发明包含透镜和反光模块且反光模块倾斜显示模块的示意图;

图中:1为显示模块,2为反光模块,3为摄像头模块,4为光学透镜,5为红外光源,6为眼睛。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员所获得的所有其他实施例,都属于本发明保护的范围。

实施例一,如图1、2、3所示,一种带有眼控的头戴式显示设备,包含:壳体、显示模块、通信模块、交互模块、电源模块和处理模块,其中,所述显示模块包含投影模块,所述处理模块包含第一处理单元和第二处理单元,所述交互模块包含眼控模块,所述眼控模块包含摄像头模块和红外光源。

红外光源5发射的红外光线照到眼睛6上,摄像机模块3采集眼睛6反射的光线形成眼睛的图像数据,所述眼睛的图像的经由第一处理单元处理得到处理结果a,处理结果a传递给第二处理单元,第二处理单元对处理结果a进行处理结合操作系统给用户以反馈,以实现视线追踪和虹膜识别。

其中,所述红外光源5红外光源至少一个红外灯珠,发射850nm和/940nm红外光,照射在人眼区域。所述红外光源5连接第一处理单元,第一处理单元调节灯珠的亮度。

其中,通信模块包含:蓝牙模块、wifi模块、4g模块和nfc模块,用于与服务器通信和快速匹配。

其中,所述一种带有眼控的头戴式显示设备,还包含有陀螺仪、加速度传感器和定位模块用于测定用户的运动和方位。

使用中既可以在一只眼睛光路中添加如图3所示结构,采集一只眼镜图像进行处理,也可以在两个眼睛光路中均添加如图3所示结构,分别采集两只眼睛的图像进行处理。

实施例二,如图1、2、4所示,一种带有眼控的头戴式显示设备,包含:壳体、显示模块、通信模块、交互模块、电源模块和处理模块,其中,所述显示模块包含屏幕,所述处理模块包含第一处理单元和第二处理单元,所述交互模块包含眼控模块,所述眼控模块包含摄像头模块和红外光源。

红外光源5发射的红外光线照到眼睛6上,摄像机模块3采集眼睛6反射的光线形成眼睛的图像数据,所述眼睛图像数据包括瞳孔和灯珠在角膜上的反射点(普尔钦斑),所述眼睛的图像的经由第一处理单元处理得到处理结果a,处理结果a传递给第二处理单元,第二处理单元对处理结果a进行处理结合操作系统给用户以反馈,以实现视线追踪和虹膜识别。

其中光学透镜由壳体固定在眼睛和屏幕之间,屏幕1的光线通过光学透镜4进入眼睛6。

其中,所述红外光源5红外光源至少一个红外灯珠,发射850nm和/940nm红外光,照射在人眼区域。

其中,通信模块包含:蓝牙模块、wifi模块、4g模块和nfc模块,用于与服务器通信和快速匹配。

其中,所述一种带有眼控的头戴式显示设备,还包含有陀螺仪、加速度传感器和定位模块用于测定用户的运动和方位。

使用中既可以在一只眼睛光路中添加如图4所示结构,采集一只眼镜图像进行处理,也可以在两个眼睛光路中均添加如图4所示结构,分别采集两只眼睛的图像进行处理。

实施例三,如图1、2、5所示,一种带有眼控的头戴式显示设备,包含:壳体、显示模块、通信模块、交互模块、电源模块、光学透镜、反光模块和处理模块,其中,所述显示模块包含屏幕,所述处理模块包含第一处理单元和第二处理单元,所述交互模块包含眼控模块,所述眼控模块包含摄像头模块和红外光源。

红外光源5发射的红外光线经过反光模块2照到眼睛6上,摄像机模块3采集眼睛6反射的光线再由反光模块反射光线形成眼睛的图像数据,所述眼睛的图像的经由第一处理单元处理得到处理结果a,处理结果a传递给第二处理单元,第二处理单元对处理结果a进行处理结合操作系统给用户以反馈,以实现视线追踪和虹膜识别。

其中光学透镜由壳体固定在眼睛和屏幕之间,屏幕1的光线通过光学透镜4进入眼睛6。

其中反光模块与屏幕水平放置,所述反光模块能过反射红外光,透过其他波段的光。

其中,所述红外光源5红外光源至少一个红外灯珠,发射850nm和/940nm红外光,照射在人眼区域。所述红外光源5连接第一处理单元,第一处理单元调节灯珠的亮度。

其中,通信模块包含:蓝牙模块、wifi模块、4g模块和nfc模块,用于与服务器通信和快速匹配。

其中,所述一种带有眼控的头戴式显示设备,还包含有陀螺仪和加速度传感器用于测定用户的运动和方位。

其中,所述一种带有眼控的头戴式显示设备,还包含有存储模块,其中所述存储模块包含有加密模块和解密模块用于保护用户隐私和系统正常的存取数据。

使用中既可以在一只眼睛光路中添加如图5所示结构,采集一只眼镜图像进行处理,也可以在两个眼睛光路中均添加如图5所示结构,分别采集两只眼睛的图像进行处理。

实施例四,如图1、2、6所示,一种带有眼控的头戴式显示设备,包含:壳体、显示模块、通信模块、交互模块、电源模块、光学透镜、反光模块和处理模块,其中,所述显示模块包含屏幕,所述处理模块包含第一处理单元和第二处理单元,所述交互模块包含眼控模块,所述眼控模块包含摄像头模块和红外光源。

红外光源5发射的红外光线经过反光模块2照到眼睛6上,摄像机模块3采集眼睛6反射的光线再由反光模块反射光线形成眼睛的图像数据,所述眼睛的图像的经由第一处理单元处理得到处理结果a,处理结果a传递给第二处理单元,第二处理单元对处理结果a进行处理结合操作系统给用户以反馈,以实现视线追踪和虹膜识别。

其中光学透镜由壳体固定在眼睛和屏幕之间,屏幕1的光线通过光学透镜4进入眼睛6。

其中反光模块与屏幕倾斜放置,所述反光模块能过反射红外光,透过其他波段的光。

其中,所述红外光源5红外光源至少一个红外灯珠,发射850nm和/940nm红外光,照射在人眼区域。

其中,通信模块包含:蓝牙模块、wifi模块、4g模块和nfc模块,用于与服务器通信和快速匹配。

其中,所述一种带有眼控的头戴式显示设备,还包含有陀螺仪和加速度传感器用于测定用户的运动和方位。

其中,所述一种带有眼控的头戴式显示设备,还包含有存储模块,其中所述存储模块包含有加密模块和解密模块用于保护用户隐私和系统正常的存取数据。

使用中既可以在一只眼睛光路中添加如图6所示结构,采集一只眼镜图像进行处理,也可以在两个眼睛光路中均添加如图6所示结构,分别采集两只眼睛的图像进行处理。

其工作原理是:通过红外光源照射用户眼睛,通过摄像头直接拍摄或间接利用反光模块拍摄的方式得到眼睛的图像数据,然后将图像数据传递给第一处理单元,第一处理单元对所述图形数据进行处理并将处理结果传递给第二处理单元,第二处理单元根据所述第一处理单元的处理结果进行处理反馈给用户。处理模块结合这些信息和交互模块的信息执行相应的操作,完成一套完整的用户交互流程。

本发明可以实现的技术效果是:通过多处理模块的结合,提高系统的性能,降低系统的响应时间,提高用户的交互效率,进而提高用户的体验效果;使用眼控功能能够使用和设备的交互更加自然和高效,并且进一步可以知道用户实时的注释的屏幕内容;存储模块中的加密和解密模块能够保护用户的隐私和数据的安全。

以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。

以上所描述的装置实施例中,第一处理单元和第二处理单元是以功能模块的形式来呈现。这里的“模块”可以指特定应用集成电路(application-specificintegratedcircuit,asic),执行一个或多个软件或固件程序的处理器和存储器、集成逻辑电路和/或其他可以提供上述功能的器件。在一个简单的实施例中,本领域的技术人员可以想到第一处理单元可以通过具有计算和逻辑处理功能的处理器、存储器和输入/输出接口来实现,第二处理单元可以通过具有计算和逻辑处理功能的处理器、存储器和输入/输出接口来实现。

以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何不经过创造性劳动想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求书所限定的保护范围为准。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1