一种显示控制装置及显示控制系统的制作方法

一种显示控制装置及显示控制系统的制作方法
【专利摘要】本实用新型的实施例提供一种显示控制装置及显示控制系统，涉及显示技术领域，能够提高用户使用显示设备的便利性。显示控制系统，其特征在于，包括：显示设备、可穿戴设备、控制器；所述显示设备用于显示图像，作为当前显示图像；所述可穿戴设备用于获取眼睛注视当前显示图像时显示图像上的注视位置，以及获取眼睛注视所述当前显示图像时的当前脑电波；所述控制器用于当所述当前脑电波的特征参数满足预设条件时，根据所述当前脑电波确定所述当前脑电波对应的控制指令；根据所述控制指令对所述注视位置的显示图像执行相应的操作。
【专利说明】
-种显示控制装置及显示控制系统
技术领域
[0001] 本实用新型设及显示技术领域，尤其设及一种显示控制装置及显示控制系统。
【背景技术】
[0002] 随着显示技术的不断发展，显示设备例如电视、电脑W及手机等电子产品逐渐成 为人们日常生活中的必需品。然而，用户在使用上述显示设备时通常需要借助一些辅助装 置W对显示设备进行操控，例如当用户在玩游戏时，需要借助游戏手柄，实现显示画面中的 定位或更换装备等操作。或者，在用户观看图片或影片的过程中，需要通过遥控器控制显示 画面显示的内容。运样一来，降低了使用显示设备的便利性。 【实用新型内容】
[0003] 本实用新型的实施例提供一种显示控制装置及显示控制系统，能够提高用户使用 显示设备的便利性。
[0004] 为达到上述目的，本实用新型的实施例采用如下技术方案：
[0005] 本实用新型实施例的一方面，提供一种显示控制系统，包括：显示设备、可穿戴设 备、控制器;所述显示设备用于显示图像，作为当前显示图像;所述可穿戴设备用于获取眼 睛注视当前显示图像时显示图像上的注视位置，W及获取眼睛注视所述当前显示图像时的 当前脑电波;所述控制器用于当所述当前脑电波的特征参数满足预设条件时，根据所述当 前脑电波确定所述当前脑电波对应的控制指令;根据所述控制指令对所述注视位置的显示 图像执行相应的操作。
[0006] 优选的，所述显示设备与所述可穿戴设备分离式设置，且通过有线或无线方式连 接，用于信息交互，所述控制器设置在所述显示设备中。
[0007] 优选的，所述可穿戴设备包括头戴支架，所述头戴支架上设置有用于采集当前脑 电波的脑电波采集回路、用于采集人眼成像的图像采集器，W及用于根据所述图像采集器 采集的图像确定眼睛在显示图像上的注视位置的处理器;所述处理器还用于将所述当前脑 电波和所述注视位置发送至所述显示设备。
[000引优选的，所述可穿戴设备包括头戴支架，所述头戴支架上集成有所述显示设备和 所述控制器。
[0009] 优选的，所述头戴支架上设置有用于采集当前脑电波的脑电波采集回路、用于采 集人眼成像的图像采集器，W及用于根据所述图像采集器采集的图像确定眼睛在显示图像 上的注视位置的处理器;所述处理器还用于将所述当前脑电波和所述注视位置发送至所述 显示设备。
[0010] 优选的，所述脑电波采集回路由前额传感器W及至少一个耳垂传感器构成。
[0011] 优选的，所述图像采集器为CCD图像传感器或CMOS图像传感器。
[0012] 进一步优选的，所述图像采集器和所述显示设备上设置有红外光光源。
[0013] 本实用新型实施例的另一方面，提供一种显示控制装置，包括:获取模块，用于获 取眼睛注视当前显示图像时，显示图像上的注视位置，w及注视所述当前显示图像时的当 前脑电波;确定模块，用于当所述当前脑电波的特征参数满足预设条件时，根据所述当前脑 电波确定所述当前脑电波对应的控制指令;执行模块，用于根据所述控制指令，对所述注视 位置的显示图像执行相应的操作。
[0014] 优选的，还包括存储模块，所述获取模块包括用于获取所述当前脑电波的脑电波 采集子模块，所述确定模块包括特征参数获取子模块W及指令汇编子模块;所述特征参数 获取子模块连接所述脑电波采集子模块，用于确定所述当前脑电波和预设脑电波的特征参 数;所述指令汇编子模块连接所述特征参数获取子模块，用于建立脑电波数据集，所述脑电 波数据集预存有预设脑电波的特征参数与控制指令的对应关系;所述存储模块连接所述特 征参数获取子模块和所述指令汇编子模块，用于存储所述控制指令、所述特征参数W及所 述脑电波数据集。
[0015] 进一步优选的，所述确定模块还包括特征匹配子模块;所述特征匹配子模块连接 所述特征参数获取子模块和所述存储模块，用于将所述特征参数获取子模块获取到的当前 脑电波的特征参数与所述存储模块中脑电波数据集中的预设脑电波的特征参数进行匹配。
[0016] 进一步优选的，所述确定模块还包括指令获取子模块，与所述特征匹配子模块和 所述存储模块相连接，用于当所述当前脑电波的特征参数与所述预设脑电波的特征参数相 匹配时，从所述存储模块中获取相匹配的预设脑电波所对应的控制指令。
[0017] 优选的，所述获取模块包括:眼部图像采集子模块、视线确定子模块、位置计算元 件子模块;所述眼部图像采集子模块用于获取眼部图像，确定瞳孔位置;所述视线确定子模 块与所述眼部图像采集子模块相连接，用于计算出视线方向；所述位置计算子模块与所述 视线确定子模块相连接，用于根据所述视线方向与所述显示图像的映射关系，得出所述眼 睛在所述显示图像的注视位置。
[0018] 本实用新型实施例提供一种显示控制装置及显示控制系统，所述显示控制系统中 可穿戴设备用于获取眼睛注视当前显示图像时显示图像上的注视位置，W及获取眼睛注视 所述当前显示图像时的当前脑电波；控制器当所述当前脑电波的特征参数满足预设条件 时，根据所述当前脑电波确定所述当前脑电波对应的控制指令;根据所述控制指令对所述 注视位置的显示图像执行相应的操作。无需手动就可W实现人机交互，从而可W提高用户 操作可穿戴设备的便利性。
【附图说明】
[0019] 为了更清楚地说明本实用新型实施例或现有技术中的技术方案，下面将对实施例 或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅 是本实用新型的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提 下，还可W根据运些附图获得其他的附图。
[0020] 图la为本实用新型实施例提供的显示控制装置的显示图像示意图；
[0021] 图化为脑电波受到肌电图影响后峰值发生变化的示意图；
[0022] 图2a为瞳孔位置确定的一种示意图；
[0023] 图化为瞳孔位置确定的另一种示意图；
[0024] 图2c为瞳孔位置确定的又一种示意图；
[0025]图3a为本实用新型实施例提供的另一种显示控制方法的流程图；
[00%]图3b为与图3a对应的一种显示图像的示意图；
[0027] 图3c为与图3a对应的另一种显示图像的示意图；
[0028] 图4为本实用新型实施例提供的一种显示控制装置的结构示意图；
[0029] 图5为图4所示的显示控制装置中具体部件的连接方式示意图；
[0030] 图6为本实用新型实施例提供的一种显示控制系统的结构示意图；
[0031 ]图7为图6中显示控制系统的具体结构示意图；
[0032] 图8为本实用新型实施例提供的一种脑电波采集回路示意图；
[0033] 图9为本实用新型实施例提供的另一种显示控制系统的结构示意图。
[0034] 附图标记：
[0035] 100-显示图像；101-图像主内容；102-操作图标；110-头戴支架；10-显示面板；11- 显示面板上的图像在人眼中的成像；12-瞳孔；120-红外光源；121-光斑；13-眼球；103-虚拟 注视点；130-射击区域；131-操控区域;01-获取模块;02-确定模块;03-执行模块;04-存储 模块;201-脑电波采集子模块;202-特征参数获取子模块;203-指令汇编子模块;204-特征 匹配子模块;205-指令获取子模块;206-眼部图像采集子模块;207-视线确定子模块;208- 位置计算子模块;20-显示设备;30-可穿戴设备;40-控制器；111-脑电波采集回路；112-前 额传感器;113-耳垂传感器;114-图像采集器;115-红外光光源;T-采集阶段;S-采集阶段中 的某一时刻;G1-峰值未发生突变的脑电波;G2-肌电图;G3-G1与G2的叠加波形图。
【具体实施方式】
[0036] 目前，无论是普通显示还是虚拟现实显示，均设及用户与显示设备的交互，W实现 对显示图像的操作或控制。目前，用户与显示设备通过外设或触摸屏交互，运样用户操作便 利性不够高。
[0037] 本实用新型实施例提供一种显示控制系统，如图6所示，包括:显示设备20、可穿戴 设备30、控制器40。
[0038] 具体的，显示设备20用于显示图像100,作为当前显示图像。
[0039] 可穿戴设备30用于获取眼睛注视当前显示图像时显示图像100上的注视位置，W 及获取眼睛注视当前显示图像时的当前脑电波。
[0040] 控制器40用于在当前脑电波的特征参数满足预设条件时，根据当前脑电波确定当 前脑电波对应的控制指令;根据控制指令对注视位置的显示图像100执行相应的操作。
[0041] 运样一来，利用可穿戴设备对眼睛注视位置进行获取，可W使得用户能够通过双 眼对显示设备显示的显示图像上的操作位置进行选择，而用户在不同思考状态下可W发出 不同的脑电波，所W还可W利用上述可穿戴设备对用户注视当前显示图像时的当前脑电波 进行获取。接下来确控制器会根据可穿戴设备获取到的当前脑电波去判断用户是否需要执 行上述注视位置的相应操作，如果用户需要执行上述操作，则控制器会对注视位置的显示 图像执行相应的操作。因此在上述控制过程中无需手动就可W实现相应操作，从而可W提 高可穿戴设备的便利性。
[0042] 需要说明的是，显示设备20与可穿戴设备30可W分离式设置，且通过有线或无线 方式连接，用于信息交互，控制器40设置在显示设备20中。具体的，上述显示设备20可W为 手机、电脑、电视等。其中，该显示设备20包括显示面板，所述显示面板可W为液晶显示面 板，或者化邸(英文全称:〇rganic Li曲t Emitting Diode,中文全称:有机发光二极管）显 示面板。其中，上述可穿戴设备30可W为头戴式可穿戴设备，在此情况下可穿戴设备包括用 于佩戴在头部的头戴支架。
[0043] 此外，上述控制器40集成于手机、电脑或电视中，用于接收、发送W及处理数据信 息。
[0044] 或者，上述可穿戴设备30可W为头戴式可穿戴设备，在此情况下可穿戴设备包括 如图7所示可W包括头戴支架110。所述头戴支架110上集成有显示设备20和控制器40。
[0045] 当上述可穿戴设备包括头戴支架110的情况下，W图7为例，上述头戴支架110上设 置有如图8所示的用于采集当前脑电波的脑电波采集回路111、如图7所示的用于采集人眼 成像的图像采集器114, W及用于根据图像采集器114采集的图像确定眼睛在显示图像上的 注视位置的处理器（图中未示出）。处理器还用于将当前脑电波和注视位置发送至显示设备 20 〇
[0046] 具体的，上述脑电波采集回路111，如图8所示由前额传感器112、至少一个耳垂传 感器113构成。其中，上述前额传感器112、至少一个耳垂传感器113可W如图7所示，固定于 头戴支架110上，此外用于连接前额传感器112、至少一个耳垂传感器113的线路可W设置于 头戴支架110内。通常情况下，至少一个耳垂传感器113包括贴附于左耳耳垂的耳垂传感器 113W及贴附于右耳耳垂的耳垂传感器113。
[0047] 此外，上述图像采集器114为CCD图像传感器或CMOS图像传感器。在此情况下，为了 采用角膜反射模式对视线进行追踪，可W在显示设备20上，例如显示设备20的两侧设置有 红外光光源115,并在图像采集器114上也设置红外光光源（图像采集器114上的红外光光源 图中未示出）。
[0048] 或者，上述头戴支架110可W如图9所示为眼镜的镜架，而显示设备20可W安装于 镜框处，控制器40设置于相邻两个镜框之间。
[0049] 下面将结合本实用新型实施例中的附图，对本实用新型实施例中的技术方案进行 清楚、完整地描述。
[0050] 例如，假设显示设备为具有控制器的电脑（如，控制器为CPU)。可穿戴设备为头戴 式可穿戴设备。则，用户需与显示设备交互时，佩戴所述头戴式可穿戴设备，并注视电脑显 示的当前显示图像。
[0051] 在此情况下，当用户佩戴所述头戴式可穿戴设备，并注视电脑显示的当前显示图 像时，头戴式可穿戴设备能够获取用户的注视位置和当前脑电波，并向电脑提供上述注视 位置和当前脑电波，W使得电脑能够获取到上述注视位置和当前脑电波。
[0化2] 假设电脑显示图像为如图la所示显示图像100,该显示图像包括图像主内容101， W及操作图标102,如图la中Ξ个操作图标102从左至右依次为最小化图标、还原图标或关 闭图标等。若用户需要关闭显示图像100中的图像主内容101时，可注视关闭图标，可穿戴设 备就可W检测到用户眼睛的注视位置和注视时的脑电波，将注视位置和脑电波通过无线或 有线方式发送给显示设备。
[0053]此外，脑电波的特征参数可W是脑电波的频率、振幅中的至少一种。所述控制指令 可W是与操作图标102对应的指令，比如与关闭、保存、最小化、最大化、确定、选中等图标对 应的控制指令。具体的，与关闭图标对应的指令可w为关闭指令。
[0054] W脑电波的特征参数为频率为例说明。当获取到注视位置和注视时的脑电波时， 判断当前脑电波的频率是否满足预设条件，若是，则根据当前脑电波确定当前脑电波对应 的控制指令，否则，什么都不做或者报错。
[0055] 在此情况下，若当前脑电波的频率为专注状态的脑电波频率时，则认为用户的注 视为想要执行某种操作的注视，且注视位置为如图la的关闭图标时，根据当前脑电波确定 当前脑电波对应的控制指令为关闭指令。确定控制指令为关闭指令时，执行关闭显示图像 100的操作。
[0056] 需要说明的是，用户注视的所述显示图像可W是显示设备上显示的真实图像，也 可W是可穿戴设备通过投影器件显示的虚拟图像，具体的，投影器件将显示设备的真实显 示图像投影在人的视网膜，视觉效果为人眼视场范围内具有一个虚拟图像。
[0057] 上述预设条件为与脑电波特征参数相关的预设条件，不同的脑电波参数，预设条 件也不同，则预设条件对应控制指令的调用也略有差异。
[0058] 具体的，若上述特征参数为脑电波的频率时，所述的预设条件为一频率阔值。
[0059] 更具体的，通常用户在观看图像主内容101时的专注度一般较执行上述操作图标 102的专注度低。因此用户在观看图像主内容101时可W发出上述α脑电波(8~12化），而在 需要执行上述操作图标102时可W发出上述削亩电波（12~30Hz)。上述频率阔值可W为 12Hz。即在当前脑电波的频率小于12化时，说明用户只是在观看图像主内容101，没有执行 操作图标102的意向。而在当前脑电波的频率大于等于12Hz时，说明用户需要执行操作图标 102。
[0060] 在此情况下，与该当前脑电波对应的控制指令执行该操作图标102,例如单击关闭 图标。运样一来，当采集到的当前脑电波的频率大于上述频率阔值(12Hz)时，确定出用户需 要单击操作图标102。接下来，可W在对用户注视位置处的操作图标102执行单击操作。当采 集到的当前脑电波的频率小于上述频率阔值(12Hz)时，将对操作图标102不进行任何操作。
[0061] 若上述特征参数为脑电波的频率和振幅时。所述预设条件包括一频率阔值和当前 脑电波波形的峰值是否在如图化所示的采集阶段T发生突变。
[0062] 具体的，由于眼部肌肉的收缩也会产生一定的电波，即肌电图G2(如图化所示）。其 中，眼部肌肉的收缩可W由巧眼引起。从而会使得脑电波G1振幅的峰值在上述采集阶段T的 S时刻发生突变。其中，图化中的波形G1为振幅峰值未发生突变的脑电波的波形。其中，上述 S时刻为肌电图G2与峰值未发生突变的脑电波G1波形叠加的时刻。
[0063] 基于此，当采集到的当前脑电波的频率大于等于上述频率阔值时（同实施例一为 12HZ)，即用户处于清醒专注的状态，并且需要执行操作图标102。接下来，需要判断对操作 图标102进行单击还是双击.此时，在当前脑电波在S时刻的振幅峰值发生了较大的变化，贝U 说明用户在观看显示图像100时进行巧眼，此时该当前脑电波对应的控制指令为双击操作 图标102。而在当前脑电波的振幅在采集过程中均未发生变化，则说明用户在观看显示图像 100时未巧眼，此时该当前脑电波对应的控制指令可W是单击操作图标102。此外，当采集到 的当前脑电波的频率小于上述频率阔值(12Hz)时，将对操作图标102不进行任何操作。
[0064] 若上述特征参数为脑电波的振幅时，则所述预设条件包括当前脑电波波形的峰值 是否在如图化所示的采集阶段T发生突变。
[0065] 具体的，当用户看不清图像101时，通常会将眼睛眯起来从而同样会因此眼部肌肉 的收缩，使得脑电波G1振幅的峰值在上述采集阶段T的S时刻发生突变。
[0066] 基于此，在当前脑电波的振幅峰值在S时刻发生了较大的变化时，则说明用户眯着 眼在观看显示图像100,此时该当前脑电波对应的控制指令可W是放大显示图像100。在当 前脑电波的振幅未发生变化时，可W对放大显示图像100不进行任何操作。
[0067] 由上述可知，可W在可穿戴设备事先存储一些与控制指令相对应的特征参数。例 如频率为12~30Hz的朗亩电波对应单击的控制指令。然而当上述当前脑电波的频率在12~ 30化内时，只能够获取到单击操作的控制指令。对于其他指令例如双击操作或者放大操作， 均需要结合眼部肌肉收缩或扩张得到的肌电图对当前脑电波的振幅产生的影响来实现。增 加了获取控制指令的复杂性。为了解决上述问题，本实用新型还可W包括多个控制指令。该 预设条件为当前脑电波与事先存储的预设脑电波是否匹配。
[0068] 具体的根据当前脑电波确定当前脑电波对应的控制指令可W是先确定当前脑电 波的特征参数，然后将当前脑电波的特征参数与脑电波数据集中的预设脑电波的特征参数 进行匹配。其中，该脑电波数据集预存有预设脑电波的特征参数与控制指令的对应关系。需 要说明的是，当前脑电波的特征参数与二脑电波的特征参数相匹配是指，当前脑电波的特 征参数与二脑电波的特征参数之间的差异在允许的误差范围之内。该误差可W由可穿戴设 备的精度确定。本实用新型对此不做限定。最后，在当前脑电波的特征参数与预设脑电波的 特征参数相匹配时，获取相匹配的预设脑电波所对应的控制指令。
[0069] 需要说明的是，预设脑电波是在该可穿戴设备出厂前或者初始化时，预先存于该 可穿戴设备中的脑电波。
[0070] 具体的，可W在可穿戴设备出厂时或者初始化阶段对用户在清醒且专注的状态 下，处于不同的思维活动状态时发出的不同预设脑电波进行采集。例如，虽然用户在清醒且 专注的状态下发出的β脑电波的频率会在12~30化。但是，不同的思维活动会使得12~30化 范围内的脑电波的频率之间具有细微的差异。例如用户需要进行单击操作控制指令时预设 脑电波的频率为12~15 Hz，双击操作控制指令时预设脑电波的频率为18~2 mz，关闭操作 控制指令时预设脑电波的频率为25~30Hz。在此情况下，可W获取上述当前脑电波，然后将 当前脑电波的频率与脑电波数据集中的预设脑电波的频率进行匹配。例如在当前脑电波的 频率在25~30Hz范围内时，则当前脑电波的频率与预设脑电波的频率相匹配，从而可W获 取相匹配的预设脑电波所对应的关闭操作控制指令。而在当前脑电波的频率在12~15 Hz 内时，则当前脑电波的频率与预设脑电波的频率相匹配，从而可W获取相匹配的预设脑电 波所对应的单击操作控制指令。此外，如果在当前脑电波的频率在16~17化内时，则当前脑 电波的频率无法与脑电波数据集中任意一种预设脑电波的频率相匹配，因此无法实现控制 指令的获取。
[0071] 当然，上述不同控制指令对应的预设脑电波的频率仅仅是举例说明，并不是对预 设脑电波对应的控制指令的限定。
[0072] 运样一来，通过预存有预设脑电波的特征参数与控制指令的对应关系的脑电波数 据集，可W使得12~30化内的所有脑电波对应多个控制指令，而无需借助眼部肌肉的运动。
[0073] 在此基础上，在获取上述当前脑电波之前，还可W确定预设脑电波的特征参数，并 存储。之后建立包括预设脑电波的特征参数与控制指令的对应关系的脑电波数据集，即建 立出预设脑电波的特征参数与控制指令之间的映射关系。从而能够在当前脑电波与预设脑 电波的特征参数相匹配时，能够通过预设脑电波利用寻址访问的方式调用处于该预设脑电 波具有映射关系的控制指令。
[0074] 接下来对采用角膜反射模式实现视线方向的确定进行说明。
[0075] 具体的，首先在可穿戴设备的如图2a所示的显示面板10上分别设置位于不同位置 的Ξ个红外光源120,该红外光源120发出的光线能够用户眼睛角膜上形成高亮度反射点， 即光斑121。由于眼球是近似球体，在头部位置固定的情况下，光斑121不受眼球转动的影 响，其不发生变化。其中，图2a中虚线矩形框表示显示面板10上的图像在人眼中的成像11。
[0076] 在此情况下，可穿戴设备中的图像采集器可W采集到如图化所示的眼部图像，通 过对眼部图像进行处理，可W识别出该眼部图像中的Ξ个光斑121W及瞳孔12。其中，如图 2a所示，瞳孔12的中屯、位置由十字确定的P点表示。此外，由于上述Ξ个光斑121是Ξ个不同 位置的红外光源120照射在角膜上形成的高亮反射点，因此图2c所示，通过上述Ξ个光斑 121的位置W及用户与屏幕之间的距离H，可W求出用户眼球13的曲率中屯、0点的坐标(Xo、 ￥〇,2〇)^及用户眼球13的曲率半径尺。
[0077] 基于此，可W合通过图像处理的方法提取如图2a所示的瞳孔12的边界样本点，然 后通过最小二乘的楠圆拟合方法对运些样本点进行楠圆拟合，可W，从而可W求出通孔的 瞳孔12中屯、位置P的坐标(姑，押）。具体的，上述楠圆方程为：
[007引 x2+Axy+By2+Cx+Dy巧=0
[0079] 通过最小二乘的楠圆拟合可求得上述方程中的5个参数A、B、C、D和E，从而可W求 出上述楠圆中屯、点，瞳孔12中屯、位置P的坐标(姑，押）：
[0080]
[0081 ]而瞳孔12中屯、位置P在巧由的坐标Zp近似为曲率中屯、0点在巧由的坐标Zo与用户眼球 13的曲率半径R之差。最终得出瞳孔12中屯、位置P的坐标(姑，Υρ,Ζρ)，从而完成了瞳孔12位置 的确定。
[0082] 接下来，上述步骤S302包括瞳孔12中屯、位置Ρ的坐标地瓜向）、眼球13的曲率中 屯、0点的坐标(Χο、Υο，Ζ〇)能够确定出如图2c所示的夹角丫，从而完成视线方向的确定。
[0083] 最后，根据上述视线方向，即夹角丫，并结合视线方向与显示图像100的映射关系， 例如利用用户与屏幕之间的距离Η得出眼睛在显示图像100上注视点B的位置。
[0084] 需要说明的是，上述视线追踪方式是W眼球13的曲率中屯、0点的坐标为基准，通过 对瞳孔12位置侧计算得出视线方向。此外，还可W在用户观看显示面板10上显示的显示图 像100之前，用户可W注视显示面板10的中屯、位置，此时对用户的瞳孔12的位置进行采集， 并作为基准点，从而完成瞳孔12的对焦。之后当用户观看显示图像100的过程中，可W对发 生转动的瞳孔12的位置进行采集，并W上述对焦过程中得到的基准点为参考，进而得出视 线的方向。当然，上述仅仅是对视线追踪过程的举例说明，其它视线方向的确定方式在此不 再 寶述。
[0085] W下W用户进行游戏为例，对上述可穿戴设备的使用过程进行详细的说明。该过 程如图3a所示：
[0086] 首先、开始操作。用户仅需佩戴可穿戴设备，该可穿戴设备上就集成的显示设备， 此时户佩戴可穿戴设备，可穿戴设备开启。
[0087] 接下来、显示图像100。具体的，该可穿戴设备显示的显示图像100如图3b所示。该 显示图像100可W分为射击区域130W及操控区域131。其中射击区域130显示有建筑物样的 图像主内容101，而操控区域131显示有操作图标102。
[0088] 接下来、获取显示图像100上的注视位置。例如当用户对装备进行选择时，获取眼 睛在显示图像100上的注视位置，其中，为了使得用户更加直观的了解自身的注视位置，该 显示图像100上还包括与用户注视位置相对应的虚拟注视点103。其中，射击区域130的虚拟 注视点103可W采用标祀样式，而操控区域131的虚拟注视点103可W采用箭头样式。
[0089] 具体的，当用户需要选择装备时，获取眼睛注视至装备选择的操作图标102上，此 时虚拟注视点103位于该装备选择的操作图标102上。
[0090] 接下来、获取用户的当前脑电波。具体的，当虚拟注视点103位于该装备选择的操 作图标102上时，可W获取用户此时的当前脑电波
[0091] 接下来、判断是否需要点击操作图标102。
[0092] 具体的可W根据获取的当前脑电波，判断是否需要点击操作图标102。例如当上述 当前脑电波的频率大于一频率阔值时，可W判断出用户需要点击操作图标102。
[0093] 接下来、执行操作图标102对应的命令。
[0094] 具体的，当上述判断结果为用户需要点击操作图标102时，可W结合已经步骤确定 的注视位置，对虚拟注视点103所在的装备选择的操作图标102进行点击，并执行操作图标 102对应的命令。
[00M]需要说明的是，当执行装备选择操作图标102的命令后，显示图像100显示的内容 如图3c所示。在此情况下，用户可W再次执行上述过程，对装备一、装备二或装备Ξ进行选 择，或者选择返回图标。具体方式同上所述，此处不再寶述。此外，当用户对装备选择完毕 后，同样可W采用上述步骤确定射击区域130中建筑物样的图像主内容101的射击位置，并 最终通过脑电波控制是否需要执行射击操作。
[0096] 最后，结束操作。
[0097] 此外，当上述判断结果为否，即用户不需要点击操作图标102时，可W直接执行结 束操作。
[0098] 其中，上述结束操作表示的是除了结束操作W外的步骤执行完毕，此时对可穿戴 设备的状态不做限定，该可穿戴设备处于关机或待机状态或者执行其他操作的状态。
[0099] 本实用新型实施例提供一种显示控制装置，如图4所示，包括:获取模块01，用于获 取眼睛注视当前显示图像100时，显示图像100上的注视位置，W及获取注视当前显示图像 100时的当前脑电波。
[0100] 具体的，获取模块可W为信号接口，如有线或无线信号接口，可W与可穿戴设备进 行通信，获取可穿戴设备的注视位置获取模块和脑电波获取模块获取的注视位置和当前脑 电波。
[0101] 确定模块02,用于当获取模块01获取到的当前脑电波的特征参数满足预设条件 时，根据当前脑电波确定当前脑电波对应的控制指令。
[0102] 具体的，所述确定模块可W为比较器，所述比较器用于将当前脑电波的特征参数 和预设特征参数比较，当大于所述预设特征参数时，从存储器查找与所述当前脑电波对应 的控制指令。
[0103] 执行模块03,用于根据确定模块02确定的控制指令，对注视位置的显示图像执行 相应的操作。
[0104] 所述执行模块具体可W是驱动电路，驱动电路将控制指令输出给像素电路，使得 像素电路执行相应的操作。
[0105] 运样一来，利用获取模块对眼睛注视位置进行获取，可W使得用户能够通过双眼 对显示图像上的操作位置进行选择，而用户在不同思考状态下可W发出不同的脑电波，所 W还可W利用上述获取模块对用户注视当前显示图像时的当前脑电波进行获取。接下来确 定模块会根据获取模块获取到的当前脑电波去判断用户是否需要执行上述注视位置的相 应操作，如果用户需要执行则执行上述操作，执行模块会对注视位置的显示图像执行相应 的操作。因此在上述控制过程中无需手动就可W实现相应操作，从而可W提高可穿戴设备 的便利性。
[0106] 然而，当用户处于专注状态下的脑电波，即朗亩电波的频率为12~30化。因此频率 在12~30化内的当前脑电波只能够获取到单一的例如单击操作的控制指令。对于其他指令 例如双击操作或者放大操作，均需要结合眼部肌肉收缩或扩张得到的肌电图对当前脑电波 的振幅产生的影响来实现。增加了获取控制指令的复杂性。
[0107] 为了解决上述问题，该显示控制装置，如图5所示，还包括存储模块04,获取模块01 包括用于获取当前脑电波的脑电波采集子模块201，确定模块02可W包括特征参数获取子 模块202W及指令汇编子模块203。
[0108] 其中，特征参数获取子模块202连接脑电波采集子模块201，用于确定当前脑电波 和预设脑电波的特征参数。其中，该特征参数可W为脑电波的频率、振幅的至少一种。
[0109] 此外，指令汇编子模块203连接特征参数获取子模块202,用于建立脑电波数据集， 该脑电波数据集预存有预设脑电波的特征参数与控制指令的对应关系。
[0110] 存储模块04连接特征参数获取子模块202和脑电波采集子模块201，用于存储控制 指令、特征参数W及脑电波数据集。
[0111] 运样一来，可W在可穿戴设备出厂时或者初始化阶段对用户在清醒且专注的状态 下，处于不同的思维活动状态时发出的不同预设脑电波，通过特征参数获取子模块202进行 采集。具体的，虽然用户在清醒且专注的状态下发出的朗亩电波的频率会在12~30Hz。但是， 不同的思维活动会使得12~30化范围内的脑电波的频率之间具有细微的差异。例如用户需 要进行单击操作控制指令时预设脑电波的频率为12~15化，双击操作控制指令时预设脑电 波的频率为18~21化，关闭操作控制指令时预设脑电波的频率为25~30化。
[0112] 在此基础上，确定模块02还包括特征匹配子模块204。该特征匹配子模块204连接 特征参数获取子模块202和存储模块04,用于将特征参数获取子模块202获取到的当前脑电 波的特征参数与存储模块04中脑电波数据集中的预设脑电波的特征参数进行匹配。
[0113] 需要说明的是，该特征匹配子模块204可W为比较器或者比较电路。此外，当前脑 电波的特征参数与二脑电波的特征参数相匹配是指，当前脑电波的特征参数与二脑电波的 特征参数之间的差异在允许的误差范围之内。该误差可W由可穿戴设备的精度确定。本实 用新型对此不做限定。
[0114] 运样一来，可W通过特征参数获取子模块202获取上述当前脑电波，然后将当前脑 电波的频率与脑电波数据集中的预设脑电波的频率进行匹配。例如在当前脑电波的频率在 25~30Hz范围内时，则当前脑电波的频率与预设脑电波的频率相匹配，从而可W获取相匹 配的预设脑电波所对应的关闭操作控制指令。而在当前脑电波的频率在12~15化内时，贝U 当前脑电波的频率与预设脑电波的频率相匹配，从而可W获取相匹配的预设脑电波所对应 的单击操作控制指令。此外，如果在当前脑电波的频率在16~17化内时，则当前脑电波的频 率无法与脑电波数据集中任意一种预设脑电波的频率相匹配，因此无法实现控制指令的获 取。
[0115] 当然，上述不同控制指令对应的预设脑电波的频率仅仅是举例说明，并不是对预 设脑电波对应的控制指令的限定。
[0116] 综上所述，通过预存有预设脑电波的特征参数与控制指令的对应关系的脑电波数 据集，可W使得12~30化内的所有脑电波对应多个控制指令，而无需借助眼部肌肉的运动。
[0117] 进一步地，确定模块02还包括指令获取子模块205，与特征匹配子模块204和存储 模块04相连接，用于在当前脑电波的特征参数与预设脑电波的特征参数相匹配时，从存储 模块04中获取相匹配的预设脑电波所对应的控制指令。
[0118] 进一步地，获取模块01如图5所示包括:眼部图像采集子模块206、视线确定子模块 207、位置计算子模块208。
[0119] 具体的，眼部图像采集子模块206用于获取眼部图像，确定瞳孔位置。该眼部图像 采集子模块206可W为CCD图像传感器或者C0MS图像传感器。
[0120] 例如，可W通过红外光源120发出的光线在用户眼睛角膜上形成高亮度反射点，即 光斑121。在此情况下，可W通过CCD图像传感器或者C0MS图像传感器采集到如图化所示的 眼部图像，通过对眼部图像进行处理，可W识别出该眼部图像中的光斑121W及瞳孔12,进 而确定出瞳孔12的位置。
[0121] 视线确定子模块207与眼部图像采集子模块206相连接，用于计算出视线方向。
[0122] 位置计算子模块208与视线确定子模块207相连接，用于根据上述视线方向与显示 图像100的映射关系，得出眼睛在显示图像100的注视位置。
[0123] 其中，上述注视位置的确定方法同上所述，此处不再寶述。
[0124] 运样一来，当注视位置确定后，上述执行模块03可W根据获取模块01得到的注视 位置，执行指令获取子模块205获取到的控制指令。
[0125] W上所述，仅为本实用新型的【具体实施方式】，但本实用新型的保护范围并不局限 于此，任何熟悉本技术领域的技术人员在本实用新型掲露的技术范围内，可轻易想到变化 或替换，都应涵盖在本实用新型的保护范围之内。因此，本实用新型的保护范围应W所述权 利要求的保护范围为准。
【主权项】
1. 一种显示控制系统，其特征在于，包括:显示设备、可穿戴设备、控制器； 所述显示设备用于显示图像，作为当前显示图像； 所述可穿戴设备用于获取眼睛注视当前显示图像时显示图像上的注视位置，以及获取 眼睛注视所述当前显示图像时的当前脑电波； 所述控制器用于当所述当前脑电波的特征参数满足预设条件时，根据所述当前脑电波 确定所述当前脑电波对应的控制指令;根据所述控制指令对所述注视位置的显示图像执行 相应的操作。2. 根据权利要求1所述的显示控制系统，其特征在于，所述显示设备与所述可穿戴设备 分离式设置，且通过有线或无线方式连接，用于信息交互，所述控制器设置在所述显示设备 中。3. 根据权利要求1所述的显示控制系统，其特征在于，所述可穿戴设备包括头戴支架， 所述头戴支架上设置有用于采集当前脑电波的脑电波采集回路、用于采集人眼成像的图像 采集器，以及用于根据所述图像采集器采集的图像确定眼睛在显示图像上的注视位置的处 理器;所述处理器还用于将所述当前脑电波和所述注视位置发送至所述显示设备。4. 根据权利要求1所述的显示控制系统，其特征在于，所述可穿戴设备包括头戴支架， 所述头戴支架上集成有所述显示设备和所述控制器。5. 根据权利要求4所述的显示控制系统，其特征在于，所述头戴支架上设置有用于采集 当前脑电波的脑电波采集回路、用于采集人眼成像的图像采集器，以及用于根据所述图像 采集器采集的图像确定眼睛在显示图像上的注视位置的处理器;所述处理器还用于将所述 当前脑电波和所述注视位置发送至所述显示设备。6. 根据权利要求3或5所述的显示控制系统，其特征在于，所述脑电波采集回路由前额 传感器以及至少一个耳垂传感器构成。7. 根据权利要求3或5所述的显示控制系统，其特征在于，所述图像采集器为CCD图像传 感器或CMOS图像传感器。8. 根据权利要求7所述的显示控制系统，其特征在于，所述图像采集器和所述显示设备 上设置有红外光光源。
【文档编号】G06F3/01GK205485920SQ201620061471
【公开日】2016年8月17日
【申请日】2016年1月21日
【发明人】李文波
【申请人】京东方科技集团股份有限公司