疲劳状态的检测方法、装置及设备与流程

本申请涉及电子技术领域，尤其涉及一种疲劳状态的检测方法、装置及设备。

背景技术：

当用户处于疲劳状态时，会出现注意力分散，应变能力下降的情况。例如，当用户处于疲劳驾驶状态时，对路面情况和周边环境的观察和反应速度会明显变慢，如果不进行相应的休整，则会增加引发交通事故的可能性。因此，需要对用户的疲劳状态进行检测，以及时地对用户进行提醒。

目前，一般通过可穿戴的电子设备来检测人体的心率、行为等信息，然后再根据检测到的信息与预设的指标进行比对，以此来判断用户当前是否处于疲劳状态。

但是，这种方式的检测效率低，需要用户在一定时间内保持佩戴电子设备，且检测结果容易受外界因素干扰，检测精度低。

技术实现要素：

本发明提供一种疲劳状态的检测方法、装置及设备，以实现通过眼部状态信息来检测用户是否处于疲劳状态，检测效率高，检测结果更加准确。

第一方面，本发明提供一种疲劳状态的检测方法，包括：

接收3d传感器发送的初始图像；

从所述初始图像中提取出眼部状态信息；

根据所述眼部状态信息，确定用户当前是否处于疲劳状态。

可选地，所述从所述初始图像中提取出眼部状态信息，包括：

从所述初始图像中识别出第一眼部区域图像；

若所述第一眼部区域图像中的眼睑处于开启状态，则从所述第一眼部区域图像中提取出角膜弧度。

可选地，在从所述初始图像中识别出第一眼部区域图像之后，还包括：

若所述第一眼部区域图像中的眼睑处于闭合状态，则在等待第一预设时间后，接收3d传感器发送的新的初始图像；

从所述新的初始图像中识别出第二眼部区域图像；

若所述第二眼部区域图像中的眼睑处于开启状态，则从所述第二眼部区域图像中提取出角膜弧度；

若所述第二眼部区域图像中的眼睑处于闭合状态，则按照预设的时间间隔，连续获取在第二预设时间范围内的n帧初始图像；n为大于1的自然数；

从所述n帧初始图像中得到在第二预设时间范围内的眼部状态信息，所述眼部状态信息包括：眨眼次数、闭眼的总时长、保持闭眼的时长、角膜弧度。

可选地，在所述根据所述眼部状态信息，确定用户当前是否处于疲劳状态之前，还包括：

判断所述角膜弧度是否在预设角度范围内，若是，则将所述角膜弧度作为目标角膜弧度；

若否，则确定所述角膜弧度为无效数据，重新接收所述3d传感器发送的初始图像。

可选地，所述根据所述眼部状态信息，确定用户当前是否处于疲劳状态，包括：

将所述目标角膜弧度与参考角膜弧度进行比对，若所述目标角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值，则确定用户当前处于疲劳状态。

可选地，所述参考角膜弧度是用户处于正常状态下检测到的角膜弧度，或者是预先存储的角膜弧度。

可选地，根据所述眼部状态信息，确定用户当前是否处于疲劳状态，还包括：

若在第二预设时间范围内满足预设条件中的至少一个时，则确定用户当前处于疲劳状态；其中，所述预设条件包括：

眨眼次数不在预设的数量范围内；

闭眼的总时长大于第一上限值；

保持闭眼的时长大于第二上限值；

在所述n帧初始图像中存在至少一帧初始图像的角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值。

可选地，在接收3d传感器发送的初始图像之前，还包括：

向所述3d传感器发送控制信号，以使所述3d传感器按照预设的频率采集所述初始图像。

可选地，在根据所述眼部状态信息，确定用户当前是否处于疲劳状态之后，还包括：

若确定用户当前处于疲劳状态，则向用户发送提醒信息，以提醒用户注意休息。

第二方面，本发明提供一种疲劳状态的检测装置，包括：

接收模块，用于接收3d传感器发送的初始图像；

提取模块，用于从所述初始图像中提取出眼部状态信息；

确定模块，用于根据所述眼部状态信息，确定用户当前是否处于疲劳状态。

可选地，所述提取模块，具体用于：

从所述初始图像中识别出第一眼部区域图像；

若所述第一眼部区域图像中的眼睑处于开启状态，则从所述第一眼部区域图像中提取出角膜弧度。

可选地，所述提取模块，还用于：

若所述第一眼部区域图像中的眼睑处于闭合状态，则在等待第一预设时间后，接收3d传感器发送的新的初始图像；

从所述新的初始图像中识别出第二眼部区域图像；

若所述第二眼部区域图像中的眼睑处于开启状态，则从所述第二眼部区域图像中提取出角膜弧度；

若所述第二眼部区域图像中的眼睑处于闭合状态，则按照预设的时间间隔，连续获取在第二预设时间范围内的n帧初始图像；n为大于1的自然数；

从所述n帧初始图像中得到在第二预设时间范围内的眼部状态信息，所述眼部状态信息包括：眨眼次数、闭眼的总时长、保持闭眼的时长、角膜弧度。

可选地，还包括：

过滤模块，用于在所述根据所述眼部状态信息，确定用户当前是否处于疲劳状态之前，判断所述角膜弧度是否在预设角度范围内，若是，则将所述角膜弧度作为目标角膜弧度；

若否，则确定所述角膜弧度为无效数据，重新接收所述3d传感器发送的初始图像。

可选地，所述确定模块，具体用于：

将所述目标角膜弧度与参考角膜弧度进行比对，若所述目标角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值，则确定用户当前处于疲劳状态。

可选地，所述参考角膜弧度是用户处于正常状态下检测到的角膜弧度，或者是预先存储的角膜弧度。

可选地，所述确定模块，还用于：

若在第二预设时间范围内满足预设条件中的至少一个时，则确定用户当前处于疲劳状态；其中，所述预设条件包括：

眨眼次数不在预设的数量范围内；

闭眼的总时长大于第一上限值；

保持闭眼的时长大于第二上限值；

在所述n帧初始图像中存在至少一帧初始图像的角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值。

可选地，还包括：

发送模块，用于在接收3d传感器发送的初始图像之前，向所述3d传感器发送控制信号，以使所述3d传感器按照预设的频率采集所述初始图像。

可选地，发送模块，还用于在根据所述眼部状态信息，确定用户当前是否处于疲劳状态之后，若确定用户当前处于疲劳状态，则向用户发送提醒信息，以提醒用户注意休息。

第三方面，本发明提供一种操作系统的唤醒设备，包括：

3d传感器和微控制单元mcu，所述3d传感器和所述微控制单元mcu电连接；

所述3d传感器用于采集初始图像，并将所述初始图像发送给所述mcu；

所述mcu用于执行如第一方面中任一项所述的疲劳状态的检测方法。

第四方面，本发明提供一种操作系统的唤醒设备，包括：

存储器，用于存储程序；

处理器，用于执行所述存储器存储的所述程序，当所述程序被执行时，所述处理器用于执行第一方面中任一所述的方法。

第五方面，本发明提供一种计算机可读存储介质，包括：指令，当其在计算机上运行时，使得计算机执行第一方面中任一所述的方法。

本发明提供的疲劳状态的检测方法、装置及设备，通过接收3d传感器发送的初始图像，其中，所述初始图像中包括含有眼部轮廓的深度信息；从所述初始图像中提取出眼部状态信息；根据所述眼部状态信息，确定用户当前是否处于疲劳状态。从而实现通过眼部状态信息来检测用户是否处于疲劳状态，检测效率高，检测结果更加准确。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图进行简单的介绍。显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明提供的一应用场景的结构示意图；

图2为本发明实施例一提供的疲劳状态的检测方法的流程图；

图3为人眼处于正常状态时的眼球结构示意图；

图4为人眼处于疲劳状态时的眼球结构示意图；

图5为本发明实施例二提供的疲劳状态的检测方法的流程图；

图6为本发明实施例三提供的疲劳状态的检测方法的流程图；

图7为本发明实施例四提供的疲劳状态的检测装置的结构示意图；

图8为本发明实施例五提供的疲劳状态的检测装置的结构示意图；

图9为本发明实施例六提供的疲劳状态的检测装置的结构示意图；

图10为本发明实施例七提供的疲劳状态的检测设备的结构示意图；

图11为本发明实施例八提供的疲劳状态的检测设备的结构示意图。

通过上述附图，已示出本公开明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本公开提到的概念。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整的描述。显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例，能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含。例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

下面以具体的实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。

以下，对本申请中的部分用语进行解释说明，以便于本领域技术人员理解。

1)三维(threedimensions,3d)，是一个空间的概念，可以由x、y、z三个轴来表征空间的三个维度。

2)3d传感器，是指除了获取物体的平面图像外，还获取物体深度信息的传感器，常见的3d传感器包括：3d摄像头；一般的3d摄像头包括：第一镜头和第二镜头，通过将两个镜头获取的图像进行处理后得到对应的3d图像。需要说明的是，本发明中不限定3d传感器的具体类型。理论上，还可以将能够获取物体或者平面图像深度信息的传感器和普通的2d传感器结合使用，从而获得与3d传感器类似的功能。

3)微控制单元(microcontrollerunit，mcu)，又称单片微型计算机(singlechipmicrocomputer)或者单片机，是把中央处理器(centralprocessunit，cpu)的频率与规格做适当缩减，并将内存(memory)、计数器(timer)、通用串行总线(universalserialbus，usb)、模拟数字转换(analogtodigitalconverte，a/d)、通用异步收发传输器(universalasynchronousreceiver/transmitter)、可编程逻辑控制器(programmablelogiccontroller，plc)等周边接口，甚至液晶显示器(liquidcrystaldisplay，lcd)的驱动电路都整合在单一芯片上，形成芯片级的计算机，为不同的应用场合做不同组合控制。

图1为本发明提供的一应用场景的结构示意图，图1所示的系统包括：3d传感器1、微控制单元mcu2、存储器3、指示器4。具体地，mcu2接收3d传感器1发送的初始图像；mcu2从所述初始图像中提取出目标角膜弧度；然后从存储器3中获取参考角膜弧度，将该目标角膜弧度与参考角膜弧度进行比对；若所述目标角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值，则确定用户当前处于疲劳状态；向指示器4发送用户提醒信息。

下面以具体的实施例对本发明的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本发明的实施例进行描述。

图2为本发明实施例一提供的疲劳状态的检测方法的流程图，如图2所示，本实施例中的方法可以包括：

s101、接收3d传感器发送的初始图像。

实际应用中，本实施例的执行主体可以为微控制单元mcu、单片机、微型处理器等具备数据处理能力的器件。本实施例中以mcu为例进行详细说明，但不限定执行本实施例中方法的具体器件类型。

本实施例中，mcu可以与3d传感器集成为一个模块，也可以是与3d传感器电连接的独立模块。首先，mcu接收3d传感器采集到的初始图像，其中，所述初始图像中包括含有眼部轮廓的深度信息。常见的3d传感器包括：3d摄像头；一般的3d摄像头包括：第一镜头和第二镜头，通过将两个镜头获取的图像进行处理后得到对应的3d图像，或者可以采用结构光3d传感器，或者飞行时间3d传感器。需要说明的是，本发明中不限定3d传感器的具体类型。理论上，还可以将能够获取物体或者平面图像深度信息的传感器和普通的2d传感器结合使用，从而获得与3d传感器类似的功能。本实施例中，3d传感器发送的初始图像可以是三维图像或者二维图像；当初始图像为三维图像时，其中包含有眼部轮廓的深度信息。

s102、从所述初始图像中提取出眼部状态信息。

本实施例中，可以从3d传感器发送的所述初始图像中识别出第一眼部区域图像；该第一眼部区域是指包含用户双目或者单目的眼部部位的图像，所述眼部状态信息包括：眨眼次数、闭眼的总时长、保持闭眼的时长、角膜弧度。可选地，第一眼部区域图像中至少包括：单目或者双目眼睑、瞳孔区域的图像。

在一种实施方式中，若所述第一眼部区域图像中的眼睑处于开启状态，则从所述第一眼部区域图像中提取出角膜弧度。具体地，角膜弧度的提取需要已知眼球区域的轮廓深度信息。此时，3d传感器发送的初始图像需为三维图像，三维图像中包含有眼部轮廓的深度信息，从而使得mcu可以根据眼球区域的轮廓的深度信息中获取到角膜的弧度。进一步地，mcu也可以根据该三维图像来获取眨眼次数、闭眼的总时长、保持闭眼的时长等信息。图3为人眼处于正常状态时的眼球结构示意图，图4为人眼处于疲劳状态时的眼球结构示意图。结合图3、图4可以知道，角膜5的弧度能够很反映出人眼是否处于疲劳状态。

在另一种实施方式中，若仅仅需要获取眨眼次数、闭眼的总时长、保持闭眼的时长信息，则3d传感器发送的初始图像也可以为二维图像(例如仅开启一个摄像头，或者使用其中的2d传感器采集初始图像)，此时，mcu可以直接根据二维图像来获取眨眼次数、闭眼的总时长、保持闭眼的时长等信息。

可选地，若所述第一眼部区域图像中的眼睑处于闭合状态，则在等待第一预设时间后，接收3d传感器发送的新的初始图像；从所述新的初始图像中识别出第二眼部区域图像。需要说明的是，本实施例中的第二眼部区域图像是指包含用户双目或者单目的眼部部位的图像，其与第一眼部区域图像的不同之处在于，两者采集的时间不同。可选地，第二眼部图像中至少包括：眼睑、瞳孔区域的图像。若所述第二眼部区域图像中的眼睑处于开启状态，则从所述第二眼部区域图像中提取出角膜弧度；若所述第二眼部区域图像中的眼睑处于闭合状态，则按照预设的时间间隔，连续获取在第二预设时间范围内的n帧初始图像；n为大于1的自然数。从所述n帧初始图像中得到在第二预设时间范围内的眼部状态信息，所述眼部状态信息包括：眨眼次数、闭眼的总时长、保持闭眼的时长、角膜弧度。

可选地，若在第二预设时间范围内满足预设条件中的至少一个时，则确定用户当前处于疲劳状态；其中，所述预设条件包括：

眨眼次数不在预设的数量范围内；

闭眼的总时长大于第一上限值；

保持闭眼的时长大于第二上限值；

在所述n帧初始图像中存在至少一帧初始图像的角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值。

s103、根据所述眼部状态信息，确定用户当前是否处于疲劳状态。

本实施例中，可以将所述目标角膜弧度与参考角膜弧度进行比对，若所述目标角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值，则确定用户当前处于疲劳状态。可选地，所述参考角膜弧度是根据用户处于正常状态下检测到的角膜弧度，或者是预先存储的角膜弧度。

可选地，可以在mcu的本地存储器，或者与mcu电连接的存储器中存储不同模式下的参考角膜弧度。例如，处于驾驶模式时的参考角膜弧度、处于夜间模式时的参考角膜弧度、处于白天模式的参考角膜弧度等等。以处于驾驶模式为例，在对用户进行疲劳状态检测之前，首先获取用户眼部处于正常状态下的弧度信息。正常状态下的弧度信息可以是历史存储的数据，也可以是用户刚刚启动车辆时检测到的数据。夜间模式和白天模式的参考角膜弧度的获取方式与驾驶模式的参考角膜弧度的获取方式类似。具体地，可以从3d传感器采集的初始图像中的亮度来确定当前是处于夜间还是白天。

可选地，不同模式下的参考角膜弧度还可以是从云端下载得到。本实施例对参考角膜弧度的来源和具体采集过程不予限定。

在步骤s101之前，或者是在执行步骤s101～步骤s103时的任一时刻，均可以执行如下步骤：

向所述3d传感器发送控制信号，以使所述3d传感器按照预设的频率采集所述初始图像。

本实施例中，可以通过mcu来控制3d传感器采集初始图像的频率。例如，当连续检测到m个初始图像中的眼部状态信息均表明用户处于非疲劳状态，则降低3d传感器采集初始图像的频率；其中m为大于等于1的自然数，m的值可以根据实际情况进行调整。

本实施例，通过接收3d传感器发送的初始图像，其中，所述初始图像中包括含有眼部轮廓的深度信息；从所述初始图像中提取出眼部状态信息；根据所述眼部状态信息，确定用户当前是否处于疲劳状态。从而实现通过眼部状态信息来检测用户是否处于疲劳状态，检测效率高，检测结果更加准确。

图5为本发明实施例二提供的疲劳状态的检测方法的流程图，如图5所示，本实施例中的方法可以包括：

s201、接收3d传感器发送的初始图像。

s202、从所述初始图像中提取出角膜弧度。

本实施例中，步骤s201～步骤s202的具体实现过程和原理请参见图2所示方法中的相关描述，此处不再赘述。

s203、判断所述角膜弧度是否在预设角度范围内，若是，则执行步骤s204；若否，则确定所述角膜弧度为无效数据，返回执行步骤s201。

本实施例中，通过从初始图像中提取出的角膜弧度进行过滤处理，去除掉明显异常的数据，例如角膜弧度不在预设角度范围内的数据。从而排除无效数据对检测结果的影响，使得检测结果更加准确。

s204、将所述角膜弧度作为目标角膜弧度，将所述目标角膜弧度与参考角膜弧度进行比对，若所述目标角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值，则确定用户当前处于疲劳状态。

本实施例，通过接收3d传感器发送的初始图像，其中，所述初始图像中包括含有眼部轮廓的深度信息；从所述初始图像中提取出角膜弧度，然后对该角膜弧度进行过滤处理，去除不在预设角度范围内的无效数据，得到目标角膜弧度，根据该目标角膜弧度确定用户当前是否处于疲劳状态。从而实现通过角膜弧度来检测用户是否处于疲劳状态，检测效率高，检测结果更加准确。

图6为本发明实施例三提供的疲劳状态的检测方法的流程图，如图6所示，本实施例中的方法可以包括：

s301、接收3d传感器发送的初始图像。

s302、从所述初始图像中提取出眼部状态信息；

s303、根据所述眼部状态信息，确定用户当前是否处于疲劳状态。

本实施例中，步骤s301～步骤s303的具体实现过程和原理请参见图2所示方法中的相关描述，此处不再赘述。

s304、若确定用户当前处于疲劳状态，则向用户发送提醒信息，以提醒用户注意休息。

本实施例中，mcu与显示器、蜂鸣器、语音终端等电连接，当确定用户当前处于疲劳状态时，则可以通过显示器进行文字提醒，文字内容为提醒用户注意休息；或者通过蜂鸣器向用户发出警示，或者通过语音终端对用于进行语音提醒。需要说明的是，本实施例中对具体的提醒方式不予限定。

本实施例，通过接收3d传感器发送的初始图像，其中，所述初始图像中包括含有眼部轮廓的深度信息；从所述初始图像中提取出眼部状态信息；根据所述眼部状态信息，确定用户当前是否处于疲劳状态，当确定用户当前处于疲劳状态时，则向用户发送提醒信息，以提醒用户注意休息。从而实现通过眼部状态信息来检测用户是否处于疲劳状态，检测效率高，检测结果更加准确，并能够在用户处于疲劳状态时给予及时的提醒。

图7为本发明实施例四提供的疲劳状态的检测装置的结构示意图，如图7所示，本实施例中的装置可以包括：

接收模块10，用于接收3d传感器发送的初始图像；

提取模块20，用于从所述初始图像中提取出眼部状态信息；

确定模块30，用于根据所述眼部状态信息，确定用户当前是否处于疲劳状态。

可选地，所述提取模块10，具体用于：

从所述初始图像中识别出第一眼部区域图像；

若所述第一眼部区域图像中的眼睑处于开启状态，则从所述第一眼部区域图像中提取出角膜弧度。

可选地，所述提取模块10，还用于：

若所述第一眼部区域图像中的眼睑处于闭合状态，则在等待第一预设时间后，接收3d传感器发送的新的初始图像；

从所述新的初始图像中识别出第二眼部区域图像；

若所述第二眼部区域图像中的眼睑处于开启状态，则从所述第二眼部区域图像中提取出角膜弧度；

若所述第二眼部区域图像中的眼睑处于闭合状态，则按照预设的时间间隔，连续获取在第二预设时间范围内的n帧初始图像；n为大于1的自然数；

从所述n帧初始图像中得到在第二预设时间范围内的眼部状态信息，所述眼部状态信息包括：眨眼次数、闭眼的总时长、保持闭眼的时长、角膜弧度。

可选地，所述确定模块30，具体用于：

将所述目标角膜弧度与参考角膜弧度进行比对，若所述目标角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值，则确定用户当前处于疲劳状态。

可选地，所述参考角膜弧度是用户处于正常状态下检测到的角膜弧度，或者是预先存储的角膜弧度。

可选地，所述确定模块30，还用于：

若在第二预设时间范围内满足预设条件中的至少一个时，则确定用户当前处于疲劳状态；其中，所述预设条件包括：

眨眼次数不在预设的数量范围内；

闭眼的总时长大于第一上限值；

保持闭眼的时长大于第二上限值；

在所述n帧初始图像中存在至少一帧初始图像的角膜弧度与参考角膜弧度的差值的绝对值大于预设阈值。

本实施例中的装置可以执行图2所示的方法，其具体实现过程和技术原理参见图2所示方法中的相关描述，此处不再赘述。

图8为本发明实施例五提供的疲劳状态的检测装置的结构示意图，如图8所示，在图7所示装置的基础上，本实施例中的装置还可以包括：

过滤模块40，用于在所述根据所述眼部状态信息，确定用户当前是否处于疲劳状态之前，判断所述角膜弧度是否在预设角度范围内，若是，则将所述角膜弧度作为目标角膜弧度；

若否，则确定所述角膜弧度为无效数据，重新接收所述3d传感器发送的初始图像。

本实施例中的装置可以执行图5所示的方法，其具体实现过程和技术原理参见图5所示方法中的相关描述，此处不再赘述。

图9为本发明实施例六提供的疲劳状态的检测装置的结构示意图，如图9所示，在图7所示装置的基础上，本实施例中的装置还可以包括：

发送模块50，用于在接收3d传感器发送的初始图像之前，向所述3d传感器发送控制信号，以使所述3d传感器按照预设的频率采集所述初始图像。

可选地，发送模块50，还用于在根据所述眼部状态信息，确定用户当前是否处于疲劳状态之后，若确定用户当前处于疲劳状态，则向用户发送提醒信息，以提醒用户注意休息。

本实施例中的装置可以执行图6所示的方法，其具体实现过程和技术原理参见图6所示方法中的相关描述，此处不再赘述。

图10为本发明实施例七提供的疲劳状态的检测设备的结构示意图，图10所示的设备60包括：3d传感器61和微控制单元mcu62，所述3d传感器61和所述微控制单元mcu62电连接；

所述3d传感器61用于采集初始图像，并将所述初始图像发送给所述mcu；

所述mcu62用于执行图2、图5、图6中任一项所述的疲劳状态的检测方法。

图11为本发明实施例八提供的疲劳状态的检测设备的结构示意图，如图11所示，本实施例中的疲劳状态的检测设备70包括：

处理器71以及存储器72；其中：

存储器72，用于存储可执行指令，该存储器还可以是flash(闪存)。

处理器71，用于执行存储器存储的可执行指令，以实现上述实施例涉及的方法中的各个步骤。具体可以参见前面方法实施例中的相关描述。

可选地，存储器72既可以是独立的，也可以跟处理器71集成在一起。

当所述存储器72是独立于处理器71之外的器件时，所述疲劳状态的检测设备70还可以包括：

总线73，用于连接所述存储器72和处理器71。

此外，本申请实施例还提供一种计算机可读存储介质，计算机可读存储介质中存储有计算机执行指令，当用户设备的至少一个处理器执行该计算机执行指令时，用户设备执行上述各种可能的方法。

其中，计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于应用专用集成电路(asic)中。另外，该应用专用集成电路可以位于用户设备中。当然，处理器和存储介质也可以作为分立组件存在于通信设备中。

本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：只读存储器(rom)、随机存取存储器(ram)、磁碟或者光盘等各种可以存储程序代码的介质。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本发明旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求书指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。