一种智能终端的控制方法及装置与流程

本发明实施例涉及智能终端技术，尤其涉及一种智能终端的控制方法及装置。

背景技术：

随着经济的发展，车已经成为越来越多人的出行工具，而如何安全的驾驶已经成为越来越多人关注的话题。根据调查显示，疲劳驾驶近些年已经成为交通事故发生的主要因素，因而检测疲劳驾驶，安全出行至关重要。

当前检测疲劳驾驶主要采用车载摄像头+疲劳驾驶检测装置配合的方式，因此车辆必须安装车载摄像头和疲劳驾驶检测装置，且疲劳驾驶检测装置需手动才能开启。上述现有的疲劳驾驶检测方案，安装车载摄像头的操作繁琐且经济性差，手动开启疲劳驾驶检测装置存在操作繁琐且易被遗忘等缺点。

技术实现要素：

本发明实施例提供一种智能终端的控制方法及装置，解决现有疲劳驾驶检测方案的操作繁琐和易被遗忘的问题。

第一方面，本发明实施例提供了一种智能终端的控制方法，该控制方法包括：

当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部；

如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报；

其中，所述无线信号为蓝牙信号和无线局域网络信号中的至少一种。

可选地，所述当检测到已绑定车辆的无线信号时，控制打开相机之前，还包括：

与待绑定车辆建立无线连接并记录所述待绑定车辆的无线连接信息以使所述智能终端与所述待绑定车辆绑定。

可选地，如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报，包括：

获取所述驾驶员面部在设定时间长度内的固定表情特征；

检测所述驾驶员面部的固定表情特征与疲劳表情数据的匹配度；

若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报；

其中，所述设定时间长度为5秒。

可选地，如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报，包括：

按照设定时间间隔，通过所述相机采集至少三张所述驾驶员面部图像并获取所述驾驶员面部图像的固定表情特征；

检测所述驾驶员面部图像的固定表情特征与疲劳表情数据的匹配度；

若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报；

其中，所述设定时间间隔为1秒。

第二方面，本发明实施例还提供了一种智能终端的控制装置，该控制装置包括：

控制模块，用于当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部；

报警模块，用于如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报；

其中，所述无线信号为蓝牙信号和无线局域网络信号中的至少一种。

可选地，还包括：

绑定模块，用于在所述当检测到已绑定车辆的无线信号时，控制打开相机之前，与待绑定车辆建立无线连接并记录所述待绑定车辆的无线连接信息以使所述智能终端与所述待绑定车辆绑定。

可选地，所述报警模块包括：

获取特征单元，用于获取所述驾驶员面部在设定时间长度内的固定表情特征；

检测特征单元，用于检测所述驾驶员面部的固定表情特征与疲劳表情数据的匹配度；

控制报警单元，用于若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报；

其中，所述设定时间长度为5秒。

可选地，所述报警模块包括：

采集图像单元，用于按照设定时间间隔，通过所述相机采集至少三张所述驾驶员面部图像并获取所述驾驶员面部图像的固定表情特征；

检测特征单元，用于检测所述驾驶员面部图像的固定表情特征与疲劳表情数据的匹配度；

控制报警单元，用于若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报；

其中，所述设定时间间隔为1秒。

本发明通过智能终端进行疲劳驾驶检测，而且通过检测到已绑定车辆的无线信号，触发打开相机并通过相机扫描驾驶员面部，若检测到所述驾驶员面部处于疲劳状态，发出疲劳驾驶警报。本发明实施例中智能终端直接调用配置的相机进行驾驶员面部扫描，并通过控制装置进行疲劳驾驶检测，实现了智能终端对疲劳驾驶的检测，具有经济便携的效果，解决了现有车载摄像头和疲劳驾驶检测装置的安装过程复杂、操作繁琐性以及经济性差的问题；以及无需手动开启检测模块，实现了智能终端根据车辆无线信号自启动疲劳驾驶检测模式的效果，具有智能化和自动化的效果，相应拓宽了智能终端的功能。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图做一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例一中的一种智能终端的控制方法的流程图；

图2是本发明实施例二中的一种智能终端的控制方法的流程图；

图3是本发明实施例三中的一种智能终端的控制方法的流程图；

图4是本发明实施例四中的一种智能终端的控制方法的流程图；

图5是本发明实施例五中的一种智能终端的控制装置的结构框图；

图6是本发明实施例六中的一种疲劳驾驶检测系统的结构框图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，以下将参照本发明实施例中的附图，通过实施方式清楚、完整地描述本发明的技术方案，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

图1是本发明实施例一提供的一种智能终端的控制方法的流程图。本实施例的技术方案适用于检测疲劳驾驶的情况。该方法可以由本发明实施例提供的一种智能终端的控制装置来执行，该装置可以采用软件和/或硬件的方式实现，并配置在智能终端中应用，可选智能终端为智能手机、平板电脑等配置有摄像头和处理芯片的电子设备。该方法具体包括如下步骤：

S110、当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部。

车辆启动后，其中配置的无线模块会实时发出无线信号。智能终端会实时对已绑定的车辆进行无线信号的检测，若检测到已绑定车辆的无线信号，智能终端会控制打开相机。控制打开相机可以是智能终端的内置程序操作，也可以是安装在智能终端中的控制软件执行，即内置程序或控制软件在检测到已绑定车辆的无线信号后会自动控制智能终端的相机打开。

所述相机可以是智能终端的前置摄像头，也可以是后置摄像头，相机在此用于扫描驾驶员面部，因此相机必须对准驾驶员面部。用户可自行手动对智能终端进行调整以使相机对准驾驶员面部并扫描，在本实施例中优选的智能终端采用前置摄像头进行驾驶员面部扫描。

S120、如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报。

智能终端打开相机后控制相机扫描驾驶员面部，获取到相机扫描的驾驶员面部信息，并对驾驶员面部信息进行分析后，判断其是否处于疲劳状态。已知人处于疲劳状态时眼睛瞳孔开度和眼睛闭合时间等面部信息与正常状态不同，因此在本实施例中智能终端可根据眼睛瞳孔开度和眼睛闭合时间等面部信息判断其是否处于疲劳状态。所述疲劳状态可以是眼睛的瞳孔开度小于某预设开度，也可以是眼睛的闭合时间大于某预设时间，还可以是眼睛的瞳孔光泽度低于某预设光泽度。

智能终端判定驾驶员面部处于疲劳状态时，会发出疲劳驾驶警报，在此智能终端可调用扬声器发出语音警报提示驾驶员已处于疲劳驾驶状态并请注意停车休息。在其他实施例中，智能终端还可以选择发出视频警报，如调用显示屏显示有声图片或视频等，提示驾驶员已处于疲劳驾驶。为了提高警报的有效性，智能终端还可控制车辆的喇叭或者灯光进行警报，具体的智能终端向车辆控制器发出警报指令，车辆控制器根据警报指令控制车辆的喇叭或灯光进行警报。在本发明中，警报可以是声音警报、图像警报、以及声音和图像结合的警报等。

在上述技术方案的基础上，所述无线信号优选可以是蓝牙信号和无线局域网络信号中的至少一种。相应的车辆中配置有车载蓝牙和/或车载网络设备，蓝牙信号由车载蓝牙发出，无线局域网络信号可以由车载网络设备发出，二者都可以在驾驶员启动车辆后自动启动。用户预先将智能终端与其车辆进行绑定，则当智能终端的蓝牙或者无线局域网络功能开启后，智能终端会自动进行信号搜索，并在搜索到已绑定车辆的蓝牙信号或者无线局域网络信号时，自动触发打开相机的操作。

本实施例的技术方案，通过检测到已绑定车辆的无线信号，触发打开相机并通过相机扫描驾驶员面部，若检测到所述驾驶员面部处于疲劳状态，发出疲劳驾驶警报。本发明实施例中智能终端直接调用配置的相机进行驾驶员面部扫描，并通过控制装置进行疲劳驾驶检测，实现了智能终端对疲劳驾驶的检测，具有经济便携的效果，解决了现有车载摄像头和疲劳驾驶检测装置的安装过程复杂、操作繁琐性以及经济性差的问题；以及无需手动开启检测模块，实现了智能终端根据车辆无线信号自启动疲劳驾驶检测模式的效果，具有智能化和自动化的效果，相应拓宽了智能终端的功能。

实施例二

图2是本发明实施例二提供的一种智能终端的控制方法的流程图。本发明实施例在上述实施例的基础上，增加了所述当检测到已绑定车辆的无线信号时，控制打开相机之前的步骤。

相应地，本实施例的方法包括：

S210、与待绑定车辆建立无线连接并记录所述待绑定车辆的无线连接信息以使所述智能终端与所述待绑定车辆绑定。

车辆发出无线信号，所述无线信号可以是蓝牙信号，也可以是无线局域网络信号，其中，蓝牙信号由车载蓝牙发出，无线局域网络信号可以由车载网络设备发出，二者都可以在驾驶员启动车辆后自动启动。当智能终端的蓝牙或者无线局域网络功能开启后，智能终端会自动进行信号搜索，并在搜索到待绑定车辆的无线信号后，用户确认智能终端与该车辆进行连接并记录该车辆的无线连接信息，由此智能终端可实现与待绑定车辆的绑定。

智能终端与待绑定车辆完成绑定后，当智能终端再一次检测到已绑定车辆的无线连接信息时，智能终端可以自动与该已绑定车辆的进行无线连接。

S220、当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部。该步骤与实施例一中的步骤S110相同，在本实施例中不再赘述。

S230、如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报。该步骤与实施例一中的步骤S120相同，在本实施例中不再赘述。

本发明实施例中，智能终端预先与待绑定车辆进行绑定，然后在后续每次已绑定车辆启动后，智能终端会根据检测到的已绑定车辆的无线信号控制打开相机，并在检测到驾驶员面部处于疲劳状态时发出疲劳驾驶警报。本发明实施例实现了智能终端和待绑定车辆的绑定，达到了智能终端根据车辆无线信号自启动疲劳驾驶检测模式的效果。

实施例三

图3是本发明实施例三提供的一种智能终端的控制方法的流程图。本发明实施例在上述任意实施例的基础上，将如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报优化为：获取所述驾驶员面部在设定时间长度内的固定表情特征；检测所述驾驶员面部的固定表情特征与疲劳表情数据的匹配度；若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报。

相应地，本实施例的方法包括：

S310、当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部。该步骤与实施例一中的步骤S110相同，在本实施例中不再赘述。

S320、获取所述驾驶员面部在设定时间长度内的固定表情特征。

人在疲劳状态下，其面部表情可能在一定时间内保持固定，例如驾驶员瞌睡时，其眼睛通孔开度保持不变且嘴部张开大小不变，以及眼睛持续处于闭合状态等。因此在本实施例中可选固定表情特征可以是驾驶员眼部的特征，例如可以是眼睛的瞳孔开度或者眼睛的闭合时间，还可以是嘴部特征，例如可以是嘴部张开大小等。设定时间长度是相机扫描驾驶员面部的时间，也是获取固定表情特征的时间单元。在设定时间长度内，相机扫描得到驾驶员面部图像，智能终端根据特征提取算法获取驾驶员面部的固定表情特征。

S330、检测所述驾驶员面部的固定表情特征与疲劳表情数据的匹配度。

疲劳表情数据预先存储在智能终端中，该疲劳表情数据是预先采集的驾驶员处于疲劳状态的面部图像。该疲劳表情数据可以存储在智能终端，也可以存储在云端。当智能终端获取到驾驶员面部的固定表情特征后，会直接与疲劳表情数据进行匹配，该匹配可以是固定表情特征向量和疲劳表情数据中的特征向量之间的匹配，匹配度越高，证明驾驶员越是处在疲劳驾驶状态。

S340、若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报。

疲劳设定阈值可以是根据大量实验得到的经验值手动设定的，也可以是智能终端根据算法自动设定的。例如大量实验情况下，认为匹配度超过60％时就可以认定为是疲劳驾驶，那么可以把该值作为疲劳设定阈值，在智能终端中进行设定。当驾驶员面部的固定表情特征与疲劳表情数据的匹配度超过疲劳设定阈值，则智能终端判定驾驶员处于疲劳驾驶状态，并控制扬声器发出疲劳驾驶警报。智能终端还可以选则通过无线信号与车辆连接，并发送控制指令给车辆以使车辆控制车载喇叭进行疲劳驾驶警报。。

在上述技术方案的基础上，所述设定时间长度优选为5秒。人的表情一般会在几秒钟内保持不变，在比较长的时间长度内差别很大，因此，设定时间长度太短，在相邻时间长度内所获取的表情特征很可能相同，重复判定导致检测效率低；设定时间太长不能保证检测的及时性，从而不能保证驾驶员的安全。因此，选择5s为获取表情特征的时间单元，能够比较准确的判定当下驾驶员的状态，从而保证了疲劳驾驶检测的及时性和准确性。

本实施例通过获取所述驾驶员面部在设定时间长度内的固定表情特征，检测所述驾驶员面部的固定表情特征与疲劳表情数据的匹配度，若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报，实现了疲劳驾驶的检测，并在检测结果是疲劳时进行报警。

实施例四

图4是本发明实施例四提供的一种智能终端的控制方法的流程图。本发明实施例在上述实施例的基础上，将如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报优化为：按照设定时间间隔，通过所述相机采集至少三张所述驾驶员面部图像并获取所述驾驶员面部图像的固定表情特征；检测所述驾驶员面部图像的固定表情特征与疲劳表情数据的匹配度；若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报。

相应地，本实施例的方法包括：

S410、当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部。该步骤与实施例一中的步骤S110相同，在本实施例中不再赘述。

S420、按照设定时间间隔，通过所述相机采集至少三张所述驾驶员面部图像并获取所述驾驶员面部图像的固定表情特征。

在设定时间间隔内，采集至少三张驾驶员面部图像，时间间隔过短会导致在时间很相近的时刻采集到的图像相同，检测效率低，时间间隔太长会导致检测不及时，因而需要采取合适的时间间隔。采集至少三张图像可以保证获取到的面部图像能够提取到驾驶员在设定时间间隔内的比较全面的表情特征，达到准确地检测疲劳驾驶的目的。利用特征提取算法获取驾驶员面部图像的固定表情特征。在上述技术方案的基础上，所述设定时间间隔优选为1秒，确定了采集驾驶员面部图像的间隔时间，保证了疲劳驾驶检测的准确性和高效性。

S430、检测所述驾驶员面部图像的固定表情特征与疲劳表情数据的匹配度。该步骤与实施例三中的步骤S330相同，在本实施例中不再赘述。

S440、若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报。该步骤与实施例三中的步骤S340相同，在本实施例中不再赘述。

本实施例通过按照设定时间间隔，通过所述相机采集至少三张所述驾驶员面部图像并获取所述驾驶员面部图像的固定表情特征；检测所述驾驶员面部图像的固定表情特征与疲劳表情数据的匹配度；若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报，实现了在设定的时间间隔内，利用至少三张驾驶员面部图像进行疲劳驾驶的检测。

实施例五

图5是本发明实施例五中的一种智能终端的控制装置的结构框图。该装置用于执行上述任意实施例所提供的智能终端的控制方法，该控制装置可选为调用智能终端的处理芯片实现。该装置包括：

控制模块510，用于当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部。

报警模块520，用于如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报。

其中，所述无线信号为蓝牙信号和无线局域网络信号中的至少一种。

进一步地，该装置还包括：绑定模块，用于在所述当检测到已绑定车辆的无线信号时控制打开相机之前，与待绑定车辆建立无线连接并记录所述待绑定车辆的无线连接信息以使所述智能终端与所述待绑定车辆绑定。

可选地，所述报警模块520包括：

获取特征单元，用于获取所述驾驶员面部在设定时间长度内的固定表情特征；检测特征单元，用于检测所述驾驶员面部的固定表情特征与疲劳表情数据的匹配度；控制报警单元，用于若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报；

其中，所述设定时间长度为5秒。

可选地，所述报警模块520包括：

采集图像单元，用于按照设定时间间隔，通过所述相机采集至少三张所述驾驶员面部图像并获取所述驾驶员面部图像的固定表情特征；检测特征单元，用于检测所述驾驶员面部图像的固定表情特征与疲劳表情数据的匹配度；控制报警单元，用于若检测到所述匹配度超过疲劳设定阈值，控制扬声器发出疲劳驾驶警报；其中，所述设定时间间隔为1秒。

本发明实施例五提供的智能终端的控制装置，实现了采用智能终端检测疲劳驾驶，具有智能化和自动化的效果，也无需安装车载疲劳检测系统，实现了通过智能终端进行疲劳驾驶检测的经济便捷性。

本发明实施例所提供的一种智能终端的控制装置可执行本发明任意实施例所提供的一种智能终端的控制方法，具备执行方法相应的功能模块和有益效果。

实施例六

图6是本发明实施例六中的一种疲劳驾驶检测系统的结构框图。该系统包含上述任意实施例所述的智能终端610，用于执行上述任意实施例所提供的智能终端的控制方法。

该系统还包括：与上述智能终端610绑定的车辆620。

所述车辆620可以是任意一台具有无线信号发射功能的车辆。

所述智能终端610可以是任意一台具有上述实施例所述的控制装置的终端。控制装置包括控制模块和报警模块。其中，所述控制模块，用于当检测到已绑定车辆的无线信号时，控制打开相机并扫描驾驶员面部；所述报警模块，用于如果检测到所述驾驶员面部处于疲劳状态时，发出疲劳驾驶警报；其中，所述无线信号为蓝牙信号和无线局域网络信号中的至少一种。

通过本发明实施例六的一种智能终端的控制系统，实现了采用智能终端检测疲劳驾驶，具有智能化和自动化的效果，也无需安装车载疲劳检测系统，实现了通过智能终端进行疲劳驾驶检测的经济便捷性。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。