行路预警方法、装置及终端与流程

本发明涉及通信信号处理技术领域，尤其涉及一种行路预警方法、装置及终端。

背景技术：

随着科学技术的发展和智能终端的普及，以智能手机为代表的新一代高性能智能移动终端以其操作简单，便于携带等特点给予人们生活上极大的便利，人们对智能终端使用的依赖性越来越大，在日常生活中，如散步、赶路、吃饭时，都低头看手机。在这种情况下，正是对手机的依赖导致很多人随时随地都专注于手机，即使在出行过程中也把玩于手中，从而由于分心很容易忽略周围环境中潜在的危险因素，对自身和他人的安全构成潜在的威胁，轻则跌倒，重则发生车祸。因此如何有效避免由于玩手机导致分心而发生意外是亟待解决的问题。

现有技术中，智能移动终端设计在背面有一个主摄像头，在正面有一个辅摄像头，通过手机系统软件设置，选取主/辅摄像头视野内的图像/录像信息，实现拍照/录像功能，可以实现一定范围内的人、车、环境的捕捉和保存。传统的环境障碍检测方法主要基于测距技术，包括激光测距、红外线测距、超声波测距等。此类环境障碍检测技术精度高、识别准，属于精密测距，广泛应用于军事领域、工业测控领域等。在智能设备上也出现了障碍物检测应用，通过在智能设备上额外增加一个激光测距仪或超声波模块获取环境信息，在智能设备上进行处理，得到障碍物的距离。

但是，上述基于摄像头的环境信息监测，由于拍照范围的限制，使用时监测范围小，用户行路安全性低；测距技术需要特定的传感器及相应的硬件支持、造价不菲、不便于随身携带，便携性低。

技术实现要素：

本发明解决的技术问题是如何提高用户在使用智能终端时行路的安全 性。

为解决上述技术问题，本发明实施例提供一种行路预警方法，行路预警方法包括：

获取用户的当前定位信息；

结合所述当前定位信息与地图数据，与自学习数据库中的历史活动区域进行匹配，得到当前活动区域类型；

基于所述当前活动区域类型向所述用户发送提示信息。

可选的，所述行路预警方法还包括：根据所述当前定位信息与所述地图数据更新所述自学习数据库，以得到所述历史活动区域以及活动区域类型。

可选的，所述活动区域类型包括安全区域和危险区域。

可选的，基于所述当前活动区域类型发送所述提示信息包括：

所述当前活动区域类型为所述危险区域时，采集所述用户所处环境的图像信息；所述图像信息包括物体时，判断所述物体的位置；当所述位置与所述当前定位信息确定的用户位置的距离小于设定值时，发送所述提示信息。

可选的，所述物体的位置与根据所述当前定位信息确定的用户位置的距离小于所述设定值时，将所述物体在所述图像信息中进行标记。

可选的，基于所述当前活动区域类型向所述用户发送所述提示信息还包括：

所述当前活动区域为所述危险区域时，发送所述提示信息。

可选的，所述行路预警方法还包括：

采集所述用户的当前运动信息，存在所述运动信息时，进行所述当前定位信息的获取操作。

可选的，所述行路预警方法还包括：采集所述用户的脸部图像信息；根据所述脸部图像信息提取脸部朝向信息和视线信息，得到注意力集中度信息；基于所述注意力集中度信息发送所述提示信息。

可选的，所述提示信息包括以下一种或多种：震动、文字、声音和图像 标记信息。

可选的，所述当前定位信息包括以下一种或多种：gps定位信息、北斗定位信息、glonass定位信息、无线定位信息和基站定位信息。

为解决上述技术问题，本发明实施例还公开了一种行路预警装置，行路预警装置包括：

定位获取单元，用于获取用户的当前定位信息；

判定单元，用于结合所述当前定位信息与地图数据，与自学习数据库中的历史活动区域进行匹配，得到当前活动区域类型；

提示单元，用于基于所述当前活动区域类型向所述用户发送提示信息。

可选的，所述行路预警装置还包括：更新单元，用于根据所述当前定位信息与所述地图数据更新所述自学习数据库，以得到所述历史活动区域以及活动区域类型。

可选的，所述活动区域类型包括安全区域和危险区域。

可选的，所述行路预警装置还包括：

第一图像采集单元，用于在所述当前活动区域类型为所述危险区域时，采集所述用户所处环境的图像信息；位置判定单元，用于所述图像信息包括物体时，判断所述物体的位置；当所述位置判定单元的判定结果为所述位置与所述当前定位信息的距离小于设定值时，所述提示单元发送所述提示信息。

可选的，所述行路预警装置还包括：标记单元，用于在所述物体的位置与根据所述当前定位信息确定的用户位置的距离小于所述设定值时，将所述物体在所述图像信息中进行标记。

可选的，所述提示单元用于在所述当前活动区域为所述危险区域时，发送所述提示信息。

可选的，所述行路预警装置还包括：

运动信息采集单元，用于采集所述用户的当前运动信息；

所述定位获取单元，用于在所述运动信息采集单元采集到所述运动信息 时进行所述当前定位信息的获取操作。

可选的，所述行路预警装置还包括：第二图像采集单元，用于采集所述用户的脸部图像信息；分析单元，用于根据所述脸部图像信息提取脸部朝向信息和视线信息，得到注意力集中度信息；所述提示单元还用于基于所述注意力集中度信息发送所述提示信息。

可选的，所述提示信息包括以下一种或多种：震动、文字、声音和图像标记信息。

可选的，所述当前定位信息包括以下一种或多种：gps定位信息、北斗定位信息、glonass定位信息、无线定位信息和基站定位信息。

为解决上述技术问题，本发明实施例还公开了一种终端，所述终端包括所述行路预警装置。

可选的，所述终端还包括：

侧摄像头，包括第一摄像头和第二摄像头，分别位于所述终端的顶部两侧顶角；

转动装置，用于控制所述侧摄像头的转动角度；

后摄像头，用于拍摄所述终端后向图像；

前摄像头，用于拍摄所述终端前向图像。

与现有技术相比，本发明实施例的技术方案具有以下有益效果：

本发明通过获取用户的当前定位信息，并结合所述当前定位信息与地图数据，得到当前活动区域，然后将当前活动区域与自学习数据库中的历史活动区域进行匹配，所述自学习数据库中包括活动区域的类型，可以得到当前活动区域类型；基于所述当前活动区域类型向所述用户发送提示信息，通过检测用户行路过程中的位置，并根据自适应数据库中已存储数据提示用户注意行路安全，提高了用户在使用智能终端时行路的安全性和便捷性。

进一步，采集所述用户的脸部图像信息；根据所述脸部图像信息提取脸部朝向信息和视线信息，得到注意力集中度信息；基于所述注意力集中度信息发送所述提示信息，通过采集用户脸部图像并分析用户的视线信息，得到 用户对终端的注意力集中度，基于所述注意力集中度提示用户注意行路安全，进一步提高了用户在使用智能终端时行路的安全性。

附图说明

图1是本发明实施例一种终端示意图；

图2是本发明实施例一种终端使用状态示意图；

图3是本发明实施例一种行路预警方法的流程图；

图4是本发明实施例另一种行路预警方法的流程图；

图5是本发明实施例一种行路预警装置的结构示意图；

图6是本发明实施例另一种行路预警装置的结构示意图。

具体实施方式

如背景技术中所述，现有技术的基于摄像头的环境信息监测，由于拍照范围的限制，使用时监测范围小，用户行路安全性低；测距技术需要特定的传感器及相应的硬件支持、造价不菲、不便于随身携带，便携性低。

本发明技术方案把用户所处周边环境中信息显示在用户视野内，

为使本发明的上述目的、特征和有益效果能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。

图1是本发明实施例一种终端示意图。

请参照图1，所述终端10包括侧摄像头、转动装置(图未示)、后摄像头(图未示)和前摄像头103，侧摄像头包括第一摄像头101和第二摄像头102，第一摄像头101和第二摄像头102分别位于所述终端的顶部两侧顶角。

本实施例中，第一摄像头101、第二摄像头102、后摄像头和前摄像头103可以对焦。终端10的顶部两侧斜角被切掉，分别形成45度的斜面，第一摄像头101和第二摄像头102安装在此位置。其中，转动装置用于控制第一摄像头101和第二摄像头102的转动角度，转动角度a可以在用户使用前进行配置，优选的，转动角度a大于90度，以便根据实际环境需要，获取各个角度的拍摄图像。

本实施例中，后摄像头位于终端10的背面，用于拍摄所述终端的后向图像；前摄像头103位于终端前面，用于拍摄所述终端前向图像，可以拍摄用户注视终端时的面部图像。此外，终端10中还可以配置加速度传感器、角加速度传感器、gps/北斗/glonass卫星定位装置，用于终端10的定位和当前位置的确定。

图2是本发明实施例一种终端使用状态示意图。

请参照图2，一并参照图1，用户在使用终端10时，终端10的与水平面的抬起角度为b，眼睛20注视终端10。前摄像头103可以拍摄用户眼睛20的图像，用于分析用户注视终端10的注意力集中度，第一摄像头101和第二摄像头102可以拍摄终端10前方2a度范围内的环境信息。例如可以是，终端10抬起角度b为30度，第一摄像头101和第二摄像头102探测前方200度范围的环境信息和其他物体运动情况。

图3是本发明实施例一种行路预警方法流程图。

请参照图3，一并参照图1和图2，所述行路预警方法包括：步骤s301，获取用户的当前定位信息。

本实施例中，可以基于终端10中配置的定位装置，获取用户在当前位置的当前定位信息，当前定位信息可以是以下一种或多种：gps定位信息、北斗定位信息、glonass定位信息、无线定位信息和基站定位信息。

具体实施中，获取用户的当前定位信息之前，采集所述用户的当前运动信息，判断用户当前的运动状态，当用户存在所述运动信息时，表示用户处于行路状态，然后进行所述当前定位信息的获取操作。其中，采集所述运动信息可以基于终端10配置的加速度传感器或角加速度传感器进行采集，也可以通过当前定位信息确定的用户位置是否发生变化来判断用户是否处于运动状态。

步骤s302，结合所述当前定位信息与地图数据，与自学习数据库中的历史活动区域进行匹配，得到当前活动区域类型。

本实施例中，结合所述当前定位信息与基于终端10配置的地图数据，得到用户当前的具体位置，并将当前的具体位置与自学习数据库中的历史活动 区域进行匹配，得到用户的当前活动区域类型。

具体实施中，用户在使用终端的过程中，会不断产生新的当前定位信息，表示用户在当前位置进行行路或活动，则将所述当前定位信息与所述地图数据存储入自学习数据库，更新所述自学习数据库，以得到所述历史活动区域以及活动区域类型。自学习数据库存储积累用户的运动轨迹数据，并通过大数据的方式学习得到用户有规律性的运动轨迹，可以识别出用户的常走路线，例如可以是上班路线和下班路线。

具体实施中，自学习数据库根据积累记录用户的行为轨迹，用户常走路线与地图上危险位置(例如可以是马路、路口等)的相互关系，将用户的历史活动区域进行划分类型。活动区域类型可以包括安全区域和危险区域，所述危险区域是指根据统计数据用户容易发生事故的区域，例如可以是人行道和地面不平整区域。

步骤s303，基于所述当前活动区域类型向所述用户发送提示信息。

本实施例中，根据用户的当前活动区域类型，对用户进行安全提示，所述提示信息可以包括以下一种或多种：震动、文字、声音和图像标记信息，所述图像标记信息是指在用户所处环境的拍摄的图像中将危险物体进行标记。向用户发送提示信息，例如可以是，抢占终端10的当前屏幕，显示包括危险物体标注的全景图像信息和告警信息，并建议用户的反应，比如立即站定、仔细观察等。

具体实施中，所述当前活动区域为所述危险区域时，可以发送所述提示信息。也可以在所述当前活动区域类型为所述危险区域时，即用户进入危险区域时，提高警戒级别，同时打开第一摄像头101、第二摄像头102和后摄像头，采集所述用户所处环境的图像信息，监测用户周围环境的实时环境信息，其中，后摄像头可以监测路面状况，第一摄像头101和第二摄像头102可以监测用户周围的物体信息。所述图像信息包括物体时，判断所述物体的位置；当所述位置与所述当前定位信息的距离小于设定值时，表示所述物体对用户构成安全威胁，所述物体为危险物体，例如可以是行驶中的车辆、建筑物或障碍物，此时向用户发送所述提示信息，提醒用户注意安全。

具体实施中，还可以将第一摄像头101、第二摄像头102和后摄像头拍摄到的图像进行图像处理，减少抖动导致的图像模糊，然后根据终端10当前的朝向信息和多个图像之间的交叠部分对图像进行拼接，组成一个广角的全景图像。

具体实施中，当物体的位置与根据所述当前定位信息确定的用户位置的距离小于所述设定值时，所述物体被确定为危险物体，将所述物体在所述图像信息中进行标记，得到了图像标记信息。并在提示用户时，将带有标记的图像在终端10的显示屏幕上展示给用户，以便用户做出下一步的反应和行动。

可以理解的是，所述设定值可以为任意可实施的数值，可以在用户使用终端10前进行配置。

本实施例中，还可以通过前摄像头103采集所述用户的脸部图像信息，并对脸部图像进行图像处理，提取脸部朝向信息和视线信息，得到注意力集中度信息，例如所述注意力集中度信息可以通过用户注视终端10的时间的长度进行划分等级，在所述注意力集中度达到设定的等级时，发送所述提示信息。例如可以是在脸部图像中识别出用户的脸部轮廓，在脸部的对应位置识别出到眼睛、鼻子、嘴巴，通过眼睛鼻子嘴巴的相对关系估计出用户面部朝向，通过眼部图像处理识别出用户的注意力是否集中在终端10；还可以根据终端10的当前显示界面被占用的应用程序信息，以及用户触摸当前屏幕实施切换、输入等动作模式，来判断的注意力是否集中在终端10。

图4是本发明实施例另一种行路预警方法流程图。

请参照图4，一并参照图1和图2，行路预警方法包括：步骤s401，采集用户的当前运动信息。

步骤s402，判断是否存在运动信息，如果是，进入步骤s403，否则，继续步骤s401。

步骤s403，获取用户的当前定位信息。

本实施例中，采集所述运动信息可以基于终端10配置的加速度传感器或角加速度传感器进行采集，也可以通过当前定位信息是否发生变化来判断用户是否处于运动状态。可以基于终端10中配置的定位装置，获取用户在当前 位置的当前定位信息。

步骤s405，判断当前区域是否为危险区域，如果是，进入步骤s407，否则进入步骤s406。

本实施例中，结合所述当前定位信息与基于终端10配置的地图数据，得到用户当前的具体位置，并将当前的具体位置与自学习数据库中的历史活动区域进行匹配，得到用户的当前活动区域类型。

步骤s406，无操作。

步骤s407，采集所述用户所处环境的图像信息。

步骤s408，计算图像信息中物体的位置。

步骤s409，判断物体位置与所述当前定位信息确定的用户位置的距离是否小于设定值，如果是，进入步骤s410，否则，继续步骤s406。

步骤s410，发送提示信息。

具体实施中，所述当前活动区域为所述危险区域时，可以发送所述提示信息。也可以在所述当前活动区域类型为所述危险区域时，即用户进入危险区域，提高警戒级别，同时打开第一摄像头101、第二摄像头102和后摄像头，监测用户周围环境的实时路况，采集所述用户所处环境的图像信息，其中，后摄像头可以监测路面状况，第一摄像头101和第二摄像头102可以监测用户周围的物体信息。所述图像信息包括物体时，判断所述物体的位置；当所述位置与所述当前定位信息的距离小于设定值时，表示所述物体对用户构成安全威胁，所述物体为危险物体，例如可以是行驶中的车辆、建筑物或障碍物，此时向用户发送所述提示信息，提醒用户注意安全。

本发明实施例的具体实施方式可参照前述相应实施例，此处不再赘述。

图5是本发明实施例一种行路预警装置的结构示意图。

请参照图5，行路预警装置包括：定位获取单元501、判定单元502和提示单元503。

其中，定位获取单元501适于获取用户的当前定位信息；判定单元502结合所述当前定位信息与地图数据，与自学习数据库中的历史活动区域进行 匹配，得到当前活动区域类型；提示单元503基于所述当前活动区域类型向所述用户发送提示信息。

图6是本发明实施例另一种行路预警装置的结构示意图。

请参照图6，一并参照图1、图2和图5，行路预警装置包括：定位获取单元501、判定单元502、提示单元503。运动信息采集单元601、更新单元602、自学习数据库603、第一图像采集单元604、位置判定单元605、第二图像采集单元606、分析单元607和标记单元608。

其中，运动信息采集单元601采集所述用户的当前运动信息，存在所述运动信息时，定位获取单元501获取用户的当前定位信息，所述当前定位信息包括以下一种或多种：gps定位信息、北斗定位信息、glonass定位信息、无线定位信息和基站定位信息。判定单元502结合所述当前定位信息与地图数据，与自学习数据库603中的历史活动区域进行匹配，得到当前活动区域类型；同时更新单元602根据所述当前定位信息与所述地图数据更新所述自学习数据库603，以得到所述历史活动区域以及活动区域类型，所述活动区域类型包括安全区域和危险区域。所述当前活动区域为所述危险区域时，所述提示单元503发送所述提示信息。

本实施例中，在当前活动类型为危险区域时，第一图像采集单元604采集所述用户所处环境的图像信息；位置判定单元605在所述图像信息包括物体时，判断所述物体的位置；当所述位置与所述当前定位信息的距离小于设定值时，所述提示单元503发送所述提示信息。所述提示信息包括以下一种或多种：震动、文字、声音和图像标记信息。

具体实施中，标记单元608在所述物体的位置与根据所述当前定位信息确定的用户位置的距离小于所述设定值时，将所述物体在所述图像信息中进行标记。

本实施例中，第二图像采集单元606采集所述用户的脸部图像信息；分析单元607根据所述脸部图像信息提取脸部朝向信息和视线信息，得到注意力集中度信息；所述提示单元503基于所述注意力集中度信息发送所述提示信息。

本发明实施例的具体实施方式可参照前述相应实施例，此处不再赘述。

本发明实施例公开的终端10中配置有所述行路预警装置。

结合本文中公开的实施例描述的方法或算法的步骤可直接在硬件中、在由处理器执行的软件模块中、或在这两者的组合中体现。软件模块可驻留在ram存储器、闪存、rom存储器、eprom存储器、eeprom存储器、寄存器、硬盘、可移动盘、cd-rom、或本领域中所知的任何其他形式的存储介质中。示例性存储介质耦合到处理器以使得该处理器能从/向该存储介质读取和写入信息。在替换方案中，存储介质可以被整合到处理器。

虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。