一种基于车载屏幕的人机交互方法、装置及电子设备与流程

1.本发明涉及虚拟交互技术领域，具体涉及一种基于车载屏幕的人机交互方法、装置及电子设备。


背景技术：

2.当出现交通安全问题时，若能在救护抵达之前采取正确的自救互救措施，救援成功率将会显著提高，故亟待提出一种基于车屏幕的人机交互方法可以指导车主合理正确应对突发事件，消除事故紧张情绪，避免慌乱导致二次伤害。


技术实现要素：

3.因此，本发明要解决的技术问题在于克服现有的缺陷，从而提供一种基于车载屏幕的人机交互方法、装置及电子设备。
4.根据第一方面，本发明实施例公开了一种基于车载屏幕的人机交互方法，该方法应用于车载系统，所述车载系统与可穿戴健康设备以及车载识别系统连接，所述可穿戴健康设备用于监测用户的健康数据并在出现异常的健康数据时响应告警操作，所述车载识别系统用于对车辆运行状态进行监测并在车辆发生碰撞时响应告警操作；所述方法包括：响应于对车载屏幕中人机交互功能的启动检测操作；当所述人机交互功能启动时，对所述可穿戴健康设备以及车载识别系统进行告警操作的监测；当监测到所述可穿戴健康设备和/或所述车载识别系统进行告警操作时，响应于对所述车载屏幕的智能语音通话服务的开启操作。
5.可选地，响应于对所述车载屏幕的智能语音通话服务的开启操作之后，所述方法还包括：向车内人员发出交互请求；根据接收到的语音回复，确定所述车内人员当前出现的问题；根据所述车内人员当前出现的问题，提供对应的问题解决建议。
6.可选地，所述提供对应的问题解决建议，包括：通过所述车载屏幕的智能语音通话服务，以语音反馈的形式提供对应的问题解决建议；和/或通过所述车载屏幕，以视频展示的方式提供对应的问题解决建议。
7.可选地，对所述可穿戴健康设备以及车载识别系统进行告警操作的监测，包括：按照预设间隔时长向所述可穿戴健康设备以及车载识别系统发送告警信息请求；根据接收到的所述可穿戴健康设备以及车载识别系统的反馈信息确定是否已进行告警操作。
8.根据第二方面，本发明实施例还公开了一种基于车载屏幕的人机交互装置，该装置应用于车载系统，所述车载系统与可穿戴健康设备以及车载识别系统连接，所述可穿戴健康设备用于监测用户的健康数据并在出现异常的健康数据时响应告警操作，所述车载识别系统用于对车辆运行状态进行监测并在车辆发生碰撞时响应告警操作；所述装置包括：操作响应模块，用于响应对车载屏幕中人机交互功能的启动检测操作；操作监测模块，用于当所述人机交互功能启动时，对所述车载可穿戴健康设备以及车载识别系统进行告警操作的监测；服务开启模块，用于当监测到所述可穿戴健康设备和/或所述车载识别系统进行告
警操作时，响应于对所述车载屏幕的智能语音通话服务的开启操作。
9.可选地，所述装置还包括：请求交互模块，用于向车内人员发出交互请求；问题确定模块，用于根据接收到的语音回复，确定所述车内人员当前出现的问题；建议提供模块，用于根据所述车内人员当前出现的问题，提供对应的问题解决建议。
10.可选地，所述建议提供模块，包括：语音通话服务子模块，用于通过所述车载屏幕的智能语音通话服务，以语音反馈的形式提供对应的问题解决建议；和/或视频展示服务子模块，用于通过所述车载屏幕，以视频展示的方式提供对应的问题解决建议。
11.可选地，所述操作监测模块，包括：信息请求发送子模块，用于按照预设间隔时长向可穿戴健康设备以及车载识别系统发送告警信息请求；反馈信息接收子模块，用于根据接收到的可穿戴健康设备以及车载识别系统的反馈信息确定是否已进行告警操作。
12.根据第三方面，本发明实施例还公开了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如第一方面或第一方面任一可选实施方式所述的基于车载屏幕的人机交互方法的步骤。
13.根据第四方面，本发明实施方式还公开了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面或第一方面任一可选实施方式所述的基于车载屏幕的人机交互方法的步骤。
14.本发明技术方案，具有如下优点：
15.本发明提供的基于车载屏幕的人机交互方法，该方法应用于车载系统，与可穿戴健康设备以及车载识别系统连接，响应与对车载屏幕中人机交互功能的启动检测操作，当人机交互功能开启时，对可穿戴健康设备以及车载识别系统进行告警操作的监测，当监测到可穿戴健康设备和/或车载识别系统进行告警操作时，响应于对车载屏幕的智能语音通话服务的开启操作。本发明实时监测是否有告警情况，若监测到告警情况，开启车载系统的智能语音通话服务以指导车内人员合理正确应对突发事件，避免慌乱导致二次伤害，并进行心理疏导，帮助车内人员消除事故紧张情绪。
附图说明
16.为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
17.图1为本发明实施例中基于车载屏幕的人机交互方法的一个具体示例的流程图；
18.图2为本发明实施例中基于车载屏幕的人机交互装置的一个具体示例的原理框图；
19.图3为本发明实施例中电子设备的一个具体示例图。
具体实施方式
20.下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术
人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
21.在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
22.在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，还可以是两个元件内部的连通，可以是无线连接，也可以是有线连接。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
23.此外，下面所描述的本发明不同实施方式中所涉及的技术特征只要彼此之间未构成冲突就可以相互结合。
24.本发明实施例公开了一种基于车载屏幕的人机交互方法，应用于车载系统，该车载系统与可穿戴健康设备以及车载识别系统连接，其中该车载系统集成有车载屏幕，该车载屏幕可以接收用户的触控操作；所述可穿戴健康设备用于监测用户的健康数据并在出现异常的健康数据时响应告警操作，该可穿戴健康设备可以用于检测心率等可表征健康与否的数据，其可通过短距离通信方式，当用户进入车辆内部，自动与车载系统建立通信；所述车载识别系统用于对车辆运行状态进行监测并在车辆发生碰撞时响应告警操作；该车载识别系统可以用于检测车辆行驶速度并与可以检测车辆行驶环境的摄像头通信连接，进而结合车辆行驶速度的变化以及车辆行驶环境来确定车辆是否发生碰撞。如图1所示，该方法包括如下步骤：
25.步骤101，响应于对车载屏幕中人机交互功能的启动检测操作；示例性地，在本技术实施例中，车内人员可以进入车辆时或在车辆行驶过程中通过手动或语音等方式开启该车载系统，并通过触控该车载系统的车载屏幕上显示的人机交互模块，实现对人机交互功能的开启；当车载系统检测到该人机交互功能的启动信号时，进行告警操作的监测并在监测到告警操作时开启人机交互服务。
26.步骤102，当所述人机交互功能启动时，对所述可穿戴健康设备以及车载识别系统进行告警操作的监测；
27.示例性地，在本技术实施例中，可穿戴健康设备监测用户的健康数据(本技术实施可以识别车内人员的心率，监测到车内人员的心率过高响应告警操作，仅作为举例，不以此为限)。车载识别系统实时监测车辆行驶过程中车辆的运行状态进行监测，若监测到车辆发生碰撞时响应告警操作；车载系统与可穿戴健康设备以及车载识别系统连接，实时监测可穿戴健康设备与车载识别系统是否进行告警操作。具体的监测方式可以是接收可穿戴设备以及车载识别系统运输的运行数据，根据对接收到的运行数据进行分析确定该可穿戴设备以及车载识别系统是否发生告警操作，当发生告警操作表明车内人员的健康数据出现异常或者车辆当前发生碰撞。
28.步骤103，当监测到所述可穿戴健康设备和/或所述车载识别系统进行告警操作时，响应于对所述车载屏幕的智能语音通话服务的开启操作。
29.示例性地，在本技术实施例中，车载系统与可穿戴健康设备以及车载识别系统连接进行实时监测是否进行告警操作，“和/或”表示两种方式择一或两种方式同时选择的方式。在本技术实施例中，当监测到可穿戴健康设备或车载识别系统或同时监测到两个系统进行告警操作，响应对车载屏幕的智能语音通话服务的开启操作，此时车载系统可以与用户进行对话，用户根据遇到的问题可以提出问题，车载系统根据用户提出的问题，通过车载系统配置的答疑结果，提供相应的答案或与用户进行交谈缓解用户的紧张情绪。智能语音通话服务开启的同时可以在虚拟屏幕上以动画的形式显示虚拟服务人，通过该虚拟服务人通过各种动作、表情与用户进行沟通。当可穿戴健康设备以及车载识别系统均未进行告警操作，则不显示虚拟服务人。
30.本发明提供的基于车载屏幕的人机交互方法，通过响应于对车载屏幕中人机交互功能的启动检测操作，当所述人机交互功能启动时，对可穿戴健康设备以及车载识别系统进行告警操作的监测，当监测到可穿戴健康设备和/或车载识别系统进行告警操作时，响应于对车载屏幕的智能语音通话服务的开启操作，本发明实时监测是否出现告警情况，若监测到告警情况，通过车载屏幕指导车内人员合理正确应对突发事件，避免慌乱导致二次伤害，并进行心理疏导，帮助车内人员消除事故紧张情绪。
31.作为本发明一个可选实施方式，步骤103响应对车载屏幕的智能语音通话服务的开启操作之后，该方法还包括：向车内人员发出交互请求，根据接收到的语音回复，确定所述车内人员当前出现的问题，根据所述车内人员当前出现的问题，提供对应的问题解决建议。
32.示例性地，在本技术实施例中，开启智能语音通话服务操作之后，虚拟服务人的动画出现，向车内人员发出交互请求，询问车内人员遇到了哪些问题，可以包括但不限于车内人员或救援人员向虚拟服务人提出问题，虚拟服务人根据接收到的语音回复，通过集成的语音检测模型对接收到的语音回复进行识别检测，确定车内人员当前出现的问题。根据车内人员当前出现的问题，通过车载系统将问题与预先配置的答疑结果进行匹配查找，根据匹配结果向车内人员给出问题对应的建议，帮助指导车内人员合理正确应对突发事件，也可以帮助车内人员消除紧张情绪。
33.作为本发明一个可选实施方式，提供对应的问题解决建议，包括：通过所述车载屏幕的智能语音通话服务，以语音反馈的形式提供对应的问题解决建议，和/或通过所述车载屏幕，以视频展示的方式提供对应的问题解决建议。
34.示例性地，在本技术实施例中，可以通过两种方式与车内人员进行人机交互，监测到告警操作后，开启车载屏幕的智能语音通话服务，通过语音反馈向车内人员给出问题对应的建议，也可以是在监测到告警操作后，虚拟服务人以ar视频的形式出现，通过视频展示的方式向车内人员给出问题对应的建议。
35.作为本发明一个可选实施方式，步骤102，对可穿戴健康设备以及车载识别系统进行告警操作的监测，包括：按照预设间隔时长向所述可穿戴健康设备以及车载识别系统发送告警信息请求；根据接收到的所述可穿戴健康设备以及车载识别系统的反馈信息确定是否已进行告警操作。
36.示例性地，在本技术实施例中，车载系统与可穿戴健康设备以及车载识别系统连接，每隔一段时间(具体间隔时长可以根据实际需要确定，在此不作限定)向可穿戴健康设
备以及车载识别系统发送告警信息请求，询问是否进行了告警操作，可穿戴健康设备与车载识别系统向车载系统反馈告警请求信息，车载系统根据接收到的反馈信息确定是否已进行告警操作。
37.本发明实施例还公开了一种基于车载屏幕的人机交互装置，应用于车载系统，所述车载系统与可穿戴健康设备以及车载识别系统连接，所述可穿戴健康设备用于监测用户的健康数据并在出现异常的健康数据时响应告警操作，所述车载识别系统用于对车辆运行状态进行监测并在车辆发生碰撞时响应告警操作；如图2所示，该装置包括：
38.操作响应模块201，用于响应对车载屏幕中人机交互功能的启动检测操作；
39.操作监测模块202，用于当所述人机交互功能启动时，对所述车载可穿戴健康设备以及车载识别系统进行告警操作的监测；
40.服务开启模块203，用于当监测到所述可穿戴健康设备和/或所述车载识别系统进行告警操作时，响应于对所述车载屏幕的智能语音通话服务的开启操作。
41.本发明提供的基于车载屏幕的人机交互装置，通过响应于对车载屏幕中人机交互功能的启动检测操作，当所述人机交互功能启动时，对可穿戴健康设备以及车载识别系统进行告警操作的监测，当监测到可穿戴健康设备和/或车载识别系统进行告警操作时，响应于对车载屏幕的智能语音通话服务的开启操作，本发明实时监测是否出现告警情况，若监测到告警情况，通过车载屏幕指导车内人员合理正确应对突发事件，避免慌乱导致二次伤害，并进行心理疏导，帮助车内人员消除事故紧张情绪。
42.作为本发明一个可选实施方式，该装置还包括：交互请求模块，用于向车内人员发出交互请求；问题确定模块，用于根据接收到的语音回复，确定车内人员当前出现的问题；建议提供模块，用于根据车内人员当前出现的问题，提供对应的问题解决建议。
43.作为本发明一个可选实施方式，建议提供模块包括：语音通话服务子模块，用于通过车载屏幕的智能语音通话服务，以语音反馈的形式提供对应的问题解决建议；和/或视频展示服务子模块，用于通过车载屏幕，以视频展示的方式提供对应的问题解决建议。
44.作为本发明一个可选实施方式，操作监测模块202，包括：信息请求发送子模块，用于按照预设间隔时长向可穿戴健康设备以及车载识别系统发送告警信息请求；反馈信息接收子模块，用于根据接收到的可穿戴健康设备以及车载识别系统的反馈信息确定是否已进行告警操作。
45.本发明实施例还提供了一种电子设备，如图3所示，该电子设备可以包括处理器401和存储器402，其中处理器401和存储器402可以通过总线或者其他方式连接，图3中以通过总线连接为例。
46.处理器401可以为中央处理器(central processing unit，cpu)。处理器401还可以为其他通用处理器、数字信号处理器(digital signal processor，dsp)、专用集成电路(application specific integrated circuit，asic)、现场可编程门阵列(field-programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。
47.存储器402作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块，如本发明实施例中的基于车载屏幕的人机交互方法对应的程序指令/模块。处理器401通过运行存储在存储器402中的非暂态软件程序、指令以及模
块，从而执行处理器的各种功能应用以及数据处理，即实现上述方法实施例中的基于车载屏幕的人机交互方法。
48.存储器402可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储处理器401所创建的数据等。此外，存储器402可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器402可选包括相对于处理器401远程设置的存储器，这些远程存储器可以通过网络连接至处理器401。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
49.所述一个或者多个模块存储在所述存储器402中，当被所述处理器401执行时，执行如图1所示实施例中的基于车载屏幕的人机交互方法。
50.上述电子设备具体细节可以对应参阅图1所示的实施例中对应的相关描述和效果进行理解，此处不再赘述。
51.本领域技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(read-only memory，rom)、随机存储记忆体(randomaccessmemory，ram)、快闪存储器(flash memory)、硬盘(hard disk drive，缩写：hdd)或固态硬盘(solid-state drive，ssd)等；所述存储介质还可以包括上述种类的存储器的组合。
52.虽然结合附图描述了本发明的实施例，但是本领域技术人员可以在不脱离本发明的精神和范围的情况下作出各种修改和变型，这样的修改和变型均落入所限定的范围之内。