用于无人车的人机交互方法、装置及无人车与流程

本申请涉及车联网技术领域，具体涉及一种用于无人车的人机交互方法、装置及无人车。

背景技术：

随着人工智能技术的发展，人工智能和自动控制渗透到日常生活的方方面面，信息技术和电子技术的进步为智能交通的发展提供了良好的基础，智能交通已成为未来交通发展的方向。其中，无人驾驶车辆无疑是未来汽车的发展方向，其具有安全可靠、高效便利的优势，可弥补有人驾驶汽车的种种缺陷不足。

随着无人车技术的发展，已经出现了利用无人车进行外卖、零售等活动的技术方案，用以解决物流的最后一公里的问题。

相关技术中，用户与无人车进行交互的过程中存在的缺点是，交互操作完全依赖人员讲解，效率低、成本高。

技术实现要素：

为至少在一定程度上克服相关技术中存在的问题，本申请提供一种用于无人车的人机交互方法、装置及无人车。

根据本申请实施例的第一方面，提供一种用于无人车的人机交互方法，包括：

根据预设的车辆身份标识，加载与该无人车相匹配的用于引导操作流程的多媒体文件，所述多媒体文件包括第一多媒体文件和第二多媒体文件；

在检测到人体接近信号时，将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放；

在检测到交互界面输入的操作指令时，控制所述播放设备播报与该操作指令对应的第二多媒体文件。

进一步地，所述加载与该无人车相匹配的用于引导操作流程的多媒体文件，包括：

通过预设的车辆身份标识与服务器建立通信连接；

获取服务器下发的配置信息，所述配置信息是服务器根据车辆身份标识确定后下发的；

根据配置信息加载用于引导操作流程的多媒体文件。

进一步地，所述车辆身份标识为无人车的车辆id，所述配置信息包括无人车的车辆类型；

所述配置信息是服务器根据车辆id在数据库中查询对应的车辆类型而确定的。

进一步地，所述方法还包括：

在检测到人体接近信号时，唤醒所述播放设备；

优选地，当人体接近信号消失并且持续时间达到预设的第一时间阈值时，关闭所述播放设备；

其中，所述人体接近信号是通过红外传感器和/或超声波雷达检测获得的。

进一步地，所述播放设备包括如下项中的至少一项：显示屏、扬声器；

所述第一多媒体文件包括如下项中的至少一项：图像、文字、语音；

所述将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放，包括：

将图像和/或文字形式的引导信息通过显示器进行播放；和/或，

将语音形式的引导信息通过扬声器进行播放。

进一步地，所述显示屏为触摸屏，所述交互界面为同一块触摸屏；

所述方法还包括：

在触摸屏播放所述第一多媒体文件时，如果检测到通过触摸屏输入的触摸信号，则控制触摸屏停止播放所述第一多媒体文件，并将触摸屏的显示内容切换为操作界面。

进一步地，所述控制所述播放设备播报与该操作指令对应的第二多媒体文件，包括：

当触摸屏的显示内容为操作界面时，获取通过操作界面输入的操作指令；

根据该操作指令确定应当进行的下一步操作；

控制扬声器播报相应的语音信息，以提示进行下一步操作。

根据本申请实施例的第二方面，提供一种用于无人车的人机交互装置，所述装置包括：

加载模块，用于根据预设的车辆身份标识，加载与该无人车相匹配的用于引导操作流程的多媒体文件，所述多媒体文件包括第一多媒体文件和第二多媒体文件；

启动模块，用于在检测到人体接近信号时，将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放；

引导模块，用于在检测到交互界面输入的操作指令时，控制所述播放设备播报与该操作指令对应的第二多媒体文件。

根据本申请实施例的第三方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现如上任一种实施例所述的方法的步骤。

根据本申请实施例的第四方面，提供一种无人车，包括：

车辆本体；

播放设备，用于播放引导操作流程的多媒体文件；

交互界面，用于输入操作指令；

控制器，设置在所述车辆本体内；

其中，所述播放设备和所述交互界面分别与所述控制器电连接，所述控制器用于执行如上任一种实施例所述方法的操作步骤。

本申请的实施例提供的技术方案具备以下有益效果：

本申请的方案通过多媒体文件的形式进行引导流程，表现形式丰富、效率高；能够根据车辆的身份标识加载相应的引导流程，使车辆的使用更灵活；在不同的阶段进行不同的引导流程，使引导更贴近用户的操作，效果更好；该方案可以应用于设置有人机交互界面的无人驾驶车辆，以提升自动驾驶车辆的人机交互体验。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。

图1是一个实施例示出的一种用于无人车的人机交互方法的应用环境示意图。

图2是一个实施例示出一种用于无人车的人机交互方法的流程图。

图3是一个实施例示出的一种无人车的结构示意图。

图4是一个实施例示出的一种无人车与用户的交互流程图。

图5是一个实施例示出的一种无人车的监控云台控制装置的电路框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的方法和装置的例子。

本申请提供的用于无人车的人机交互方法，可以应用于如图1所示的应用环境中。该应用环境中包括无人车1、网络2和服务器3，无人车1和服务器3之间可以通过网络2实现可通信的连接。该由终端1、网络2和服务器3构成的网络系统可以是基于互联网，也可以基于局域网，还可以基于互联网和局域网的组合网，在此不做赘述。

网络2用于实现无人车1与服务器3、服务器3与用户终端4之间的网络连接，可以包括多种类型的有线或无线网络。服务器3可以用独立的服务器或者是多个服务器组成的服务器集群来实现。

图2是根据一示例性实施例示出的一种用于无人车的人机交互方法的流程图。该方法具体包括以下步骤：

步骤s1：根据预设的车辆身份标识，加载与该无人车相匹配的用于引导操作流程的多媒体文件，所述多媒体文件包括第一多媒体文件和第二多媒体文件；

步骤s2：在检测到人体接近信号时，将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放；

步骤s3：在检测到交互界面输入的操作指令时，控制所述播放设备播报与该操作指令对应的第二多媒体文件。

本申请的方案通过多媒体文件的形式进行引导流程，表现形式丰富、效率高；能够根据车辆的身份标识加载相应的引导流程，使车辆的使用更灵活；在不同的阶段进行不同的引导流程，使引导更贴近用户的操作，效果更好；该方案可以应用于设置有人机交互界面的无人驾驶车辆，以提升自动驾驶车辆的人机交互体验。

一些实施例中，所述加载与该无人车相匹配的用于引导操作流程的多媒体文件，包括：

通过预设的车辆身份标识与服务器建立通信连接；

获取服务器下发的配置信息，所述配置信息是服务器根据车辆身份标识确定后下发的；

根据配置信息加载用于引导操作流程的多媒体文件。

具体地，加载多媒体文件的过程，可以是从服务器下载相应的多媒体文件；也可以是从本地预先存储的多种不同类型的多媒体文件中，加载与配置信息相匹配的类型。

一些实施例中，所述车辆身份标识为无人车的车辆id，所述配置信息包括无人车的车辆类型；

所述配置信息是服务器根据车辆id在数据库中查询对应的车辆类型而确定的。

比如，无人车可以是零售型、配送型等不同类型，这些无人车本身是可以通用的。此时，具体的某一个无人车在运行过程中，就需要先确认自身执行的是哪种类型的任务。而无人车的任务分派信息存储在服务器端，无人车需要通过查询进行确认。

一些实施例中，所述方法还包括：

在检测到人体接近信号时，唤醒所述播放设备；

优选地，当人体接近信号消失并且持续时间达到预设的第一时间阈值时，关闭所述播放设备；

其中，所述人体接近信号是通过红外传感器和/或超声波雷达检测获得的。

比如，某个无人车是零售型，那么在没有用户在附件时，需要关闭播放设备，以节约电能、延长续航时间。只有当用户靠近时，才唤醒播放设备，开始进行引导；用户离开10秒(即第一时间阈值，也可以设置为15秒、20秒等)后，就主动关闭。

一些实施例中，所述播放设备包括如下项中的至少一项：显示屏、扬声器；

所述第一多媒体文件包括如下项中的至少一项：图像、文字、语音；

所述将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放，包括：

将图像和/或文字形式的引导信息通过显示器进行播放；和/或，

将语音形式的引导信息通过扬声器进行播放。

该方案以视频和音频结合的方式进行引导，使引导内容生动形象，引导效果好、交互体验好。

一些实施例中，所述显示屏为触摸屏，所述交互界面为同一块触摸屏；

所述方法还包括：

在触摸屏播放所述第一多媒体文件时，如果检测到通过触摸屏输入的触摸信号，则控制触摸屏停止播放所述第一多媒体文件，并将触摸屏的显示内容切换为操作界面。

当前最普遍的人机交互界面就是触摸屏，在用户还未通过触摸屏进行操作时，触摸屏作为显示屏播放视频引导流程。当用户点击触摸屏的任意位置时，触摸屏切换到操作模式，停止播放视频，开始显示操作界面，方便用户进行后续操作。

一些实施例中，所述控制所述播放设备播报与该操作指令对应的第二多媒体文件，包括：

当触摸屏的显示内容为操作界面时，获取通过操作界面输入的操作指令；

根据该操作指令确定应当进行的下一步操作；

控制扬声器播报相应的语音信息，以提示进行下一步操作。

比如，第二多媒体文件可以是语音文件。当用户选定要购买的商品时，可以语音提示“请支付xx元”等；当用户支付完成时，可以语音提示“请从下方的取货口取走您的商品”等。

下面结合具体的无人车应用场景，对本申请的方案进行拓展说明。

如图3所示，本申请上述实施例的方法可以应用于如图所示的无人车，该无人车可以是零售型无人车。该无人车1的一侧设置有触摸屏101、窗口102、取货口103，用户可以通过窗口102查看无人车1内部放置的商品，通过触摸屏101进行购买操作，支付完成后通过取货口103取走商品。

该无人车可以配备一个屏幕、两个喇叭，车身右侧的屏幕显示图像播放引导，车头和车尾对应设置的喇叭进行语音的播报；通过vci(vehiclecloudyinterface，车辆云端接口)系统控制tp(touchpanel，触控面板)在lcd上的显示，通过软件控制视频播放的方式来引导操作无人车提供的功能。具体通过云端根据不同的无人车产品业务功能下发不同的指令触发终端控制系统在通过软件程序控制屏幕输出播放不同的图像引导以及语音播报提示引导，真正实现无人化体验交互。

如图4所示，首先车辆启动，无人车通过车辆id和云端建立长连接通信，云端根据车辆id标识去数据库匹配(查询)对应的车辆类型，再下发给无人车，无人车接收到车辆类型指令(比如当前type指令为售货型无人车)，根据接收到当前车辆类型执行对应的图像播放和语音的播报业务功能。

当人接近无人车，通过红外和超声波雷达技术自动唤醒lcd屏幕和语音播报功能。用户通屏幕图像和语音播报引导流程，购物完成以后，提示用户“请从下方的取货口取走您的商品”。根据红外和超声波雷达技术，当用户离开时语音播报提示“欢迎下次惠顾”，并进行息屏关闭语音模组，减少电量的损耗。

本申请的方案通过lcd屏和语音的方式来帮助用户更方便地进行人机交互，从视觉和听觉的角度来完善人机交互效果，能够加强人车友好交互，增强无人车交互体验感。

图5是根据一示例性实施例示出的一种用于无人车的人机交互装置的电路框图。该装置包括：

加载模块，用于根据预设的车辆身份标识，加载与该无人车相匹配的用于引导操作流程的多媒体文件，所述多媒体文件包括第一多媒体文件和第二多媒体文件；

启动模块，用于在检测到人体接近信号时，将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放；

引导模块，用于在检测到交互界面输入的操作指令时，控制所述播放设备播报与该操作指令对应的第二多媒体文件。

关于上述实施例中的装置，其中各个模块执行操作的具体步骤已经在有关该方法的实施例中进行了详细描述，此处不再详细阐述说明。该交互装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

在一些实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：根据预设的车辆身份标识，加载与该无人车相匹配的用于引导操作流程的多媒体文件，所述多媒体文件包括第一多媒体文件和第二多媒体文件；在检测到人体接近信号时，将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放；在检测到交互界面输入的操作指令时，控制所述播放设备播报与该操作指令对应的第二多媒体文件。

在一些实施例中，提供一种无人车，包括：

车辆本体；

播放设备，用于播放引导操作流程的多媒体文件；

交互界面，用于输入操作指令；

控制器，设置在所述车辆本体内；

其中，所述播放设备和所述交互界面分别与所述控制器电连接，所述控制器用于执行以下步骤：根据预设的车辆身份标识，加载与该无人车相匹配的用于引导操作流程的多媒体文件，所述多媒体文件包括第一多媒体文件和第二多媒体文件；在检测到人体接近信号时，将所述第一多媒体文件发送到无人车搭载的播放设备上进行播放；在检测到交互界面输入的操作指令时，控制所述播放设备播报与该操作指令对应的第二多媒体文件。

可以理解的是，上述各实施例中相同或相似部分可以相互参考，在一些实施例中未详细说明的内容可以参见其他实施例中相同或相似的内容。

需要说明的是，在本申请的描述中，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本申请的描述中，除非另有说明，“多个”的含义是指至少两个。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。

应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(pga)，现场可编程门阵列(fpga)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。