一种人机交互方法、装置、设备及存储介质与流程

本申请涉及互联网，尤其涉及一种人机交互方法、装置、设备及存储介质。

背景技术：

1、人机交互是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。

2、然而，目前的人机交互方式有一定的局限性，不利于提高人机交互的效率。原因在于，目前的人机交互方式主要是通过触摸屏、键盘、鼠标、遥控器进行人机交互。对于触摸屏的人机交互，受触摸屏的超大尺寸限制，用户要触摸到触摸屏每个角落的过程繁琐，费时费力。对于键盘、鼠标、遥控器的人机交互，多个用户同时操作一个显示屏时，多个用户共用同一个键盘、鼠标、遥控器的过程繁琐，也是费时费力。因此，目前的人机交互方式的局限性很明显，不利于提高人机交互的效率。

技术实现思路

1、本申请实施例提供一种人机交互方法、装置、设备及存储介质，以解决上述目前的人机交互方式不利于提高人机交互的效率的技术问题。

2、第一方面，本申请实施例提供了一种人机交互方法，所述人机交互方法包括：

3、在鸿蒙系统中启动摄像头，通过所述摄像头捕捉用户图像，对所述用户图像进行动作识别，从所述用户图像中获取待识别动作；

4、在所述鸿蒙系统中调用预设的输入事件接口，通过所述输入事件接口将所述待识别动作传递给所述鸿蒙系统的输入子系统；

5、通过所述输入子系统判断所述待识别动作是否为预定义动作；

6、当所述输入子系统判断所述待识别动作为预定义动作时，在预先建立的所述预定义动作与应用功能的对应关系中，调取所述预定义动作对应的所述应用功能；

7、将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能；

8、通过所述输入子系统将所述目标应用功能传递给所述鸿蒙系统的开发框架，在所述鸿蒙系统的开发框架中运行所述目标应用功能。

9、作为一个可选的实施方式，所述当所述输入子系统判断所述待识别动作为预定义动作时，在预先建立的所述预定义动作与应用功能的对应关系中，调取所述预定义动作对应的所述应用功能，具体为：

10、当所述输入子系统判断所述待识别动作为预定义动作时，生成调取事件；

11、通过所述调取事件在预先建立的所述预定义动作与应用功能的对应关系中，调取所述预定义动作对应的所述应用功能。

12、作为一个可选的实施方式，所述预定义动作包括包括手臂从上向下挥动、手臂从下向上挥动、手臂从左向右挥动、手臂从右向左挥动、双臂合拢、双臂分开中的任意一种。

13、作为一个可选的实施方式，所述将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能，具体为：

14、将所述手臂从上向下挥动对应的页面从上向下滑动功能设置为所述待识别动作对应的目标应用功能；

15、将所述手臂从下向上挥动对应的页面从下向上滑动功能设置为所述待识别动作对应的目标应用功能；

16、将所述手臂从左向右挥动对应的页面从左向右滑动功能设置为所述待识别动作对应的目标应用功能；

17、将所述手臂从右向左挥动对应的页面从右向左滑动功能设置为所述待识别动作对应的目标应用功能；

18、将所述双臂合拢对应的页面缩放功能设置为所述待识别动作对应的目标应用功能；

19、将所述双臂分开对应的页面放大功能设置为所述待识别动作对应的目标应用功能。

20、作为一个可选的实施方式，所述预定义动作包括用于表示数字的手势动作、ok手势动作中的任意一种；

21、所述将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能，具体为：

22、将所述数字手势动作对应的数字输入功能设置为所述待识别动作对应的目标应用功能；

23、将所述ok手势动作对应的确认按键功能设置为所述待识别动作对应的目标应用功能。

24、作为一个可选的实施方式，所述预定义动作包括闭眼动作、张嘴动作、摇头动作、点头动作中的任意一种。

25、作为一个可选的实施方式，所述将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能，具体为：

26、将所述闭眼动作对应的关闭功能设置为所述待识别动作对应的目标应用功能；

27、将所述张嘴动作对应的返回功能设置为所述待识别动作对应的目标应用功能；

28、将所述摇头动作对应的取消操作功能设置为所述待识别动作对应的目标应用功能；

29、将所述摇头动作对应的确认操作功能设置为所述待识别动作对应的目标应用功能。

30、第二方面，本申请实施例还提供了一种人机交互装置，所述人机交互装置包括处理器和存储器，所述存储器中存储有计算机程序，所述处理器调用所述存储器中的计算机程序时执行上述的人机交互方法。

31、第三方面，本申请实施例还提供了一种设备，所述设备包括如上述的人机交互装置。

32、第四方面，本申请实施例还提供了一种存储介质，所述存储介质用于存储计算机程序，所述计算机程序被处理器执行时使所述处理器实现上述的人机交互方法。

33、本申请实施例提供了一种人机交互方法、装置、设备及存储介质，方法包括：在鸿蒙系统中启动摄像头，通过所述摄像头捕捉用户图像，对所述用户图像进行动作识别，从所述用户图像中获取待识别动作；在所述鸿蒙系统中调用预设的输入事件接口，通过所述输入事件接口将所述待识别动作传递给所述鸿蒙系统的输入子系统；通过所述输入子系统判断所述待识别动作是否为预定义动作；当所述输入子系统判断所述待识别动作为预定义动作时，在预先建立的所述预定义动作与应用功能的对应关系中，调取所述预定义动作对应的所述应用功能；将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能；通过所述输入子系统将所述目标应用功能传递给所述鸿蒙系统的开发框架，在所述鸿蒙系统的开发框架中运行所述目标应用功能。

34、本申请实施例有益效果在于两方面，一方面，当待识别动作识别为预定义动作时，通过输入子系统在预先建立的预定义动作与应用功能的对应关系中，调取预定义动作对应的应用功能，在鸿蒙系统的开发框架中运行目标应用功能，由于全程不需要触摸显示屏或者使用鼠标，键盘，遥控器来控制设备，有利于提高人机交互的效率；另一方面，本方案可以通过摄像头捕捉到多人不同的动作，可以让多个人同时协同处理某个工作，因此有利于进一步提高人机交互的效率。

技术特征：

1.一种人机交互方法，其特征在于，所述人机交互方法包括：

2.根据权利要求1所述的方法，其特征在于，所述当所述输入子系统判断所述待识别动作为预定义动作时，在预先建立的所述预定义动作与应用功能的对应关系中，调取所述预定义动作对应的所述应用功能，具体为：

3.根据权利要求1所述的方法，其特征在于，所述预定义动作包括包括手臂从上向下挥动、手臂从下向上挥动、手臂从左向右挥动、手臂从右向左挥动、双臂合拢、双臂分开中的任意一种。

4.根据权利要求3所述的方法，其特征在于，所述将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能，具体为：

5.根据权利要求1所述的方法，其特征在于，所述预定义动作包括用于表示数字的手势动作、ok手势动作中的任意一种；

6.根据权利要求1所述的方法，其特征在于，所述预定义动作包括闭眼动作、张嘴动作、摇头动作、点头动作中的任意一种。

7.根据权利要求6所述的方法，其特征在于，所述将所述预定义动作对应的所述应用功能设置为所述待识别动作对应的目标应用功能，具体为：

8.一种人机交互装置，其特征在于，所述人机交互装置包括处理器、存储器，所述存储器存储有可被所述处理器执行的计算机程序，所述计算机程序被所述处理器执行时，实现如权利要求1至7中任一项所述的人机交互方法。

9.一种设备，其特征在于，所述设备包括如权利要求8所述的人机交互装置。

10.一种存储介质，用于计算机可读存储，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现权利要求1至7中任一项所述的人机交互方法的步骤。

技术总结
本申请公开了一种人机交互方法、装置、设备及存储介质，该方法包括：在鸿蒙系统中启动摄像头，通过摄像头捕捉用户图像，对用户图像进行动作识别，从用户图像中获取待识别动作；调用预设的输入事件接口，通过输入事件接口将待识别动作传递给鸿蒙系统的输入子系统；通过输入子系统判断待识别动作是否为预定义动作；当输入子系统判断待识别动作为预定义动作时，在预先建立的预定义动作与应用功能的对应关系中，调取预定义动作对应的应用功能；将预定义动作对应的应用功能设置为待识别动作对应的目标应用功能；通过输入子系统将目标应用功能传递给鸿蒙系统的开发框架，在鸿蒙系统的开发框架中运行目标应用功能。本申请有利于提高人机交互的效率。

技术研发人员：孙仲毅
受保护的技术使用者：深圳开鸿数字产业发展有限公司
技术研发日：
技术公布日：2024/1/13