基于外设手势智能识别的操作控制方法、装置与流程

本发明涉及智能终端，尤其涉及的是一种基于外设手势智能识别的操作控制方法、装置、智能外设及存储介质。

背景技术：

1、随着电子技术的发展和人们生活水平的不断提高，各种智能终端例如的智能电视的使用越来越普及，智能电视已经成为人们生活中不可缺少的娱乐工具。

2、现有技术的智能电视都是通过遥控器来操作控制的，由于家里一般有小孩老人，遥控器的摆放位置经常会被忘记，这个时候找遥控器操控电视就显得很麻烦吃力了，不方便用户操作使用。

3、因此，现有技术还有待改进和发展。

技术实现思路

1、本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种基于外设手势智能识别的操作控制方法、装置、智能外设及存储介质，本发明解决传统遥控器操控方式的痛点，通过连接带人工智能ai视觉点指识别技术的外设进行手势智能识别操作，就能轻松解决依赖遥控器才能操控电视的痛点难题。

2、本发明解决问题所采用的技术方案如下：

3、一种基于外设手势智能识别的操作控制方法，其中，包括：

4、获取用户的手势图像；

5、通过与智能电视连接的智能外设对获取的手势图像进行识别处理，识别出手势图像中的手势运动轨迹及手势形状；

6、根据所述智能外设识别出的手势运动轨迹及手势形状，将所述手势运动轨迹转换为对应的焦点移动指令；

7、根据所述智能外设识别出的手势形状，查找预先设置指令库中是否有与所述手势形状对应的操作执行指令，当有则输出与所述手势形状对应的操作执行指令；

8、将根据所述手势运动轨迹转换的焦点移动指令，以及与所述手势形状对应的操作执行指令转换为usb标准协议，发送给智能电视；控制智能电视执行与所述焦点移动指令对应的光标移动操作，以及执行与所述操作执行指令对应的操作响应。

9、所述的基于外设手势智能识别的操作控制方法，其中，所述获取用户的手势图像的步骤之前包括：

10、预先在指令库设置用于触发启动手势操作模式的第一指定手势图像，并设置该第一指定手势图像与智能电视触发进入手势操作模式的操作指令建立对应关系；

11、预先在指令库设置在手势操作模式下，与鼠标左按键指令对应的第二指定手势图像；

12、预先在指令库设置在手势操作模式下，与鼠标右按键指令对应的第三指定手势图像；

13、以及以预先在指令库设置在手势操作模式下，与鼠标中间滚轮按键指令对应的第四指定手势图像。

14、所述的基于外设手势智能识别的操作控制方法，其中，所述获取用户的手势图像的步骤包括：

15、通过设置在智能电视上的摄像头获取用户的手势图像；

16、或通过设置在智能外设上的摄像头获取用户的手势图像。

17、所述的基于外设手势智能识别的操作控制方法，其中，所述通过与智能电视连接的智能外设对获取的手势图像进行识别处理，识别出手势图像中的手势运动轨迹及手势形状的步骤包括：

18、通过与智能电视连接的智能外设对获取的手势图像进行识别处理；

19、通过分析连续的手势图像帧，检测手势的起点、终点以及中间的运动路径，识别手势的运动轨迹，以确定手势在空间中的移动路径，并提取出手势的运动轨迹；

20、通过分析手势图像中的轮廓、边缘特征，识别出手势的形状，确定手势所呈现的具体形态，并提取出手势形状。

21、所述的基于外设手势智能识别的操作控制方法，其中，所述根据所述智能外设识别出的手势运动轨迹及手势形状，将所述手势运动轨迹转换为对应的焦点移动指令的步骤包括：

22、根据预设的手势运动轨迹与焦点的对应关系，确定与当前手势运动轨迹对应的焦点在屏幕上的移动位置，其中，所述焦点指在屏幕上操作的光标或者选择框。

23、所述的基于外设手势智能识别的操作控制方法，其中，所述根据所述智能外设识别出的手势形状，查找预先设置指令库中是否有与所述手势形状对应的操作执行指令，当有则输出与所述手势形状对应的操作执行指令的步骤包括：

24、获取所述智能外设识别出的手势形状；

25、将识别出的手势形状，与预先设置的指令库中有对应操作指令的手势形状进行比较，查找预先设置指令库中是否有与所识别出的手势形状一致的手势形状；

26、当预先设置指令库中有与所识别出的手势形状一致的手势形状，则判定为预先设置的指令库中有与所述手势形状对应的操作执行指令，并输出与所述手势形状对应的操作执行指令。

27、所述的基于外设手势智能识别的操作控制方法，其中，所述将根据所述手势运动轨迹转换的焦点移动指令，以及与所述手势形状对应的操作执行指令转换为usb标准协议，发送给智能电视；控制智能电视执行与所述焦点移动指令对应的光标移动操作，以及执行与所述操作执行指令对应的操作响应的步骤包括：

28、将根据所述手势运动轨迹转换的焦点移动指令，以及与所述手势形状对应的操作执行指令，进行符合usb通信标准协议的编码和封装；

29、将进行过编码和封装的焦点移动指令以及操作执行指令、通过usb接口传输给智能电视；控制智能电视根据焦点移动指令中的信息，执行光标的移动操作，以及控制智能电视根据操作执行指令中的信息，执行相应的操作响应。

30、一种基于外设手势智能识别的操作控制装置，其中，所述装置包括：

31、手势图像获取模块，用于获取用户的手势图像；

32、外设识别处理模块，用于通过与智能电视连接的智能外设对获取的手势图像进行识别处理，识别出手势图像中的手势运动轨迹及手势形状；

33、外设转换模块，用于根据所述智能外设识别出的手势运动轨迹及手势形状，将所述手势运动轨迹转换为对应的焦点移动指令；

34、外设指令库对比模块，用于根据所述智能外设识别出的手势形状，查找预先设置指令库中是否有与所述手势形状对应的操作执行指令，当有则输出与所述手势形状对应的操作执行指令；

35、usb输出控制模块，用于将根据所述手势运动轨迹转换的焦点移动指令，以及与所述手势形状对应的操作执行指令转换为usb标准协议，发送给智能电视；控制智能电视执行与所述焦点移动指令对应的光标移动操作，以及执行与所述操作执行指令对应的操作响应。

36、一种智能外设，其中，包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于执行任意一项所述的方法。

37、一种非临时性计算机可读存储介质，其中，当所述存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行任意一项所述的方法。

38、本发明的有益效果：本发明提供的一种基于外设手势智能识别的操作控制方法及装置，本发明采用人工智能ai视觉点指识别技术，使用摄像头将用户的手势动作输入到外设智能设备，经过智能设备内部的识别和键值转换，最终通过usb线给电视主机发送操控键值，从而实现手势控制电视的目的，为用户的使用大大提供了方便。