一种控制方法、装置、设备和介质与流程

1.本技术涉及指向性控制技术领域，尤其涉及一种控制方法、装置、设备和介质。


背景技术：

2.在现有的智能电视和智能穿衣镜等待被控显示设备的空中鼠标进行控制时，主要是基于内部的陀螺仪确定空中鼠标指向的目标控制位置，根据目标控制位置对待被控显示设备进行控制。
3.但由于基于陀螺仪确定目标控制位置时，只有在陀螺仪的角度发生变化时，其指向的位置和待被控显示设备上的目标控制位置才会同步发生变化，空中鼠标单纯地平行移动时，陀螺仪无法识别出平行移动，因此导致其指向的位置发生了变化，但待被控显示设备上的目标控制位置没有发生变化，因此现有技术中的空中鼠标的实用性较差。


技术实现要素：

4.本技术提供了一种控制方法、装置、设备和介质，用以解决现有技术中的空中鼠标的实用性较差的问题。
5.第一方面，本技术提供了一种控制方法，所述方法包括：
6.获取待被控显示设备的屏幕图像和采集的第一图像；
7.确定所述第一图像中与所述屏幕图像相似的区域图像；
8.根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制。
9.进一步地，所述获取待被控显示设备的屏幕图像和采集的第一图像之前，所述方法还包括：
10.根据预先保存的所述待被控显示设备的对角线长度、所述空中鼠标自身的最小视场角以及最小控制距离确定函数关系，确定所述空中鼠标距离所述待被控显示设备的最小控制距离；
11.确定从所述待被控显示设备向所述空中鼠标自身的第一方向与所述待被控显示设备的距离为所述最小控制距离的平面，确定以所述待被控显示设备的第一中心点在所述平面上的投影为中心，基于预设的第一形状及第一大小确定角点；
12.确定以所述待被控显示设备的第一中心点为顶点，以所述角点为圆锥的曲面上点的圆锥状的目标区域；
13.确定所述圆锥状的目标区域内、距所述待控制显示设备的距离大于所述最小控制距离，距所述第一中心点的距离小于预设最大控制距离的范围内的控制区域；
14.判断所述空中鼠标是否位于所述控制区域内，若是，则进行后续的获取待被控显示设备的屏幕图像和采集的第一图像的步骤。
15.进一步地，所述最小距离确定函数关系为h＝(a/2)/tan(β/4)，其中h表示所述空中鼠标自身距离所述待被控显示设备的最小控制距离，a表示所述待被控显示设备的对角
线长度，β表示所述空中鼠标自身的最小视场角。
16.进一步地，所述方法还包括：
17.若所述空中鼠标不位于所述控制区域，输出将所述空中鼠标移动到所述控制区域的提示信息。
18.第二方面，本技术提供了一种控制装置，所述装置包括：
19.获取模块，用于获取待被控显示设备的屏幕图像和采集的第一图像；
20.确定模块，用于确定所述第一图像中与所述屏幕图像相似的区域图像；
21.控制模块，用于根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制。
22.进一步地，所述确定模块，还用于根据预先保存的所述待被控显示设备的对角线长度、所述空中鼠标自身的最小视场角以及最小控制距离确定函数关系，确定所述空中鼠标距离所述待被控显示设备的最小控制距离；确定从所述待被控显示设备向所述空中鼠标自身的第一方向与所述待被控显示设备的距离为所述最小控制距离的平面，确定以所述待被控显示设备的第一中心点在所述平面上的投影为中心，基于预设的第一形状及第一大小确定角点；确定以所述待被控显示设备的第一中心点为顶点，以所述角点为圆锥的曲面上点的圆锥状的目标区域；确定所述圆锥状的目标区域内、距所述待控制显示设备的距离大于所述最小控制距离，距所述第一中心点的距离小于预设最大控制距离的范围内的控制区域；
23.所述装置还包括：
24.判断模块，用于判断所述空中鼠标是否位于所述控制区域内，若是，则触发所述获取模块获取待被控显示设备的屏幕图像和采集的第一图像。
25.进一步地，所述判断模块，还用于若所述空中鼠标不位于所述控制区域，输出将所述空中鼠标移动到所述控制区域的提示信息。
26.第三方面，本技术提供了一种电子设备，包括：处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
27.所述存储器中存储有计算机程序，当所述程序被所述处理器执行时，使得所述处理器执行时实现上述控制方法中任一所述方法的步骤。
28.第四方面，本技术提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现上述控制方法中任一所述方法的步骤。
29.本技术提供了一种控制方法、装置、设备和介质，由于该方法中获取待被控显示设备的屏幕图像和采集的第一图像；确定所述第一图像中与所述屏幕图像相似的区域图像；根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制，从而确保了空中鼠标指向的位置即为待被控显示设备上的目标控制位置，提高了空中鼠标的实用性。
附图说明
30.为了更清楚地说明本技术中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本技术的一些实施例，对于本领域的
普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
31.图1为本技术提供的一种控制方法的过程示意图；
32.图2为本技术提供的一种空中鼠标的示意图；
33.图3为本技术提供的一种确定中心点位置在区域图像中的目标控制位置的示意图；
34.图4为本技术提供的一种确定最小距离确定函数关系的示意图；
35.图5为本技术提供的另一种确定最小距离确定函数关系的示意图；
36.图6为本技术提供的一种控制区域的示意图；
37.图7为本技术提供的一种目标区域中距坐标原点的距离为最小控制距离的示意图；
38.图8为本技术提供的一种控制装置的结构示意图；
39.图9为本技术提供的一种电子设备的结构示意图。
具体实施方式
40.为了使本技术的目的、技术方案和优点更加清楚，下面将结合附图对本技术作进一步地详细描述，显然，所描述的实施例仅仅是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本技术保护的范围。
41.为了提高空中鼠标控制待被控显示设备的实用性，本技术提供了一种控制方法、装置、设备和介质。
42.图1为本技术提供的一种控制方法的过程示意图，该过程包括以下步骤：
43.s101：获取待被控显示设备的屏幕图像和采集的第一图像。
44.本技术提供的一种控制方法应用于空中鼠标，其中空中鼠标是指一种可以在三维空间中控制待被控显示设备的控制器，为了实现空中鼠标对待被控显示设备的指向性控制，即空中鼠标指向的待被控显示设备的位置为目标控制位置，本技术中的空中鼠标包括有图像采集单元。
45.图2为本技术提供的一种空中鼠标的示意图，如图2所示，该空中鼠标的最上(图中的上下)端为鱼眼摄像头，该鱼眼摄像头即为空中鼠标的图像采集单元；该空中鼠标的中(图中的上中下)端为控制区域，该控制区域可以是键盘控制区域，也可以是触摸板控制区域。
46.为了提高空中鼠标指向性控制待被控显示设备的实用性，在本技术中，获取图像采集单元采集的第一图像，该第一图像中的图像中心即为空中鼠标指向的目标位置，该第一图像中包括待被控显示设备的图像，该待被控显示设备的图像可能位于第一图像的图像任意位置，例如图像中心、图像任一侧等位置。
47.该空中鼠标还获取待被控显示设备的屏幕图像，其中该空中鼠标与待被控显示设备存在通信连接，从而在第一图像的采集时刻获取到待被控显示设备的屏幕图像。其中该通信连接可以是无线连接、也可以是有线连接。其中该待被控显示设备可以是智能电视、智能穿衣镜等设备。
48.s102：确定所述第一图像中与所述屏幕图像相似的区域图像。
49.在获取到第一图像和待被控显示设备的屏幕图像后，根据待被控显示设备的屏幕图像，进行图像识别确定出第一图像中与屏幕图像的相似度值最高的区域图像。
50.具体的，根据预先确定的图像采集单元采集的图像中物体大小与实际物体大小的比例，将屏幕图像按照该比例进行缩小，将缩小后的屏幕图像与第一图像中相同大小的区域图像逐像素点比较确定像素值差值的和值，将缩小后的屏幕图像依次滑过第一图像，直到确定出像素值差值的和值最小时的目标区域图像，该目标区域图像即为与屏幕图像相似的区域图像。
51.s103：根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制。
52.根据第一图像的中心点位置和与屏幕图像相似的区域图像，确定该中心点位置在区域图像中的目标控制位置，若该第一图像中像素点的行数有2m行，列数有2m列，则第一图像的中心点位置为第m行第m列，该中心点位置在区域图像中所处的目标控制位置可以是区域图像中的任意位置。
53.图3为本技术提供的一种确定中心点位置在区域图像中的目标控制位置的示意图，如图3所示，外部的框图表示第一图像，内部的框图表示与屏幕图像相似的区域图像，该与屏幕图像相似的区域图像位于第一图像中的中间偏右(图3中的左右)一侧，因此图3中的第一图像的中心点位置位于区域图像中的左下(图3中的左右上下)角区域。
54.根据中心点位置在区域图像中的目标控制位置，即相当于空中鼠标自身在屏幕图像中指向的目标控制位置，基于该目标控制位置对待被控显示设备进行控制。其中基于屏幕图像的目标控制位置对待被控显示设备进行控制的方法属于现有技术，本技术对此不做赘述。
55.为了提高空中鼠标控制待被控显示设备的实用性，在上述实施例的基础上，在本技术中，所述获取待被控显示设备的屏幕图像和采集的第一图像之前，所述方法还包括：
56.根据预先保存的所述待被控显示设备的对角线长度、所述空中鼠标自身的最小视场角以及最小控制距离确定函数关系，确定所述空中鼠标距离所述待被控显示设备的最小控制距离；
57.确定从所述待被控显示设备向所述空中鼠标自身的第一方向与所述待被控显示设备的距离为所述最小控制距离的平面，确定以所述待被控显示设备的第一中心点在所述平面上的投影为中心，基于预设的第一形状及第一大小确定角点；
58.确定以所述待被控显示设备的第一中心点为顶点，以所述角点为圆锥的曲面上点的圆锥状的目标区域；
59.确定所述圆锥状的目标区域内、距所述待控制显示设备的距离大于所述最小控制距离，距所述第一中心点的距离小于预设最大控制距离的范围内的控制区域；
60.判断所述空中鼠标是否位于所述控制区域内，若是，则进行后续的获取待被控显示设备的屏幕图像和采集的第一图像的步骤。
61.为了实现对待被控显示设备的控制，空中鼠标自身采集的第一图像中要完全包括待显示设备的屏幕图像，由于空中鼠标距离待被控显示设备越近时，该第一图像中只包括
屏幕图像的部分图像，因此，该空中鼠标首先确定出第一图像包含全部的屏幕图像的最小控制距离。
62.为了确定最小控制距离，本技术预先保存有最小控制距离确定函数关系，根据预先确定的待被控显示设备的对角线长度、空中鼠标自身的最小视场角以及该最小控制距离确定函数关系，确定空中鼠标距离待被控显示设备的最小控制距离。
63.具体的，为了确定出空中鼠标控制待被控显示设备的最小控制距离，在本技术中，所述最小距离确定函数关系为h＝(a/2)/tan(β/4)，其中h表示所述空中鼠标自身距离所述待被控显示设备的最小控制距离，a表示所述待被控显示设备的对角线长度，β表示所述空中鼠标自身的最小视场角。
64.图4为本技术提供的一种确定最小距离确定函数关系的示意图，如图4所示，图4中的方向为从空中鼠标向待被控显示设备的主视方向，在主视图中空中鼠标位于待被控显示设备的中心，该待被控显示设备的对角线长度为a。
65.图5为本技术提供的另一种确定最小距离确定函数关系的示意图，图5所示，图5中的方向为俯视方向，在俯视图中空中鼠标的最小视场角为β，该最小视场角表示空中鼠标的图像采集单元的短边视场角(field of view，fov)，该最小视场角的一半视场角可以采集到待被控显示设备的全部图像，即图像采集单元采集的图像的中心点为待被控显示设备的一角点时，待被控显示设备的对角线上另一角点位于图像采集单元采集的图像的一角点上。图5中的h表示空中鼠标的图像采集单元距待被控显示设备的距离，待被控显示设备的对角线mn的长度为a。
66.基于图4的主视图中空中鼠标位于待被控显示设备的中心，因此可知，对角线mn的中垂线经过空中鼠标所在的o点，该中垂线将该最小视场角的一半视场角β/2划分为两个β/4，因此确定最小距离确定函数关系为h＝(a/2)/tan(β/4)。举例来说，该最小视场角β为180度时，h为a的一半，在本技术中，为了更好的计算效果，该最小视场角β可以是h为a的60％-70％时的角度值。
67.在确定出空中鼠标距待被控显示设备的最小控制距离后，根据待被控显示设备向空中鼠标的第一方向，确定从第一方向与待被控显示设备的距离为最小控制距离的平面。在该平面上确定出待被控显示设备的投影，并确定出投影中待被控显示设备的第一中心点，以该第一中心点为中心，基于预设的第一形状和第一大小确定出角点。其中该第一形状和第一大小是预设的，较佳的，该第一形状与待被控显示设备的形状相同，该第一大小与待被控显示设备的大小相同。
68.根据待被控显示设备的第一中心点以及平面中确定的角点，以第一中心点为顶点，以角点为圆锥曲面上的点，从而确定出圆锥状的目标区域。在该圆锥状的目标区域中，确定出距待被控显示设备的距离大于最小控制距离，距待被控显示设备的第一中心点的距离小于预设最大控制距离的范围内的控制区域。
69.图6为本技术提供的一种控制区域的示意图，如图6所示，该图6为俯视图，该图6中的深色区域标识为控制区域，该控制区域中距离待被控显示设备的最小距离为最小控制距离h，该控制区域中距离待被控显示设备的最大距离为预设最大控制距离。
70.该空中鼠标根据自身的位置，判断自身是否位于控制区域内，若确定自身位于控制区域内，则进行后续的获取待被控显示设备的屏幕图像和采集的第一图像的步骤。
71.下面通过一个具体的实施例对本技术的确定控制区域的方案进行说明，在本技术中，首先以待被控显示设备的第一中心点为原点，以待被控显示设备的宽度方向为x轴方向，高度方向为y轴方向，从第一中心点向空中鼠标自身的方向为z轴正方向建立空间坐标系。例如以图6中从左(图6中的左右)向右(图6中的左右)的方向为x轴正方向，以图6中的俯视方向为y轴负方向，以图6在从上(图6中的上下)向下(图6中的上下)的方向为z轴正方向。
72.在该空间坐标系中，确定在z轴正方向上距坐标原点的距离为最小控制距离的平面，以待被控显示设备的第一中心点在平面上的投影为中心，根据待被控显示设备的第一形状和第一大小，确定出角点的空间坐标。
73.根据角点的空间坐标、以及圆锥面的方程式x2/a+y2/b＝z2/c(z＞0)，确定出第一中心点为顶点，以角点为圆锥的曲线上点的圆锥状的目标区域。图7为本技术提供的一种目标区域中距坐标原点的距离为最小控制距离的示意图，如图7所示，角点包括a、b、c、d，a的空间坐标为(-待被控显示设备宽度/2，待被控显示设备高度/2，h)，b的空间坐标为(待被控显示设备宽度/2，待被控显示设备高度/2，h)，c的空间坐标为(待被控显示设备宽度/2，-待被控显示设备高度/2，h)，d的空间坐标为(-待被控显示设备宽度/2，-待被控显示设备高度/2，h)。
74.空中鼠标通过无线载波通信技术(ultra wide band，uwb)获取到自身在空间坐标系的空间坐标(x1，y1，z1)后，若z1大于最小控制距离h且小于预设最大控制距离，则将x1和z1代入圆锥公式确定出y值，将y1和z1代入圆锥公式确定出x值，若x1的绝对值小于x的绝对值，且y1的绝对值小于y的绝对值时，确定空中鼠标位于控制区域内。
75.为了提高空中鼠标控制待被控显示设备的实用性，在上述各实施例的基础上，在本技术中，所述方法还包括：
76.若所述空中鼠标不位于所述控制区域，输出将所述空中鼠标移动到所述控制区域的提示信息。
77.若确定空中鼠标不位于控制区域时，为了实现空中鼠标控制待被控显示设备，本技术中还可以输出提示信息，用于提示用户将空中鼠标移动到控制区域内。具体的，可以是根据空中鼠标相对于控制区域的位置，输出空中鼠标向控制区域的方向移动的提示信息。
78.下面仍以上述实施例中的空间坐标系为例，空中鼠标通过uwb获取到自身在空间坐标系的空间坐标(x1，y1，z1)后，若z1不大于最小控制距离h，则输出空中鼠标沿z轴正方向移动到控制区域的提示信息；若z1不小于预设最大控制距离，则输出空中鼠标沿z轴负方向移动到控制区域的提示信息。
79.若z1大于最小控制距离h且小于预设最大控制距离，则将x1和z1代入圆锥公式确定出y值，若y1为负且小于y值，输出空中鼠标向y轴正方向移动的提示信息，若y1为正且大于y值，输出空中鼠标向y轴负方向移动的提示信息。
80.若z1大于最小控制距离h且小于预设最大控制距离，则将y1和z1代入圆锥公式确定出x值，若x1为负且小于x值，输出空中鼠标向x轴正方向移动的提示信息，若x1为正且大于x值，输出空中鼠标向x轴负方向移动的提示信息。
81.图8为本技术提供的一种控制装置的结构示意图，在上述各实施例的基础上，本技术还提供一种控制装置，所述装置包括：
82.获取模块801，用于获取待被控显示设备的屏幕图像和采集的第一图像；
83.确定模块802，用于确定所述第一图像中与所述屏幕图像相似的区域图像；
84.控制模块803，用于根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制。
85.进一步地，所述确定模块，还用于根据预先保存的所述待被控显示设备的对角线长度、所述空中鼠标自身的最小视场角以及最小控制距离确定函数关系，确定所述空中鼠标距离所述待被控显示设备的最小控制距离；确定从所述待被控显示设备向所述空中鼠标自身的第一方向与所述待被控显示设备的距离为所述最小控制距离的平面，确定以所述待被控显示设备的第一中心点在所述平面上的投影为中心，基于预设的第一形状及第一大小确定角点；确定以所述待被控显示设备的第一中心点为顶点，以所述角点为圆锥的曲面上点的圆锥状的目标区域；确定所述圆锥状的目标区域内、距所述待控制显示设备的距离大于所述最小控制距离，距所述第一中心点的距离小于预设最大控制距离的范围内的控制区域；
86.所述装置还包括：
87.判断模块，用于判断所述空中鼠标是否位于所述控制区域内，若是，则触发所述获取模块获取待被控显示设备的屏幕图像和采集的第一图像。
88.进一步地，所述判断模块，还用于若所述空中鼠标不位于所述控制区域，输出将所述空中鼠标移动到所述控制区域的提示信息。
89.图9为本技术提供的一种电子设备的结构示意图，在上述各实施例的基础上，本技术中还提供了一种电子设备，包括处理器901、通信接口902、存储器903和通信总线904，其中，处理器901，通信接口902，存储器903通过通信总线904完成相互间的通信；
90.所述存储器903中存储有计算机程序，当所述程序被所述处理器901执行时，使得所述处理器901执行如下步骤：
91.获取待被控显示设备的屏幕图像和采集的第一图像；
92.确定所述第一图像中与所述屏幕图像相似的区域图像；
93.根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制。
94.进一步地，所述处理器901还用于所述获取待被控显示设备的屏幕图像和采集的第一图像之前，根据预先保存的所述待被控显示设备的对角线长度、所述空中鼠标自身的最小视场角以及最小控制距离确定函数关系，确定所述空中鼠标距离所述待被控显示设备的最小控制距离；确定从所述待被控显示设备向所述空中鼠标自身的第一方向与所述待被控显示设备的距离为所述最小控制距离的平面，确定以所述待被控显示设备的第一中心点在所述平面上的投影为中心，基于预设的第一形状及第一大小确定角点；确定以所述待被控显示设备的第一中心点为顶点，以所述角点为圆锥的曲面上点的圆锥状的目标区域；确定所述圆锥状的目标区域内、距所述待控制显示设备的距离大于所述最小控制距离，距所述第一中心点的距离小于预设最大控制距离的范围内的控制区域；判断所述空中鼠标是否位于所述控制区域内，若是，则进行后续的获取待被控显示设备的屏幕图像和采集的第一图像的步骤。
95.进一步地，所述处理器901具体用于所述最小距离确定函数关系为h＝(a/2)/tan
(β/4)，其中h表示所述空中鼠标自身距离所述待被控显示设备的最小控制距离，a表示所述待被控显示设备的对角线长度，β表示所述空中鼠标自身的最小视场角。
96.进一步地，所述处理器901还用于若所述空中鼠标不位于所述控制区域，输出将所述空中鼠标移动到所述控制区域的提示信息。
97.上述电子设备提到的通信总线可以是外设部件互连标准(peripheral component interconnect，pci)总线或扩展工业标准结构(extended industry standard architecture，eisa)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
98.通信接口902用于上述电子设备与其他设备之间的通信。
99.存储器可以包括随机存取存储器(random access memory，ram)，也可以包括非易失性存储器(non-volatile memory，nvm)，例如至少一个磁盘存储器。可选地，存储器还可以是至少一个位于远离前述处理器的存储装置。
100.上述处理器可以是通用处理器，包括中央处理器、网络处理器(network processor，np)等；还可以是数字指令处理器(digital signal processing，dsp)、专用集成电路、现场可编程门陈列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
101.在上述各实施例的基础上，本技术还提供了一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行如下步骤：
102.获取待被控显示设备的屏幕图像和采集的第一图像；
103.确定所述第一图像中与所述屏幕图像相似的区域图像；
104.根据所述第一图像的中心点位置和所述区域图像，确定所述中心点位置在所述区域图像中的目标控制位置，基于所述目标控制位置对所述待被控显示设备进行控制。
105.进一步地，所述获取待被控显示设备的屏幕图像和采集的第一图像之前，所述方法还包括：
106.根据预先保存的所述待被控显示设备的对角线长度、所述空中鼠标自身的最小视场角以及最小控制距离确定函数关系，确定所述空中鼠标距离所述待被控显示设备的最小控制距离；
107.确定从所述待被控显示设备向所述空中鼠标自身的第一方向与所述待被控显示设备的距离为所述最小控制距离的平面，确定以所述待被控显示设备的第一中心点在所述平面上的投影为中心，基于预设的第一形状及第一大小确定角点；
108.确定以所述待被控显示设备的第一中心点为顶点，以所述角点为圆锥的曲面上点的圆锥状的目标区域；
109.确定所述圆锥状的目标区域内、距所述待控制显示设备的距离大于所述最小控制距离，距所述第一中心点的距离小于预设最大控制距离的范围内的控制区域；
110.判断所述空中鼠标是否位于所述控制区域内，若是，则进行后续的获取待被控显示设备的屏幕图像和采集的第一图像的步骤。
111.进一步地，所述最小距离确定函数关系为h＝(a/2)/tan(β/4)，其中h表示所述空中鼠标自身距离所述待被控显示设备的最小控制距离，a表示所述待被控显示设备的对角线长度，β表示所述空中鼠标自身的最小视场角。
112.进一步地，所述方法还包括：
113.若所述空中鼠标不位于所述控制区域，输出将所述空中鼠标移动到所述控制区域的提示信息。
114.本领域内的技术人员应明白，本技术的实施例可提供为方法、系统、或计算机程序产品。因此，本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。
115.本技术是参照根据本技术的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
116.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
117.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
118.显然，本领域的技术人员可以对本技术进行各种改动和变型而不脱离本技术的精神和范围。这样，倘若本技术的这些修改和变型属于本技术权利要求及其等同技术的范围之内，则本技术也意图包含这些改动和变型在内。