无接触的屏幕控制方法、装置、电子设备及可读存储介质与流程

1.本技术属于终端技术领域，尤其涉及无接触的屏幕控制方法、装置、电子设备及计算机可读存储介质。


背景技术：

2.目前，带有触摸屏的电子设备在机场、商场、银行和医院等公共场所普遍存在，这些电子设备的出现使得业务办理的时间大大缩短，极大地方便了人们的日常生活。但使用时，这些电子设备都需要用户触摸屏幕，而在使用之后往往不能对屏幕立即消毒，使得其他人再次使用时会存在一定的安全隐患。


技术实现要素：

3.本技术实施例提供了一种无接触的屏幕控制方法、电子设备及计算机可读存储介质，可以解决现有的电子设备需要用户触摸屏幕来进行使用，存在安全隐患的问题。
4.第一方面，本技术实施例提供了一种无接触的屏幕控制方法，可以包括：
5.获取手部图像；
6.根据所述手部图像确定目标关键点与屏幕之间的距离，所述目标关键点为手部的至少一个关键点；
7.当所述距离位于预设距离区间时，确定所述目标关键点在所述屏幕中对应的第一位置，并在所述第一位置显示操作光标；
8.响应于所述操作光标对应的控制操作，控制所述屏幕。
9.通过上述的屏幕控制方法，当用户想要控制屏幕时，用户可以对屏幕执行隔空手势，电子设备可以获取手部图像，并根据手部图像确定目标关键点与屏幕之间的距离，目标关键点为手部的至少一个关键点。当距离位于预设距离区间时，电子设备确定用户想要控制屏幕，此时电子设备可以确定目标关键点在屏幕中对应的第一位置，并在该位置显示操作光标，以使得用户可以对操作光标进行操作来控制屏幕。即本技术实施例中，电子设备可以根据用户的隔空手势来对屏幕进行控制，不需要用户触摸屏幕，可以降低病毒等的传播风险，提高操作安全性。另外，可以事先设定一个指令触发的预设距离区间，当目标关键点与屏幕之间的距离位于该预设距离区间时，电子设备可以认为检测到指令触发条件，即认为检测到开始控制屏幕的指令，此时，电子设备可以根据用户的隔空手势来对屏幕进行控制，提高屏幕控制的准确性，提升用户体验，具有较强的易用性和实用性。
10.示例性的，所述手部图像为双目相机采集的深度图像，所述根据所述手部图像确定目标关键点与屏幕之间的距离，可以包括：
11.根据所述手部图像确定所述目标关键点对应的深度，并根据所述深度确定所述目标关键点与所述屏幕之间的距离。
12.在一种可能的实现方式中，在所述获取手部图像之前，所述方法还可以包括：
13.获取所述屏幕的分辨率；
14.根据所述屏幕的分辨率调整所述双目相机的分辨率，使得所述屏幕的分辨率与所述双目相机的分辨率相同。
15.在一个示例中，所述响应于所述操作光标对应的控制操作，控制所述屏幕，可以包括：
16.获取所述操作光标对应的第三位置；
17.当所述第三位置为控制操作对应的位置时，根据所述控制操作控制所述屏幕。
18.在一个示例中，所述响应于所述操作光标对应的控制操作，控制所述屏幕，可以包括：
19.获取所述操作光标对应的移动轨迹；
20.根据所述操作光标对应的移动轨迹，确定所述操作光标对应的移动方向；
21.根据所述操作光标对应的移动方向确定所述屏幕对应的控制操作，并根据所述控制操作控制所述屏幕。
22.在一个示例中，所述目标关键点包括第一目标关键点和第二目标关键点，所述操作光标包括所述第一目标关键点对应的第一操作光标和所述第二目标关键点第二操作光标，所述响应于所述操作光标对应的控制操作，控制所述屏幕，可以包括：
23.获取所述第一操作光标对应的第一移动轨迹和所述第二操作光标对应的第二移动轨迹；
24.根据所述第一移动轨迹和所述第二移动轨迹，确定所述第一目标关键点和所述第二目标关键之间的位置变化；
25.根据所述位置变化，确定所述屏幕对应的控制操作，并根据所述控制操作控制所述屏幕。
26.在一种可能的实现方式中，所述确定所述目标关键点在所述屏幕中对应的第一位置，可以包括：
27.获取所述目标关键点在所述手部图像中的第二位置；
28.根据所述目标关键点在所述手部图像中的第二位置和预设对应关系，确定所述目标关键点在所述屏幕中对应的第一位置，所述预设对应关系为所述手部图像中的像素点与所述屏幕中的像素点之间的对应关系。
29.第二方面，本技术实施例提供了一种无接触的屏幕控制装置，可以包括：
30.图像获取模块，用于获取手部图像；
31.距离确定模块，用于根据所述手部图像确定目标关键点与屏幕之间的距离，所述目标关键点为手部的至少一个关键点；
32.光标显示模块，用于当所述距离位于预设距离区间时，确定所述目标关键点在所述屏幕中对应的第一位置，并在所述第一位置显示操作光标；
33.屏幕控制模块，用于响应于所述操作光标对应的控制操作，控制所述屏幕。
34.第三方面，本技术实施例提供了一种电子设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时，使所述电子设备实现上述第一方面中任一项所述的无接触的屏幕控制方法。
35.第四方面，本技术实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被计算机执行时，使所述计算机实现上述第一方
面中任一项所述的无接触的屏幕控制方法。
36.第五方面，本技术实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备执行上述第一方面中任一项所述的无接触的屏幕控制方法。
37.可以理解的是，上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。
附图说明
38.图1是本技术实施例提供的无接触的屏幕控制方法所适用于的系统示意图；
39.图2是本技术实施例提供的无接触的屏幕控制方法的流程示意图；
40.图3是本技术实施例提供的手部关键点的示例图；
41.图4是本技术实施例提供的应用场景示意图一；
42.图5是本技术实施例提供的应用场景示意图二；
43.图6是本技术实施例提供的无接触的屏幕控制装置的结构示意图；
44.图7是本技术实施例提供的电子设备的结构示意图。
具体实施方式
45.应当理解，当在本技术说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
46.还应当理解，在本技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
47.如在本技术说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
[0048]
另外，在本技术说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
[0049]
在本技术说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本技术的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
[0050]
此外，本技术实施例中提到的“多个”应当被解释为两个或两个以上。
[0051]
本技术实施例中提供的无接触的屏幕控制方法中所涉及到的步骤仅仅作为示例，并非所有的步骤均是必须执行的步骤，或者并非各个信息或消息中的内容均是必选的，在使用过程中可以根据需要酌情增加或减少。本技术实施例中同一个步骤或者具有相同功能的步骤或者消息在不同实施例之间可以互相参考借鉴。
[0052]
本技术实施例描述的业务场景是为了更加清楚的说明本技术实施例的技术方案，
并不构成对于本技术实施例提供的技术方案的限定，本领域普通技术人员可知，随着网络架构的演变和新业务场景的出现，本技术实施例提供的技术方案对于类似的技术问题，同样适用。
[0053]
带有触摸屏的电子设备在机场、商场、银行和医院等公共场所普遍存在，这些电子设备的出现使得业务办理的时间大大缩短，极大地方便了人们的日常生活。但使用时，这些电子设备都需要用户触摸屏幕，而在使用之后往往不能对屏幕立即消毒，使得其他人再次使用时会存在一定的安全隐患。
[0054]
虽然可以事先定义带有一定含义的手势来对屏幕进行控制，即当电子设备识别到这些带有一定含义的手势时，可以转化为指令来控制屏幕。但由于手部检测和关键点识别模型一般是持续运行和逐帧检测的，这种方式中，电子设备无法得知指令何时开始、何时结束以及指令的执行次数，等等，从而无法执行正确的控制操作，影响用户体验。
[0055]
为解决上述问题，本技术实施例提供了一种无接触的屏幕控制方法、装置、电子设备及计算机可读存储介质。该方法中，当用户想控制屏幕时，用户可以对屏幕执行隔空手势，电子设备可以获取手部图像，并可以根据手部图像确定目标关键点与屏幕之间的距离，目标关键点为手部的至少一个关键点。当距离位于预设距离区间时，电子设备可以确定用户想要控制屏幕，此时，电子设备可以确定目标关键点在屏幕中对应的第一位置，并可以在第一位置显示操作光标，使得用户可以根据操作光标来控制屏幕。即本技术实施例中，电子设备可以根据用户的隔空手势来对屏幕进行控制，不需要用户触摸屏幕，可以降低病毒等的传播风险，提高操作安全性。另外，可以事先设定一个指令触发的预设距离区间，当目标关键点与屏幕之间的距离位于该预设距离区间时，电子设备可以认为检测到开始控制屏幕的指令，此时，电子设备可以根据用户的隔空手势来对屏幕进行控制，提高屏幕控制的准确性，提升用户体验，具有较强的易用性和实用性。
[0056]
本技术实施例中，电子设备可以为手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality，ar)/虚拟现实(virtual reality，vr)设备、笔记本电脑、超级移动个人计算机(ultra－mobile personal computer，umpc)、上网本、个人数字助理(personal digital assistant，pda)、桌上型计算机、云端服务器等电子设备，本技术实施例对电子设备的具体类型不作任何限制。
[0057]
请参阅图1，图1示出了本技术实施例提供的无接触的屏幕控制方法所适用于的系统结构示意图。如图1所示，该系统可以包括电子设备100、屏幕110和双目相机120。其中，电子设备100与屏幕110通信连接。双目相机120与屏幕110可以位于同一竖直平面。双目相机120用于获取屏幕110前的深度图像，并将获取的深度图像发送给电子设备100。电子设备100可以根据深度图像识别用户的操作手势，以此确定是否对屏幕110进行控制。示例性的，屏幕110可以集成于电子设备100，即屏幕110可以为电子设备100的屏幕。示例性的，双目相机120可以集成于屏幕110。以下将以屏幕110为电子设备100的屏幕为例进行示例性说明。
[0058]
请参阅图2，图2示出了本技术实施例提供的无接触的屏幕控制方法的流程示意图。该方法可以应用于图1所示的系统，该方法的执行主体可以为图1中的电子设备100。如图2所示，该方法可以包括：
[0059]
s201、获取手部图像。
[0060]
其中，与屏幕设置于同一竖直平面的双目相机，可以用于获取屏幕前的手部图像，
并可以将所获取的手部图像发送给电子设备。可以理解的是，双目相机采集的手部图像可以为深度图像。
[0061]
在一个示例中，双目相机可以一直处于工作状态，以实时获取屏幕前的图像。
[0062]
在另一个实例中，电子设备可以根据实际场景，启动双目相机，以获取屏幕前的手部图像。例如，当电子设备检测到有目标距离屏幕较近时，电子设备可以控制双目相机启动，以通过双目相机获取屏幕前的手部图像。例如，当电子设备确定电子设备中启动有可以通过隔空手势来操作的应用时，电子设备可以控制双目相机启动，以通过双目相机获取屏幕前的手部图像。
[0063]
s202、根据所述手部图像确定目标关键点与屏幕之间的距离，所述目标关键点为手部的至少一个关键点。
[0064]
本技术实施例中，电子设备获取双目相机采集的手部图像后，可以将手部图像输入至手部检测模型进行处理。手部检测模型可以输出手部图像中的手部区域。如图3所示，对于图像中的每一只手来说，手部区域可以通过两个点表示，即手部区域的左上角坐标b1(x1，y1)和右下角坐标b2(x2，y2)。其中，手部检测模型可以为pelee－ssd或yolov5等较为轻量的目标检测模型，确保手部检测的速度，提升用户体验。
[0065]
需要说明的是，上述所述的手部检测模型为pelee－ssd或yolov5等目标检测模型仅作示意性解释，不应理解为对本技术实施例的限制，本技术实施例中，技术人员可以根据实际使用场景来进行手部检测模型的具体设置。
[0066]
示例性的，当手部图像中包含多只手时，即当手部检测模型检测出多个手部区域时，电子设备可以获取各手部区域的面积，并可以将面积最大的手部区域确定为后续所需的手部区域。当手部检测模型未检测到手部区域，电子设备则不进行任何后续操作。应理解，手部区域的面积可以由技术人员根据实际应用场景设置具体方式来确定，本技术实施例对此不作具体限制。
[0067]
应理解，电子设备确定手部图像中的手部区域后，可以对手部区域进行裁剪，得到只包含手部和较少背景的区域图像，以通过图像裁剪提高后续手部关键点检测模型的识别速度和准确性。随后，电子设备可以将所获取的区域图像输入至手部关键点检测模型进行处理。手部关键点检测模型可以识别区域图像中的目标关键点，即确定出目标关键点在手部图像中的第二位置(例如坐标)。电子设备可以根据目标关键点在手部图像中的第二位置，确定目标关键点与屏幕之间的距离。示例性的，电子设备可以获取目标关键点对应的深度，并可以将目标关键点对应的深度确定为目标关键点与屏幕之间的距离。
[0068]
其中，目标关键点的数量可以根据实际情况具体设置。例如，如图3所示，可以设置手部包含21个目标关键点，此时手部关键点检测模型可以根据区域图像确定出这21个目标关键点在手部图像中的坐标。例如，在只需要通过点击来控制屏幕的场景中，目标关键点也可以为食指指尖、中指指尖等任一指尖所对应的关键点，即目标关键点可以为图3中的关键点4、关键点8、关键点12、关键点16或关键点20等。
[0069]
需要说明的是，手部关键点检测模型可以由技术人员根据实际场景具体设置，本技术实施例对此不作具体限制。
[0070]
s203、当所述距离位于预设距离区间时，确定所述目标关键点在所述屏幕中对应的第一位置，并在所述第一位置显示操作光标。
[0071]
本技术实施例中，可以事先预设一个触发指令所对应的预设距离区间s，s＝[20，25]，其中，触发指令是指触发电子设备根据隔空手势来控制屏幕的指令。也就是说，在距离双目相机20cm－25cm之间存在一个虚拟屏幕，当用户移动手部，使得目标关键点与屏幕之间的距离位于20cm－25cm之间时，电子设备可以确定检测到触发指令，此时，电子设备可以根据用户对虚拟屏幕的触摸操作来控制实际的屏幕，以使得用户不需要触摸实际的屏幕即可以对其进行控制。
[0072]
应理解，由于双目相机计算的深度图像可能会存在一定的误差，因此，通过设置预设距离区间而不是具体的距离数值来进行指令触发，可以增加容错性。另外，由于虚拟屏幕并不真实存在，用户往往无法精准的把握交互距离，因此，通过设置预设距离区间而不是具体的距离数值来进行指令触发，可以提升交互体验。
[0073]
需要说明的是，预设距离区间s＝[20，25]仅作示意性解释，不应理解为对本技术实施例的限制，本技术实施例中，技术人员可以根据实际应用场景设置其他区间。
[0074]
本技术实施例中，为了使双目相机所采集的图像的像素点与屏幕的像素点一一对应，以方便确定目标关键点在屏幕中对应的第一位置，可以根据屏幕的分辨率调整双目相机的分辨率，使得两者的分辨率保持一致。例如，当屏幕的分辨率为280＊720时，可以将双目相机的分辨率调整至280＊720。随后，电子设备可以根据屏幕的分辨率和双目相机的分辨率构建双目相机所采集的图像的像素点与屏幕的像素点之间的预设对应关系。可以理解的是，此时图像的像素点中可以为不包含深度z，即图像的像素点可以用(x，y)来表示。
[0075]
其中，该预设对应关系可以由技术人员根据实际场景具体设置，本技术实施例对此不作具体限制。示例性的，技术人员可以根据双目相机与屏幕之间的位置关系来设置该预设对应关系。例如，可以根据双目相机所在坐标系的原点与屏幕所在坐标系的原点之间的位置关系来设置该预设对应关系，如将该预设对应关系设置为手部图像的像素点(0，0)与屏幕的像素点(0，0)对应，手部图像的像素点(1，1)与屏幕的像素点(0，0)对应，等等。
[0076]
请参阅图4，图4示出了本技术实施例提供的应用场景示意图一。如图4中的(a)所示，当确定目标关键点与屏幕之间的距离z未处于20cm至25cm之间时，例如，在确定目标关键点与屏幕之间的距离z为30cm时，电子设备确定未检测到触发指令，此时，电子设备将不会在屏幕中显示操作光标。如图4中的(b)所示，当确定目标关键点与屏幕之间的距离z位于20cm至25cm之间时，例如，当确定目标关键点与屏幕之间的距离z为22cm时，电子设备确定检测到触发指令，此时，电子设备可以根据目标关键点在手部图像中的坐标和该预设对应关系，确定目标关键点在屏幕中所对应的第一位置(例如坐标)，并在第一位置显示操作光标400来提醒用户，使得用户可以通过操作光标400来准确控制屏幕。
[0077]
应理解，当目标关键点包括多个时，电子设备可以在确定这多个目标关键点与屏幕之间的距离均位于20cm至25cm时，分别确定各目标关键点在屏幕中对应的第一位置，并分别在各第一位置显示对应的操作光标。
[0078]
s204、响应于所述操作光标对应的控制操作，控制所述屏幕。
[0079]
本技术实施例中，在显示操作光标后，用户可以根据操作光标来控制屏幕。在一个示例中，用户可以移动手部，以将操作光标移动至指定的操作按钮上，使得操作光标在屏幕中的第三位置为该操作按钮对应的位置(例如该操作按钮所在的位置)，此时，电子设备可以根据该操作按钮来对屏幕进行控制。在另一个示例中，用户可以移动手部，以移动操作光
标，电子设备可以根据操作光标对应的移动轨迹来确定用户所想要执行的控制操作，并根据该控制操作对屏幕进行控制。
[0080]
请参阅图5，图5示出了本技术实施例提供的应用场景示意图二。如图5所示，该应用场景中，目标关键点可以为食指指尖所对应的关键点，即目标关键点可以为图3所示中的关键点8，屏幕中可以显示有操作按钮，例如可以显示有向左移动屏幕的操作按钮501、向右屏幕移动的操作按钮502、向上移动屏幕的操作按钮503和向下移动屏幕的操作按钮504。当目标关键点与屏幕之间的距离位于预设距离区间时，电子设备可以确定检测到触发指令，此时屏幕中可以显示操作光标。当用户想要向左移动屏幕时，用户可以移动手部，以将操作光标在屏幕中的第三位置移动至向左移动屏幕的操作按钮501上，此时，电子设备可以根据操作光标所对应的操作按钮向左移动屏幕。随后，当用户想要继续向下移动屏幕时，用户可以继续移动手部，以将操作光标移动至向下移动屏幕的操作按钮504上，此时，电子设备可以根据操作光标所对应的操作按钮向左移动屏幕。
[0081]
应理解，当用户完成对屏幕的控制操作时，用户可以移动手部，使得目标关键点与屏幕之间的距离未处于预设距离区间，此时电子设备可以控制屏幕中的操作光标消失，以结束对屏幕的操作过程。
[0082]
在一种可能的实现方式中，每一次的触发指令可以用于执行一次控制操作。例如，在图5所示的应用场景中，当电子设备根据操作光标对应的操作按钮向左移动屏幕之后，电子设备将不再执行其他操作，也就是说，即使用户继续移动手部，以将操作光标移动至向下移动屏幕的操作按钮504上时，电子设备并不会向下移动屏幕。因此，此时，若用户想要继续向下移动屏幕，用户可以先移动手部，使得目标关键点与屏幕之间的距离未处于预设距离区间，以使得屏幕中的操作光标消失。随后，用户可以继续移动手部，使得目标关键点与屏幕之间的距离处于预设距离区间，使得屏幕中显示操作光标，并可以继续移动手部，以将操作光标移动至向下移动屏幕的操作按钮504上，此时，电子设备可以根据操作光标所对应的操作按钮向下移动屏幕。
[0083]
需要说明的是，上述采用预设按钮来控制屏幕仅作示意性解释，不应理解为对本技术实施例的限制。本技术实施例中，电子设备中也可以设置其他交互方式来控制屏幕。在一个示例中，可以设置根据移动方向来控制屏幕。也就是说，当目标关键点与屏幕之间的距离位于预设距离区间时，若用户想要向左移动屏幕，用户可以直接向左移动手部，以使得操作光标向左移动。此时，电子设备可以获取操作光标的移动轨迹，并根据操作光标的移动轨迹确定操作光标的移动方向，即确定操作光标的移动方向为向左，因此，电子设备确定用户想要向左移动屏幕，此时电子设备可以向左移动屏幕。
[0084]
在另一个示例中，可以设置根据多个目标关键点之间的距离变化来控制屏幕。例如根据食指指尖对应的第一目标关键点与大拇指指尖对应的第二目标关键点之间的距离变化来控制屏幕。例如，当第一目标关键点与屏幕之间的距离位于预设距离区间，且第二目标关键点与屏幕之间的距离也位于预设距离区间时，若用户想要放大屏幕，用户可以同时移动食指和大拇指，以使得第一目标关键点对应的第一操作光标和第二目标关键点对应的第二操作光标之间的距离逐渐变大，此时，电子设备可以获取第一操作光标对应的第一移动轨迹和第二操作光标对应的第二移动轨迹，以根据第一移动轨迹和第二移动轨迹确定第一目标关键点与第二目标关键点之间的距离变化，并根据距离变化确定用户想要执行的控
制操作，即确定用户想要放大屏幕，因此电子设备可以对屏幕进行放大处理。
[0085]
例如，当第一目标关键点与屏幕之间的距离位于预设距离区间，且第二目标关键点与屏幕之间的距离也位于预设距离区间时，若用户想要缩小屏幕，用户可以同时移动食指和大拇指，以使得第一目标关键点对应的第一操作光标和第二目标关键点对应的第二操作光标之间的距离逐渐变小，此时，电子设备可以获取第一操作光标对应的第一移动轨迹和第二操作光标对应的第二移动轨迹，以根据第一移动轨迹和第二移动轨迹确定第一目标关键点与第二目标关键点之间的距离变化，并根据距离变化确定用户想要缩小屏幕，因此电子设备可以对屏幕进行缩小处理。
[0086]
应理解，对屏幕进行放大处理可以是对整个屏幕进行放大处理，也可以是对屏幕的某一区域进行放大处理。例如，当用户想要放大屏幕的某一区域时，用户可以移动手部，使得第一操作光标和第二操作光标均位于该区域内。随后，用户可以同时移动食指和大拇指，以使得第一目标关键点对应的第一操作光标和第二目标关键点对应的第二操作光标之间的距离逐渐变大，此时，电子设备可以对屏幕进行放大处理。
[0087]
类似的，对屏幕进行缩小处理可以是对整个屏幕进行缩小处理，也可以是对屏幕的某一区域进行缩小处理。
[0088]
本技术实施例中，当用户想要控制屏幕时，用户可以对屏幕执行隔空手势，电子设备可以获取手部图像，并可以根据手部图像确定目标关键点与屏幕之间的距离，目标关键点为手部的至少一个关键点。当距离位于预设距离区间时，电子设备确定用户想要控制屏幕，此时，电子设备可以确定目标关键点在屏幕中对应的第一位置，并在第一位置显示操作光标，使得用户可以对操作光标进行操作来控制屏幕。即本技术实施例中，电子设备可以根据用户的隔空手势来对屏幕进行控制，不需要用户触摸屏幕，可以降低病毒等的传播风险，提高操作安全性。另外，可以事先设定一个指令触发的预设距离区间，当目标关键点与屏幕之间的距离位于该预设距离区间时，电子设备可以认为检测到指令触发条件，即认为检测到开始控制屏幕的指令，此时，电子设备可以根据用户的隔空手势来对屏幕进行控制，提高屏幕控制的准确性，提升用户体验，具有较强的易用性和实用性。
[0089]
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本技术实施例的实施过程构成任何限定。
[0090]
对应于上文实施例所述的无接触的屏幕控制方法，图6示出了本技术实施例提供的无接触的屏幕控制装置的结构框图，为了便于说明，仅示出了与本技术实施例相关的部分。
[0091]
请参阅图6，所述屏幕控制装置，可以包括：
[0092]
图像获取模块601，用于获取手部图像；
[0093]
距离确定模块602，用于根据所述手部图像确定目标关键点与屏幕之间的距离，所述目标关键点为手部的至少一个关键点；
[0094]
光标显示模块603，用于当所述距离位于预设距离区间时，确定所述目标关键点在所述屏幕中对应的第一位置，并在所述第一位置显示操作光标；
[0095]
屏幕控制模块604，用于响应于所述操作光标对应的控制操作，控制所述屏幕。
[0096]
示例性的，所述手部图像为双目相机采集的深度图像，所述距离确定模块602，具
体用于根据所述手部图像确定所述目标关键点对应的深度，并根据所述深度确定所述目标关键点与所述屏幕之间的距离。
[0097]
在一种可能的实现方式中，所述装置还可以包括：
[0098]
分辨率获取模块，用于获取所述屏幕的分辨率；
[0099]
分辨率调整模块，用于根据所述屏幕的分辨率调整所述双目相机的分辨率，使得所述屏幕的分辨率与所述双目相机的分辨率相同。
[0100]
在一个示例中，所述屏幕控制模块604，可以包括：
[0101]
第三位置获取单元，用于获取所述操作光标对应的第三位置；
[0102]
第一屏幕控制单元，用于当所述第三位置为控制操作对应的位置时，根据所述控制操作控制所述屏幕。
[0103]
在一个示例中，所述屏幕控制模块604，可以包括：
[0104]
第一移动轨迹获取单元，用于获取所述操作光标对应的移动轨迹；
[0105]
移动方向确定单元，用于根据所述操作光标对应的移动轨迹，确定所述操作光标对应的移动方向；
[0106]
第二屏幕控制单元，用于根据所述操作光标对应的移动方向确定所述屏幕对应的控制操作，并根据所述控制操作控制所述屏幕。
[0107]
在一个示例中，所述目标关键点包括第一目标关键点和第二目标关键点，所述操作光标包括所述第一目标关键点对应的第一操作光标和所述第二目标关键点第二操作光标，所述屏幕控制模块604，还可以包括：
[0108]
第二移动轨迹获取单元，用于获取所述第一操作光标对应的第一移动轨迹和所述第二操作光标对应的第二移动轨迹；
[0109]
位置变化确定单元，用于根据所述第一移动轨迹和所述第二移动轨迹，确定所述第一目标关键点和所述第二目标关键之间的位置变化；
[0110]
第三屏幕控制单元，用于根据所述位置变化，确定所述屏幕对应的控制操作，并根据所述控制操作控制所述屏幕。
[0111]
在一种可能的实现方式中，所述光标显示模块603，可以包括：
[0112]
第二位置获取单元，用于获取所述目标关键点在所述手部图像中的第二位置；
[0113]
第一位置确定单元，用于根据所述目标关键点在所述手部图像中的第二位置和预设对应关系，确定所述目标关键点在所述屏幕中对应的第一位置，所述预设对应关系为所述手部图像中的像素点与所述屏幕中的像素点之间的对应关系。
[0114]
需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本技术方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。
[0115]
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单
元、模块的具体名称也只是为了便于相互区分，并不用于限制本技术的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
[0116]
请参阅图7，图7示出了本技术实施例提供的电子设备的结构示意图。如图7所示，该实施例的电子设备7包括：至少一个处理器70(图7中仅示出一个)、存储器71以及存储在所述存储器71中并可在所述至少一个处理器60上运行的计算机程序72，所述处理器70执行所述计算机程序72时实现上述任意各个无接触的屏幕控制方法实施例中的步骤。
[0117]
所述电子设备7可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该电子设备可包括，但不仅限于，处理器70、存储器71。本领域技术人员可以理解，图7仅仅是电子设备7的举例，并不构成对电子设备7的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如还可以包括输入输出设备、网络接入设备等。
[0118]
所述处理器70可以是中央处理单元(central processing unit，cpu)，该处理器70还可以是其他通用处理器、数字信号处理器(digital signal processor，dsp)、专用集成电路(application specific integrated circuit，asic)、现场可编程门阵列(field－programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
[0119]
所述存储器71在一些实施例中可以是所述电子设备7的内部存储单元，例如电子设备7的硬盘或内存。所述存储器71在另一些实施例中也可以是所述电子设备7的外部存储设备，例如所述电子设备7上配备的插接式硬盘，智能存储卡(smart media card，smc)，安全数字(secure digital，sd)卡，闪存卡(flash card)等。进一步地，所述存储器71还可以既包括所述电子设备7的内部存储单元也包括外部存储设备。所述存储器71用于存储操作系统、应用程序、引导装载程序(bootloader)、数据以及其他程序等，例如所述计算机程序的程序代码等。所述存储器71还可以用于暂时地存储已经输出或者将要输出的数据。
[0120]
本技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被计算机执行时，使所述计算机实现上述任意各个方法实施例中的步骤。
[0121]
本技术实施例提供了一种计算机程序产品，当计算机程序产品在电子设备上运行时，使得电子设备实现上述任意各个方法实施例中的步骤。
[0122]
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读存储介质中。基于这样的理解，本技术实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读存储介质至少可以包括：能够将计算机程序代码携带到装置/电子设备的任何实体或装置、记录介质、计算机存储器、只读存储器(read－only memory，rom)、随机存取存储器(random access memory，ram)、电载波信号、电信信号以及软件分发介质。例如u盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读存储介质不可以是电载波信号和电信信号。
[0123]
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
[0124]
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本技术的范围。
[0125]
在本技术所提供的实施例中，应该理解到，所揭露的装置/电子设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/电子设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
[0126]
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0127]
以上所述实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的精神和范围，均应包含在本技术的保护范围之内。