终端控制方法、装置、设备及存储介质与流程

本发明一般涉及终端，具体涉及一种终端控制方法、装置、设备及存储介质。

背景技术：

1、随着终端技术的快速发展，诸如手机、平板电脑、笔记本电脑等终端设备已经被越来越多的应用在人们的日常生活中。例如，用户可以使用终端进行阅读、玩游戏、播放音视频文件等操作。为了满足用户的需求使其得到更好的用户体验，如何对终端进行控制显得尤为重要。

2、目前，相关的终端设备在使用过程中，用户通过触摸检测部件实现人机交互，使得终端检测到触摸位置获取触摸信息，并基于触摸信息实现控制操作。然而，当出现一些极端天气导致用户无法执行触摸操作，或者触摸屏失效等异常情况下，终端无法有效获取用户的操作参数，导致控制灵活性较差。

技术实现思路

1、鉴基于此，有必要针对上述技术问题，提供一种终端控制方法、装置、设备及存储介质，能够根据眼动特征参数对终端的显示界面进行自动控制，很大程度上提高了终端控制操作的便携性和有效性，进而提高了控制效率。

2、第一方面，本申请实施例提供了一种终端控制方法，包括：

3、当终端处于眼部追踪控制模式时，采集视景信息和用户的眼部特征信息；

4、对所述视景信息和所述眼部特征信息进行分析，确定所述用户在所述终端上的目标焦点位置；

5、根据所述目标焦点位置，确定所述用户在所述终端的显示界面上的眼动特征参数；所述眼动特征参数用于表征所述用户的眼部在所述显示界面上的运动状态信息；

6、根据所述眼动特征参数对所述终端的显示界面执行控制操作。

7、在其中一个实施例中，对所述视景信息和所述眼部特征信息进行分析，确定所述用户在所述终端上的目标焦点位置，包括：

8、将所述眼部特征信息与所述视景信息进行叠加处理，确定眼部空间位置信息；

9、根据所述眼部空间位置信息确定所述用户眼部注视所述显示界面上的注视坐标；

10、基于所述注视坐标确定所述用户在所述终端上的目标焦点位置。

11、在其中一个实施例中，根据所述目标焦点位置，确定所述用户在所述终端的显示界面上的眼动特征参数，包括：

12、根据所述目标焦点位置，追踪各个时刻所述用户的眼部在所述显示界面上的运动距离、运动方向和眨眼次数；

13、基于所述运动距离、运动方向和所述眨眼次数确定用户在所述终端的显示界面上的眼动特征参数；所述眼动特征参数包括以下至少一项：所述用户的眼动时间、注视点轨迹和眼动距离矢量。

14、在其中一个实施例中，根据所述眼动特征参数对所述终端的显示界面执行控制操作，包括：

15、当所述目标焦点位置在所述显示界面上的按钮控件时，判断眼动时间是否处于预设时间范围内；

16、若眼动时间处于预设时间范围内，确定对所述显示界面的按钮控件执行点击操作。

17、在其中一个实施例中，根据所述眼动特征参数对所述终端的显示界面执行控制操作，包括：

18、判断所述注视点轨迹是否满足预设翻页条件；

19、当注视点轨迹满足预设翻页条件时，根据所述预设翻页条件对所述终端的显示界面执行翻页操作。

20、在其中一个实施例中，根据所述眼动特征参数对所述终端的显示界面执行控制操作，包括：

21、检测所述眼动距离矢量在所述显示界面上的区间位置；

22、当所述眼动距离矢量位于第一区间时，生成上移操作指令并控制所述显示界面向上移动；当所述眼动距离矢量位于第二区间时，生成下移操作指令并控制所述显示界面向下移动；当所述眼动距离矢量位于第三区间时，生成左移操作指令并控制所述显示界面向左移动；当所述眼动距离矢量位于第四区间时，生成右移操作指令并控制所述显示界面向右移动。

23、在其中一个实施例中，所述方法还包括：

24、获取所述目标焦点位置与所述用户眼部之间的目标距离；

25、根据预设的距离与显示界面亮度值之间的映射关系，确定与所述目标距离对应的目标亮度值，控制所述终端的显示界面以所述目标亮度值进行显示。

26、第二方面，本申请实施例提供了一种终端控制装置，该装置包括：

27、采集模块，用于当终端处于眼部追踪控制模式时，采集视景信息和用户的眼部特征信息；

28、位置确定模块，用于对所述视景信息和所述眼部特征信息进行分析，确定所述用户在所述终端上的目标焦点位置；

29、参数确定模块，用于根据所述目标焦点位置，确定所述用户在所述终端的显示界面上的眼动特征参数；所述眼动特征参数用于表征所述用户的眼部在所述显示界面上的运动状态信息；

30、控制模块，用于根据所述眼动特征参数对所述终端的显示界面执行控制操作。

31、第三方面，本申请实施例提供一种终端设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现本申请任意实施例所提供的终端控制方法的步骤。

32、第四方面，本申请实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现本申请任意实施例所提供的终端控制方法的步骤。

33、本申请实施例提供的终端控制方法、装置、设备及存储介质，当终端处于眼部追踪控制模式时，通过采集视景信息和用户的眼部特征信息，并对视景信息和眼部特征信息进行分析，确定用户在终端上的目标焦点位置，然后根据目标焦点位置，确定用户在终端的显示界面上的眼动特征参数，该眼动特征参数用于表征用户的眼部在显示界面上的运动状态信息和时间信息，并根据眼动特征参数对终端的显示界面执行控制操作。与现有技术相比，该技术方案无需用户进行任何手动操作触摸屏，通过自动采集视景信息和用户的眼部特征信息，从而获取目标焦点位置并确定出眼动特征参数，进而有效获取用户的操作参数，能够根据眼动特征参数对终端的显示界面进行自动控制，很大程度上提高了终端控制操作的便携性和有效性，进而提高了控制效率。

技术特征：

1.一种终端控制方法，其特征在于，该方法包括：

2.根据权利要求1所述的方法，其特征在于，对所述视景信息和所述眼部特征信息进行分析，确定所述用户在所述终端上的目标焦点位置，包括：

3.根据权利要求1或2所述的方法，其特征在于，根据所述目标焦点位置，确定所述用户在所述终端的显示界面上的眼动特征参数，包括：

4.根据权利要求3所述的方法，其特征在于，根据所述眼动特征参数对所述终端的显示界面执行控制操作，包括：

5.根据权利要求3所述的方法，其特征在于，根据所述眼动特征参数对所述终端的显示界面执行控制操作，包括：

6.根据权利要求3所述的方法，其特征在于，根据所述眼动特征参数对所述终端的显示界面执行控制操作，包括：

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

8.一种终端控制装置，其特征在于，该装置包括：

9.一种终端设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-7任一项所述的终端控制方法。

10.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序用于被处理器执行时实现权利要求1-7任一项所述的终端控制方法。

技术总结
本申请公开了一种终端控制方法、装置、设备及存储介质，该方法包括：当终端处于眼部追踪控制模式时，采集视景信息和用户的眼部特征信息；对视景信息和眼部特征信息进行分析，确定用户在终端上的目标焦点位置；根据目标焦点位置，确定用户在终端的显示界面上的眼动特征参数；眼动特征参数用于表征用户的眼部在显示界面上的运动状态信息和时间信息；根据眼动特征参数对终端的显示界面执行控制操作。该方案通过自动采集视景信息和用户的眼部特征信息，能够有效获取用户的操作参数，从而根据眼动特征参数对终端的显示界面进行自动控制，很大程度上提高了终端控制操作的便携性和有效性，进而提高了控制效率。

技术研发人员：周坤
受保护的技术使用者：上海闻泰电子科技有限公司
技术研发日：
技术公布日：2024/1/13