一种监控方法、系统、装置、音箱及计算机可读存储介质与流程

1.本发明涉及人工智能领域，特别是涉及一种监控方法、系统、装置、音箱及计算机可读存储介质。


背景技术：

2.随着人工智能技术的不断发展，现有技术中的一些智能终端例如智能音箱等会设置语音交互模块和显示屏，用户可以通过语音交互模块与智能终端对话，以便智能终端能够基于用户的语音信息在显示屏上显示相关信息，例如用户通过设置有语音交互模块和显示屏的智能音箱观看网课，但该智能音箱无法让老师监督使用智能音箱的用户的学习状态，不能及时提醒用户进入学习状态，缺乏真正的课堂教学气氛。


技术实现要素：

3.本发明的目的是提供一种监控方法、系统、装置、音箱及计算机可读存储介质，能够让使用监控终端的用户及时了解使用被监控终端的用户的信息。
4.为解决上述技术问题，本发明提供了一种监控方法，应用于被监控终端，所述监控方法包括：
5.在获取到监控终端的监控指令后，捕捉使用所述被监控终端的用户的眼球焦点位置；
6.基于所述眼球焦点位置确定监控结果；
7.将所述监控结果发送至所述监控终端。
8.优选的，基于所述眼球焦点位置确定监控结果之前，还包括：
9.基于所述监控指令确定当前监控模式；
10.基于所述眼球焦点位置确定监控结果，包括：
11.基于所述当前监控模式和所述眼球焦点位置确定监控结果。
12.优选的，在所述当前监控模式为注意力观察模式时，基于所述当前监控模式和所述眼球焦点位置确定监控结果，包括：
13.基于所述眼球焦点位置判断所述用户的视线是否落在所述被监控终端的显示屏上；
14.若所述视线没有落在所述被监控终端的显示屏上，则将所述用户的当前状态为注意力分散状态作为监控结果；
15.若所述视线落在所述被监控终端的显示屏上，则将所述用户的当前状态为注意力集中状态作为监控结果。
16.优选的，将所述用户的当前状态为注意力分散状态作为监控结果之后，还包括:
17.控制所述被监控终端的显示屏显示提示信息。
18.优选的，在所述当前监控模式为输入模式时，基于所述当前监控模式和所述眼球焦点位置确定监控结果，包括：
19.基于所述眼球焦点位置得到所述用户的视线停留在所述被监控终端的显示屏的目标停留区域上的实际停留时长；
20.判断所述实际停留时长是否大于预设停留时长阈值；
21.若所述实际停留时长大于所述预设停留时长阈值，则将所述目标停留区域上显示的信息作为监控结果。
22.优选的，在所述被监控终端的数量大于预设数量时，在获取到所述监控终端的监控指令之后，还包括：
23.基于所述监控指令确定目标被监控终端，进入捕捉使用所述目标被监控终端的用户的眼球焦点位置的步骤。
24.为解决上述技术问题本发明还提供了一种监控系统，包括：
25.眼球焦点位置获取单元，用于在获取到监控终端的监控指令后，捕捉使用被监控终端的用户的眼球焦点位置；
26.监控结果确定单元，用于基于所述眼球焦点位置确定监控结果；
27.监控结果发送单元，用于将所述监控结果发送至所述监控终端。
28.为解决上述技术问题本发明还提供了一种监控装置，包括：
29.存储器，用于存储计算机程序；
30.处理器，用于执行所述计算机程序时实现上述监控方法的步骤。
31.为解决上述技术问题本发明还提供了一种音箱，包括上述的监控装置。
32.为解决上述技术问题本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述监控方法的步骤。
33.综上，本发明提供了一种监控方法、系统、装置、音箱及计算机可读存储介质，包括在获取到监控终端发出的监控指令后，捕捉使用被监控终端的用户的眼球焦点位置，并基于眼球焦点位置确定监控结果，最终将监控结果发送至监控终端，能够让使用监控终端的用户及时了解使用被监控终端的用户的信息。
附图说明
34.为了更清楚地说明本发明实施例中的技术方案，下面将对现有技术和实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
35.图1为本发明提供的一种监控方法的流程图；
36.图2为本发明提供的一种监控方法的流程示意图；
37.图3为本发明提供的另一种监控方法的流程示意图；
38.图4为本发明提供的另一种监控方法的流程示意图；
39.图5为本发明提供的一种监控系统的结构示意图；
40.图6为本发明提供的一种监控装置的结构示意图。
具体实施方式
41.本发明的核心是提供一种监控方法、系统、装置、音箱及计算机可读存储介质，能够让使用监控终端的用户及时了解使用被监控终端的用户的信息。
42.为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
43.请参照图1，图1为本发明提供的一种监控方法的流程图，该监控方法应用于被监控终端，该监控方法包括：
44.s1、在获取到监控终端的监控指令后，捕捉使用被监控终端的用户的眼球焦点位置；
45.s2、基于眼球焦点位置确定监控结果；
46.s3、将监控结果发送至监控终端。
47.现有技术中的一些智能终端例如智能音箱等可以通过语音引擎完成初步的交互功能，例如可以跟用户对话，但这种单纯的语音交互还是缺少人跟人交互的自然性，例如学生通过智能音箱观看网课时，老师不能看到每个学生的状态，不知道学生是不是在听课，对于授课的老师和上课的学生来说都缺乏实际上课的体验，缺乏真正的教学氛围。
48.为解决现有技术中的技术问题，本技术提供了一种监控方法，应用于被监控终端。首先在获取到监控终端的监控指令后，捕捉使用被监控终端的用户的眼球焦点位置，其中，监控终端与被监控终端之间可以通过服务器通信，监控终端下发监控指令后，服务器将监控指令传输至被监控终端，然后被监控终端接收到监控指令后开始捕捉使用被监控终端的用户的眼球焦点位置，以便基于眼球焦点位置确定监控结果；得到监控结果后将监控结果发送至监控终端，以便监控终端的用户及时了解使用被监控终端的用户的状态。
49.此外，在获取用户的眼球焦点位置之后可以先基于眼球焦点位置得到用户的视线范围，以便得到对使用被监控终端的用户的监控结果；还可以在获取到用户的眼球焦点位置之后根据眼球焦点位置与监控结果之间的对应关系得到监控结果，本技术对此不作特别限定。
50.例如，监控终端可以为老师使用的终端，被监控终端可以为学生使用的终端。例如刚开始上课时，老师让学生预习，此时老师不需要通过监控终端下发监控指令进行监控，此时停止监控，请参照图2，图2为本发明提供的一种监控方法的流程示意图；当老师开始讲课时，此时老师想要了解学生的学习状态，那么老师可通过监控终端下发监控指令，被监控终端接收到监控指令后获取学生的眼球焦点位置，然后基于学生的眼球焦点位置得到对学生的监控结果，最终将监控结果发送至老师使用的监控端，这样老师即可清楚了解学生的学习状态。本技术基于眼球追踪技术，使用眼球追踪技术来代替老师监控学生的行为，使老师能说、能听还能看，总览全局，带来更加真实的上课体验。
51.综上，本发明提供了一种监控方法，包括在获取到监控终端发出的监控指令后，捕捉使用被监控终端的用户的眼球焦点位置，并基于眼球焦点位置确定监控结果，最终将监控结果发送至监控终端，能够让使用监控终端的用户及时了解使用被监控终端的用户的信息。
52.在上述实施例的基础上：
53.作为一种优选的实施例，基于眼球焦点位置确定监控结果之前，还包括：
54.基于监控指令确定当前监控模式；
55.基于眼球焦点位置确定监控结果，包括：
56.基于当前监控模式和眼球焦点位置确定监控结果。
57.在本实施例中，监控方法还能够以多种监控模式进行监控，在基于眼球焦点位置确定监控结果之前，先基于监控终端下发的监控指令确定当前监控模式，然后基于当前监控模式和眼球焦点位置共同确定监控结果。
58.例如，当前监控模式可以为注意力观察模式，还可以为输入模式，这样监控终端的用户可以选择当前监控模式如何进行监控。在需要观察使用被监控终端的用户是否注意力集中时可以选择当前监控模式为注意力观察模式，将使用被监控终端的用户的状态作为监控结果；在需要让使用被监控终端的用户选择输入信息时可以选择当前监控模式为输入模式，将使用被监控终端的用户选择的信息作为监控结果。
59.综上，通过本实施例中的方法能够提供多种监控方式并能够提高监控结果的准确性，更有利于监控终端了解使用被监控终端的用户的状态。
60.作为一种优选的实施例，在当前监控模式为注意力观察模式时，基于当前监控模式和眼球焦点位置确定监控结果，包括：
61.基于眼球焦点位置判断用户的视线是否落在被监控终端的显示屏上；
62.若视线没有落在被监控终端的显示屏上，则将用户的当前状态为注意力分散状态作为监控结果；
63.若视线落在被监控终端的显示屏上，则将用户的当前状态为注意力集中状态作为监控结果。
64.在本实施例中，当前监控模式可以为注意力观察模式，在得到眼球焦点位置后，基于眼球焦点位置判断用户的视线是否落在被监控终端的显示屏上，若用户的视线没有落在被监控终端的显示屏上，则可判定用户当前的状态为注意力分散状态，并将用户的当前状态为注意力分散状态作为监控结果以便监控终端了解被监控终端的用户的状态。请参照图3，图3为本发明提供的另一种监控方法的流程示意图，例如可以让使用监控终端的老师重点关注使用被监控终端的该学生；若用户的视线落在被监控终端的显示屏上，则可判定用户当前的状态为注意力集中状态，并将用户的当前状态为注意力集中状态作为监控结果以便使用监控终端的用户了解使用被监控终端的用户的状态。
65.此外，还可以在用户的视线离开被监控终端的显示屏预设时间后，再判定用户的当前状态为注意力分散状态，预设时间可根据实际情况设定，本技术对此不作特别限定。
66.此外，在监控终端的显示屏上还可以设置有与被监控终端一一对应的提示标志，当被监控终端的用户为注意力集中状态时，监控终端的显示屏上与之对应的提示标志可以显示为绿色；当被监控终端的用户为注意力分散状态时，监控终端的显示屏上与之对应的提示标志可以显示为红色，这样即使被监控终端的数量很多时，监控终端依然可以清晰直观的看到使用被监控终端的用户的当前状态。
67.作为一种优选的实施例，将用户的当前状态为注意力分散状态作为监控结果之后，还包括:
68.控制被监控终端的显示屏显示提示信息。
69.请参照图3，图3为本发明提供的另一种监控方法的流程示意图，在本实施例中，若用户的当前状态为注意力分散状态，除了需要将用户的当前状态为注意力分散状态作为监控结果发送至监控终端外，还需要在被监控终端提醒该用户使其尽快集中注意力。例如，使用被监控终端的学生的视线离开显示屏一段时间后，被监控终端在显示屏上显示“请集中注意力听课”的提示信息提醒该同学，此外，还可以通过语音提醒的方式提醒该同学，本技术对此不作特别限定。
70.作为一种优选的实施例，在当前监控模式为输入模式时，基于当前监控模式和眼球焦点位置确定监控结果，包括：
71.基于眼球焦点位置得到用户的视线停留在被监控终端的显示屏的目标停留区域上的实际停留时长；
72.判断实际停留时长是否大于预设停留时长阈值；
73.若实际停留时长大于预设停留时长阈值，则将目标停留区域上显示的信息作为监控结果。
74.在本实施例中，当前监控模式可以为输入模式，基于眼球焦点位置得到用户的视线停留在被监控终端的显示屏的目标停留区域上的实际停留时长，以便基于实际停留时长判断实际停留时长是否大于预设停留时长阈值，若是则将目标停留区域上显示的信息作为监控结果以便监控终端的用户及时了解被监控终端的用户的情况。
75.请参照图4，图4为本发明提供的另一种监控方法的流程示意图，例如，在使用监控终端的老师讲完课后，需要针对所学内容进行提问，例如老师给出一个选择题，在被监控终端的显示屏上显示答题选项，目标停留区域即为各个答题选项，此时监控终端将当前监控模式设置为输入模式，使用被监控终端的学生的视线停留在被监控终端的显示屏的目标停留区域的实际停留时长大于预设停留时长阈值时，将目标停留区域上显示的信息作为答案也即将答题选项作为监控结果发送至监控终端，以便老师对学生的学习结果进行了解。
76.作为一种优选的实施例，在被监控终端的数量大于预设数量时，在获取到监控终端的监控指令之后，还包括：
77.基于监控指令确定目标被监控终端，进入捕捉使用目标被监控终端的用户的眼球焦点位置的步骤。
78.在本实施例中，考虑到被监控终端的数量可能有多个，监控终端的用户不能完全兼顾每个使用被监控终端的用户的状态，为此，在本技术中当被监控终端的数量大于预设数量时，在获取到监控终端的监控指令之后，首先基于监控指令确定目标被监控终端，这里的目标被监控终端即为选择所有被监控终端中的一部分被监控终端作为目标被监控终端，然后进入捕捉使用目标被监控终端的用户的眼球焦点位置的步骤，因此本技术能够缩小监控范围以便更加准确的了解使用被监控终端的用户的状态。
79.请参照图5，图5为本发明提供的一种监控系统的结构示意图，该监控系统包括：
80.眼球焦点位置获取单元11，用于在获取到监控终端的监控指令后，捕捉使用被监控终端的用户的眼球焦点位置；
81.监控结果确定单元12，用于基于眼球焦点位置确定监控结果；
82.监控结果发送单元13，用于将监控结果发送至监控终端。
83.对于本发明提供的一种监控系统的相关介绍请参照上述监控方法的实施例，在此不作赘述。
84.请参照图6，图6为本发明提供的一种监控装置的结构示意图，该监控装置包括：
85.存储器21，用于存储计算机程序；
86.处理器22，用于执行计算机程序时实现上述监控方法的步骤。
87.对于本发明提供的一种监控装置的相关介绍请参照上述监控方法的实施例，在此不作赘述。
88.为解决上述技术问题本发明还提供了一种音箱，包括上述的监控装置。
89.对于本发明提供的一种音箱的相关介绍请参照上述监控方法的实施例，在此不作赘述。
90.此外，本技术提供的音箱还可以包括显示屏和摄像头，显示屏可以显示视频等内容，摄像头可以拍摄使用被监控终端的用户以便得到眼球焦点位置，使得该音箱能说能听能看，大大提高了音箱的智能型，提高了用户体验。
91.为解决上述技术问题本发明还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述监控方法的步骤。
92.对于本发明提供的一种计算机可读存储介质的相关介绍请参照上述监控方法的实施例，在此不作赘述。
93.本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
94.对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其他实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。