交互设备的管理控制方法和装置与流程

本申请涉及设备管理领域，尤其涉及一种交互设备的管理控制方法和装置。

背景技术：

伴随着教育信息化2.0的提出和推进，目前学校教室中基本部署了交互设备，如交互平板和智能黑板，这些交互设备中普遍配备有摄像头、麦克风、音箱等音视频硬件设备，具有音视频采集和分析的能力。

教师在使用此类交互设备进行教学时，一般需要首先进行开机、打开教学软件、输入用户名和密码登录等一系列操作后方可使用，这些操作往往是重复的，而且非常繁琐。而在非授课时间段内，如下课十分钟内和自习时间，当教师不在教室内时，普遍会存在学生使用交互设备中的android或windows系统进行与学习无关的活动，如利用交互设备上网、打游戏、聊天等。

因此，有必要对教室内的交互设备进行管理，一方面防止非授权人员的操作，另一方面降低授权人员对交互设备的各种操作的难度。

技术实现要素：

基于此，本申请提供了一种交互设备的管理控制方法和装置，能够实现对操作人员的身份进行验证，同时降低授权人员对交互设备的操作难度。

根据本申请的第一个方面，提供一种交互设备的管理控制方法，其包括：

采集语音信号；

提取所述语音信号中的语音命令信息；

当所述语音命令信息属于当前目标语音命令信息集时，提取所述语音信号中的声纹特征信息；

当所述声纹特征信息属于目标声纹特征集时，采集现场图像信息；

提取所采集的图像信息中的人脸特征信息；以及

在所述声纹特征信息与所述人脸特征信息对应的情况下，执行所述语音命令信息对应的操作。

根据本申请的第二个方面，提供一种交互设备的管理控制装置，其包括：

第一采集单元，用于采集语音信号；

第一提取单元，用于提取所述语音信号中的语音命令信息；

第二提取单元，用于当所述语音命令信息属于当前目标语音命令信息集时，提取所述语音信号中的声纹特征信息；

第二采集单元，用于当所述声纹特征信息属于目标声纹特征集时，采集现场图像信息；

第三提取单元，用于提取所采集的图像信息中的人脸特征信息；以及

执行单元，用于在所述声纹特征信息与所述人脸特征信息对应的情况下，执行所述语音命令信息对应的操作。

根据本申请的第三个方面，提供一种电子设备，包括：

处理器；以及

存储器，存储有计算机指令，当所述计算机指令被所述处理器执行时，使得所述处理器执行第一方面所述的方法。

根据本申请的第四个方面，提供一种非瞬时性计算机存储介质，存储有计算机程序，当所述计算机程序被多个处理器执行时，使得所述处理器执行第一方面所述的方法。

根据本申请提供的一种交互设备的管理控制方法和装置，通过采集语音实现对操作人员身份的一次验证，并通过采集现场的图像信息获取人脸特征信息，保证所采集的语音对应的人员与所获取的人脸特征信息对应的人员的一致性，从而实现对操作人员身份的进一步验证。此外，在确认操作人员为授权人员后，交互设备自动执行所采集的语音中的语音命令所对应的操作，方便操作人员对交互设备的操作。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图，而并不超出本申请要求保护的范围。

图1是根据本申请实施例的一种交互设备的管理控制方法的流程图；

图2是根据本申请实施例的一种交互设备的管理控制装置的示意图；

图3是本申请实施例提供的一种电子设备的结构图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

根据本申请的一个方面，提供一种交互设备的管理控制方法。图1是根据本申请实施例的一种交互设备的管理控制方法的流程图。在本申请中，交互设备可以包括智能交互音箱、智能交互白板、智能交互平板和智能交互黑板等，交互设备可以具有多种形态，包括电子白板与投影机的组合、大屏以及大屏和黑板一体化等。如图1所示，该交互设备的管理控制方法包括如下步骤。

步骤s101，采集语音信号。

在本申请实施例中，语音信号包括用户的语音命令信息。在实际应用中，交互设备可以采用任一种方式采集语音信号，例如利用设置的麦克风采集语音信号或者利用连接的外部设备采集语音信号，这里不进行限定。为了便于说明，下面以教室的应用场景为例。

教室内的交互设备通常配备有摄像头、麦克风、音箱等音视频硬件设备。交互设备处于随时待命状态，采用(例如)麦克风采集教室内的老师、学生等发出的语音。

步骤s102，提取所述语音信号中的语音命令信息。

交互设备在收到语音信号后，提取语音信号中的语音命令信息。在一个可选的实施例中，交互设备可以基于深度学习或神经网络技术识别语音信号中的语音命令信息。例如，所提出的语音命令信息可以是“开机”、“打开电脑”、“上课”、“关机”、“关闭电脑”、“下课”、“播放视频”、“打开文件”等。

步骤s103，当所述语音命令信息属于当前目标语音命令信息集时，提取所述语音信号中的声纹特征信息。

由于交互设备可能接收到各种语音命令信息，这些语音命令信息中包括可以引起交互设备执行对应操作的语音命令信息，也包括不能引起交互设备执行对应操作的语音命令信息，即对于交互设备来说毫无意义的语音命令信息。

为了交互设备能够识别仅对能够引起执行对应操作的语音命令信息，忽略毫无意义的语音命令信息，在交互设备中存储当前目标语音命令信息集，该当前目标语音命令信息集包括所有能够引起交互设备执行对应操作的各种语音命令信息。例如，当前目标语音命令信息集包括能够引起交互设备执行对应开机和关机操作的各种语音命令信息，像“开机”、“打开电脑”、“上课”、“关机”、“关闭电脑”、“下课”等。

在判断语音命令信息属于当前目标语音命令信息集后，交互设备需要判断发出该语音命令信息的人员是否是经授权人员，交互设备需要提取所获取的语音信号中的声纹特征信息，该声纹特征信息能够区分不同人的声音，唯一识别一个人。根据声纹特征信息判断判断发出该语音命令信息的人员是否是经授权人员。

在一个可选的实施例中，在判断语音命令信息不属于当前目标语音命令信息集时，交互设备可以输出提示信息，提示操作人员语音命令信息不符合要求。例如，交互设备可以通过屏幕或音响设备输出提示信息。从而，该方法还可以包括当所述语音命令信息不属于当前目标语音命令信息集时，输出提示信息。

步骤s104，当所述声纹特征信息属于目标声纹特征集时，采集现场图像信息。

根据一个具体的实施例，交互设备中存储目标声纹特征集，该目标声纹特征集记录了所有经授权人员的声纹特征，例如，语文老师、数学老师、英语老师、设备管理员等的声纹特征。

如果判断所提取的声纹特征信息不属于目标声纹特征集，表明发出该语音命令信息的人员不是经授权人员，那么交互设备就忽略该语音命令信息，不会对该语音命令信息做出响应。在一个可选的实施例中，在判断声纹特征信息不属于目标声纹特征集时，交互设备可以输出提示信息，提示操作人员的身份未经授权。例如，交互设备可以通过屏幕或音响设备输出提示信息。

而如果判断所提取的声纹特征信息属于目标声纹特征集，表明发出该语音命令信息的人员可能是经授权人员。

然而，可能存在这样场景，发出该语音命令信息的声纹特征的确属于目标声纹特征集，但是，发出该语音命令信息的操作人员不在现场，例如只是采用播放器播放了经授权人员的声音。从而，为了保证经授权人员是在现场发出该语音命令信息，还需要采集现场图像信息。

在一个具体实施例中，可以通过交互设备的摄像头采集现场图像信息，也可以通过与交互设备处于同一场景内(如教室、会议室等)中的摄像头采集现场图像信息。

步骤s105，提取所采集的图像信息中的人脸特征信息。

交互设备在采集图像信息后，提取所采集的图像信息中的人脸特征信息，该人脸特征信息能够区分不同的人脸，唯一识别一个人。在一个可选的实施例中，交互设备可以基于深度学习或神经网络技术提取所采集的图像信息中的人脸特征信息。

步骤s106，在所述声纹特征信息与所述人脸特征信息对应的情况下，执行所述语音命令信息对应的操作。

在一个具体实施例中，交互设备中预存有声纹特征信息与人脸特征信息的对应表，即一个声纹特征信息对应一个人脸特征信息，不同的声纹特征信息对应不同的人脸特征信息。这样，如果所采集的声纹特征信息与人脸特征信息与该预存的对应表的内容一致，那么判断声纹特征信息与人脸特征信息相对应，否则，声纹特征信息与人脸特征信息不对应。

交互设备在提取声纹特征信息以及人脸特征信息后，进一步判断所提取声纹特征信息与人脸特征信息是否对应，即判断发出该语音命令信息的人员与现场采集的人脸图像对应的人员是否一致，如果不一致，那么交互设备就忽略该语音命令信息，不会对该语音命令信息做出响应；而如果一致，交互设备执行所述语音命令信息对应的操作。在一个可选的实施例中，在判断所提取声纹特征信息与人脸特征信息不对应时，交互设备可以输出提示信息，提示操作人员的身份未经授权。例如，交互设备可以通过屏幕或音响设备输出提示信息。

这样，交互设备在获知操作人员的声纹特征信息和人脸特征信息后，通过对操作人员的声纹特征信息和人脸特征信息进行双重验证，可以有效验证发出语音命令信息的人员与现场人员的一致，进一步确保操作人员是经授权人员，然后就能够自动执行该语音命令信息对应的操作，例如，开机操作、关机操作、播放视频等。。

可能存在这样的场景，教师在授课的过程中，提及了能够引起交互设备执行对应操作的语音命令信息，例如“关机”、“播放视频”等，然而，教师此时并不是想让交互设备执行对应操作，为了避免交互设备的误操作，例如，避免教师在授课的过程中关机，根据一个可选实施例中，所述在所述声纹特征信息与所述人脸信息对应的情况下，在执行所述语音命令信息对应的操作之前，所述方法可以包括如下步骤：

输出确认是否执行所述语音命令信息对应的操作的提示信息。

也就是说，交互设备会在执行语音命令信息对应的操作之前，输出提示信息，提示操作人员对该语音命令信息对应的操作的确认，在获得操作人员的确认之后，交互设备才会执行语音命令信息对应的操作。这样，可以避免由于交互设备的误操作而引起的不好的用户体验。

对于语音命令信息对应的操作，在一个具体实施例中，如果该语音命令信息对应的是“开机操作”，则交互设备自动进行开机相关的操作，该开机相关的操作可以包括自动开机、打开教学软件和登陆教学软件，例如，依次自动进行开机、打开教学软件并以该授权人员的身份自动登录教学软件的操作。

在另一个具体实施例中，如果该语音命令信息对应的是“关机操作”，则交互设备自动进行关机相关的操作，该开机相关的操作可以包括退出登陆、退出教学软件和关机，例如，依次自动进行退出教学软件账号、关闭教学软件、关机的操作。

在又一个具体实施例中，如果该语音命令信息对应的是“播放视频操作”，则交互设备自动进行播放视频相关的操作，该开机相关的操作可以包括自动打开并播放选中的视频。

需要注意的是，以上只是举出了语音命令信息对应的操作的一些具体实现方式，本领域技术人员在上述具体实现方式的教示下，可以想到的其他语音命令信息对应的操作的具体实现方式都属于本申请覆盖的范围。

交互设备在确认当前的操作人员属于经授权人员后，对于经授权人员发出的语音命令信息，会自动该执行语音命令信息对应的操作，从而方便操作人员对交互设备的操作，提高操作速度的同时降低操作人员的操作难度。

此外，还可能存在这样的场景：交互设备处于开机状态下收到“开机”的语音命令信息，或者处于关机状态下收到“关机”或“播放视频”的语音命令信息。交互设备处于特定的状态下，有些语音命令信息对于交互设备是毫无意义的。为了减少交互设备对这些毫无意义的语音命令信息做出反应，根据一个具体实施例，该方法还包括如下步骤：

步骤s107，在执行所述语音命令信息对应的操作后，更新所述当前目标语音命令信息集。

根据一个具体的实施例，交互设备中具有语音命令信息总集，其存有所有语音命令，例如，包括“开机”、“关机”、“播放语音”等语音命令信息。在执行“开机”语音命令对应的操作后，从当前目标语音命令信息集中删除“开机”语音命令信息并在当前目标语音命令信息集中保留或从语音命令信息总集中备份除“开机”语音命令之外的语音命令，例如“关机”和/或“播放语音”语音命令信息，由于当前目标语音命令信息集中没有“开机”语音命令信息，这样即使收到“开机”的语音命令信息，交互设备也会自动忽略该“开机”语音命令信息，而在收到“关机”和“播放语音”语音命令信息时，会进行正确的响应；或者，在交互设备处于关机状态下，从当前目标语音命令信息集中删除“关机”和“播放语音”语音命令信息并在当前目标语音命令信息集中保留或从语音命令信息总集中备份除“关机”和“播放语音”语音命令之外的语音命令，例如“开机”语音命令信息，这样即使收到“关机”和/或“播放语音”的语音命令信息，交互设备也会自动忽略该“关机”和/或“播放语音”语音命令信息，而在收到“开机”语音命令信息时，会进行正确的响应。

根据本申请提供的一种交互设备的管理控制方法，通过采集语音实现对操作人员身份的一次验证，并通过采集现场的图像信息获取人脸特征信息，保证所采集的语音对应的人员与所获取的人脸特征信息对应的人员的一致性，从而实现对操作人员身份的进一步验证。此外，在确认操作人员为授权人员后，交互设备自动执行所采集的语音中的语音命令所对应的操作，方便操作人员对交互设备的操作。

根据本申请的另一个方面，提供一种交互设备的管理控制装置。图2是根据本申请实施例的一种交互设备的管理控制装置的示意图。如图2所示，该交互设备的管理控制装置包括如下单元。

第一采集单元201，用于采集语音信号。

在本申请实施例中，语音信号包括用户的语音命令信息。在实际应用中，交互设备可以采用任一种方式采集语音信号，例如利用设置的麦克风采集语音信号或者利用连接的外部设备采集语音信号，这里不进行限定。

为了便于说明，下面以教室的应用场景为例。

教室内的交互设备通常配备有摄像头、麦克风、音箱等音视频硬件设备。交互设备处于随时待命状态，采用(例如)麦克风采集教室内的老师、学生等发出的语音。

第一提取单元202，用于提取所述语音信号中的语音命令信息。

交互设备在收到语音信号后，提取语音信号中的语音命令信息。在一个可选的实施例中，交互设备可以基于深度学习或神经网络技术识别语音信号中的语音命令信息。例如，所提出的语音命令信息可以是“开机”、“打开电脑”、“上课”、“关机”、“关闭电脑”、“下课”、“播放视频”、“打开文件”等。

第二提取单元203，用于当所述语音命令信息属于当前目标语音命令信息集时，提取所述语音信号中的声纹特征信息。

由于交互设备可能接收到各种语音命令信息，这些语音命令信息中包括可以引起交互设备执行对应操作的语音命令信息，也包括不能引起交互设备执行对应操作的语音命令信息，即对于交互设备来说毫无意义的语音命令信息。

为了交互设备能够识别仅对能够引起执行对应操作的语音命令信息，忽略毫无意义的语音命令信息，在交互设备中存储当前目标语音命令信息集，该当前目标语音命令信息集包括所有能够引起交互设备执行对应操作的各种语音命令信息。例如，当前目标语音命令信息集包括能够引起交互设备执行对应开机和关机操作的各种语音命令信息，像“开机”、“打开电脑”、“上课”、“关机”、“关闭电脑”、“下课”等。

在判断语音命令信息属于当前目标语音命令信息集后，交互设备需要判断发出该语音命令信息的人员是否是经授权人员，交互设备需要提取所获取的语音信号中的声纹特征信息，该声纹特征信息能够区分不同人的声音，唯一识别一个人。根据声纹特征信息判断判断发出该语音命令信息的人员是否是经授权人员。

在一个可选的实施例中，在判断语音命令信息不属于当前目标语音命令信息集时，交互设备可以输出提示信息，提示操作人员语音命令信息不符合要求。例如，交互设备可以通过屏幕或音响设备输出提示信息。从而，该装置还可以包括第一输出单元，用于当所述语音命令信息不属于当前目标语音命令信息集时，输出提示信息。

第二采集单元204，用于当所述声纹特征信息属于目标声纹特征集时，采集现场图像信息。

根据一个具体的实施例，交互设备中存储目标声纹特征集，该目标声纹特征集记录了所有经授权人员的声纹特征，例如，语文老师、数学老师、英语老师、设备管理员等的声纹特征。

如果判断所提取的声纹特征信息不属于目标声纹特征集，表明发出该语音命令信息的人员不是经授权人员，那么交互设备就忽略该语音命令信息，不会对该语音命令信息做出响应。在一个可选的实施例中，在判断声纹特征信息不属于目标声纹特征集时，交互设备可以输出提示信息，提示操作人员的身份未经授权。例如，交互设备可以通过屏幕或音响设备输出提示信息。

而如果判断所提取的声纹特征信息属于目标声纹特征集，表明发出该语音命令信息的人员可能是经授权人员。

然而，可能存在这样场景，发出该语音命令信息的声纹特征的确属于目标声纹特征集，但是，发出该语音命令信息的操作人员不在现场，例如只是采用播放器播放了经授权人员的声音。从而，为了保证经授权人员是在现场发出该语音命令信息，还需要采集现场图像信息。

在一个具体实施例中，可以通过交互设备的摄像头采集现场图像信息，也可以通过与交互设备处于同一场景内(如教室、会议室等)中的摄像头采集现场图像信息。

第三提取单元205，用于提取所采集的图像信息中的人脸特征信息。

交互设备在采集图像信息后，提取所采集的图像信息中的人脸特征信息，该人脸特征信息能够区分不同的人脸，唯一识别一个人。在一个可选的实施例中，交互设备可以基于深度学习或神经网络技术提取所采集的图像信息中的人脸特征信息。

执行单元206，用于在所述声纹特征信息与所述人脸特征信息对应的情况下，执行所述语音命令信息对应的操作。

在一个具体实施例中，交互设备中预存有声纹特征信息与人脸特征信息的对应表，即一个声纹特征信息对应一个人脸特征信息，不同的声纹特征信息对应不同的人脸特征信息。这样，如果所采集的声纹特征信息与人脸特征信息与该预存的对应表的内容一致，那么判断声纹特征信息与人脸特征信息相对应，否则，声纹特征信息与人脸特征信息不对应。

交互设备在提取声纹特征信息以及人脸特征信息后，进一步判断所提取声纹特征信息与人脸特征信息是否对应，即判断发出该语音命令信息的人员与现场采集的人脸图像对应的人员是否一致，如果不一致，那么交互设备就忽略该语音命令信息，不会对该语音命令信息做出响应；而如果一致，交互设备执行所述语音命令信息对应的操作。在一个可选的实施例中，在判断所提取声纹特征信息与人脸特征信息不对应时，交互设备可以输出提示信息，提示操作人员的身份未经授权。例如，交互设备可以通过屏幕或音响设备输出提示信息。

这样，交互设备在获知操作人员的声纹特征信息和人脸特征信息后，通过对操作人员的声纹特征信息和人脸特征信息进行双重验证，可以有效验证发出语音命令信息的人员与现场人员的一致，进一步确保操作人员是经授权人员，然后就能够自动执行该语音命令信息对应的操作，例如，开机操作、关机操作、播放视频等。

可能存在这样的场景，教师在授课的过程中，提及了能够引起交互设备执行对应操作的语音命令信息，例如“关机”、“播放视频”等，然而，教师此时并不是想让交互设备执行对应操作，为了避免交互设备的误操作，例如，避免教师在授课的过程中关机，根据一个可选实施例中，所述在所述声纹特征信息与所述人脸信息对应的情况下，在执行所述语音命令信息对应的操作之前，所述装置可以包括如下单元：

第二输出单元，用于输出确认是否执行所述语音命令信息对应的操作的提示信息。

也就是说，交互设备会在执行语音命令信息对应的操作之前，输出提示信息，提示操作人员对该语音命令信息对应的操作的确认，在获得操作人员的确认之后，交互设备才会执行语音命令信息对应的操作。这样，可以避免由于交互设备的误操作而引起的不好的用户体验。

对于语音命令信息对应的操作，在一个具体实施例中，如果该语音命令信息对应的是“开机操作”，则交互设备自动进行开机相关的操作，该开机相关的操作可以包括自动开机、打开教学软件和登陆教学软件，例如，依次自动进行开机、打开教学软件并以该授权人员的身份自动登录教学软件的操作。

在另一个具体实施例中，如果该语音命令信息对应的是“关机操作”，则交互设备自动进行关机相关的操作，该开机相关的操作可以包括退出登陆、退出教学软件和关机，例如，依次自动进行退出教学软件账号、关闭教学软件、关机的操作。

在又一个具体实施例中，如果该语音命令信息对应的是“播放视频操作”，则交互设备自动进行播放视频相关的操作，该开机相关的操作可以包括自动打开并播放选中的视频。

需要注意的是，以上只是举出了语音命令信息对应的操作的一些具体实现方式，本领域技术人员在上述具体实现方式的教示下，可以想到的其他语音命令信息对应的操作的具体实现方式都属于本申请覆盖的范围。

交互设备在确认当前的操作人员属于经授权人员后，对于经授权人员发出的语音命令信息，会自动该执行语音命令信息对应的操作，从而方便操作人员对交互设备的操作，提高操作速度的同时降低操作人员的操作难度。

此外，还可能存在这样的场景：交互设备处于开机状态下收到“开机”的语音命令信息，或者处于关机状态下收到“关机”或“播放视频”的语音命令信息。交互设备处于特定的状态下，有些语音命令信息对于交互设备是毫无意义的。为了减少交互设备对这些毫无意义的语音命令信息做出反应，根据一个实施例，该装置还包括如下单元：

更新单元207，用于在执行所述语音命令信息对应的操作后，更新所述当前目标语音命令信息集。

根据一个具体的实施例，交互设备中具有语音命令信息总集，其存有所有语音命令，例如，包括“开机”、“关机”、“播放语音”等语音命令信息。在执行“开机”语音命令对应的操作后，从当前目标语音命令信息集中删除“开机”语音命令信息并在当前目标语音命令信息集中保留或从语音命令信息总集中备份除“开机”语音命令之外的语音命令，例如“关机”和/或“播放语音”语音命令信息，由于当前目标语音命令信息集中没有“开机”语音命令信息，这样即使收到“开机”的语音命令信息，交互设备也会自动忽略该“开机”语音命令信息，而在收到“关机”和“播放语音”语音命令信息时，会进行正确的响应；或者，在交互设备处于关机状态下，从当前目标语音命令信息集中删除“关机”和“播放语音”语音命令信息并在当前目标语音命令信息集中保留或从语音命令信息总集中备份除“关机”和“播放语音”语音命令之外的语音命令，例如“开机”语音命令信息，这样即使收到“关机”和/或“播放语音”的语音命令信息，交互设备也会自动忽略该“关机”和/或“播放语音”语音命令信息，而在收到“开机”语音命令信息时，会进行正确的响应。

根据本申请提供的一种交互设备的管理控制装置，通过采集语音实现对操作人员身份的一次验证，并通过采集现场的图像信息获取人脸特征信息，保证所采集的语音对应的人员与所获取的人脸特征信息对应的人员的一致性，从而实现对操作人员身份的进一步验证。此外，在确认操作人员为授权人员后，交互设备自动执行所采集的语音中的语音命令所对应的操作，方便操作人员对交互设备的操作。

参阅图3，图3提供一种电子设备，包括处理器；以及存储器，所述存储器存储有计算机指令，当所述计算机指令被所述处理器执行时，使得所述处理器执行所述计算机指令时实现如图1所示的方法以及上述实施例提供的方法。

应该理解，上述的装置实施例仅是示意性的，本申请披露的装置还可通过其它的方式实现。例如，上述实施例中所述单元/模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。例如，多个单元、模块或组件可以结合，或者可以集成到另一个系统，或一些特征可以忽略或不执行。

另外，若无特别说明，在本申请各个实施例中的各功能单元/模块可以集成在一个单元/模块中，也可以是各个单元/模块单独物理存在，也可以两个以上单元/模块集成在一起。上述集成的单元/模块既可以采用硬件的形式实现，也可以采用软件程序模块的形式实现。

所述集成的单元/模块如果以硬件的形式实现时，该硬件可以是数字电路，模拟电路等等。硬件结构的物理实现包括但不局限于晶体管，忆阻器等等。若无特别说明，所述处理器或芯片可以是任何适当的硬件处理器，比如cpu、gpu、fpga、dsp和asic等等。若无特别说明，所述片上缓存、片外内存、存储器可以是任何适当的磁存储介质或者磁光存储介质，比如，阻变式存储器rram(resistiverandomaccessmemory)、动态随机存取存储器dram(dynamicrandomaccessmemory)、静态随机存取存储器sram(staticrandom-accessmemory)、增强动态随机存取存储器edram(enhanceddynamicrandomaccessmemory)、高带宽内存hbm(high-bandwidthmemory)、混合存储立方hmc(hybridmemorycube)等等。

所述集成的单元/模块如果以软件程序模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本披露各个实施例所述方法的全部或部分步骤。而前述的存储器包括：u盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

本申请实施例还提供一种非瞬时性计算机存储介质，存储有计算机程序，当所述计算机程序被多个处理器执行时，使得所述处理器执行如图1所示的方法以及上述实施例提供的方法。

以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明仅用于帮助理解本申请的方法及其核心思想。同时，本领域技术人员依据本申请的思想，基于本申请的具体实施方式及应用范围上做出的改变或变形之处，都属于本申请保护的范围。综上所述，本说明书内容不应理解为对本申请的限制。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。上述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述仅为本申请的具体实施例，并不用以限制本申请，凡在本申请的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本申请的保护范围之内。