基于语音识别的登录客户监督方法、装置、设备及介质与流程

本发明涉及语音识别技术领域，尤其涉及一种基于语音识别的登录客户监督方法、装置、设备及介质。

背景技术：

随着手机、电脑等电子产品的普及，越来越多的未成年人可更加方便地接触到手机、电脑等，而家长很难对未成年人使用电子产品进行监管，仅能通过一定技术手段限定未成年人使用网络游戏程序。常规技术方法中通常是采用对登录账号进行区别监管的方式限制未成年人使用电子产品运行网络游戏程序，若当前登录账号为未成年人，则对应限定当前登录账号使用电子产品运行网络游戏程序的时长，超出一定时长则对当前登录账号采取强制监管措施，以实现对登录账号的监督功能。然而实际使用过程中通常存在未成年人借用成年父母的登录账号运行网络游戏程序的情形，当前登录账号为成年人则可规避现有的登录账号监督措施，因而现有的监督方法无法对电子产品的使用者进行有效监督。因此，现有技术中的监督方法存在无法对实际使用者进行有效监督的问题。

技术实现要素：

本发明实施例提供了一种基于语音识别的登录客户监督方法、装置、设备及介质，旨在解决现有技术中的监督方法所存在的无法对实际使用者进行有效监督的问题。

第一方面，本发明实施例提供了一种基于语音识别的登录客户监督方法，应用于管理服务器中，所述管理服务器与客户端通过网络连接进行数据信息的传输，其中，该方法包括：

若接收到所述客户端发送的登录请求，根据预存的注册信息表对所述登录请求是否通过进行验证；

若所述登录请求验证通过，将所述登录请求对应的客户作为已登录客户，记录所述已登录客户的登录时长并反馈登录成功的提示信息至所述客户端；

判断所述登录时长是否满足与所述已登录客户相匹配的监督规则；

若所述登录时长满足所述监督规则，根据所述登录时长及预设截取周期从所述客户端发送的语音信息中截取得到语音片段；

根据预置的语音识别模型对所述语音片段进行识别得到对应的识别结果；

获取所述注册信息表中与所述已登录客户对应的客户注册信息，并验证所述识别结果是否与所述客户注册信息相一致；

若所述识别结果与所述客户注册信息相一致，返回执行所述判断所述登录时长是否满足与所述已登录客户相匹配的监督规则的步骤；

若所述识别结果不与所述客户注册信息相一致或所述登录时长不满足所述监督规则，反馈强制退出登录的提示信息至所述客户端。

第二方面，本发明实施例提供了一种基于语音识别的登录客户监督装置，其中，所述装置包括：

登录请求验证单元，用于若接收到所述客户端发送的登录请求，根据预存的注册信息表对所述登录请求是否通过进行验证；

登录提示信息反馈单元，用于若所述登录请求验证通过，将所述登录请求对应的客户作为已登录客户，记录所述已登录客户的登录时长并反馈登录成功的提示信息至所述客户端；

登录时长判断单元，用于判断所述登录时长是否满足与所述已登录客户相匹配的监督规则；

语音片段截取单元，用于若所述登录时长满足所述监督规则，根据所述登录时长及预设截取周期从所述客户端发送的语音信息中截取得到语音片段；

语音识别结果获取单元，用于根据预置的语音识别模型对所述语音片段进行识别得到对应的识别结果；

识别结果验证单元，用于获取所述注册信息表中与所述已登录客户对应的客户注册信息，并验证所述识别结果是否与所述客户注册信息相一致；

返回执行单元，用于若所述识别结果与所述客户注册信息相一致，返回执行所述判断所述登录时长是否满足与所述已登录客户相匹配的监督规则的步骤；

退出登录提示信息反馈单元，用于若所述识别结果不与所述客户注册信息相一致或所述登录时长不满足所述监督规则，反馈强制退出登录的提示信息至所述客户端。

第三方面，本发明实施例又提供了一种计算机设备，其中，所述计算机设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序以实现上述第一方面所述的基于语音识别的登录客户监督方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其中，所述计算机可读存储介质存储有计算机程序，当所述计算机程序被处理器执行时实现上述第一方面所述的基于语音识别的登录客户监督方法。

本发明实施例提供了一种基于语音识别的登录客户监督方法、装置、设备及介质。对客户端发送的登录请求进行验证，若验证通过记录当前登录客户的登录时长，判断登录时长是否满足对应监督规则，若满足监督规则则从客户端发送的语音信息中截取语音片段并输入语音识别模型进行识别得到识别结果，判断识别结果是否与已登录客户的客户注册信息相一致，若相一致则返回判断登录时长是否满足对应监督规则，若不相一致则反馈强制退出登录的提示信息。通过上述方法，可基于客户输入的语音信息获取相应识别结果，并验证识别结果是否与客户注册信息相一致，以验证实际使用者是否与登录客户相匹配，从而实现对登录客户进行有效监督，大幅提高了监督的可靠性。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1为本发明实施例提供的基于语音识别的登录客户监督方法的流程示意图；

图2为本发明实施例提供的基于语音识别的登录客户监督方法的应用场景示意图；

图3为本发明实施例提供的基于语音识别的登录客户监督方法的子流程示意图；

图4为本发明实施例提供的基于语音识别的登录客户监督方法的另一子流程示意图；

图5为本发明实施例提供的基于语音识别的登录客户监督方法的另一子流程示意图；

图6为本发明实施例提供的基于语音识别的登录客户监督方法的另一子流程示意图；

图7为本发明实施例提供的基于语音识别的登录客户监督方法的另一流程示意图；

图8为本发明实施例提供的基于语音识别的登录客户监督方法的另一子流程示意图；

图9为本发明实施例提供的基于语音识别的登录客户监督装置的示意性框图；

图10为本发明实施例提供的计算机设备的示意性框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

请参阅图1及图2，图1是本发明实施例提供的基于语音识别的登录客户监督方法的流程示意图，图2为本发明实施例提供的基于语音识别的登录客户监督方法的应用场景示意图；该基于语音识别的登录客户监督方法应用于管理服务器10中，管理服务器10与客户端20通过网络连接进行数据信息的传输，该基于语音识别的登录客户监督方法通过安装于管理服务器10中的应用软件进行执行，客户端20即是用于安装应用程序以供客户使用的终端设备，例如台式电脑、笔记本电脑、平板电脑或手机等，客户端20包括可采集用于语音信息并发送至管理服务器10的功能，管理服务器10即是可接收客户端发送的登录请求并进行验证以及获取客户端发送的语音信息进行识别的服务器端，如企业或政府部门所构建的服务器。如图1所示，该方法包括步骤s110～s180。

s110、若接收到所述客户端发送的登录请求，根据预存的注册信息表对所述登录请求是否通过进行验证。

若接收到所述客户端发送的登录请求，根据预存的注册信息表对所述登录请求是否通过进行验证。客户端的使用者即为客户，客户可通过点击运行按钮以在客户端中运行相应应用程序，在使用该应用程序的相应功能之前需要进行登录，此时客户可在该应用程序中输入登录信息，则该应用程序基于客户输入的登录信息生成对应的登录请求并发送至管理服务器，管理服务器接收到客户端发送的登录请求并对登录请求进行验证。例如，客户使用客户端运行该客户端中安装的游戏程序，则需要先输入登录信息以登录该游戏程序，才能使用该游戏程序的游戏功能进行游戏。其中，注册信息表即为对客户所输入的客户注册信息进行存储的数据表，客户第一次使用应用程序需要进行注册，则客户所输入至管理服务器的客户注册信息被管理服务器存储至注册信息表中。可通过注册信息表中对应的客户信息对登录请求是否通过进行验证，具体的，登录请求中包含登录用户名和登录密码，可根据登录用户名从注册信息表中获取对应的注册密码，基于注册密码判断登录密码是否与注册密码相一致，若相一致则登录请求验证通过，若不相一致则登录请求验证不通过。

s120、若所述登录请求验证通过，将所述登录请求对应的客户作为已登录客户，记录所述已登录客户的登录时长并反馈登录成功的提示信息至所述客户端。

若所述登录请求验证通过，将所述登录请求对应的客户作为已登录客户，记录所述已登录客户的登录时长并反馈登录成功的提示信息至所述客户端。若登录请求验证通过，则客户可使用客户端中应用程序的相应功能，此时可将与该登录请求对应的客户作为已登录客户，并记录已登录客户的登录时长并反馈登录成功的提示信息至该客户端，则该客户端的应用程序接收到登录成功的提示信息后进入应用功能界面以供客户使用，其中登录时长可以包含当日登录的总时长以及本次登录的时长。

s130、判断所述登录时长是否满足与所述已登录客户相匹配的监督规则。

判断所述登录时长是否满足与所述已登录客户相匹配的监督规则。具体的，可获取与已登录客户相匹配的监督规则，监督规则即为对已登录客户进行监督的具体规则，管理服务器可通过监督规则对已登录客户进行实时监督，从而判断已登录客户是否满足监督规则，若不满足监督规则则可发送强制退出登录的提示信息至相应客户端，客户端中的应用程序接收到强制退出登录的提示信息后即退出应用功能界面，此时客户则无法继续使用该应用程序的相应功能。

在一实施例中，如图3所示，步骤s130包括子步骤s131和s132。

s131、从预存的规则库中获取与当前时间及所述已登录客户相匹配的一条规则作为监督规则。

具体的，管理服务器中配置有规则库，规则库即为对规则进行存储的数据库，规则库中存储有多条规则，不同人群、不同时间段均对应不同的规则，规则库中与当前时间及已登录客户相匹配的有且仅有一条规则。

例如，可将时间对应拆分得到三个不同的时间段：工作日普通时段、工作日宵禁时段、节假日时段，可将年龄对应拆分得到四个不同的年龄段：0-8岁、9-14岁，15-17岁、18岁及以上，可根据客户的实名情况拆分得到两个不同的实名类型：已实名、未实名；时间段、年龄段及实名类型中任意一种分类信息相互组合即对应作为一条规则的限定条件，则规则库中可对应包含24条具体规则。若某一客户的客户注册信息中年龄为15岁、实名类型为已实名，当前时间位于工作日普通时段，则可确定对应的限定条件为年龄段15-17岁、时间段工作日普通时段、实名类型为已实名，获取满足该限定条件的唯一一条规则作为对应的监督规则，未成年人的监督规则比成年人的监督规则更加严格，未实名客户的监督规则比已实名的客户的监督规则更加严格。

s132、判断所述登录时长是否超出所述监督规则中的时长阈值，以得到所述登录时长是否满足所述监督规则的判断结果。

可判断登录时长是否超出监督规则中的时长阈值，具体的，时长阈值中包括单次登录时长阈值及单日登录时长阈值，可对本次登录时长是否超出单次登录时长阈值进行判断，并对当日登录总时长是否超出单日登录时长阈值进行判断，若本次登录时长未超出单次登录时长阈值且当日登录总时长未超出单日登录时长阈值，则得到登录时长满足监督规则的判断结果；否则得到登录时长不满足监督规则的判断结果。

在一实施例中，如图7所示，步骤s130之后还包括步骤s1310和s1320。

s1310、若接收到客户端发送的付款请求信息，判断所述付款请求信息是否满足所述监督规则。

在更具体的实施例中，还可对客户端发送的付款请求信息是否满足监督规则进行判断。未避免未成年人在使用应用程序时冲动消费，可在监督规则中设置金额阈值，并判断付款请求信息中的消费金额是否超出对应的金额阈值，以判断付款请求是否满足相应监督规则，若付款请求不满足相应监督规则，则反馈付款失败的提示信息至所述客户端，此时管理服务器不对付款请求信息进行结算；否则反馈付款成功的提示信息至客户端，此时管理服务器根据付款请求信息中的付款金额完成结算。

在一实施例中，如图8所示，步骤s1310包括子步骤s1311、s1312和s1313。

s1311、判断所述付款请求信息中的消费金额是否超出所述监督规则中的金额阈值。

可判断付款请求信息中的消费金额是否超出监督规则中的金额阈值，付款请求信息的消费金额即为单次消费金额，则此时的金额阈值仅包含单次消费金额阈值，判断付款请求信息的消费金额是否超出单次消费金额阈值。在更具体的实施例中，还可获取与付款请求信息对应的客户的历史消费记录，并获取该客户的当月消费总金额，可在金额阈值中配置月度消费金额阈值，在金额阈值未超出单词消费金额阈值的前提下，再次判断客户的当月消费总金额是否超出月度消费金额阈值，若未超出则得到消费金额未超出金额阈值的判断结果；否则得到消费金额超出金额阈值的判断结果。

s1312、若所述消费金额未超出所述金额阈值，得到所述付款请求信息满足所述监督规则的判断结果；s1313、若所述消费金额超出所述金额阈值，得到所述付款请求信息不满足所述监督规则的判断结果。

若消费金额未超出金额阈值，得到付款请求信息满足监督规则的判断结果，此时可继续执行后续步骤，也即是继续执行步骤s140；若消费金额超出金额阈值，则得到付款请求信息不满足监督规则的判断结果。

s1320、若所述付款请求信息不满足所述监督规则，反馈付款失败的提示信息至所述客户端。

若付款请求信息不满足监督规则，则可反馈付款失败的提示信息至客户端，此时管理服务器不对付款请求信息进行结算，则客户无法进行消费。

s140、若所述登录时长满足所述监督规则，根据所述登录时长及预设截取周期从所述客户端发送的语音信息中截取得到语音片段。

若所述登录时长满足所述监督规则，根据所述登录时长及预设截取周期从所述客户端发送的语音信息中截取得到语音片段。客户在使用客户端时会发送语音信息至管理服务器，管理服务器获取语音信息并传输至其它客户端，以使语音信息在多个客户端之间进行传导并实现实时语音通话，则管理服务器可根据已登录客户的登录时长以及预设截取周期，从该客户端发送的语音信息中截取得到相应语音片段。

在一实施例中，如图4所示，步骤s140包括子步骤s141和s142。

s141、根据所述登录时长及预设截取周期确定对应的截取时间段。

可根据登录时长及预设截取周期确定对应的截取时间段，例如截取周期为10分钟，截取时长为10秒，则确定截取时间段为用户本次登录时长的9m50s-10m0s。

s142、根据所述截取时间段从所述语音信息中截取对应的语音片段。

可根据截取时间段从客户端输入的语音信息中截取对应的语音片段，则该语音片段的时长为10秒。此外，还可对截取到的语音片段的平均响度进行判断，若语音片段的平均响度未超出预置的响度阈值，则从客户端输入的语音信息中重新截取下一段语音片段，如确定下一截取时间段为用户本次登录时长的10m05s-10m15s，并对应截取下一段语音片段；否则，执行后续步骤对语音片段进行处理。

s150、根据预置的语音识别模型对所述语音片段进行识别得到对应的识别结果。

根据预置的语音识别模型对所述语音片段进行识别得到对应的识别结果。其中，所述语音识别模型包括频谱转换规则、频率转换公式、逆变换规则及语音识别神经网络。语音片段中包含客户使用声音进行表达的一句话语，可通过语音识别模型对语音片段进行识别，识别结果即为对语音片段中的特征进行识别所得到的结果，识别结果包括性别类型信息及年龄分类信息。

在一实施例中，如图5所示，步骤s150包括子步骤s151、s152、s153、s154和s155。

s151、对所述语音片段进行分帧处理得到对应的多帧音频信息。

语音在计算机中以包含音轨的声谱图进行表示，声谱图中包含很多帧，每一帧即对应一个时间单元，则可从语音片段的声谱图中获取得到每一帧音频信息，每一帧音频信息即对应一个时间单元内所包含的音频信息。

s152、根据预置的单位时间及所述频谱转换规则将每一所述单位时间内包含的所述音频信息转换为对应的音频频谱。

可根据单位时间对音频信息进行分段得到多个音频信息段，每一音频信息段中均对应一个单位时间内包含的多帧音频信息，可根据频谱转换规则对得到的每一音频信息段进行快速傅里叶变换(fastfouriertransform，fft)然后逆时针旋转90度，得到与每一音频信息段对应的音频频谱，在音频频谱中的频谱表示频率与能量的关系。例如，单位时间可设置为0.02秒。

s153、根据所述频率转换公式将每一所述音频频谱转换为对应的非线性音频频谱。

根据频率转换公式将以线性方式表示的音频频谱转换为非线性音频频谱，为进一步凸显语音片段中的声音特征，可将以线性方式表示的音频频谱转换为非线性音频频谱。音频频谱及非线性音频频谱均可采用频谱曲线进行表示，则频谱曲线由多个连续的频谱值所组成。

具体的，频率转换公式可采用公式(1)进行表示：

mel(f)＝r×log(1+f/t)(1)；

其中mel(f)为转换后非线性音频频谱的频谱值，f为音频音频的频率值，r和t均为公式中预设的参数值。

s154、根据所述逆变换规则对每一所述非线性音频频谱进行逆变换得到与每一所述非线性音频频谱对应的多个音频系数作为所述语音片段的音频特征信息。

可根据逆变换规则对每一非线性音频频谱进行逆变换，具体的，对所得到的一个非线性音频频谱取对数后进行离散余弦变换(discretecosinetransform，dct)，取进行离散余弦变换的第2个至第12个系数进行组合以得到与该非线性音频频谱对应的音频系数，则从每一非线性音频频谱可对应获取得到11个维度的音频系数，获取每一非线性音频频谱对应的音频系数即可得到与语音片段对应的音频特征信息。

s155、将所述音频特征信息输入所述语音识别神经网络进行识别以获取对应的识别结果。

将语音片段对应的音频特征信息输入语音识别神经网络进行识别，即可获取到对应的识别结果。语音识别神经网络即为对音频特征信息进行识别的神经网络，具体的，语音识别神经网络可由一个输入层、多个中间层及一个输出层组成，输入层与中间层之间、中间层与其他中间层之间、中间层与输出层之间均通过关联公式进行连接，输入层中所包含输入节点的数量与音频特征信息所包含的音频系数的数量相等，则每一音频系数可作为对应的一个输入节点的输入节点值，输出层可包含多个输出节点，每一输出节点可对应一个性别类型或一个年龄分类，将所得到的音频特征信息经输入层输入语音识别神经网络，进行识别后即可从输出层获取相应输出结果，输出结果包含每一输出节点的输出节点值，获取性别类型对应的输出节点值中最大的一个输出节点值的输出节点的性别类型作为性别类型信息，如性别类型可以包括男性、女性两种类型；获取年龄分类对应的输出节点值中最大的一个输出节点值的输出节点的年龄分类作为年龄分类信息，如年龄分类可以包括儿童(0-8岁)、少年(9-14岁)、青年(15-17岁)及成年(18岁及以上)四个类别，则获取性别类型信息及年龄分类信息即可得到相应识别结果。

s160、获取所述注册信息表中与所述已登录客户对应的客户注册信息，并验证所述识别结果是否与所述客户注册信息相一致。

获取所述注册信息表中与所述已登录客户对应的客户注册信息，并验证所述识别结果是否与所述客户注册信息相一致。其中，所述识别结果包括性别类型信息及年龄分类信息。可获取注册信息表中与已登录客户相匹配的客户注册信息，客户注册信息中包含客户的性别、年龄等个人信息，则可对识别结果是否与客户注册信息相一致进行判断。

在实际应用过程中，还可从注册信息表中获取与已登录客户对应的目标音频特征信息，目标音频特征信息即为从客户在进行注册时输入的一段语音信息中所提取得到的与该客户相匹配的特征信息，可将获取到的音频特征信息与目标音频特征信息是否相匹配进行验证。可在验证识别结果与注册信息相一致之后，对音频特征信息与目标音频特征信息是否相匹配进行补充验证以增强验证的可靠性，若音频特征信息与目标音频特征信息相匹配，则返回执行所述判断所述登录时长是否满足与所述已登录客户相匹配的监督规则的步骤；若音频特征信息与目标音频特征信息不相匹配，则反馈强制退出登录的提示信息至所述客户端。验证音频特征信息与目标音频特征信息是否相匹配的具体步骤可以是，获取音频特征信息中每一维度的数值与目标音频特征信息相同维度数值之间的差值的绝对值，将该差值的绝对值除以目标音频特征信息中相应维度的数值，得到每一维度的差别值并进行累加，得到音频特征信息与目标音频特征信息之间的总体差别值，判断总体差别值是否不大于预设的差别阈值，若总体差别值不大于差别阈值，则验证得到音频特征信息与目标音频特征信息相匹配，否则验证得到音频特征信息与目标音频特征信息不相匹配。

在一实施例中，如图6所示，步骤s160包括子步骤s161、s162、s163和s164。

s161、对所述客户注册信息中的性别是否与所述性别类型信息相同进行判断；s162、若所述客户注册信息中的性别与所述性别类型信息相同，对所述客户注册信息中的年龄是否与所述年龄分类信息相一致进行判断；s163、若所述客户注册信息中的年龄与所述年龄分类信息相一致，验证得到所述识别结果与所述客户注册信息相一致。

可对客户注册信息中的性别是否与识别结果中的性别类型信息相同进行判断，若相同，则继续判断客户注册信息中的年龄是否与识别结果中的年龄分类信息相一致，也即是判断客户注册信息中的年龄是否属于年龄分类信息对应的年龄范围之内，若年龄与年龄分类信息相一致，则验证得到识别结果与客户注册信息相一致。

s164、若所述客户注册信息中的性别不与所述性别类型信息相同，或所述客户注册信息中的年龄不与所述年龄分类信息相一致，验证得到所述识别结果不与所述客户注册信息相一致。

若客户注册信息中的性别不与性别类型信息相同，或者是客户注册信息中的年龄不与年龄分类信息相一致，则验证得到识别结果不与客户注册信息相一致。

s170、若所述识别结果与所述客户注册信息相一致，返回执行所述判断所述登录时长是否满足与所述已登录客户相匹配的监督规则的步骤；s180、若所述识别结果不与所述客户注册信息相一致或所述登录时长不满足所述监督规则，反馈强制退出登录的提示信息至所述客户端。

若识别结果与客户注册信息相一致，则返回执行判断登录时长是否满足与所述已登录客户相匹配的监督规则的步骤，也即是返回执行步骤s130；若登录时长不满足监督规则，则可反馈强制退出登录的提示信息至客户端；若识别结果不与客户注册信息相一致，则表明此时使用客户端的使用者可能与已登录客户不一致，此时也可反馈强制退出登录的提示信息至客户端，则客户端中的应用程序接收到强制退出登录的提示信息后即退出应用功能界面，此时客户则无法继续使用该应用程序的相应功能。

在本发明实施例所提供的基于语音识别的登录客户监督方法中，对客户端发送的登录请求进行验证，若验证通过记录当前登录客户的登录时长，判断登录时长是否满足对应监督规则，若满足监督规则则从客户端发送的语音信息中截取语音片段并输入语音识别模型进行识别得到识别结果，判断识别结果是否与已登录客户的客户注册信息相一致，若相一致则返回判断登录时长是否满足对应监督规则，若不相一致则反馈强制退出登录的提示信息。通过上述方法，可基于客户输入的语音信息获取相应识别结果，并验证识别结果是否与客户注册信息相一致，以验证实际使用者是否与登录客户相匹配，从而实现对登录客户进行有效监督，大幅提高了监督的可靠性。

本发明实施例还提供一种基于语音识别的登录客户监督装置100，该基于语音识别的登录客户监督装置用于执行前述的基于语音识别的登录客户监督方法的任一实施例。具体地，请参阅图9，图9为本发明实施例提供的基于语音识别的登录客户监督装置的示意性框图。

如图9所示，基于语音识别的登录客户监督装置100包括登录请求验证单元110、登录提示信息反馈单元120、登录时长判断单元130、语音片段截取单元140、语音识别结果获取单元150、识别结果验证单元160、返回执行单元170和退出登录提示信息反馈单元180。

登录请求验证单元110，用于若接收到所述客户端发送的登录请求，根据预存的注册信息表对所述登录请求是否通过进行验证；

登录提示信息反馈单元120，用于若所述登录请求验证通过，将所述登录请求对应的客户作为已登录客户，记录所述已登录客户的登录时长并反馈登录成功的提示信息至所述客户端。

登录时长判断单元130，用于判断所述登录时长是否满足与所述已登录客户相匹配的监督规则。

在一实施例中，所述登录时长判断单元130包括子单元：监督规则获取单元，用于从预存的规则库中获取与当前时间及所述已登录客户相匹配的一条规则作为监督规则；判断单元，用于判断所述登录时长是否超出所述监督规则中的时长阈值，以得到所述登录时长是否满足所述监督规则的判断结果。

在一实施例中，所述基于语音识别的登录客户监督装置100还包括子单元：付款请求信息判断单元，用于若接收到客户端发送的付款请求信息，判断所述付款请求信息是否满足所述监督规则；付款失败提示信息反馈单元，用于若所述付款请求信息不满足所述监督规则，反馈付款失败的提示信息至所述客户端。

在一实施例中，所述付款请求信息判断单元包括子单元：消费金额判断单元，用于判断所述付款请求信息中的消费金额是否超出所述监督规则中的金额阈值；第一判断结果获取单元，用于若所述消费金额未超出所述金额阈值，得到所述付款请求信息满足所述监督规则的判断结果；第二判断结果获取单元，用于若所述消费金额超出所述金额阈值，得到所述付款请求信息不满足所述监督规则的判断结果。

语音片段截取单元140，用于若所述登录时长满足所述监督规则，根据所述登录时长及预设截取周期从所述客户端发送的语音信息中截取得到语音片段。

在一实施例中，所述语音片段截取单元140包括子单元：截取时间段获取单元，用于根据所述登录时长及预设截取周期确定对应的截取时间段；语音片段获取单元，用于根据所述截取时间段从所述语音信息中截取对应的语音片段。

语音识别结果获取单元150，用于根据预置的语音识别模型对所述语音片段进行识别得到对应的识别结果。

在一实施例中，所述语音识别结果获取单元150包括子单元：语音片段分帧单元，用于对所述语音片段进行分帧处理得到对应的多帧音频信息；音频频谱获取单元，用于根据预置的单位时间及所述频谱转换规则将每一所述单位时间内包含的所述音频信息转换为对应的音频频谱；音频频谱转换单元，用于根据所述频率转换公式将每一所述音频频谱转换为对应的非线性音频频谱；音频特征信息获取单元，用于根据所述逆变换规则对每一所述非线性音频频谱进行逆变换得到与每一所述非线性音频频谱对应的多个音频系数作为所述语音片段的音频特征信息；识别单元，用于将所述音频特征信息输入所述语音识别神经网络进行识别以获取对应的识别结果。

识别结果验证单元160，用于获取所述注册信息表中与所述已登录客户对应的客户注册信息，并验证所述识别结果是否与所述客户注册信息相一致。

在一实施例中，所述识别结果验证单元160包括子单元：性别判断单元，用于对所述客户注册信息中的性别是否与所述性别类型信息相同进行判断；年龄判断单元，用于若所述客户注册信息中的性别与所述性别类型信息相同，对所述客户注册信息中的年龄是否与所述年龄分类信息相一致进行判断；第一验证结果获取单元，用于若所述客户注册信息中的年龄与所述年龄分类信息相一致，验证得到所述识别结果与所述客户注册信息相一致；第二验证结果获取单元，用于若所述客户注册信息中的性别不与所述性别类型信息相同，或所述客户注册信息中的年龄不与所述年龄分类信息相一致，验证得到所述识别结果不与所述客户注册信息相一致。

返回执行单元170，用于若所述识别结果与所述客户注册信息相一致，返回执行所述判断所述登录时长是否满足与所述已登录客户相匹配的监督规则的步骤。

退出登录提示信息反馈单元180，用于若所述识别结果不与所述客户注册信息相一致或所述登录时长不满足所述监督规则，反馈强制退出登录的提示信息至所述客户端。

在本发明实施例所提供的基于语音识别的登录客户监督装置应用上述基于语音识别的登录客户监督方法，对客户端发送的登录请求进行验证，若验证通过记录当前登录客户的登录时长，判断登录时长是否满足对应监督规则，若满足监督规则则从客户端发送的语音信息中截取语音片段并输入语音识别模型进行识别得到识别结果，判断识别结果是否与已登录客户的客户注册信息相一致，若相一致则返回判断登录时长是否满足对应监督规则，若不相一致则反馈强制退出登录的提示信息。通过上述方法，可基于客户输入的语音信息获取相应识别结果，并验证识别结果是否与客户注册信息相一致，以验证实际使用者是否与登录客户相匹配，从而实现对登录客户进行有效监督，大幅提高了监督的可靠性。

上述基于语音识别的登录客户监督装置可以实现为计算机程序的形式，该计算机程序可以在如图10所示的计算机设备上运行。

请参阅图10，图10是本发明实施例提供的计算机设备的示意性框图。该计算机设备可以是用于执行基于语音识别的登录客户监督方法以对登录客户进行实时监督的管理服务器10。

参阅图10，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括存储介质503和内存储器504。

该存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行基于语音识别的登录客户监督方法，其中，存储介质503可以为易失性的存储介质或非易失性的存储介质。

该处理器502用于提供计算和控制能力，支撑整个计算机设备500的运行。

该内存储器504为存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行基于语音识别的登录客户监督方法。

该网络接口505用于进行网络通信，如提供数据信息的传输等。本领域技术人员可以理解，图10中示出的结构，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现上述的基于语音识别的登录客户监督方法中对应的功能。

本领域技术人员可以理解，图10中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定，在其它实施例中，计算机设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。例如，在一些实施例中，计算机设备可以仅包括存储器及处理器，在这样的实施例中，存储器及处理器的结构及功能与图10所示实施例一致，在此不再赘述。

应当理解，在本发明实施例中，处理器502可以是中央处理单元(centralprocessingunit，cpu)，该处理器502还可以是其它通用处理器、数字信号处理器(digitalsignalprocessor，dsp)、专用集成电路(applicationspecificintegratedcircuit，asic)、现成可编程门阵列(field-programmablegatearray，fpga)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为易失性或非易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序，当所述计算机程序被处理器执行时实现上述的基于语音识别的登录客户监督方法。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的设备、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本发明所提供的几个实施例中，应该理解到，所揭露的设备、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为逻辑功能划分，实际实现时可以有另外的划分方式，也可以将具有相同功能的单元集合成一个单元，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个计算机可读存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的计算机可读存储介质包括：u盘、移动硬盘、只读存储器(rom，read-onlymemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。