显示设备、显示控制方法、装置及存储介质与流程

本发明涉及智能终端，尤其涉及一种显示设备、显示控制方法、装置及存储介质。

背景技术：

1、随着智能终端技术的不断发展，使得许多以往需要线下完成的事务可以转由线上完成，大大提高了业务效率。例如，用户可以通过互联网进行视频或音频会议，使得参与者摆脱空间限制，通过计算机、智能手机或其他设备进行远程沟通和协作。

2、然而，在用户进入在线会议时，通常需要进行严格、繁琐的验证流程，如首先需要用户使用账号、密码等进行登录，然后用户需要检查设备权限是否开启，并对设备性能进行测试，尤其是在一些需要外接设备进行操控的智能终端，如电视上，用户输入账号、密码等的操作较为不便，并且设备权限等的设置方式较为复杂，导致用户进入会议的流程和操作复杂、耗时较长，用户体验不佳。

技术实现思路

1、本发明实施例提供一种显示设备、显示控制方法、装置及存储介质，用于解决现有技术中用户加入在线会议的流程和操作较为复杂的问题。

2、为达到上述目的，本发明的实施例采用如下技术方案：

3、根据本发明实施例的一个方面，提供了一种显示设备，包括：1.一种显示设备，其特征在于，包括：显示器，被配置为显示用户界面；通信器，被配置为接收用户输入的入会指令；麦克风，被配置为采集所述用户输入的音频数据；摄像头，被配置为采集所述用户的视频数据；控制器，分别与所述显示器、所述通信器、所述麦克风和所述摄像头耦接，且被配置为：响应于所述入会指令，获取所述音频数据和所述视频数据；提取所述音频数据的音频特征和所述视频数据的视频特征；根据所述音频特征和所述视频特征中的至少一项，确定所述用户的登录类型；若所述用户的登录类型为非首次登录，则根据所述音频特征和/或所述视频特征查找所述用户的账户信息，并对所述账户信息进行验证；在所述账户信息验证通过的情况下，控制所述显示设备进入所述入会指令对应的音视频会议。

4、在一些实施例中，所述控制器还被配置为：若所述用户的登录类型为首次登录，则控制所述显示器显示信息录入界面；接收所述用户在所述信息录入界面输入的音频参考数据、视频参考数据和账户设置信息，所述账户设置信息包括所述用户的账户名称和账户密码；提取所述音频参考数据的音频参考特征和所述视频参考数据的人脸参考特征，并存储所述音频参考特征、所述人脸参考特征和所述账户设置信息。

5、在一些实施例中，所述控制器被配置为：对所述音频数据进行傅里叶变换，得到所述音频数据的音频频谱数据；提取所述音频频谱数据的各个峰值处的值，得到所述音频数据的所述音频特征。

6、在一些实施例中，所述控制器被配置为：将所述视频数据对应的视频图像帧进行灰度化处理，并将灰度化处理后的视频图像帧划分为多个子区域；针对所述视频图像帧的每个子区域，计算中心像素与各个周围像素的像素值差值，得到所述每个子区域对应的多个像素差；将各所述像素差转换为二进制数值，并根据各所述像素差对应的二进制数值，计算所述每个子区域的特征值；根据所述每个子区域的特征值，生成所有子区域的特征值矩阵，得到所述视频图像帧的视频特征，并根据所述视频图像帧的视频特征，生成所述视频数据的所述视频特征。

7、在一些实施例中，所述控制器被配置为：将所述视频特征和人脸参考特征库中的人脸参考特征进行匹配，并在所述视频特征与所述人脸参考特征库中的任一人脸参考特征匹配成功的情况下，将所述任一人脸参考特征对应的账户信息确定为所述用户的账户信息；和/或，将所述音频特征和音频参考特征库中的音频参考特征进行匹配，并在所述音频特征与所述音频参考特征库中的任一音频参考特征匹配成功的情况下，将所述任一音频参考特征对应的账户信息确定为所述用户的账户信息。

8、在一些实施例中，所述控制器还被配置为：计算所述视频特征与所述人脸参考特征库中的任一人脸参考特征的人脸相似度，在所述人脸相似度大于第一阈值的情况下，确定所述视频特征与所述任一人脸参考特征匹配成功；计算所述音频特征与音频参考特征库中的任一音频参考特征的音频相似度，在所述音频相似度大于第二阈值的情况下，确定所述音频特征与所述任一音频参考特征匹配成功。

9、在一些实施例中，所述控制器被配置为：将所述账户信息与所述用户首次登录时设置的账户设置信息进行比对，在所述账户信息与所述账户设置信息匹配时，确定所述账户信息验证通过；其中，所述账户信息与所述账户设置信息匹配包括所述账户信息中的账户名称与所述账户设置信息中的账户名称相同，且所述账户信息中的账户密码与所述账户设置信息中的账户密码相同。

10、在一些实施例中，所述控制器还被配置为：以所述用户的视频特征、音频特征和所述显示设备的硬件信息为密钥，对所述用户的账户信息进行加密。

11、在一些实施例中，所述控制器被配置为：响应于所述入会指令，确定所述显示设备的登录模式；若所述登录模式为第一登录模式，则获取所述音频数据和所述视频数据。

12、在一些实施例中，所述控制器还被配置为：若所述登录模式为第二登录模式，则控制所述显示器显示登录界面，并接收所述用户在所述登录界面输入的账户信息；在所述用户在所述登录界面输入的账户信息验证通过的情况下，检查所述摄像头和/或所述麦克风的权限状态，所述用户在所述登录界面输入的账户信息验证通过包括所述用户在所述登录界面输入的账户信息与所述用户设置的账户配置信息匹配；在所述摄像头的权限状态和所述麦克风的权限状态处于启用状态时，控制所述显示设备进入所述入会指令对应的音视频会议；以及在所述摄像头的权限状态或所述麦克风的权限状态处于未启用状态时，生成入会提示信息，所述入会提示信息用于提示所述用户入会失败。

13、在一些实施例中，所述控制器还被配置为：在所述摄像头的权限状态处于所述启用状态时，开启所述摄像头，以使所述用户对所述摄像头进行试用；和/或，在所述麦克风的权限状态处于所述启用状态时，开启所述麦克风，以使所述用户对所述麦克风进行试用；在所述用户对所述摄像头和所述麦克风试用成功时，控制所述显示设备进入所述入会指令对应的音视频会议。

14、根据本发明实施例的另一方面，提供了一种显示控制方法，应用于显示设备，所述显示设备包括麦克风和摄像头，所述方法包括：响应于用户输入的入会指令，获取所述麦克风采集的音频数据和所述摄像头采集的视频数据；提取所述音频数据的音频特征和所述视频数据的视频特征；根据所述音频特征和所述视频特征中的至少一项，确定所述用户的登录类型；若所述用户的登录类型为非首次登录，则根据所述音频特征和/或所述视频特征查找所述用户的账户信息，并对所述账户信息进行验证；在所述账户信息验证通过的情况下，控制所述显示设备进入所述入会指令对应的音视频会议。

15、根据本发明实施例的又一方面，提供了一种显示控制装置，应用于显示设备，所述显示设备包括麦克风和摄像头，所述装置包括：获取模块，用于响应于用户输入的入会指令，获取所述麦克风采集的音频数据和所述摄像头采集的视频数据；提取模块，用于提取所述音频数据的音频特征和所述视频数据的视频特征；确定模块，用于根据所述音频特征和所述视频特征中的至少一项，确定所述用户的登录类型；验证模块，用于若所述用户的登录类型为非首次登录，则根据所述音频特征和/或所述视频特征查找所述用户的账户信息，并对所述账户信息进行验证；控制模块，用于在所述账户信息验证通过的情况下，控制所述显示设备进入所述入会指令对应的音视频会议。

16、根据本发明实施例的又一方面，提供了一种计算机可读存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令在显示设备上运行时，使得显示设备执行如上所述的显示控制方法的操作。

17、根据本发明实施例提供的显示设备、显示控制方法、装置及存储介质，显示设备可以响应于用户输入的入会指令，获取麦克风采集的音频数据和摄像头采集的视频数据，提取音频数据的音频特征和视频数据的视频特征，根据音频特征和视频特征中的至少一项，确定用户的登录类型，若用户的登录类型为非首次登录，则根据音频特征和/或视频特征查找用户的账户信息，并对账户信息进行验证，在账户信息验证通过的情况下，控制显示设备进入入会指令对应的音视频会议。应用本方案，可以充分利用摄像头和麦克风等输入设备的能力，减少用户登录在线会议的步骤，简化用户操作，提升登录效率。