视频通讯方法、装置、设备以及存储介质与流程

本申请涉及数据处理，特别是涉及一种视频通讯方法、装置、设备以及存储介质。

背景技术：

1、随着互联网技术发展，人们常使用通讯设备和网络进行视频通讯，例如进行视频会议。

2、虽然视频通讯具有便利性，但由于受到通信设备和网络的限制，以至于在某些情况下可能出现语音模糊、语音延迟的情况，使视频通讯质量下降，影响视频通讯的效率。

3、因此，保证视频通讯过程的质量是目前亟需解决的一大问题。

技术实现思路

1、本申请至少提供一种视频通讯方法、装置、设备以及计算机可读存储介质。

2、本申请第一方面提供了一种视频通讯方法，包括：对获取到的视频通讯过程中的目标音频数据进行文本转换处理，得到目标文本数据；将所述目标文本数据添加至所述视频通讯过程的初始视频数据中，得到目标视频数据；将所述目标视频数据和所述目标音频数据同步发送至服务端，以使所述服务端将接收到的目标视频数据和接收到的目标音频数据转发至所述视频通讯过程中除所述目标客户端外的其它客户端。

3、在一实施例中，所述对获取到的视频通讯过程中的目标音频数据进行文本转换处理，得到目标文本数据的步骤，包括：对所述目标音频数据进行语音识别，得到初始文本数据；获取所述其它客户端的语种需求；根据所述语种需求对所述初始文本数据进行翻译处理，得到所述目标文本数据。

4、在一实施例中，所述根据所述语种需求对所述初始文本数据进行翻译处理，得到所述目标文本数据的步骤，包括：基于所述目标客户端的属性信息，判断能否对初始文本数据进行本地翻译处理；若是，则将所述初始文本数据输入预先训练好的文本翻译模型，得到所述目标文本数据；若否，则将所述初始文本数据发送至所述服务端，以使所述服务端对所述初始文本数据进行翻译处理或所述服务端将所述初始文本数据发送至所述其它客户端进行翻译处理，得到所述目标文本数据。

5、在一实施例中，所述将所述目标文本数据添加至所述视频通讯过程的视频数据中，得到目标视频数据的步骤，包括：分析所述目标文本数据的上下文信息，得到初始字幕文件；对所述初始字幕文件进行渲染处理，得到目标字幕文件；将所述目标字幕文件添加至所述视频数据，得到所述目标视频数据。

6、在一实施例中，在所述对获取到的视频通讯过程中目标客户端的目标音频数据进行文本转换处理的步骤之前，所述方法还包括：获取与所述目标客户端连接的媒体设备输入的初始音频数据；对所述初始音频数据进行音频优化处理，得到所述目标音频数据。

7、在一实施例中，所述获取与所述目标客户端连接的媒体设备输入的初始音频数据的步骤，包括：若获取到所述媒体设备的设备权限，则基于所述媒体设备获取所述初始音频数据；在所述获取与所述目标客户端连接的媒体设备输入的初始音频数据的步骤之后，所述方法还包括：检测所述初始音频数据是否异常；若是，则对所述媒体设备和/或所述初始音频数据进行分析，确定异常信息。

8、在一实施例中，所述将所述目标视频数据和所述目标音频数据同步发送至服务端，以使所述服务端将接收到的目标视频数据和接收到的目标音频数据转发至所述视频通讯过程中除所述目标客户端外的其它客户端的步骤，包括：对所述目标视频数据和所述目标音频数据进行数据打包处理，得到目标数据包；将所述目标数据包发送至所述服务端，以使所述服务端将接收到的目标数据包进行数据解包处理，得到数据解包处理后的目标视频数据和所述目标音频数据；将所述数据解包处理后的目标视频数据和所述目标音频数据发送至所述其它客户端。

9、本申请第二方面提供了一种视频通讯装置，包括：音频转换模块，用于对获取到的视频通讯过程中的目标音频数据进行文本转换处理，得到目标文本数据；文本添加模板，用于将所述目标文本数据添加至所述视频通讯过程的初始视频数据中，得到目标视频数据；数据发送模块，用于将所述目标视频数据和所述目标音频数据同步发送至服务端，以使所述服务端将接收到的目标视频数据和接收到的目标音频数据转发至所述视频通讯过程中除所述目标客户端外的其它客户端。

10、本申请第三方面提供了一种电子设备，包括存储器和处理器，处理器用于执行存储器中存储的程序指令，以实现上述视频通讯方法。

11、本申请第四方面提供了一种计算机可读存储介质，其上存储有程序指令，程序指令被处理器执行时实现上述视频通讯方法。

12、上述方案，通过获取视频通讯过程中的目标音频数据进行文本转换处理，得到目标文本数据；将目标文本数据添加至视频通讯过程的初始视频数据中，得到可字幕显示的目标视频数据；将目标视频数据和目标音频数据同步发送至服务端，以使服务端将接收到的目标视频数据和接收到的目标音频数据转发至视频通讯过程中除目标客户端外的其它客户端，由此能够将视频通讯过程的语音信息通过字幕形式进行显示，并且由客户端本地处理减轻了服务端的数据处理压力，提升了视频通讯过程的质量。

13、应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本申请。

技术特征：

1.一种视频通讯方法，其特征在于，所述方法应用于目标客户端，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述对获取到的视频通讯过程中的目标音频数据进行文本转换处理，得到目标文本数据的步骤，包括：

3.根据权利要求2所述的方法，其特征在于，所述根据所述语种需求对所述初始文本数据进行翻译处理，得到所述目标文本数据的步骤，包括：

4.根据权利要求1所述的方法，其特征在于，所述将所述目标文本数据添加至所述视频通讯过程的视频数据中，得到目标视频数据的步骤，包括：

5.根据权利要求1所述的方法，其特征在于，在所述对获取到的视频通讯过程中目标客户端的目标音频数据进行文本转换处理的步骤之前，所述方法还包括：

6.根据权利要求5所述的方法，其特征在于，所述获取与所述目标客户端连接的媒体设备输入的初始音频数据的步骤，包括：

7.根据权利要求1所述的方法，其特征在于，所述将所述目标视频数据和所述目标音频数据同步发送至服务端，以使所述服务端将接收到的目标视频数据和接收到的目标音频数据转发至所述视频通讯过程中除所述目标客户端外的其它客户端的步骤，包括：

8.一种视频通讯装置，其特征在于，所述装置包括：

9.一种电子设备，其特征在于，包括存储器和处理器，所述处理器用于执行所述存储器中存储的程序指令，以实现权利要求1至7任一项所述的方法。

10.一种计算机可读存储介质，其上存储有程序指令，其特征在于，所述程序指令被处理器执行时实现权利要求1至7任一项所述的方法。

技术总结
本申请公开了一种视频通讯方法、装置、设备以及存储介质，该视频通讯方法包括：对获取到的视频通讯过程中的目标音频数据进行文本转换处理，得到目标文本数据；将目标文本数据添加至视频通讯过程的初始视频数据中，得到目标视频数据；将目标视频数据和目标音频数据同步发送至服务端，以使服务端将接收到的目标视频数据和接收到的目标音频数据转发至视频通讯过程中除目标客户端外的其它客户端。上述方案，能够提升视频通讯过程的质量。

技术研发人员：吕少卿,俞鸣园,王克彦,曹亚曦,孙俊伟,费敏健
受保护的技术使用者：浙江华创视讯科技有限公司
技术研发日：
技术公布日：2024/2/19