本申请各实施例属车载k歌,尤其涉及一种车载音视频处理系统与方法。
背景技术:
1、随着智能座舱技术的不断发展,很多车辆内集成了车载歌唱系统,车载歌唱系统利用车机系统提供的音乐资源和车辆内置的麦克风,给车内人员提供唱歌服务,以缓解车内人员的乘车疲劳。现有技术中,车载歌唱系统主要是借助车机系统提供音频资源,由用户操作车机系统的显示屏,在显示屏上选择喜欢的音乐,再通过车辆的内置麦克风采集用户的歌声,利用混音技术将音乐信号与歌声进行混音处理,得到单个音频信号,从而实现车上k歌的目的。虽然,车载歌唱已经在技术上和商业上取得成功,但是,目前的车载k歌技术只支持音频处理,不具备音视频k歌的功能。
2、综上所述,现有车载k歌技术存在不支持音视频k歌的技术问题。
3、申请内容
4、针对上述现有技术存在的不足,本申请提供一种车载音视频处理系统与方法,支持音视频k歌,提升用户k歌体验。
5、第一方面,本申请提供一种车载音视频处理系统,包括:
6、音视频点歌智能盒,所述音视频点歌智能盒包括视频点歌系统和外置麦克风;所述视频点歌系统与网络连接以获取音视频信号,并将所述音视频信号分离处理,以得到音频信号和视频信号,再将所述音频信号传输至车辆dsp模块,将所述视频信号传输至视频接收器;所述外置麦克风用于检测车内人员发出的语音信号,将检测到的所述语音信号传输至车辆dsp模块;
7、视频接收器,与所述视频点歌系统无线连接,用于接收所述视频信号后投屏到车机系统的显示屏以进行播放显示;
8、车辆dsp模块,与所述外置麦克风及所述视频点歌系统信号连接,所述车辆dsp模块接收所述音频信号和所述语音信号,以进行混音处理后得到歌唱信号;
9、扬声器,与所述车辆dsp模块信号连接,用于接收所述歌唱信号进行发声播放。
10、进一步,所述视频接收器与车机系统的前排显示屏信号连接,将接收到的所述视频信号投屏到所述前排显示屏进行播放显示。
11、进一步,所述视频接收器与车机系统的后座显示屏信号连接,将接收到的所述视频信号投屏到所述后座显示屏进行播放显示。
12、进一步,所述车辆dsp模块与车辆的车机系统信号连接,在所述视频点歌系统没有向所述车辆dsp模块提供音频信号时,所述车辆dsp模块从所述车机系统获取音乐信号,并将所述音乐信号与所述语音信号进行混音处理后得到歌唱信号。
13、进一步,所述视频点歌系统对所述音视频信号的分离处理包括以下步骤:
14、提取所述音视频信号中的音频数据,以得到原始音频信号;
15、将所述原始音频信号进行分离处理,以得到只含背景音乐的音频信号和只含原唱人声的音频信号。
16、进一步,提取所述音视频信号中的音频数据时,利用音频解码器进行提取,以得到原始音频信号。
17、进一步,将所述原始音频信号进行分离处理时,利用声源分离算法进行分离处理;所述声源分离算法通过分析所述原始音频信号的特征和声学模型,以将只含背景音乐的音频信号和只含原唱人声的音频信号进行分离。
18、进一步,利用声源分离算法分离处理所述原始音频信号时,包括以下步骤:
19、设原始音频信号为xt,只含原唱人声的音频信号为x1t只含背景音乐的音频信号为x2t,xt=x1t+x2t;
20、设原始音频信号分离后的信号为yt,yt=axt,a为一组投影矩阵,用于将原始音频信号为xt转换为一组相互独立的信号,a=【ω1,ω2】,ω1,ω2是分离信号相对应的权重;
21、通过最大化信号的非高斯性计算权重向量ω1和ω2。
22、进一步,所述视频点歌系统对所述音视频信号的分离处理包括以下步骤:
23、提取出所述音视频信号中的视频信号;
24、将所述视频信号分离出只包含背景图像的视频信号和只包含前景图像的视频信号,所述只包含前景图像的视频信号为只包含歌手图像的前景视频信号。
25、第二方面,本申请提供一种车载音视频处理方法,所述车载音视频处理方法用于上述任一项所述的车载音视频处理系统;所述车载音视频处理方法包括:
26、通过音视频点歌智能盒得到音频信号和视频信号后发出;
27、通过视频接收器接收所述视频信号后投屏到车机系统的显示屏以进行播放显示;
28、通过车辆dsp模块接收所述音频信号和所述语音信号,以进行混音处理后得到歌唱信号;
29、通过扬声器接收所述歌唱信号进行发声播放。
30、本申请与现有技术相比,其有益效果如下:
31、本申请提供一种车载音视频处理系统与方法,该系统包括音视频点歌智能盒、视频接收器、车辆dsp模块以及扬声器,音视频点歌智能盒包括视频点歌系统和外置麦克风,视频点歌系统与网络连接以获取音视频信号,并将音视频信号分离处理,以得到音频信号和视频信号,再将音频信号传输至车辆dsp模块,将视频信号传输至视频接收器,外置麦克风用于检测车内人员发出的语音信号,将检测到的语音信号传输至车辆dsp模块,视频接收器与视频点歌系统无线连接,用于接收视频信号后投屏到车机系统的显示屏以进行播放显示,车辆dsp模块与外置麦克风及视频点歌系统信号连接,车辆dsp模块接收音频信号和语音信号,以进行混音处理后得到歌唱信号,扬声器与车辆dsp模块信号连接,用于接收歌唱信号进行发声播放,从而使得车载k歌系统支持视频k歌,提升用户的使用体验。
技术实现思路
1.一种车载音视频处理系统,其特征在于,包括:
2.如权利要求1所述的车载音视频处理系统,其特征在于,所述视频接收器与车机系统的前排显示屏信号连接,将接收到的所述视频信号投屏到所述前排显示屏进行播放显示。
3.如权利要求1所述的车载音视频处理系统,其特征在于,所述视频接收器与车机系统的后座显示屏信号连接,将接收到的所述视频信号投屏到所述后座显示屏进行播放显示。
4.如权利要求1所述的车载音视频处理系统,其特征在于,所述车辆dsp模块与车辆的车机系统信号连接,在所述视频点歌系统没有向所述车辆dsp模块提供音频信号时,所述车辆dsp模块从所述车机系统获取音乐信号,并将所述音乐信号与所述语音信号进行混音处理后得到歌唱信号。
5.如权利要求1-4任一项所述的车载音视频处理系统,其特征在于,所述视频点歌系统对所述音视频信号的分离处理包括以下步骤:
6.如权利要求5所述的车载音视频处理系统,其特征在于,提取所述音视频信号中的音频数据时,利用音频解码器进行提取,以得到原始音频信号。
7.如权利要求5所述的车载音视频处理系统,其特征在于,将所述原始音频信号进行分离处理时,利用声源分离算法进行分离处理;所述声源分离算法通过分析所述原始音频信号的特征和声学模型,以将只含背景音乐的音频信号和只含原唱人声的音频信号进行分离。
8.如权利要求7所述的车载音视频处理系统,其特征在于,利用声源分离算法分离处理所述原始音频信号时,包括以下步骤:
9.如权利要求1-4任一项所述的车载音视频处理系统,其特征在于,所述视频点歌系统对所述音视频信号的分离处理包括以下步骤:
10.一种车载音视频处理方法,其特征在于,所述车载音视频处理方法用于如权利要求1-9任一项所述的车载音视频处理系统;所述车载音视频处理方法包括: