一种音视频融合通信服务器的制作方法

本发明属于融合通信技术领域，具体涉及一种音视频融合通信服务器。

背景技术：

融合通信也叫统一通信，是一种利用计算机技术与传统通信技术融合一体的新通信模式，其提供包括电话、传真、文件传输、电话会议、视频会议、协作、即时消息、邮件、短信等在内的多种通信手段。视频会议系统是指两个或两个以上不同地方的个人或群体，通过传输线路以及多媒体设备，将声音、影像以及文件资料互传，实现即时且互动的沟通，以实现会议目的的系统设备。由于音视频编码格式和音视频文件格式的种类众多，以及相对受限的手机、电脑硬件资源，目前的视频会议系统根本无法满足多种视频源情况下对视频的调度需求。

技术实现要素：

本发明提出了一种音视频融合通信服务器，以解决上述背景技术中提出的问题。本发明的技术方案是这样实现的：

一种音视频融合通信服务器，包括多媒体流交换背板和主机接口，所述多媒体流交换背板包括控制处理模块、音视频编解码单元、音视频数据存储模块、视频回放模块、网络数据采集存储模块和网络对时模块，所述音视频编解码单元、音视频数据存储模块、视频回放模块、网络数据采集存储模块、网络对时模块均与所述控制处理模块电连，所述音视频编解码单元还与音视频数据存储模块电连，所述音视频编解码单元包括音视频编码单元和音视频解码单元，所述音视频编码单元包括音频a/d转换模块、音频数据采集模块、音频协议编码模块、音频码流缓冲单元、视频预处理模块、视频数据采集模块、视频协议编码模块和视频码流缓冲单元，所述音频a/d转换模块、音频数据采集模块、音频协议编码模块、音频码流缓冲单元依次连接，所述视频预处理模块、视频数据采集模块、视频协议编码模块、视频码流缓冲单元依次连接，所述音视频解码单元包括码流输入模块、码流解析模块、音频解码模块、视频解码模块和音视频同步模块，所述码流输入模块连接码流解析模块，所述码流解析模块连接音频解码模块和视频解码模块，所述音视频同步模块连接音频解码模块和视频解码模块，所述音视频编码单元能够按照g711、h264、h265、h266或ts协议对音视频流进行编码压缩，并将压缩后的音视频码分别配置在音频码流缓冲单元和视频码流缓冲单元中，所述音频码流缓冲单元、视频码流缓冲单元中的音视频码输送至音视频解码单元，所述音视频解码单元能够将接收的音视频码流按照gb/t28181、siph.323、onvif或rtsp协议进行解码，并将解码后的音频数据和视频数据同步输出。

在本发明的音视频融合通信服务器中，所述主机接口包括音视频输入接口、音视频输出接口、码流输入接口和ip数据输入接口，所述音视频输入接口接入音视频输入设备，并将待处理的音视频文件数据分别传输给音频a/d转换模块和视频预处理模块进行音视频数据的预处理，所述音视频输出接口接入音视频显控设备，经过解码的音视频数据传输至音视频显控设备上，进行图像和声音的同步输出，所述码流输入接口插入带有g711、h264、h265、h266或ts音视频流的移动ip编码板卡，并将编码好的音视频码流传输至码流输入模块，并将接收到的码流进行缓存，以供所述码流解析模块进行解析，所述ip数据输入接口接入网络数据线。

在本发明的音视频融合通信服务器中，所述控制处理模块对收到的音视频信号、网络信号进行接收和处理，并反馈至音视频编解码单元、音视频数据存储模块、视频回放模块、网络数据采集存储模块和网络对时模块，实现音视频数据的编解码、音视频数据存储、视频回放、网络数据采集存储、网络对时等功能。

在本发明的音视频融合通信服务器中，所述音视频同步模块能够通过调用控制处理模块中的音视频同步功能模块来控制音频解码模块和视频解码模块的解码速率，从而实现音视频同步输出。

在本发明的音视频融合通信服务器中，所述多媒体流交换背板为13.2gbps多媒体流交换背板。

实施本发明的这种音视频融合通信服务器，具有以下有益效果：

（1）该音视频融合通信服务器很好地解决了由多种音视频文件格式和音视频编解码格式带来的限制，能够将不同应用的音视频流实现网络化传输，实现分布式操作，互联互通。以h.323标准协议、h.264/h.265/h.266视频压缩标准协议、gb/t28181标准协议、rfc3261、rfc3550、rtsp等互联网通信标准协议为参考，对现有通信协议进行扩展与扩充，将原本相互独立的视频矩阵系统、视频监控系统、视频会议/远程教育系统、录播系统、流媒体系统等，通过以基于声像综合控制技术高清视频系统的混合矩阵设备为载体，以插卡式方式实现了各个系统之间的互联、互通、互控，特别是通过gb/t28181解码卡改变监控设备系统各自为政、相互独立状态而变成互联互通；通过3g/4g/5g移动流媒体网关以及视频会议终端实现视频会议/远程教育培训、流媒体系统等多种数字媒体的接入，以级联方式构建庞大的媒体网络，实现模拟数字媒体的联动和路由，接入支持h.323，gb/t-28181，onvif，rtsp，rtmp，hls多种协议标准，大容量分布式存储，高性能流媒体转发，包含视频会议、视频监控、数字广播、voip、即时通讯、群组对讲等核心功能等多种音视频相关协议；

（2）该音视频融合通信服务器采用纯硬件架构并行处理机制，13.2gbps接口带宽设计，模块化结构，所有输入板卡、输出板卡、控制板卡、电源模块均支持热插拔；能够实现采集同步和输出同步功能，输出与输出之间的系统误差不超过2µs；设备支持扩展h.264、h.265、h.266编码格式，h.239双流双流、媒体流转分发，最大支持100路视频流转分发；移动ip编码板支持h.264/h.265/h.266ts视频流输出,支持gb/t28181、siph.323、onvif、rtsp协议的视频流解码,单卡可支持16方视频会议，可实现将不同应用的音视频流实现网络化传输，实现分布式操作，互联互通；该音视频融合通信服务器能够支持dual-dvi、sdi、hdmi、vga、cvbs、ypbpr、ip、dvi、dp、hdbaset、fiber光纤、audio音频信号混合输入及dual-dvi、sdi、hdmi、vga、ip、dvi、dp、hdbaset、fiber光纤、audio音频等多种信号输出。

附图说明

图1为本发明音视频融合通信服务器的系统框图；

图2为本发明音视频编解码单元的系统框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

如图1和2所示的一种音视频融合通信服务器中，包括多媒体流交换背板和主机接口，多媒体流交换背板为13.2gbps多媒体流交换背板，多媒体流交换背板包括控制处理模块、音视频编解码单元、音视频数据存储模块、视频回放模块、网络数据采集存储模块和网络对时模块，音视频编解码单元、音视频数据存储模块、视频回放模块、网络数据采集存储模块、网络对时模块均与控制处理模块电连，音视频编解码单元还与音视频数据存储模块电连，控制处理模块对收到的音视频信号、网络信号进行接收和处理，并反馈至音视频编解码单元、音视频数据存储模块、视频回放模块、网络数据采集存储模块和网络对时模块，实现音视频数据的编解码、音视频数据存储、视频回放、网络数据采集存储、网络对时等功能。

音视频编解码单元包括音视频编码单元和音视频解码单元，音视频编码单元包括音频a/d转换模块、音频数据采集模块、音频协议编码模块、音频码流缓冲单元、视频预处理模块、视频数据采集模块、视频协议编码模块和视频码流缓冲单元，音频a/d转换模块、音频数据采集模块、音频协议编码模块、音频码流缓冲单元依次连接，视频预处理模块、视频数据采集模块、视频协议编码模块、视频码流缓冲单元依次连接，音视频编码单元能够按照h264协议、h265协议、h266协议或ts协议对音视频数据进行编码压缩，并将压缩后的音视频码分别配置在音频码流缓冲单元和视频码流缓冲单元中，该设备支持扩展h.264/h.265/h.266编码格式，h.239双流、媒体流转分发，最大支持100路视频流流转分发。

音频码流缓冲单元、视频码流缓冲单元中的音视频码输送至音视频解码单元，音视频解码单元包括码流输入模块、码流解析模块、音频解码模块、视频解码模块和音视频同步模块，码流输入模块连接码流解析模块，码流解析模块连接音频解码模块和视频解码模块，音视频解码单元能够将接收的音视频码流按照gb/t28181、siph.323、onvif或rtsp协议进行解码，并将解码后的音频数据和视频数据同步输出，接入onvif、usb会议摄像机，支持接入usb接口全向麦克风，支持接入卡龙头会议话筒，支持接入符合rtsp、onvif、gb/t28181摄像机，支持接入gb/t28181nvr、dvr，可实现将不同应用的音视频流实现网络化传输，实现分布式操作，互联互通，音视频同步模块连接音频解码模块和视频解码模块，音视频同步模块能够通过调用控制处理模块中的音视频同步功能模块来控制音频解码模块和视频解码模块的解码速率，从而实现音视频同步输出，输出与输出之间的系统误差不超过2µs。

主机接口包括音视频输入接口、音视频输出接口、码流输入接口和ip数据输入接口，音视频输入接口接入音视频输入设备，并将待处理的音视频文件数据分别传输给音频a/d转换模块和视频预处理模块进行音视频数据的预处理，音视频输出接口接入音视频显控设备，经过解码的音视频数据传输至音视频显控设备上，进行图像和声音的同步输出，支持dual-dvi、sdi、hdmi、vga、cvbs、ypbpr、ip、dvi、dp、hdbaset、fiber光纤、audio音频信号混合输入及dual-dvi、sdi、hdmi、vga、ip、dvi、dp、hdbaset、fiber光纤、audio音频等多种信号输出，输入输出信号支持1920x1080@60hz；3840x2160@60hz，最大支持36进36出；码流输入接口插入带有h264、h265、h266或ts视频流的移动ip编码板卡，并将编码好的音视频码流传输至码流输入模块，并将接收到的码流进行缓存，以供码流解析模块进行解析，移动ip编码板支持h.264/h.265/h.266ts视频流输出,支持gb/t28181、siph.323、onvif、rtsp协议的视频流解码,单卡可支持16方视频会议，可实现将不同应用的音视频流实现网络化传输，实现分布式操作，互联互通，ip数据输入接口接入网络数据线，主机接口还音频接口和音频码流输入接口，可支持独立音频/嵌入音频信号，支持3.5mm/5pin凤凰端子音频接口，主机接口还支持接入usb会议摄像机，支持接入usb接口全向麦克风，支持接入卡龙头会议话筒，支持接入符合rtsp、onvif、gb/t28181摄像机，支持接入gb/t28181nvr、dvr；支持通过语音网关接入voip网络电话，pc、安卓app客户端支持im即时通讯，实现视频会议、voip参与的音频会议，其中视频会议中客户端与客户端间还可使用即时通讯群组讲话，传递文字、语音、照片、视频。

该音视频融合通信服务器支持鼠键kvm直控功能，具备kvm坐席管理功能，鼠标穿透，可使用一套键盘鼠标操作任意一台需要操作的信号源电脑；任意拼接输出卡输出图像可在显示范围内任意移动、缩放、多画面、切换、叠加等，也可任意制定分屏、全屏、组合屏显示模式，单屏可同时显示4个1080p画面，16个标清画面；逆场同步技术，画面无缝同步切换，无黑场，无延时，切换时间小于等于20ms；图像开窗和预案调取响应速度小于16ms；精细化分级权限管理，分区分权操作，针对不同登陆用户设置不同权限进行控制，权限可细分至每一路输入信号和输出信号的使用权；具备场景预案功能，场景预案可分别存储在软件和硬件中，互为备份，并可独立导入导出；视频会议中pc客户端还可播放视频，使用屏幕共享功能讲解ppt、word、excel等文档和表格；融合通信系统支持接入红外探测、一键报警等报警类型，支持报警联动监控中心监控大屏；支持接入数字矩阵，上墙接拼接屏；支持音频对讲，支持数字广播。

实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。