流)中分离出解码后视频信号和解码后音频信号，再分别从解码后视频信号和解码后音频信号中提取出各自的同步信号，并且将各自的同步信号予以输出。
[0107]比如，如图9所示，可以将各自的同步信号输出到编码端的延迟器，由编码端的延迟器判断音频同步信号与视频同步信号是否同步，如果不同步，则由编码端的延迟器对视频信号和音频信号进行同步处理。
[0108]再比如，也可以将各自的同步信号输出到解码端的判断器，由解码端的判断器判断音频同步信号与视频同步信号是否同步，如果不同步，则向编码端的延迟器发送调整时间差，最后由编码端的延迟器基于调整时间差该对视频信号和音频信号进行同步处理。
[0109]实际上，可以通过多种形式来具体实施本发明实施方式所提出的音视频同步方法。
[0110]比如，可以遵循一定规范的应用程序接口，将音视频同步方法编写为安装到个人电脑、移动终端等中的插件程序，也可以将其封装为应用程序以供用户自行下载使用。当编写为插件程序时，可以将其实施为oCX、dll、Cab等多种插件形式。也可以通过Flash插件、RealPlayer插件、MMS插件、MIDI五线谱插件、ActiveX插件等具体技术来实施本发明实施方式所提出的音视频同步方法。
[0111]可以通过指令或指令集存储的储存方式将本发明实施方式所提出的音视频同步方法存储在各种存储介质上。这些存储介质包括但是不局限于:软盘、光盘、DVD、硬盘、闪存、U盘、CF卡、SD卡、MMC卡、SM卡、记忆棒(Memory Stick)、xD卡等。
[0112]另外，还可以将本发明实施方式所提出的音视频同步方法应用到基于闪存(Nandflash)的存储介质中，比如U盘、CF卡、SD卡、SDHC卡、MMC卡、SM卡、记忆棒、xD卡等。
[0113]综上所述，在编码端接收输入码流，将所述输入码流分离为视频信号和音频信号，并在所述视频信号中嵌入视频同步信号，在所述音频信号中嵌入音频同步信号，再将所述视频信号和音频信号封装为输出码流；在解码端从输出码流中解析出视频信号和音频信号，从视频信号中提取出视频同步信号，从音频信号中提取出音频同步信号，并当所述音频同步信号与视频同步信号不同步时，向编码端发送信号调整信息。由此可见，应用本发明实施方式之后，可以在音视频内容中嵌入各自的同步信息，并且可以基于对音视频同步信息的同步性比较确定出信号调整信息，因此可以提高同步的准确度。
[0114]而且，本发明实施方式便于扩展，可以大规模使用。
[0115]以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
【主权项】
1.一种音视频同步方法，其特征在于，该方法包括: 在编码端接收输入码流，将所述输入码流分离为视频信号和音频信号，并在所述视频信号中嵌入视频同步信号，在所述音频信号中嵌入音频同步信号，再将所述视频信号和音频信号封装为输出码流； 在解码端从输出码流中解析出视频信号和音频信号，从视频信号中提取出视频同步信号，从音频信号中提取出音频同步信号，并当所述音频同步信号与视频同步信号不同步时，向编码端发送信号调整信息。
2.根据权利要求1所述的音视频同步方法，其特征在于，所述在视频信号中嵌入视频同步信号包括下列中的至少一个: 将视频帧序列的预定像素点的值设置为视频同步信号； 将视频帧序列的至少两个像素点之间的位置关系设置为视频同步信号； 将视频帧序列的相同像素点在不同帧之间的位置关系设置为视频同步信号。
3.根据权利要求1所述的音视频同步方法，其特征在于，所述在音频信号中嵌入音频同步信号包括下列中的至少一个: 在音频信号中嵌入正弦波； 在音频信号中嵌入方波； 在音频信号中嵌入三角波； 在音频信号中嵌入脉冲信号。
4.根据权利要求1所述的音视频同步方法，其特征在于，该方法进一步包括下列中的至少一个: 在视频同步信号中嵌入用于标注版权的水印信息； 在音频同步信号中嵌入用于标注版权的水印信息； 在视频同步信号中嵌入用于控制视频播放的视频控制信息； 在视频同步信号中嵌入与视频播放相关的辅助信息； 在音频同步信号中嵌入用于控制音频播放的音频控制信息； 在音频同步信号中嵌入与音频播放相关的辅助信息。
5.根据权利要求4所述的音视频同步方法，其特征在于，该方法进一步包括: 在解码端判断视频同步信号中水印信息是否完整，如果是则判定所述视频信号完整，如果不是则判定所述视频信号不完整；和/或 在解码端判断音频同步信号中水印信息是否完整，如果是则判定所述音频信号完整，如果不是则判定所述音频信号不完整。
6.一种音视频同步系统，其特征在于，包括编码端和解码端，其中: 编码端，用于接收输入码流，将所述输入码流分离为视频信号和音频信号，并在所述视频信号中嵌入视频同步信号，在所述音频信号中嵌入音频同步信号，再将所述视频信号和音频信号封装为输出码流； 解码端，用于从输出码流中解析出视频信号和音频信号，从视频信号中提取出视频同步信号，从音频信号中提取出音频同步信号，并当所述音频同步信号与视频同步信号不同步时，向编码端发送信号调整信息。
7.根据权利要求6所述的音视频同步系统，其特征在于， 编码端，用于在视频信号中嵌入视频同步信号包括下列中的至少一个: 将视频帧序列的预定像素点的值设置为视频同步信号； 将视频帧序列的至少两个像素点之间的位置关系设置为视频同步信号； 将视频帧序列的相同像素点在不同帧之间的位置关系设置为视频同步信号。
8.根据权利要求6所述的音视频同步系统，其特征在于， 编码端，用于在音频信号中嵌入音频同步信号包括下列中的至少一个: 在音频信号中嵌入正弦波； 在音频信号中嵌入方波； 在音频信号中嵌入三角波； 在音频信号中嵌入脉冲信号。
9.一种音视频编码装置，其特征在于，包括接收单元、分离单元、嵌入单元和输出单元，其中: 接收单元，用于接收输入码流； 分离单元，用于将所述输入码流分离为视频信号和音频信号； 嵌入单元，用于在所述视频信号中嵌入视频同步信号，在所述音频信号中嵌入音频同步信号； 输出单元，用于将所述视频信号和音频信号封装为输出码流。
10.根据权利要求9所述的音视频编码装置，其特征在于，还包括同步调整单元； 同步调整单元，用于根据解码端所反馈的信号调整信息对视频信号和/或音频信号进行调整，以同步所述视频信号和音频信号。
11.一种音视频解码装置，其特征在于，包括解析单元、提取单元和调整单元，其中: 解析单元，用于从接收到的码流中解析出视频信号和音频信号； 提取单元，用于从视频信号中提取出视频同步信号，从音频信号中提取出音频同步信号; 调整单元，用于当所述音频同步信号与视频同步信号不同步时，向编码端发送信号调整信息。
12.根据权利要求11所述的音视频解码装置，其特征在于，进一步包括验证单元； 验证单元，用于判断视频同步信号中水印信息是否完整，如果是则判定所述视频信号完整，如果不是则判定所述视频信号不完整；和/或 判断音频同步信号中水印信息是否完整，如果是则判定所述音频信号完整，如果不是则判定所述音频信号不完整。
【专利摘要】本发明实施方式提出了一种音视频同步方法与系统以及编码装置和解码装置。在编码端接收输入码流，将所述输入码流分离为视频信号和音频信号，并在所述视频信号中嵌入视频同步信号，在所述音频信号中嵌入音频同步信号，再将所述视频信号和音频信号封装为输出码流；在解码端从输出码流中解析出视频信号和音频信号，从视频信号中提取出视频同步信号，从音频信号中提取出音频同步信号，并当所述音频同步信号与视频同步信号不同步时，向编码端发送信号调整信息。本发明实施方式可以提高同步的准确度。
【IPC分类】H04N21-236, H04N21-434
【公开号】CN104581202
【申请号】CN201310509334
【发明人】黄嘉文
【申请人】腾讯科技（北京）有限公司
【公开日】2015年4月29日
【申请日】2013年10月25日
【公告号】WO2015058610A1