号，根据所述旋转角度 进行插值，生成双耳录音双声道信号;而如需要较高的空间精度的情况下，双耳转码单元将 音频对象信号根据旋转角度进行旋转，将旋转后的音频对象信号编码为高阶B格式音频对 象信号，经双耳转码后生成高阶B格式音频对象双声道信号，叠加单元对双耳转码单元生成 的高阶B格式音频对象双声道信号，Ambisonic录音双声道信号、双耳录音双声道信号进行 置加；
[0072] 如需要低复杂度低延迟，双耳转码单元将音频对象信号编码为一阶B格式音频对 象信号，与其他一阶Ambisonic录音信号叠加，然后根据旋转角度对所述叠加后的混合信号 进行双耳转码，生成音频对象与Ambisonic录音信号的混合双声道信号，叠加单元对双耳转 码单元生成的与所述混合双声道信号、双耳录音双声道信号进行叠加，得到音频双耳输出 虚拟环绕声信号。
[0073]本实施例利用云端服务器来解决支持头部跟踪的多声道音频传输和播放的问题。 [0074] 实施例四：
[0075]如图4所示，本发明的一种音频处理系统主要包含客户端，存储服务器，云端音频 处理服务器;客户端包括头部跟踪模块，存储服务器端存有多声道音频文件，以特定方式存 放。客户端头部跟踪模块获取用户头部动作如头部旋转角度，将参数经互联网上传到服务 器端的一台或多台云端音频处理服务器，对多声道音频文件进行相应处理：云端音频处理 服务器从存储服务器提取不同格式的音频信号，并根据接收的旋转角度生成音频双耳输出 虚拟环绕声信号，将经过双耳转码后的音频文件通过所述网络传输至客户端。
[0076]客户端下载上述处理后的音频文件，优选的，以双声道立体声格式播放。
[0077]以上结合附图详细描述了本发明的优选实施方式，但是，本发明并不限于上述实 施方式中的具体细节，在本发明的技术构思范围内，可以对本发明的技术方案进行多种简 单变型，这些简单变型均属于本发明的保护范围。
[0078] 另外需要说明的是，在上述【具体实施方式】中所描述的各个具体技术特征，在不矛 盾的情况下，可以通过任何合适的方式进行组合。为了避免不必要的重复，本发明对各种可 能的组合方式不再另行说明。
[0079] 此外，本发明的各种不同的实施方式之间也可以进行任意组合，只要其不违背本 发明的思想，其同样应当视为本发明所公开的内容。
【主权项】
1. 一种云端音频处理方法，其特征在于:所述音频处理方法包括以下步骤， 获取用户头部旋转的旋转角度； 获取不同格式的音频信号，根据所述旋转角度，分别对所述不同格式的音频信号进行 双耳转码，生成相应格式的双声道音频信号； 对所述相应格式的双声道信号叠加，得到音频双耳输出虚拟环绕声信号。2. 根据权利要求1所述的云端音频处理方法，其特征在于： 所述不同格式的音频信号包括双耳录音信号，Ambisonic录音信号和音频对象信号。3. 根据权利要求2所述的云端音频处理方法，其特征在于： 对所述不同格式的音频信号进行双耳转码，生成相应格式的双耳转码音频信号具体包 括： 对所述双耳录音信号，根据所述旋转角度进行插值，生成双耳录音双声道信号； 对所述Ambisonic录音信号，根据所述旋转角度对所述Ambisonic录音信号进行调整， 对所述调整后的Ambisonic录音信号双耳转码生成Ambisonic录音双声道信号； 对所述音频对象信号，根据所述旋转角度对所述音频对象信号调整，对所述调整后的 音频对象信号双耳转码生成音频对象双声道信号。4. 根据权利要求3所述的云端音频处理方法，其特征在于： 如需要较高的空间精度，将音频对象信号根据旋转角度进行旋转，将旋转后的音频对 象信号编码为高阶B格式音频对象信号，经双耳转码后生成高阶B格式音频对象双声道信 号，与Ambisonic录音双声道信号、双耳录音双声道信号进行叠加； 如需要低复杂度低延迟，将音频对象信号编码为一阶B格式音频对象信号，与其他一阶 Ambisonic录音信号叠加，然后根据旋转角度对所述叠加后的混合信号进行双耳转码，生成 音频对象与Ambisonic录音信号的混合双声道信号，与所述双耳录音双声道信号进行叠加。5. 根据权利要求1-4任一项所述的云端处理方法，其特征在于： 所获取用户头部旋转的旋转角度具体为获取用户头部旋转的旋转角度，对所述旋转角 度进行平滑处理。6. -种云端音频处理服务器，其特征在于，所述服务器包括： 获取单元，获取用户头部旋转的旋转角度； 采集单元，采集不同格式的音频信号； 双耳转码单元，分别与所述获取单元和采集单元相连接，根据所述旋转角度，分别对所 述不同格式的音频信号进行双耳转码，生成相应格式的双声道音频信号； 叠加单元，与所述双耳转码单元连接，对所述相应格式的双声道信号叠加，得到音频双 耳输出虚拟环绕声信号。7. 根据权利要求6所述的云端音频处理服务器，其特征在于： 所述不同格式的音频信号包括双耳录音信号，Ambisonic录音信号和音频对象信号。8. 根据权利要求7所述的云端音频处理服务器，其特征在于： 双耳转码单元对所述不同格式的音频信号进行双耳转码，生成相应格式的双耳转码音 频信号具体包括： 对所述双耳录音信号，根据所述旋转角度进行插值，生成双耳录音双声道信号； 对所述Ambisonic录音信号，根据所述旋转角度对所述Ambisonic录音信号进行调整， 对所述调整后的Ambisonic录音信号双耳转码生成Ambisonic录音双声道信号； 对所述音频对象信号，根据所述旋转角度对所述音频对象信号调整，对所述调整后的 音频对象信号双耳转码生成音频对象双声道信号。9. 根据权利要求8所述的云端音频处理服务器，其特征在于： 如需要较高的空间精度，双耳转码单元将音频对象信号根据旋转角度进行旋转，将旋 转后的音频对象信号编码为高阶B格式音频对象信号，经双耳转码后生成高阶B格式音频对 象双声道信号，叠加单元对双耳转码单元生成的高阶B格式音频对象双声道信号， Ambisonic录音双声道信号、双耳录音双声道信号进行叠加； 如需要低复杂度低延迟，双耳转码单元将音频对象信号编码为一阶B格式音频对象信 号，与其他一阶Ambisonic录音信号叠加，然后根据旋转角度对所述叠加后的混合信号进行 双耳转码，生成音频对象与Ambisonic录音信号的混合双声道信号，叠加单元对双耳转码单 元生成的与所述混合双声道信号、双耳录音双声道信号进行叠加。10. 根据权利要求6-9任一项所述的云端处理服务器，其特征在于： 所述云端服务器还包括平滑单元，分别与所述双耳转码单元和所述获取单元连接，平 滑单元从获取单元接收用户头部旋转的旋转角度，对所述旋转角度进行平滑处理。11. 一种音频播放系统，其特征在于:所述系统包括权利要求6-10所述云端音频处理服 务器，以及客户端;所述客户端包括头部跟踪装置，所述头部跟踪装置抓取头部旋转角度， 通过网络上传至所述云端音频处理服务器，所述云端音频处理器获取不同格式的音频信 号，并根据所述旋转角度生成音频双耳输出虚拟环绕声信号后，通过所述网络传输至客户 端。12. 根据权利要求11所述的音频播放系统，其特征在于:所述系统还包括存储服务器， 存储不同格式的音频信号，当用户请求下载音频文件下载时，所述云端音频处理服务器从 所述存储服务器提取所述音频信号。
【专利摘要】本发明涉及一种云端音频处理方法，服务器和系统，针对不同格式的音频信号，根据客户端的头部旋转角度，分别对所述不同格式的音频信号进行双耳转码，生成相应格式的双声道音频信号；对所述相应格式的双声道信号叠加，得到音频双耳输出虚拟环绕声信号。本发明的音频处理是在云端服务器上进行的，很好的适应了现有的基于云架构音频处理和存储，从而减少了移动终端生成虚拟环绕声质量不高、运算量大的问题。另外，针对上述在服务器上执行可能带来的延迟，本发明还包括对于角度进行平滑处理，以消除延迟。
【IPC分类】H04S7/00, G10L19/008
【公开号】CN105682000
【申请号】CN201610017000
【发明人】张晨, 孙学京, 刘皓
【申请人】北京时代拓灵科技有限公司
【公开日】2016年6月15日
【申请日】2016年1月11日