音频记录和回放装置的制造方法
【技术领域】
[0001] 本申请涉及用于音频记录和回放的装置。本发明还涉及但不限于在移动设备内用 于音频记录和回放的装置。
【背景技术】
[0002] 空间音频信号被更加频繁地使用以产生更加沉浸式的音频体验。立体声或多通道 记录能够从记录或捕获装置被传递给收听装置以及使用合适的多通道输出来重放，诸如多 通道扩音器布置，以及使用具有虚拟环绕处理的一对立体声头戴式耳机或头戴式耳麦来重 放。
[0003] 将理解的是，在不久的将来，对于诸如移动电话的移动装置具有超过两个麦克风 将是可能的。这提供了记录实际的多通道音频的可能性。类似地，对于诸如移动电话的移 动装置具有超过两个扬声器将是可能的。因此，立体声和环绕声音频可以在移动设备（诸 如智能电话）中重现。
[0004] 也就是说，移动设备将具有记录（或捕获）和回放立体声和环绕声音频的能力是 可能的或不久将是可能的。因此，当由合适的或胜任的移动设备已经执行了音频记录或捕 获时，移动设备也将能够将这些音频信号从设备传递到设备，以及同样地，能够在电信应用 中以及也针对诸如流式传输、广播和组播的其它服务利用立体声和环绕声音频。
【发明内容】
[0005] 因此，本申请的多个方面提供了一种空间音频捕获和处理，由此能够补偿收听的 定向或视频和音频捕获定向的差。
[0006] 根据第一方面，提供了一种方法，所述方法包括：生成至少两个音频信号，所述至 少两个音频信号在它们之间具有相对位移；确定捕获定向；以及基于所述捕获定向来输出 所述至少两个音频信号，使得基于所述捕获定向来执行所述至少两个音频信号的回放。
[0007] 确定捕获定向可以包括：基于设备定向和关于在捕获装置中的麦克风配置的信息 来确定音频捕获定向。
[0008] 所述捕获定向可以是初始捕获定向值，以及基于所述捕获定向来输出所述至少两 个音频信号可以包括：根据初始音频输出顺序来输出所述至少两个音频信号。
[0009] 所述方法还可以包括：确定在所述捕获定向和更早的定向之间的差是否大于定义 值；以及与所述至少两个音频信号一起还输出所述捕获定向，使得基于所述捕获定向来执 行所述至少两个音频信号的回放。
[0010] 所述更早的定向可以是初始定向。
[0011] 所述方法还可以包括：基于所述捕获定向来确定针对所述至少两个音频信号的音 频输出顺序；以及与所述至少两个音频信号一起还输出所述音频输出顺序，使得基于所述 音频输出顺序来执行所述至少两个音频信号的回放。
[0012] 所述方法还可以包括：确定在所述捕获定向和所述更早的定向之间的差是否大于 定义的音频输出重排序值；以及当在所述捕获定向和所述更早的定向之间的差大于定义的 音频输出重排序值时，触发音频输出顺序的确定。
[0013] 生成所述至少两个音频信号，所述至少两个音频信号在它们之间具有相对位移， 可以包括：在第一位置处使用第一麦克风来生成所述至少两个音频信号中的第一音频信 号；在第二位置处使用第二麦克风来生成所述至少两个音频信号中的第二音频信号，在所 述至少两个音频信号之间的相对位移是在所述第一位置和所述第二位置之间的位移。
[0014] 生成所述至少两个音频信号，所述至少两个音频信号在它们之间具有相对位移， 可以包括以下至少之一：从包括至少两个麦克风的远程装置接收所述至少两个音频信号， 所述至少两个麦克风在它们之间具有相对位移；以及从存储器来接收所述至少两个音频信 号。
[0015] 根据第二方面，提供了一种方法，所述方法包括：接收至少两个音频信号；确定回 放定向；以及基于所述回放定向将所述至少两个音频信号输出给至少两个扬声器。
[0016] 所述方法还可以包括：接收与所述至少两个音频信号相关联的捕获定向，以及其 中向所述至少两个扬声器输出所述至少两个音频信号还基于所述捕获定向。
[0017] 所述方法还可以包括：接收基于所述捕获定向的针对所述至少两个音频信号的音 频输出顺序，其中将所述至少两个音频信号输出给所述至少两个扬声器还基于所述音频输 出顺序。
[0018] 将所述至少两个音频信号输出给至少两个扬声器可以包括以下至少之一：基于所 述回放定向将所述至少两个音频信号路由到所述至少两个扬声器；以及将所述至少两个音 频信号进行混合以生成将被输出给所述至少两个扬声器中的至少一个扬声器的向下混合 (downmixed)的音频信号。
[0019] 所述至少两个扬声器可以包括以下至少之一：扩音器；头戴式耳机；头戴式耳麦； 带麦克风的耳机；外部扩音器；以及集成的免提扬声器。
[0020] 根据第三方面，提供了一种装置，所述装置包括至少一个处理器和包含针对一个 或多个程序的计算机代码的至少一个存储器，所述至少一个存储器和所述计算机代码被配 置为使用所述至少一个处理器使得所述装置至少：生成至少两个音频信号，所述至少两个 音频信号在它们之间具有相对位移；确定捕获定向；以及基于所述捕获定向来输出所述至 少两个音频信号，使得基于所述捕获定向来执行所述至少两个音频信号的回放。
[0021] 确定捕获定向可以使得所述装置基于设备定向和关于在捕获装置中的麦克风配 置的信息来确定音频捕获定向。
[0022] 所述捕获定向可以是初始捕获定向值，以及基于所述捕获定向来输出所述至少两 个音频信号可以使得所述装置根据初始音频输出顺序来输出所述至少两个音频信号。
[0023] 还可以使得所述装置：确定在所述捕获定向和更早的定向之间的差是否大于定义 值；以及与所述至少两个音频信号一起还输出所述捕获定向，使得基于所述捕获定向来执 行所述至少两个音频信号的回放。
[0024] 所述更早的定向可以是初始定向。
[0025] 还可以使得所述装置：基于所述捕获定向来确定针对所述至少两个音频信号的音 频输出顺序；以及与所述至少两个音频信号一起还输出所述音频输出顺序，使得基于所述 音频输出顺序来执行所述至少两个音频信号的回放。
[0026] 还可以使得所述装置：确定在所述捕获定向和所述更早的定向之间的差大于定义 的音频输出重排序值；以及当在所述捕获定向和所述更早的定向之间的差大于定义的音频 输出重排序值时，触发音频输出顺序的确定。
[0027] 生成所述至少两个音频信号，所述至少两个音频信号在它们之间具有相对位移， 可以使得所述装置：在第一位置处使用第一麦克风来生成所述至少两个音频信号中的第一 音频信号；在第二位置处使用第二麦克风来生成所述至少两个音频信号中的第二音频信 号，在所述至少两个音频信号之间的相对位移是在所述第一位置和所述第二位置之间的位 移。
[0028] 生成所述至少两个音频信号，所述至少两个音频信号在它们之间具有相对位移， 可以使得所述装置执行以下至少之一：从包括至少两个麦克风的远程装置接收所述至少两 个音频信号，所述至少两个麦克风在它们之间具有相对位移；以及从存储器来接收所述至 少两个音频信号。
[0029] 根据第四方面，提供了一种装置，所述装置包括至少一个处理器和包含针对一个 或多个程序的计算机代码的至少一个存储器，所述至少一个存储器和所述计算机代码被配 置为使用所述至少一个处理器使得所述装置：接收至少两个音频信号；确定回放定向；以 及基于所述回放定向将所述至少两个音频信号输出给至少两个扬声器。
[0030] 还可以使得所述装置：接收与所述至少两个音频信号相关联的捕获定向，以及其 中向所述至少两个扬声器输出所述至少两个音频信号还基于所述捕获定向。
[0031] 还可以使得所述装置：接收基于所述捕获定向的针对所述至少两个音频信号的音 频输出顺序，其中将所述至少两个音频信号输出给所述至少两个扬声器还基于所述音频输 出顺序。
[0032] 将所述至少两个音频信号输出给所述至少两个扬声器可以使得所述装置执行以 下至少之一：基于所述回放定向将所述至少两个音频信号路由到所述至少两个扬声器；以 及将所述至少两个音频信号进行混合以生成将被输出给所述至少两个扬声器中的至少一 个扬声器的向下混合的音频信号。
[0033] 所述至少两个扬声器可以包括以下至少之一：扩音器；头戴式耳机；头戴式耳麦； 带麦克风的耳机；外部扩音器；以及集成的免提扬声器。
[0034] 根据第五方面，提供了一种装置，所述装置包括：用于生成至少两个音频信号的构 件，所述至少两个音频信号在它们之间具有相对位移；用于确定捕获定向的构件；以及用 于基于所述捕获定向来输出所述至少两个音频信号，使得基于所述捕获定向来执行所述至 少两个音频信号的回放的构件。
[0035] 用于确定捕获定向的构件可以包括：用于基于设备定向和关于在捕获装置中的麦 克风配置的信息来确定音频捕获定向的构件。
[0036] 所述捕获定向可以是初始捕获定向值，以及用于基于所述捕获定向来输出所述至 少两个音频信号的构件可以包括：用于根据初始音频输出顺序来输出所述至少两个音频信 号的构件。
[0037] 所述装置还可以包括：用于确定在所述捕获定向和更早的定向之间的差是否大于 定义值的构件；以及用于输出的构件可以包括用于与所述至少两个音频信号一起输出所述 捕获定向，使得基于所述捕获定向来执行所述至少两个音频信号的回放的构件。
[0038] 所述更早的定向可以是初始定向。
[0039] 所述装置还可以包括：用于基于所述捕获定向来确定针对所述至少两个音频信号 的音频输出顺序的构件；以及用于输出的构件可以包括用于与所述至少两个音频信号一起 还输出所述音频输出顺序，使得基于所述音频输出顺序来执行所述至少两个音频信号的回 放的构件。
[0040] 所述装置还可以包括：用于确定在所述捕获定向和所述更早的定向之间的差大于 定义的音频输出重排序值的构件；以及用于当在所述捕获定向和所述更早的定向之间的差 大于定义的音频输出重排序值时，触发音频输出顺序的确定的构件。
[0041] 用于生成所述至少两个音频信号的构件，所述至少两个音频信号在它们之间具有 相对位移，可以包括：用于在第一位置处使用第一麦克风来生成所述至少两个音频信号中 的第一音频信号的构件；用于在第二位置处使用第二麦克风来生成所述至少两个音频信号 中的第二音频信号的构件，在所述至少两个音频信号之间的相对位移是在所述第一位置和 所述第二位置之间的位移。
[0042] 用于生成所述至少两个音频信号的构件，所述至少两个音频信号在它们之间具有 相对位移，可以包括以下至少之一：用于从包括至少两个麦克风的远程装置接收所述至少 两个音频信号的构件，所述至少两个麦克风在它们之间具有相对位移；以及用于从存储器 来接收所述至少两个音频信号的构件。
[0043] 根据第六方面，提供了一种装置，所述装置包括：用于接收至少两个音频信号的构 件；用于确定回放定向的构件；以及用于基于所述回放定向将所述至少两个音频信号输出 给至少两个扬声器的构件。
[0044] 所述装置还可以包括：用于接收与所述至少两个音频信号相关联的捕获定向的构 件，以及其中用于向所述至少两个扬声器输出所述至少两个音频信号的构件还基于所述捕 获定向。
[0045] 所述装置还可以包括：用于接收基于所述捕获定向的针对所述至少两个音频信号 的音频输出顺序的构件，其中用于将所述至少两个音频信号输出给所述至少两个扬声器的 构件还基于所述音频输出顺序。
[0046] 用于将所述至少两个音频信号输出给所述至少两个扬声器的构件可以包括以下 至少之一：用于基于所述回放定向将所述至少两个音频信号路由到所述至少两个扬声器的 构件；以及用于将所述至少两个音频信号进行混合以生成将被输出给所述至少两个扬声器 中的至少一个扬声器的向下混合的音频信号的构件。
[0047] 所述至少两个扬声器可以包括以下至少之一：扩音器；头戴式耳机；头戴式耳麦； 带麦克风的耳机；外部扩音器；以及集成的免提扬声器。
[0048] 根据第七方面，提供了一种装置，所述装置包括：输入器，其被配置为接收至少两 个音频信号，所述至少两个音频信号在它们之间具有相对位移；定向传感器确定器，其被配 置为基于设备定向和关于在捕获装置中的麦克风配置的信息来确定音频捕获定向；以及音 频输出生成器，其被配置为基于所述捕获定向来输出所述至少两个音频信号，使得基于所 述捕获定向来自执行所述至少两个音频信号的回放。
[0049] 所述捕获定向可以是初始捕获定向值，以及所述音频输出生成器可以被配置为根 据初始音频输出顺序来输出所述至少两个音频信号。
[0050] 所述装置还可以包括：定向比较器，其被配置为确定在所述捕获定向和更早的定 向之间的差是否大于定义值；以及音频定向信号生成器，其被配置为与所述至少两个音频 信号一起还输出所述捕获定向，使得基于所述捕获定向来执行所述至少两个音频信号的回 放。
[0051] 所述更早的定向可以是初始定向。
[0052] 所述音频输出生成器可以被配置为：基于所述捕获定向来确定针对所述至少两个 音频信号的音频输出顺序；以及还被配置为与所述至少两个音频信号一起输出所述音频输 出顺序，使得基于所述音频输出顺序来执行所述至少两个音频信号的回放。
[0053] 所述装置可以包括：定向比较器，其被配置为确定在所述捕获定向和所述更早的 定向之间的差大于定义的音频输出重排序值；以及还被配置为当在所述捕获定向和所述更 早的定向之间的差大于定义的音频输出重排序值时，触发音频输出顺序的确定。
[0054] 所述输入器可以耦合到第一麦克风，所述第一麦克风被配置为在第一位置处生成 所述至少两个音频信号中的第一音频信号；第二麦克风，所述第二麦克风被配置为在第二 位置处生成所述至少两个音频信号中的第二音频信号，在所述至少两个音频信号之间的相 对位移是在所述第一位置和所述第二位置之间的位移。
[0055] 所述输入器可以包括以下至少之一：输入器，其被配置为从包括至少两个麦克风 的远程装置接收所述至少两个音频信号，所述至少两个麦克风在它们之间具有相对位移； 以及输入器，其被配置为从存储器来接收所述至少两个音频信号。
[0056] 根据第八方面，提供了一种装置，所述装置包括：输入器，其被配置为接收至少两 个音频信号；通道选择器，其被配置为确定回放定向；以及通道切换器，其被配置为基于所 述回放定向将所述至少两个音频信号输出给至少两个扬声器。
[0057] 所述通道选择器还可以被配置为接收与所述至少两个音频信号相关联的捕获定 向，以及基于所述捕获定向来确定回放定向，以及其中所述通道切换器被配置为向所述至 少两个扬声器输出所述至少两个音频信号还基于所述捕获定向。
[0058] 所述通道选择器还可以被配置为接收基于所述捕获定向的针对所述至少两个音 频信号的音频输出顺序，基于针对所述至少两个音频信号的所述音频输出顺序来确定回放 定向，其中所述通道切换器被配置为将所述至少两个音频信号输出给所述至少两个扬声器 还基于所述音频输出顺序。
[0059] 所述通道切换器可以包括以下至少之一：路由器，其被配置为基于所述回放定向 将所述至少两个音频信号路由到所述至少两个扬声器；以及混合器，其被配置为将所述至 少两个音频信号进行混合以生成将被输出给所述至少两个扬声器中的至少一个扬声器的 向下混合的音频信号。
[0060] 所述至少两个扬声器可以包括以下至少之一：扩音器；头戴式耳机；头戴式耳麦； 带麦克风的耳机；外部扩音器；以及集成的免提扬声器。
[0061] 存储在介质上的计算机程序产品可以使得装置执行如本文中描述的方法。
[0062] 电子设备可以包括如本文中描述的装置。
[0063] 芯片组可以包括如本文中描述的装置。
[0064] 本申请的实施例旨在解决与现有技术相关联的问题。
【附图说明】
[0065] 为了更好地理解本申请，现在通过示例来参照附图，在附图中：
[0066] 图1示意性地示出了适用于在一些实施例中使用的装置；
[0067] 图2示意性地示出了根据一些实施例的示例音频捕获或记录装置；
[0068] 图3示意性地示出了根据一些实施例的在图2中示出的音频捕获或记录装置的操 作的流程图；
[0069] 图4示意性地示出了根据一些实施例的在图2中示出的音频捕获或记录装置的另 外的操作的另外的流程图；
[0070] 图5示意性地示出了根据一些实施例的示例音频回放装置；
[0071] 图6示意性地示出了根据一些实施例的在图5中示出的音频回放装置的操作的流 程图；
[0072] 图7示意性地示出了根据一些实施例的在图5中示出的音频回放装置的另外的操 作的另外的流程图；
[0073] 图8至11示出了根据一些实施例的针对90