指示用于译码向量的帧参数可重用性的制作方法

文档序号:21398693发布日期:2020-07-07 14:31阅读:325来源:国知局
指示用于译码向量的帧参数可重用性的制作方法
分案申请的相关信息本案是分案申请。该分案的母案是申请日为2015年01月30日、申请号为201580005068.1、发明名称为“指示用于译码向量的帧参数可重用性”的发明专利申请案。本申请案主张以下各美国临时申请案的权利:2014年1月30日申请的标题为“声场的经分解表示的压缩(compressionofdecomposedrepresentationsofasoundfield)”的第61/933,706号美国临时申请案;2014年1月30日申请的标题为“声场的经分解表示的压缩(compressionofdecomposedrepresentationsofasoundfield)”的第61/933,714号美国临时申请案;2014年1月30日申请的标题为“指示用于解码空间向量的帧参数可重用性(indicatingframeparameterreusabilityfordecodingspatialvectors)”的第61/933,731号美国临时申请案;2014年3月7日申请的标题为“用于球谐系数的立即播出帧(immediateplay-outframeforsphericalharmoniccoefficients)”的第61/949,591号美国临时申请案;2014年3月7日申请的标题为“声场的经分解表示的淡入/淡出(fade-in/fade-outofdecomposedrepresentationsofasoundfield)”的第61/949,583号美国临时申请案;2014年5月16日申请的标题为“译码经分解高阶立体混响(hoa)音频信号的v-向量(codingv-vectorsofadecomposedhigherorderambisonics(hoa)audiosignal)”的第61/994,794号美国临时申请案;2014年5月28日申请的标题为“指示用于解码空间向量的帧参数可重用性(indicatingframeparameterreusabilityfordecodingspatialvectors)”的第62/004,147号美国临时申请案;2014年5月28日申请的标题为“用于球谐系数的立即播出帧及声场的经分解表示的淡入/淡出(immediateplay-outframeforsphericalharmoniccoefficientsandfade-in/fade-outofdecomposedrepresentationsofasoundfield)”的第62/004,067号美国临时申请案;2014年5月28日申请的标题为“译码经分解高阶立体混响(hoa)音频信号的v-向量(codingv-vectorsofadecomposedhigherorderambisonics(hoa)audiosignal)”的第62/004,128号美国临时申请案;2014年7月1日申请的标题为“译码经分解高阶立体混响(hoa)音频信号的v-向量(codingv-vectorsofadecomposedhigherorderambisonics(hoa)audiosignal)”的第62/019,663号美国临时申请案;2014年7月22日申请的标题为“译码经分解高阶立体混响(hoa)音频信号的v-向量(codingv-vectorsofadecomposedhigherorderambisonics(hoa)audiosignal)”的第62/027,702号美国临时申请案;2014年7月23日申请的标题为“译码经分解高阶立体混响(hoa)音频信号的v-向量(codingv-vectorsofadecomposedhigherorderambisonics(hoa)audiosignal)”的第62/028,282号美国临时申请案;2014年7月25日申请的标题为“用于球谐系数的立即播出帧及声场的经分解表示的淡入/淡出(immediateplay-outframeforsphericalharmoniccoefficientsandfade-in/fade-outofdecomposedrepresentationsofasoundfield)”的第62/029,173号美国临时申请案;2014年8月1日申请的标题为“译码经分解高阶立体混响(hoa)音频信号的v-向量(codingv-vectorsofadecomposedhigherorderambisonics(hoa)audiosignal)”的第62/032,440号美国临时申请案;2014年9月26日申请的标题为“高阶立体混响(hoa)音频信号的切换式v-向量量化(switchedv-vectorquantizationofahigherorderambisonics(hoa)audiosignal)”的第62/056,248号美国临时申请案;及2014年9月26日申请的标题为“经分解高阶立体混响(hoa)音频信号的预测性向量量化(predictivevectorquantizationofadecomposedhigherorderambisonics(hoa)audiosignal)”的第62/056,286号美国临时申请案;及2015年1月12日申请的标题为“环境高阶立体混响系数的转变(transitioningofambienthigher-orderambisoniccoefficients)”的第62/102,243号美国临时申请案,前述所列各美国临时申请案中的每一者以引用的方式并入本文中,如同在其相应全文中所阐述般。本发明涉及音频数据,且更具体来说,涉及高阶立体混响音频数据的译码。
背景技术
:高阶立体混响(hoa)信号(常由多个球谐系数(shc)或其它阶层元素表示)是声场的三维表示。hoa或shc表示可按独立于用以重放从shc信号呈现的多信道音频信号的局部扬声器几何布置的方式来表示声场。shc信号还可促进向后兼容性,因为可将shc信号呈现为众所周知的且被广泛采用的多信道格式(例如,5.1音频信道格式或7.1音频信道格式)。shc表示因此可实现对声场的更好表示,其也适应向后兼容性。技术实现要素:一般来说,描述译码高阶立体混响音频数据的技术。高阶立体混响音频数据可包括对应于具有大于一的阶数的球谐基函数的至少一球谐系数。在一方面,一种有效率的位使用方法包括获得包括表示球谐域中的正交空间轴线的向量的位流。所述位流进一步包括关于是否重用来自前一帧的指示在压缩所述向量时使用的信息的至少一语法元素的指示符。在另一方面,一种经配置以执行有效率的位使用的装置包括一或多个处理器,所述一或多个处理器经配置以获得包括表示球谐域中的正交空间轴线的向量的位流。所述位流进一步包括关于是否重用来自前一帧的指示在压缩所述向量时使用的信息的至少一语法元素的指示符。所述装置也包括经配置以存储所述位流的存储器。在另一方面,一种经配置以执行有效率的位使用的装置包括用于获得包括表示球谐域中的正交空间轴线的向量的位流的装置。所述位流进一步包括关于是否重用来自前一帧的指示在压缩所述向量时使用的信息的至少一语法元素的指示符。所述装置也包括用于存储所述指示符的装置。在另一方面,一种非暂时性计算机可读存储媒体具有存储于其上的指令,所述指令在经执行时使得一或多个处理器获得包括表示球谐域中的正交空间轴线的向量的位流,其中所述位流进一步包括关于是否重用来自前一帧的指示在压缩所述向量时使用的信息的至少一语法元素的指示符。在附图及以下描述中阐述所述技术的一或多个方面的细节。所述技术的其它特征、目标及优点将从所述描述及图式以及从权利要求书中显而易见。附图说明图1为说明具有各种阶数及子阶数的球谐基函数的图。图2为说明可执行本发明中所描述的技术的各种方面的系统的图。图3为更详细地说明可执行本发明中所描述的技术的各种方面的图2的实例中所展示的音频编码装置的一实例的框图。图4为更详细地说明图2的音频解码装置的框图。图5a为说明音频编码装置执行本发明中所描述的基于向量的合成技术的各种方面的示范性操作的流程图。图5b为说明音频编码装置执行本发明中所描述的译码技术的各种方面的示范性操作的流程图。图6a为说明音频解码装置执行本发明中所描述的技术的各种方面的示范性操作的流程图。图6b为说明音频解码装置执行本发明中所描述的译码技术的各种方面的示范性操作的流程图。图7为更详细地说明可指定经压缩空间分量的位流的帧的图。图8为更详细地说明可指定经压缩空间分量的位流的一部分的图。具体实施方式环绕声的演化现今已使得许多输出格式可用于娱乐。此些消费型环绕声格式的实例大部分为“声道”式的,这是因为其以某些几何坐标隐含地指定到扩音器的馈入。消费型环绕声格式包含风行的5.1格式(其包含以下六个声道:左前(fl)、右前(fr)、中心或前中心、左后或左环绕、右后或右环绕,及低频效应(lfe))、发展中的7.1格式、包含高度扬声器的各种格式,例如7.1.4格式及22.2格式(例如,用于供超高清晰度电视标准使用)。非消费型格式可横跨任何数目个扬声器(成对称及非对称几何布置),其常常被称为“环绕阵列”。此类阵列的一实例包含定位于截顶二十面体(truncatedicosohedron)的拐角上的坐标处的32个扩音器。到未来mpeg编码器的输入视情况为以下三种可能格式中的一者:(i)传统的基于声道的音频(如上文所论述),其意欲经由处于预先指定的位置处的扩音器播放;(ii)基于对象的音频,其涉及用于单一音频对象的具有含有其位置坐标(以及其它信息)的相关联元数据的离散脉码调制(pcm)数据;及(iii)基于场景的音频,其涉及使用球谐基函数的系数(也被称为“球谐系数”或shc、“高阶立体混响”或hoa及“hoa系数”)来表示声场。所述未来mpeg编码器可能更详细地描述于国际标准化组织/国际电工委员会(iso)/(iec)jtc1/sc29/wg11/n13411的标题为“要求针对3d音频的提议(callforproposalsfor3daudio)”的文件中,所述文件于2013年1月在瑞士日内瓦发布,且可在http://mpeg.chiariglione.org/sites/default/files/files/standards/parts/docs/w13411.zip获得。在市场中存在各种基于“环绕声”声道的格式。举例来说,其范围从5.1家庭影院系统(其在使起居室享有立体声方面已获得最大成功)到由日本广播协会或日本广播公司(nhk)开发的22.2系统。内容建立者(例如,好莱坞工作室)将希望产生影片的音轨一次,而不花费精力来针对每一扬声器配置对其进行重混(remix)。近年来,标准开发组织一直在考虑如下方式:将编码及后续解码(其可为调适的且不知晓重放位置(涉及呈现器)处的扬声器几何布置(及数目)及声学条件)提供到标准化位流中。为了向内容建立者提供此类灵活性,可使用一组阶层元素来表示声场。所述组阶层元素可指其中元素经排序而使得一组基本低阶元素提供经模型化声场的完整表示的一组元素。当将所述组扩展以包含高阶元素时,所述表示变得更详细,从而增加分辨率。一组阶层元素的一实例为一组球谐系数(shc)。以下表达式示范使用shc进行的对声场的描述或表示:所述表达式展示:在时间t在声场的任何点{rr,θr,}处的压力pi可独特地通过shc来表示。此处,c为音速(~343m/s),{rr,θr,}为参考点(或观测点),jn(·)为n阶球面贝塞尔函数,且为n阶及m子阶球谐基函数。可认识到,方括号中的术语为可通过各种时间-频率变换来近似的信号的频域表示(即,s(ω,rr,θr,)),所述变换例如离散傅立叶变换(dft)、离散余弦变换(dct)或小波变换。阶层组的其它实例包含数组小波变换系数及其它数组多分辨率基函数系数。图1为说明从零阶(n=0)到四阶(n=4)的球谐基函数的图。如可见,对于每一阶来说,存在m子阶的扩展,出于易于说明的目的,在图1的实例中展示了所述子阶但未明确地提及。可通过各种麦克风阵列配置在物理上获取(例如,记录)shc或替代地,可从声场的基于声道或基于对象的描述导出shc。shc表示基于场景的音频,其中可将shc输入到音频编码器以获得经编码shc,所述经编码shc可促成更有效率的传输或存储。举例来说,可使用涉及(1+4)2(25,且因此为四阶)系数的四阶表示。如上文所提及,可使用麦克风阵列从麦克风记录导出shc。可如何从麦克风阵列导出shc的各种实例描述于poletti,m.的“基于球谐的三维环绕声系统(three-dimensionalsurroundsoundsystemsbasedonsphericalharmonics)”(j.audioeng.soc.,第53卷,第11期,2005年11月,第1004到1025页)中。为了说明可如何从基于对象的描述导出shc,考虑以下等式。可将对应于个别音频对象的声场的系数表达为:其中i为为n阶球面汉克尔函数(第二种类),且{rs,θs,}为对象的位置。知道依据频率的对象源能量g(ω)(例如,使用时间-频率分析技术,例如,对pcm流执行快速傅立叶变换)允许我们将每一pcm对象及对应位置转换成shc另外,可展示(因为上述情形为线性及正交分解)每一对象的系数为加成性的。以此方式,可通过系数表示众多pcm对象(例如,作为用于个别对象的系数向量的总和)。基本上,所述系数含有关于声场的信息(依据3d坐标的压力),且上述情形表示在观测点{rr,θr,}附近从个别对象到整个声场的表示的变换。下文在基于对象及基于shc的音频译码的上下文中描述剩余诸图。图2为说明可执行本发明中所描述的技术的各种方面的系统10的图。如图2的实例中所展示,系统10包含内容建立者装置12及内容消费者装置14。虽然在内容建立者装置12及内容消费者装置14的上下文中加以描述,但可在声场的shc(其也可被称作hoa系数)或任何其它阶层表示经编码以形成表示音频数据的位流的任何上下文中实施所述技术。此外,内容建立者装置12可表示能够实施本发明中所描述的技术的任何形式的计算装置,包含手持机(或蜂窝式电话)、平板计算机、智能电话或桌上型计算机(提供几个实例)。同样地,内容消费者装置14可表示能够实施本发明中所描述的技术的任何形式的计算装置,包含手持机(或蜂窝式电话)、平板计算机、智能电话、机顶盒,或桌上型计算机(提供几个实例)。内容建立者装置12可由影片工作室或可产生多信道音频内容以供内容消费者的操作者(例如,内容消费者装置14)消耗的其它实体来操作。在一些实例中,内容建立者装置12可由将希望压缩hoa系数11的个别用户操作。常常,内容建立者产生音频内容连同视频内容。内容消费者装置14可由个体来操作。内容消费者装置14可包含音频重放系统16,其可指能够呈现shc以供作为多信道音频内容重放的任何形式的音频重放系统。内容建立者装置12包含音频编辑系统18。内容建立者装置12获得呈各种格式(包含直接作为hoa系数)的现场记录7及音频对象9,内容建立者装置12可使用音频编辑系统18对现场记录7及音频对象9进行编辑。内容建立者可在编辑过程期间从音频对象9呈现hoa系数11,从而在识别声场的需要进一步编辑的各种方面的尝试中倾听所呈现的扬声器馈入。内容建立者装置12可接着编辑hoa系数11(可能经由操纵可供以上文所描述的方式导出源hoa系数的音频对象9中的不同者间接地编辑)。内容建立者装置12可使用音频编辑系统18产生hoa系数11。音频编辑系统18表示能够编辑音频数据且输出所述音频数据作为一或多个源球谐系数的任何系统。当编辑过程完成时,内容建立者装置12可基于hoa系数11产生位流21。即,内容建立者装置12包含音频编码装置20,所述音频编码装置20表示经配置以根据本发明中所描述的技术的各种方面编码或以其它方式压缩hoa系数11以产生位流21的装置。音频编码装置20可产生位流21以供传输,作为一实例,跨越传输信道(其可为有线或无线信道、数据存储装置或其类似者)。位流21可表示hoa系数11的经编码版本,且可包含主要位流及另一旁侧位流(其可被称作旁侧信道信息)。尽管下文更详细地加以描述,但音频编码装置20可经配置以基于基于向量的合成或基于方向的合成编码hoa系数11。为了确定是执行基于向量的分解方法还是执行基于方向的分解方法,音频编码装置20可至少部分基于hoa系数11确定hoa系数11是经由声场的自然记录(例如,现场记录7)产生还是从(作为一实例)例如pcm对象的音频对象9人工地(即,合成地)产生。当hoa系数11是从音频物体9产生时,音频编码装置20可使用基于方向的分解方法编码hoa系数11。当hoa系数11是使用(例如,eigenmike)现场地俘获时,音频编码装置20可基于基于向量的分解方法编码hoa系数11。上述区别表示可部署基于向量或基于方向的分解方法的一实例。可能存在其它状况:其中所述分解方法中的任一者或两者可用于自然记录、人工产生的内容或两种内容的混合(混合内容)。此外,也有可能同时使用两种方法用于译码hoa系数的单一时间框。出于说明的目的假定:音频编码装置20确定hoa系数11是现场地俘获或以其它方式表示现场记录(例如,现场记录7),音频编码装置20可经配置以使用涉及线性可逆变换(lit)的应用的基于向量的分解方法编码hoa系数11。线性可逆变换的一实例被称作“奇异值分解”(或“svd”)。在此实例中,音频编码装置20可将svd应用于hoa系数11以确定hoa系数11的经分解版本。音频编码装置20可接着分析hoa系数11的经分解版本以识别可促进进行hoa系数11的经分解版本的重新排序的各种参数。音频编码装置20可接着基于所识别的参数将hoa系数11的经分解版本重新排序,其中如下文进一步详细描述,在给定以下情形的情况下,此重新排序可改进译码效率:变换可将hoa系数跨越hoa系数的帧重新排序(其中帧可包含hoa系数11的m个样本且在一些实例中,m经设定为1024)。在将hoa系数11的经分解版本重新排序之后,音频编码装置20可选择表示声场的前景(或,换句话说,特异的、占优势的或突出的)分量的hoa系数11的经分解版本。音频编码装置20可将表示前景分量的hoa系数11的经分解版本指定为音频对象及相关联方向信息。音频编码装置20也可关于hoa系数11执行声场分析以便至少部分地识别表示声场的一或多个背景(或,换句话说,环境)分量的hoa系数11。音频编码装置20可在给定以下情形的情况下关于背景分量执行能量补偿:在一些实例中,背景分量可能仅包含hoa系数11的任何给定样本的一子集(例如,例如对应于零阶及一阶球面基函数的hoa系数11,而非对应于二阶或高阶球面基函数的hoa系数11)。换句话说,当执行降阶时,音频编码装置20可扩增(例如,添加能量/减去能量)hoa系数11中的剩余背景hoa系数以补偿由于执行降阶而导致的总体能量的改变。音频编码装置20接下来可关于表示背景分量及前景音频对象中的每一者的hoa系数11中的每一者执行一种形式的音质编码(例如,mpeg环绕、mpeg-aac、mpeg-usac或其它已知形式的音质编码)。音频编码装置20可关于前景方向信息执行一种形式的内插,且接着关于经内插前景方向信息执行降阶以产生经降阶的前景方向信息。在一些实例中,音频编码装置20可进一步关于经降阶的前景方向信息执行量化,从而输出经译码前景方向信息。在一些情况下,量化可包括纯量/熵量化。音频编码装置20可接着形成位流21以包含经编码背景分量、经编码前景音频对象及经量化的方向信息。音频编码装置20可接着传输或以其它方式将位流21输出到内容消费者装置14。虽然在图2中经展示为直接传输到内容消费者装置14,但内容建立者装置12可将位流21输出到定位于内容建立者装置12与内容消费者装置14之间的中间装置。所述中间装置可存储位流21以供稍后递送到可能请求所述位流的内容消费者装置14。所述中间装置可包括文件服务器、网页服务器、桌上型计算机、膝上型计算机、平板计算机、移动电话、智能电话,或能够存储位流21以供音频解码器稍后检索的任何其它装置。所述中间装置可驻留于能够将位流21流式传输(且可能结合传输对应视频数据位流)到请求位流21的订户(例如,内容消费者装置14)的内容递送网络中。替代地,内容建立者装置12可将位流21存储到存储媒体,例如压缩光盘、数字多功能光盘、高清晰度视频光盘或其它存储媒体,其中的大部分能够由计算机读取且因此可被称作计算机可读存储媒体或非暂时性计算机可读存储媒体。在此上下文中,传输信道可指借以传输存储到所述媒体的内容的那些信道(且可包含零售商店及其它基于商店的递送机构)。在任何情况下,本发明的技术因此就此而言不应限于图2的实例。如图2的实例中进一步展示,内容消费者装置14包含音频重放系统16。音频重放系统16可表示能够重放多信道音频数据的任何音频重放系统。音频重放系统16可包含数个不同呈现器22。呈现器22可各自提供不同形式的呈现,其中不同形式的呈现可包含执行基于向量的振幅移动(vbap)的各种方式中的一或多者及/或执行声场合成的各种方式中的一或多者。如本文所使用,“a及/或b”意谓“a或b”,或“a及b”两者。音频重放系统16可进一步包含音频解码装置24。音频解码装置24可表示经配置以解码来自位流21的hoa系数11'的装置,其中hoa系数11'可类似于hoa系数11,但归因于经由传输信道的有损操作(例如,量化)及/或传输而有所不同。即,音频解码装置24可将位流21中所指定的前景方向信息解量化,同时还关于位流21中所指定的前景音频对象及表示背景分量的经编码hoa系数执行音质解码。音频解码装置24可进一步关于经解码前景方向信息执行内插,且接着基于经解码前景音频对象及经内插前景方向信息确定表示前景分量的hoa系数。音频解码装置24可接着基于表示前景分量的所确定的hoa系数及表示背景分量的经解码hoa系数确定hoa系数11'。音频重放系统16可在解码位流21之后获得hoa系数11'且呈现hoa系数11'以输出扩音器馈入25。扩音器馈入25可驱动一或多个扩音器(其出于易于说明的目的而未在图2的实例中加以展示)。为了选择适当呈现器或在一些情况下产生适当呈现器,音频重放系统16可获得指示扩音器的数目及/或扩音器的空间几何布置的扩音器信息13。在一些情况下,音频重放系统16可使用参考麦克风且以使得动态地确定扩音器信息13的方式驱动扩音器而获得扩音器信息13。在其它情况下或结合扩音器信息13的动态确定,音频重放系统16可提示用户与音频重放系统16介接且输入扩音器信息13。音频重放系统16可接着基于扩音器信息13选择音频呈现器22中的一者。在一些情况下,当音频呈现器22中无一者在与扩音器信息13中所指定者处于某一阈值相似度度量(按照扩音器几何布置)内时,音频重放系统16可基于扩音器信息13产生音频呈现器22中的所述者。在一些情况下,音频重放系统16可基于扩音器信息13产生音频呈现器22中的一者,而不会首先试图选择音频呈现器22中的现有的一者。图3为更详细地说明可执行本发明中所描述的技术的各种方面的图2的实例中所展示的音频编码装置20的一实例的框图。音频编码装置20包含内容分析单元26、基于向量的分解单元27及基于方向的分解单元28。尽管下文简要描述,但关于音频编码装置20及压缩或以其它方式编码hoa系数的各种方面的更多信息可在2014年5月29日申请的标题为“用于声场的经分解表示的内插(interpolationfordecomposedrepresentationsofasoundfield)”的第wo2014/194099号国际专利申请公开案中获得。内容分析单元26表示经配置以分析hoa系数11的内容以识别hoa系数11表示从现场记录产生的内容还是从音频对象产生的内容的单元。内容分析单元26可确定hoa系数11是从实际声场的记录产生还是从人工音频对象产生。在一些情况下,当帧hoa系数11是从记录产生时,内容分析单元26将hoa系数11传递到基于向量的分解单元27。在一些情况下,当帧hoa系数11是从合成音频对象产生时,内容分析单元26将hoa系数11传递到基于方向的合成单元28。基于方向的合成单元28可表示经配置以执行对hoa系数11的基于方向的合成以产生基于方向的位流21的单元。如图3的实例中所展示,基于向量的分解单元27可包含线性可逆变换(lit)单元30、参数计算单元32、重新排序单元34、前景选择单元36、能量补偿单元38、音质音频译码器单元40、位流产生单元42、声场分析单元44、系数减少单元46、背景(bg)选择单元48、空间-时间内插单元50及量化单元52。线性可逆变换(lit)单元30接收呈hoa信道形式的hoa系数11,每一信道表示与球面基函数的给定阶数、子阶数相关联的系数的块或帧(其可表示为hoa[k],其中k可表示样本的当前帧或块)。hoa系数11的矩阵可具有维度d:m×(n+1)2。即,lit单元30可表示经配置以执行被称作奇异值分解的形式的分析的单元。虽然关于svd加以描述,但可关于提供数组线性不相关的能量密集输出的任何类似变换或分解执行本发明中所描述的所述技术。而且,本发明中对“组”的提及大体上意欲指非零组(除非特别地相反陈述),且并不意欲指包含所谓的“空组”的组的经典数学定义。替代变换可包括常常被称作“pca”的主分量分析。pca是指使用正交变换将一组可能相关变量的观测结果转换成被称作主分量的一组线性不相关变量的数学程序。线性不相关变量表示彼此并不具有线性统计关系(或相依性)的变量。可将主分量描述为彼此具有小程度的统计相关性。在任何情况下,所谓的主分量的数目小于或等于原始变量的数目。在一些实例中,按如下方式定义变换:使得第一主分量具有最大可能方差(或,换句话说,尽可能多地考虑数据中的可变性),且每一接续分量又具有可能的最高方差(在以下约束下:所述连续分量正交于前述分量(所述情形可重新陈述为与前述分量不相关))。pca可执行一种形式的降阶,其就hoa系数11而言可导致hoa系数11的压缩。取决于上下文,可通过数个不同名称来提及pca,例如离散卡忽南-拉维变换(discretekarhunen-loevetransform)、哈特林变换(hotellingtransform)、适当正交分解(pod)及本征值分解(evd)(仅举几个实例)。有利于压缩音频数据的基本目标的此些操作的性质为多信道音频数据的“能量压缩”及“解相关”。在任何情况下,出于实例的目的,假定lit单元30执行奇异值分解(其再次可被称作“svd”),lit单元30可将hoa系数11变换成两组或两组以上经变换的hoa系数。“数组”经变换的hoa系数可包含经变换的hoa系数的向量。在图3的实例中,lit单元30可关于hoa系数11执行svd以产生所谓的v矩阵、s矩阵及u矩阵。在线性代数中,svd可按如下形式表示y乘z实数或复数矩阵x(其中x可表示多信道音频数据,例如hoa系数11)的因子分解:x=usv*u可表示y乘y实数或复数单位矩阵,其中u的y列被称为多信道音频数据的左奇异向量。s可表示在对角线上具有非负实数的y乘z矩形对角线矩阵,其中s的对角线值被称为多信道音频数据的奇异值。v*(其可表示v的共轭转置)可表示z乘z实数或复数单位矩阵,其中v*的z列被称为多信道音频数据的右奇异向量。尽管本发明中描述为将技术应用于包括hoa系数11的多信道音频数据,但所述技术可应用于任何形式的多信道音频数据。以此方式,音频编码装置20可关于表示声场的至少一部分的多信道音频数据执行奇异值分解,以产生表示多信道音频数据的左奇异向量的u矩阵、表示多信道音频数据的奇异值的s矩阵及表示多信道音频数据的右奇异向量的v矩阵,且将多信道音频数据表示为u矩阵、s矩阵及v矩阵中的一或多者的至少一部分的函数。在一些实例中,将上文提及的svd数学表达式中的v*矩阵表示为v矩阵的共轭转置以反映svd可应用于包括复数的矩阵。当应用于仅包括实数的矩阵时,v矩阵的复数共轭(或,换句话说,v*矩阵)可被视为v矩阵的转置。下文为易于说明的目的,假定:hoa系数11包括实数,结果为经由svd而非v*矩阵输出v矩阵。此外,虽然在本发明中表示为v矩阵,但在适当时,对v矩阵的提及应被理解为是指v矩阵的转置。虽然假定为v矩阵,但所述技术可按类似方式应用于具有复数系数的hoa系数11,其中svd的输出为v*矩阵。因此,就此而言,所述技术不应限于仅提供应用svd以产生v矩阵,而可包含将svd应用于具有复数分量的hoa系数11以产生v*矩阵。在任何情况下,lit单元30可关于高阶立体混响(hoa)音频数据(其中立体混响音频数据包含hoa系数11或任何其它形式的多信道音频数据的块或样本)的每一块(其可指帧)执行逐块形式的svd。如上文所提及,变量m可用以表示音频帧的长度(以样本数计)。举例来说,当音频帧包含1024个音频样本时,m等于1024。尽管关于m的典型值加以描述,但本发明的所述技术不应限于m的典型值。lit单元30因此可关于具有m乘(n+1)2个hoa系数的hoa系数11的块执行逐块svd,其中n再次表示hoa音频数据的阶数。lit单元30可经由执行所述svd而产生v矩阵、s矩阵及u矩阵,其中矩阵中的每一者可表示上文所描述的相应v、s及u矩阵。以此方式,线性可逆变换单元30可关于hoa系数11执行svd以输出具有维度d:m×(n+1)2的us[k]向量33(其可表示s向量及u向量的组合版本),及具有维度d:(n+1)2×(n+1)2的v[k]向量35。us[k]矩阵中的个别向量元素也可被称为xps(k),而v[k]矩阵中的个别向量也可被称为v(k)。u、s及v矩阵的分析可揭示:所述矩阵携有或表示上文通过x表示的基础声场的空间及时间特性。u(长度为m个样本)中的n个向量中的每一者可表示依据时间(对于通过m个样本表示的时间段)的经正规化的分离音频信号,其彼此正交且已与任何空间特性(其也可被称作方向信息)解耦。表示空间形状及位置(r、θ、)宽度的空间特性可改为通过v矩阵中的个别第i向量v(i)(k)(每一者具有长度(n+1)2)表示。v(i)(k)向量中的每一者的个别元素可表示描述针对相关联的音频对象的声场的形状及方向的hoa系数。u矩阵及v矩阵两者中的向量经正规化而使得其均方根能量等于单位。u中的音频信号的能量因此通过s中的对角线元素表示。将u与s相乘以形成us[k](具有个别向量元素xps(k)),因此表示具有真正能量的音频信号。进行svd分解以使音频时间信号(u中)、其能量(s中)与其空间特性(v中)解耦的能力可支持本发明中所描述的技术的各种方面。另外,通过us[k]与v[k]的向量乘法合成基础hoa[k]系数x的模型引出贯穿此文件使用的术语“基于向量的分解”。尽管描述为直接关于hoa系数11执行,但lit单元30可将线性可逆变换应用于hoa系数11的导数。举例来说,lit单元30可关于从hoa系数11导出的功率谱密度矩阵应用svd。功率谱密度矩阵可表示为psd且是经由hoaframe到hoaframe的转置的矩阵乘法而获得,如下文的伪码中所概述。hoaframe记法是指hoa系数11的帧。在将svd(svd)应用于psd之后,lit单元30可获得s[k]2矩阵(s_squared)及v[k]矩阵。s[k]2矩阵可表示s[k]矩阵的平方,因此lit单元30可将平方根运算应用于s[k]2矩阵以获得s[k]矩阵。在一些情况下,lit单元30可关于v[k]矩阵执行量化以获得经量化的v[k]矩阵(其可表示为v[k]'矩阵)。lit单元30可通过首先将s[k]矩阵乘以经量化的v[k]'矩阵以获得sv[k]'矩阵而获得u[k]矩阵。lit单元30接下来可获得sv[k]'矩阵的伪逆(pinv)且接着将hoa系数11乘以sv[k]'矩阵的伪逆以获得u[k]矩阵。可通过以下伪码表示前述情形:psd=hoaframe'*hoaframe;[v,s_squared]=svd(psd,’econ’);s=sqrt(s_squared);u=hoaframe*pinv(s*v');通过关于hoa系数的功率谱密度(psd)而非系数自身执行svd,lit单元30可在处理器循环及存储空间中的一或多者方面可能地降低执行svd的计算复杂性,同时达成相同的源音频编码效率,如同svd是直接应用于hoa系数一般。即,上文所描述的psd型svd可能有可能在计算上要求不太高,这是因为与m*f矩阵(其中m为帧长度,即,1024或大于1024个样本)相比较,svd是针对f*f矩阵(其中f为hoa系数的数目)进行。通过应用于psd而非hoa系数11,与应用于hoa系数11时的o(m*l2)相比较,svd的复杂性现可为约o(l3)(其中o(*)表示计算机科学技术中常见的计算复杂性的大o记法)。就此而言,lit单元30可关于高阶立体混响音频数据11执行分解或以其它方式分解高阶立体混响音频数据11以获得表示球谐域中的正交空间轴线的向量(例如,上述v-向量)。分解可包含svd、evd或任何其它形式的分解。参数计算单元32表示经配置以计算各种参数的单元,所述参数例如相关性参数(r)、方向性质参数(θ、r),及能量性质(e)。用于当前帧的参数中的每一者可表示为r[k]、θ[k]、r[k]及e[k]。参数计算单元32可关于us[k]向量33执行能量分析及/或相关(或所谓的交叉相关)以识别所述参数。参数计算单元32也可确定用于先前帧的参数,其中先前帧参数可基于具有us[k-1]向量及v[k-1]向量的先前帧表示为r[k-1]、θ[k-1]、r[k-1]及e[k-1]。参数计算单元32可将当前参数37及先前参数39输出到重新排序单元34。svd分解并不会保证通过us[k-1]向量33中的第p向量表示的音频信号/对象(其可表示为us[k-1][p]向量(或,替代地,表示为xps(p)(k-1)))将为通过us[k]向量33中的第p向量表示的相同音频信号/对象(其也可表示为us[k][p]向量33(或,替代地,表示为xps(p)(k)))(在时间上前进)。由参数计算单元32计算的参数可供重新排序单元34用以将音频对象重新排序以表示其自然评估或随时间推移的连续性。即,重新排序单元34可逐轮地比较来自第一us[k]向量33的参数37中的每一者与用于第二us[k-1]向量33的参数39中的每一者。重新排序单元34可基于当前参数37及先前参数39将us[k]矩阵33及v[k]矩阵35内的各种向量重新排序(作为一实例,使用匈牙利算法(hungarianalgorithm))以将经重新排序的us[k]矩阵33'(其可在数学上表示为)及经重新排序的v[k]矩阵35'(其可在数学上表示为)输出到前景声音(或占优势声音--ps)选择单元36(“前景选择单元36”)及能量补偿单元38。声场分析单元44可表示经配置以关于hoa系数11执行声场分析以便有可能达成目标位速率41的单元。声场分析单元44可基于分析及/或基于所接收目标位速率41,确定音质译码器执行个体的总数目(其可为环境或背景信道的总数目(bgtot)的函数)及前景信道(或换句话说,占优势信道)的数目。音质译码器执行个体的总数目可表示为numhoatransportchannels。再次为了可能地达成目标位速率41,声场分析单元44还可确定前景信道的总数目(nfg)45、背景(或换句话说,环境)声场的最小阶数(nbg或替代地,minambhoaorder)、表示背景声场的最小阶数的实际信道的对应数目(nbga=(minambhoaorder+1)2),及待发送的额外bghoa信道的索引(i)(其在图3的实例中可共同地表示为背景信道信息43)。背景信道信息42也可被称作环境信道信息43。numhoatransportchannels-nbga后剩余的信道中的每一者可为“额外背景/环境信道”、“作用中的基于向量的占优势信道”、“作用中的基于方向的占优势信号”或“完全不活动”。在一方面,可通过两个位以(“channeltype”)语法元素形式指示信道类型:(例如,00:基于方向的信号;01:基于向量的占优势信号;10:额外环境信号;11:非作用中信号)。背景或环境信号的总数目nbga可通过(minambhoaorder+1)2+在用于所述帧的位流中以信道类型形式显现索引10(在上述实例中)的次数给出。在任何情况下,声场分析单元44可基于目标位速率41选择背景(或换句话说,环境)信道的数目及前景(或换句话说,占优势)信道的数目,从而在目标位速率41相对较高时(例如,在目标位速率41等于或大于512kbps时)选择更多背景及/或前景信道。在一方面,在位流的标头区段中,numhoatransportchannels可经设定为8,而minambhoaorder可经设定为1。在此情境下,在每个帧处,四个信道可专用于表示声场的背景或环境部分,而其它4个信道可逐帧地在信道类型上变化--例如,用作额外背景/环境信道或前景/占优势信道。前景/占优势信号可为基于向量或基于方向的信号中的一者,如上文所描述。在一些情况下,用于帧的基于向量的占优势信号的总数目可通过所述帧的位流中channeltype索引为01的次数给出。在上述方面,对于每个额外背景/环境信道(例如,对应于channeltype10),可在所述信道中表示可能的hoa系数(前四个除外)中的哪一者的对应信息。对于四阶hoa内容,所述信息可为指示hoa系数5到25的索引。可在minambhoaorder经设定为1时始终发送前四个环境hoa系数1到4,因此,音频编码装置可能仅需要指示额外环境hoa系数中具有索引5到25的一者。因此可使用5位语法元素(对于四阶内容)发送所述信息,其可表示为“codedambcoeffidx”。为了加以说明,假定:minambhoaorder经设定为1且具有索引6的额外环境hoa系数是经由位流21发送(作为一实例)。在此实例中,minambhoaorder1指示环境hoa系数具有索引1、2、3及4。音频编码装置20可选择环境hoa系数,这是因为环境hoa系数具有小于或等于(minambhoaorder+1)2或4的索引(在此实例中)。音频编码装置20可指定位流21中与索引1、2、3及4相关联的环境hoa系数。音频编码装置20也可指定位流中具有索引6的额外环境hoa系数作为具有channeltype10的additionalambienthoachannel。音频编码装置20可使用codedambcoeffidx语法元素指定索引。作为一种实践,codedambcoeffidx元素可指定从1到25的所有索引。然而,因为minambhoaorder经设定为1,所以音频编码装置20可能并不指定前四个索引中的任一者(因为已知将在位流21中经由minambhoaorder语法元素指定前四个索引)。在任何情况下,因为音频编码装置20经由minambhoaorder(对于前四个系数)及codedambcoeffidx(对于额外环境hoa系数)指定五个环境hoa系数,所以音频编码装置20可能并不指定与具有索引1、2、3、4及6的环境hoa系数相关联的对应v-向量元素。因此,音频编码装置20可通过元素[5,7:25]指定v-向量。在第二方面,所有前景/占优势信号为基于向量的信号。在此第二方面,前景/占优势信号的总数目可通过nfg=numhoatransportchannels-[(minambhoaorder+1)2+additionalambienthoachannel中的每一者]给出。声场分析单元44将背景信道信息43及hoa系数11输出到背景(bg)选择单元36,将背景信道信息43输出到系数减少单元46及位流产生单元42,且将nfg45输出到前景选择单元36。背景选择单元48可表示经配置以基于背景信道信息(例如,背景声场(nbg)以及待发送的额外bghoa信道的数目(nbga)及索引(i))确定背景或环境hoa系数47的单元。举例来说,当nbg等于一时,背景选择单元48可选择用于具有等于或小于一的阶数的音频帧的每一样本的hoa系数11。在此实例中,背景选择单元48可接着选择具有通过索引(i)中的一者识别的索引的hoa系数11作为额外bghoa系数,其中将待于位流21中指定的nbga提供到位流产生单元42以便使得音频解码装置(例如,图2及4的实例中所展示的音频解码装置24)能够从位流21剖析背景hoa系数47。背景选择单元48可接着将环境hoa系数47输出到能量补偿单元38。环境hoa系数47可具有维度d:m×[(nbg+1)2+nbga]。环境hoa系数47也可被称作“环境hoa系数47”,其中环境hoa系数47中的每一者对应于待由音质音频译码器单元40编码的单独环境hoa信道47。前景选择单元36可表示经配置以基于nfg45(其可表示识别前景向量的一或多个索引)选择表示声场的前景或特异分量的经重新排序的us[k]矩阵33'及经重新排序的v[k]矩阵35'的单元。前景选择单元36可将nfg信号49(其可表示为经重新排序的us[k]1,…,nfg49、fg1,…,nfg[k]49或49)输出到音质音频译码器单元40,其中nfg信号49可具有维度d:m×nfg且每一者表示单信道-音频对象。前景选择单元36也可将对应于声场的前景分量的经重新排序的v[k]矩阵35'(或v(1..nfg)(k)35')输出到空间-时间内插单元50,其中对应于前景分量的经重新排序的v[k]矩阵35'的子集可表示为前景v[k]矩阵51k(其可在数学上表示为),其具有维度d:(n+1)2×nfg。能量补偿单元38可表示经配置以关于环境hoa系数47执行能量补偿以补偿归因于通过背景选择单元48移除hoa信道中的各者而产生的能量损失的单元。能量补偿单元38可关于经重新排序的us[k]矩阵33'、经重新排序的v[k]矩阵35'、nfg信号49、前景v[k]向量51k及环境hoa系数47中的一或多者执行能量分析,且接着基于能量分析执行能量补偿以产生经能量补偿的环境hoa系数47'。能量补偿单元38可将经能量补偿的环境hoa系数47'输出到音质音频译码器单元40。空间-时间内插单元50可表示经配置以接收第k帧的前景v[k]向量51k及前一帧(因此为k-1记法)的前景v[k-1]向量51k-1且执行空间-时间内插以产生经内插的前景v[k]向量的单元。空间-时间内插单元50可将nfg信号49与前景v[k]向量51k重新组合以恢复经重新排序的前景hoa系数。空间-时间内插单元50可接着将经重新排序的前景hoa系数除以经内插的v[k]向量以产生经内插的nfg信号49'。空间-时间内插单元50也可输出用以产生经内插的前景v[k]向量的前景v[k]向量51k,以使得音频解码装置(例如,音频解码装置24)可产生经内插的前景v[k]向量且借此恢复前景v[k]向量51k。将用以产生经内插的前景v[k]向量的前景v[k]向量51k表示为剩余前景v[k]向量53。为了确保在编码器及解码器处使用相同的v[k]及v[k-1](以建立经内插的向量v[k]),可在编码器及解码器处使用向量的经量化/经解量化的版本。在操作中,空间-时间内插单元50可内插来自包含于第一帧中的第一多个hoa系数11的一部分的第一分解(例如,前景v[k]向量51k)及包含于第二帧中的第二多个hoa系数11的一部分的第二分解(例如,前景v[k]向量51k-1)的第一音频帧的一或多个子帧,以产生用于所述一或多个子帧的经分解的经内插球谐系数。在一些实例中,第一分解包括表示hoa系数11的所述部分的右奇异向量的第一前景v[k]向量51k。同样,在一些实例中,第二分解包括表示hoa系数11的所述部分的右奇异向量的第二前景v[k]向量51k。换句话说,就球面上的正交基函数而言,基于球谐的3d音频可为3d压力场的参数表示。所述表示的阶数n越高,空间分辨率可能地越高,且常常球谐(sh)系数的数目越大(总共(n+1)2个系数)。对于许多应用,可能需要系数的带宽压缩从而能够有效率地传输及存储所述系数。本发明中所针对的所述技术可提供使用奇异值分解(svd)进行的基于帧的维度减少过程。svd分析可将系数的每一帧分解成三个矩阵u、s及v。在一些实例中,所述技术可将us[k]矩阵中的向量中的一些向量作为基础声场的前景分量来处置。然而,当以此方式进行处置时,所述向量(在us[k]矩阵中)在帧间是不连续的,即使其表示同一特异音频分量也是如此。当经由变换音频译码器馈入所述分量时,所述不连续性可导致显著假影。在一些方面,空间-时间内插可依赖于以下观测:可将v矩阵解译为球谐域中的正交空间轴线。u[k]矩阵可表示球谐(hoa)数据依据基函数的投影,其中不连续性可归因于正交空间轴线(v[k]),所述正交空间轴线每个帧皆改变且因此自身为不连续的。此情形不同于例如傅立叶变换的一些其它分解,其中在一些实例中,基函数在帧间为常量。在此些术语中,svd可被视为匹配追求算法。空间-时间内插单元50可执行内插以通过在帧之间内插而可能从帧到帧维持基函数(v[k])之间的连续性。如上文所提及,可关于样本执行内插。当子帧包括一组单一样本时,所述状况在上述描述中得以一般化。在经由样本及经由子帧进行内插的两种状况下,内插运算可呈以下等式的形式:在上述等式中,可从单一v-向量v(k-1)关于单一v-向量v(k)执行内插,所述向量在一方面可表示来自邻近帧k及k-1的v-向量。在上述等式中,l表示执行内插所针对的分辨率,其中l可指示整数样本且l=1,…,t(其中t为样本的长度,在所述长度内执行内插且在所述长度内需要经输出的经内插的向量且所述长度也指示过程的输出产生向量的l)。替代地,l可指示由多个样本组成的子帧。当(例如)将帧划分成四个子帧时,l可包括用于所述子帧中的每一子帧的值1、2、3及4。可经由位流将l的值作为被称为“codedspatialinterpolationtime”的字段用信号通知,使得可在解码器中重复内插运算。w(l)可包括内插权重的值。当内插为线性的时,w(l)可依据l在0与1之间线性地且单调地变化。在其它情况下,w(l)可依据l在0与1之间以非线性但单调方式(例如,上升余弦的四分之一循环)变化。可将函数w(l)在几种不同函数可能性之间编索引且将所述函数在位流中作为被称为“spatialinterpolationmethod”的字段用信号通知,使得可由解码器重复相同的内插运算。当w(l)具有接近于0的值时,输出可被高度加权或受v(k-1)影响。而当w(l)具有接近于1的值时,其确保输出被高度加权且受v(k-1)影响。系数减少单元46可表示经配置以基于背景信道信息43关于剩余前景v[k]向量53执行系数减少以将经缩减前景v[k]向量55输出到量化单元52的单元。经缩减前景v[k]向量55可具有维度d:[(n+1)2-(nbg+1)2-bgtot]×nfg。就此而言,系数减少单元46可表示经配置以减少剩余前景v[k]向量53的系数的数目的单元。换句话说,系数减少单元46可表示经配置以消除前景v[k]向量中具有极少或几乎没有方向信息的系数(其形成剩余前景v[k]向量53)的单元。如上文所描述,在一些实例中,特异或(换句话说)前景v[k]向量的对应于一阶及零阶基函数的系数(其可表示为nbg)提供极少方向信息,且因此可将其从前景v-向量移除(经由可被称作“系数减少”的过程)。在此实例中,可提供较大灵活性以使得不仅从组[(nbg+1)2+1,(n+1)2]识别对应于nbg的系数而且识别额外hoa信道(其可通过变量totalofaddambhoachan表示)。声场分析单元44可分析hoa系数11以确定bgtot,其不仅可识别(nbg+1)2而且可识别totalofaddambhoachan,所述两者可共同地被称作背景信道信息43。系数减少单元46可接着将对应于(nbg+1)2及totalofaddambhoachan的系数从剩余前景v[k]向量53移除以产生大小为((n+1)2-(bgtot)×nfg的维度较小的v[k]矩阵55,其也可被称作经缩减前景v[k]向量55。换句话说,如第wo2014/194099号公开案中所提及,系数减少单元46可产生用于旁侧信道信息57的语法元素。举例来说,系数减少单元46可在存取单元(其可包含一或多个帧)的标头中指定表示选择复数种配置模式中的哪一者的语法元素。尽管描述为基于每一存取单元指定,但系数减少单元46可基于每一帧或任何其它周期性基础或非周期性基础(例如,针对整个位流一次)指定所述语法元素。在任何情况下,所述语法元素可包括两个位,所述两个位指示选择三种配置模式中的哪一者用于指定经缩减前景v[k]向量55的所述组非零系数以表示特异分量的方向方面。所述语法元素可表示为“codedvveclength”。以此方式,系数减少单元46可在位流中用信号通知或以其它方式指定使用三种配置模式中的哪一者在位流21中指定经缩减前景v[k]向量55。举例来说,三种配置模式可呈现于用于vvecdata的语法表(稍后在本文件中引用)中。在所述实例中,配置模式如下:(模式0),在vvecdata字段中传输完整v-向量长度;(模式1),不传输与用于环境hoa系数的最小数目个系数相关联的v-向量的元素及包含额外hoa信道的v-向量的所有元素;及(模式2),不传输与用于环境hoa系数的最小数目个系数相关联的v-向量的元素。vvecdata的语法表结合switch及case语句说明所述模式。尽管关于三种配置模式加以描述,但所述技术不应限于三种配置模式,且可包含任何数目种配置模式,包含单一配置模式或复数种模式。第wo2014/194099号公开案提供具有四种模式的不同实例。系数减少单元46也可将旗标63指定为旁侧信道信息57中的另一语法元素。量化单元52可表示经配置以执行任何形式的量化以压缩经缩减前景v[k]向量55以产生经译码前景v[k]向量57从而将经译码前景v[k]向量57输出到位流产生单元42的单元。在操作中,量化单元52可表示经配置以压缩声场的空间分量(即,在此实例中,为经缩减前景v[k]向量55中的一或多者)的单元。出于实例的目的,假定经缩减前景v[k]向量55包含两行向量,由于系数减少,每一列具有少于25个元素(其暗示声场的四阶hoa表示)。尽管关于两行向量加以描述,但任何数目个向量可包含于经缩减前景v[k]向量55中,至多为(n+1)2个,其中n表示声场的hoa表示的阶数。此外,尽管下文描述为执行纯量及/或熵量化,但量化单元52可执行导致经缩减前景v[k]向量55的压缩的任何形式的量化。量化单元52可接收经缩减前景v[k]向量55且执行压缩方案以产生经译码前景v[k]向量57。压缩方案大体上可涉及用于压缩向量或数据的元素的任何可设想压缩方案,且不应限于下文更详细描述的实例。作为一实例,量化单元52可执行包含以下各者中的一或多者的压缩方案:将经缩减前景v[k]向量55的每一元素的浮点表示变换成经缩减前景v[k]向量55的每一元素的整数表示、经缩减前景v[k]向量55的整数表示的均匀量化,以及剩余前景v[k]向量55的经量化的整数表示的分类及译码。在一些实例中,可通过参数动态地控制所述压缩方案的一或多个过程中的若干者以达成或几乎达成(作为一实例)所得位流21的目标位速率41。在给定经缩减前景v[k]向量55中的每一者彼此正交的情况下,可独立地译码经缩减前景v[k]向量55中的每一者。在一些实例中,如下文更详细地描述,可使用相同译码模式(通过各种子模式界定)译码每一经缩减前景v[k]向量55的每一元素。如第wo2014/194099号公开案中所描述,量化单元52可执行纯量量化及/或霍夫曼(huffman)编码以压缩经缩减前景v[k]向量55,从而输出经译码前景v[k]向量57(其也可被称作旁侧信道信息57)。旁侧信道信息57可包含用以译码剩余前景v[k]向量55的语法元素。此外,尽管关于纯量量化形式加以描述,但量化单元52可执行向量量化或任何其它形式的量化。在一些情况下,量化单元52可在向量量化及纯量量化之间切换。在上文所描述的纯量量化期间,量化单元52可计算两个连续v-向量(如在帧到帧中连续)之间的差且译码所述差(或,换句话说,残余)。此纯量量化可表示基于先前所指定的向量及差信号进行的一种形式的预测性译码。向量量化并不涉及此差译码。换句话说,量化单元52可接收输入v-向量(例如,经缩减前景v[k]向量55中的一者)且执行不同类型的量化以选择所述量化类型中将用于所述输入v-向量的类型。作为一实例,量化单元52可执行向量量化、无霍夫曼译码的纯量量化,及具有霍夫曼译码的纯量量化。在此实例中,量化单元52可根据向量量化模式将输入v-向量向量量化以产生经向量量化的v-向量。经向量量化的v-向量可包含表示输入v-向量的经向量量化的权重值。在一些实例中,可将经向量量化的权重值表示为指向量化码字的量化码簿中的量化码字(即,量化向量)的一或多个量化索引。当经配置以执行向量量化时,量化单元52可基于码向量63(“cv63”)将经缩减前景v[k]向量55中的每一者分解成码向量的加权总和。量化单元52可产生用于码向量63中的选定码向量中的每一者的权重值。量化单元52接下来可选择所述权重值的子集以产生权重值的选定子集。举例来说,量化单元52可从所述组权重值中选择z个最大量值权重值以产生权重值的选定子集。在一些实例中,量化单元52可进一步将选定权重值重新排序以产生权重值的选定子集。举例来说,量化单元52可基于从最高量值权重值开始且于最低量值权重值结束的量值将选定权重值重新排序。当执行向量量化时,量化单元52可从量化码簿中选择z-分量向量来表示z个权重值。换句话说,量化单元52可将z个权重值向量量化以产生表示z个权重值的z-分量向量。在一些实例中,z可对应于由量化单元52选择以表示单一v-向量的权重值的数目。量化单元52可产生指示经选择以表示z个权重值的z-分量向量的数据,且将此数据提供到位流产生单元42作为经译码权重57。在一些实例中,量化码簿可包含经编索引的多个z-分量向量,且指示z-分量向量的数据可为量化码簿中指向选定向量的索引值。在此些实例中,解码器可包含经类似地编索引的量化码簿以解码索引值。在数学上,可基于以下表达式表示经缩减前景v[k]向量55中的每一者:其中ωj表示一组码向量({ωj})中的第j码向量,ωj表示一组权重({ωj})中的第j权重,v对应于由v-向量译码单元52表示、分解及/或译码的v-向量,且j表示用以表示v的权重的数目及码向量的数目。表达式(1)的右侧可表示包含一组权重({ωj})及一组码向量({ωj})的码向量的加权总和。在一些实例中,量化单元52可基于以下等式确定权重值:其中表示一组码向量({ωk})中的第k码向量的转置,v对应于由量化单元52表示、分解及/或译码的v-向量,且ωk表示一组权重({ωk})中的第k权重。考虑使用25个权重及25个码向量表示v-向量vfg的实例。可将vfg的此分解书写为:其中ωj表示一组码向量({ωj})中的第j码向量,ωj表示一组权重({ωj})中的第j权重,且vfg对应于由量化单元52表示、分解及/或译码的v-向量。在所述组码向量({ωj})正交的实例中,以下表达式可适用:在此些实例中,等式(3)的右侧可简化如下:其中ωk对应于码向量的加权总和中的第k权重。对于等式(3)中所使用的码向量的实例加权总和,量化单元52可使用等式(5)(类似于等式(2))计算用于码向量的加权总和中的权重中的每一者的权重值且可将所得权重表示为:{ωk}k=1,…,25(6)考虑量化单元52选择五个最大权重值(即,具有最大值或绝对值的权重)的实例。可将待量化的权重值的子集表示为:可使用权重值的子集以及其对应码向量形成估计v-向量的码向量的加权总和,如以下表达式中所展示:其中ωj表示码向量({ωj})的子集中的第j码向量,表示权重的子集中的第j权重,且对应于所估计的v-向量,其对应于由量化单元52分解及/或译码的v-向量。表达式(1)的右侧可表示包含一组权重及一组码向量({ωj})的码向量的加权总和。量化单元52可将权重值的子集量化以产生经量化的权重值,其可表示为:可使用经量化的权重值以及其对应码向量形成表示所估计的v-向量的经量化的版本的码向量的加权总和,如以下表达式中所展示:其中ωj表示码向量({ωj})的子集中的第j码向量,表示权重的子集中的第j权重,且对应于所估计的v-向量,其对应于由量化单元52分解及/或译码的v-向量。表达式(1)的右侧可表示包含一组权重及一组码向量({ωj})的码向量的子集的加权总和。前文的替代重新叙述(其大部分等效于上文所描述的叙述)可如下。可基于一组预定义码向量译码v-向量。为了译码v-向量,将每一v-向量分解成码向量的加权总和。码向量的加权总和由k对预定义码向量及相关联权重组成:其中ωj表示一组预定义码向量({ωj})中的第j码向量,ωj表示一组预定义权重({ωj})中的第j实数值权重,k对应于加数的索引(其可高达7),且v对应于经译码的v-向量。k的选择取决于编码器。如果编码器选择两个或两个以上码向量的加权总和,那么编码器可选择的预定义码向量的总数目为(n+1)2,所述预定义码向量是从3d音频标准(标题为“信息技术-异质环境中的高效率译码及媒体递送-第3部分:3d音频(informationtechnology-higheffeciencycodingandmediadeliveryinheterogeneousenvironments-part3:3daudio)”,iso/iecjtc1/sc29/wg11,日期为2014年7月25日,且通过文件编号iso/iecdis23008-3识别)的表f.3到f.7导出作为hoa扩展系数。当n为4时,使用上文所引用的3d音频标准的附录f.5中具有32个预定义方向的表格。在所有状况下,将权重ω的绝对值关于上文所引用的3d音频标准的表f.12中的表格的前k+1列中可见的且通过相关联的行编号索引用信号通知的预定义加权值向量量化。将权重ω的数字正负号分别译码为:换句话说,在用信号通知值k之后,通过指向k+1个预定义码向量{ωj}的k+1个索引、指向预定义加权码簿中的k个经量化的权重的一索引及k+1个数字正负号值sj编码v-向量:如果编码器选择一码向量的加权总和,那么结合上文所引用的3d音频标准的表f.11的表格中的绝对加权值使用从上文所引用的3d音频标准的表f.8导出的码簿,其中在下文展示这些表格中的两者。而且,可分别译码加权值ω的数字正负号。量化单元52可用信号通知使用上文所提及的表f.3到f.12中所阐述的前述码簿中的哪一码簿来使用码簿索引语法元素(其在下文可表示为“codebkidx”)译码输入v-向量。量化单元52也可将输入v-向量纯量量化以产生输出经纯量量化的v-向量,而无需对经纯量量化的v-向量进行霍夫曼译码。量化单元52可进一步根据霍夫曼译码纯量量化模式将输入v-向量纯量量化以产生经霍夫曼译码经纯量量化的v-向量。举例来说,量化单元52可将输入v-向量纯量量化以产生经纯量量化的v-向量,且对经纯量量化的v-向量进行霍夫曼译码以产生输出经霍夫曼译码经纯量量化的v-向量。在一些实例中,量化单元52可执行一种形式的经预测的向量量化。量化单元52可通过在位流21中指定指示是否执行用于向量量化的预测的一或多个位(例如,pflag语法元素)而识别是否预测向量量化(如通过指示量化模式的一或多个位识别,例如,nbitsq语法元素)。为了说明经预测的向量量化,量化单元42可经配置以接收对应于向量(例如,v-向量)的基于码向量的分解的权重值(例如,权重值量值),基于所接收权重值及基于经重建构的权重值(例如,从一或多个先前或后续音频帧重建构的权重值)产生预测性权重值,及将数组预测性权重值向量量化。在一些状况下,一组预测性权重值中的每一权重值可对应于单一向量的基于码向量的分解中所包含的权重值。量化单元52可接收权重值及从向量的先前或后续译码获得的经加权的经重建构的权重值。量化单元52可基于权重值及经加权的经重建构的权重值产生预测性权重值。量化单元42可将经加权的经重建构的权重值从权重值中减去以产生预测性权重值。预测性权重值可替代地被称作(例如)残余、预测残余、残余权重值、权重值差、误差或预测误差。权重值可表示为|wi,j|,其为对应权重值wi,j的量值(或绝对值)。因此,权重值可替代地被称作权重值量值或被称作权重值的量值。权重值wi,j对应于来自用于第i音频帧的权重值的有序子集的第j权重值。在一些实例中,权重值的有序子集可对应于向量(例如,v-向量)的基于码向量的分解中的权重值的子集,其是基于权重值的量值而排序(例如,从最大量值到最小量值排序)。经加权的经重建构的权重值可包含项,其对应于对应的经重建构的权重值的量值(或绝对值)。经重建构的权重值对应于来自用于第(i-1)音频帧的经重建构的权重值的有序子集的第j经重建构的权重值。在一些实例中,可基于对应于经重建构的权重值的经量化的预测性权重值产生经重建构的权重值的有序子集(或集合)。量化单元42也包含加权因子αj。在一些实例中,αj=1,在此状况下,经加权的经重建构的权重值可减小到在其它实例中,αj≠1。举例来说,可基于以下等式确定αj:其中i对应于用以确定αj的音频帧的数目。如先前等式中所展示,在一些实例中,可基于来自多个不同音频帧的多个不同权重值确定加权因子。而且,当经配置以执行经预测的向量量化时,量化单元52可基于以下等式产生预测性权重值:其中ei,j对应于来自用于第i音频帧的权重值的有序子集的第j权重值的预测性权重值。量化单元52基于预测性权重值及经预测的向量量化(pvq)码簿产生经量化的预测性权重值。举例来说,量化单元52可将预测性权重值结合针对待译码的向量或针对待译码的帧产生的其它预测性权重值向量量化以便产生经量化的预测性权重值。量化单元52可基于pvq码簿将预测性权重值620向量量化。pvq码簿可包含多个m-分量候选量化向量,且量化单元52可选择所述候选量化向量中的一者来表示z个预测性权重值。在一些实例中,量化单元52可从pvq码簿中选择使量化误差最小化(例如,使最小平方误差最小化)的候选量化向量。在一些实例中,pvq码簿可包含多个条目,其中所述条目中的每一者包含量化码簿索引及对应m-分量候选量化向量。量化码簿中的所述索引中的每一者可对应于多个m-分量候选量化向量中的相应者。量化向量中的每一者中的分量的数目可取决于经选择以表示单一v-向量的权重的数目(即,z)。一般来说,对于具有z-分量候选量化向量的码簿,量化单元52可同时将z个预测性权重值向量量化以产生单一经量化的向量。量化码簿中的条目的数目可取决于用以将权重值向量量化的位速率。当量化单元52将预测性权重值向量量化时,量化单元52可从pvq码簿中选择将为表示z个预测性权重值的量化向量的z-分量向量。经量化的预测性权重值可表示为其可对应于用于第i音频帧的z-分量量化向量的第j分量,其可进一步对应于用于第i音频帧的第j预测性权重值的经向量量化的版本。当经配置以执行经预测的向量量化时,量化单元52也可基于经量化的预测性权重值及经加权的经重建构的权重值产生经重建构的权重值。举例来说,量化单元52可将经加权的经重建构的权重值加到经量化的预测性权重值以产生经重建构的权重值。经加权的经重建构的权重值可与上文所描述的经加权的经重建构的权重值相同。在一些实例中,经加权的经重建构的权重值可为经重建构的权重值的经加权及经延迟的版本。经重建构的权重值可表示为其对应于对应的经重建构的权重值的量值(或绝对值)。经重建构的权重值对应于来自用于第(i-1)音频帧的经重建构的权重值的有序子集的第j经重建构的权重值。在一些实例中,量化单元52可分别译码指示经预测性地译码的权重值的正负号的数据,且解码器可使用此信息确定经重建构的权重值的正负号。量化单元52可基于以下等式产生经重建构的权重值:其中对应于来自用于第i音频帧的权重值的有序子集的第j权重值(例如,m-分量量化向量的第j分量)的经量化的预测性权重值,对应于来自用于第(i-1)音频帧的权重值的有序子集的第j权重值的经重建构的权重值的量值,且αj对应于来自权重值的有序子集的第j权重值的加权因子。量化单元52可基于经重建构的权重值产生经延迟的经重建构的权重值。举例来说,量化单元52可将经重建构的权重值延迟达一音频帧以产生经延迟的经重建构的权重值。量化单元52也可基于经延迟的经重建构的权重值及加权因子产生经加权的经重建构的权重值。举例来说,量化单元52可将经延迟的经重建构的权重值乘以加权因子以产生经加权的经重建构的权重值。类似地,量化单元52可基于经延迟的经重建构的权重值及加权因子产生经加权的经重建构的权重值。举例来说,量化单元52可将经延迟的经重建构的权重值乘以加权因子以产生经加权的经重建构的权重值。响应于从pvq码簿中选择将为用于z个预测性权重值的量化向量的z-分量向量,在一些实例中,量化单元52可译码对应于所选定z-分量向量的索引(来自pvq码簿)(而非译码所选定z-分量向量自身)。所述索引可指示一组经量化的预测性权重值。在此些实例中,解码器24可包含类似于pvq码簿的码簿,且可通过将指示经量化的预测性权重值的索引映射到解码器码簿中的对应z-分量向量而解码所述索引。z-分量向量中的分量中的每一者可对应于经量化的预测性权重值。将向量(例如,v-向量)纯量量化可涉及个别地及/或独立于其它分量将所述向量的分量中的每一者量化。举例来说,考虑以下实例v-向量:v=[0.230.31-0.47…0.85]为了将此实例v向量纯量量化,可个别地将所述分量中的每一者量化(即,纯量量化)。举例来说,如果量化步长为0.1,那么可将0.23分量量化为0.2,可将0.31分量量化为0.3,等等。经纯量量化的分量可共同地形成经纯量量化的v-向量。换句话说,量化单元52可关于经缩减前景v[k]向量55中的给定向量的所有元素执行均匀纯量量化。量化单元52可基于可表示为nbitsq语法元素的值识别量化步长。量化单元52可基于目标位速率41动态地确定此nbitsq语法元素。nbitsq语法元素也可识别如下文再现的channelsideinfodata语法表中所提及的量化模式,同时也识别步长(出于纯量量化的目的)。即,量化单元52可依据此nbitsq语法元素确定量化步长。作为一实例,量化单元52可将量化步长(在本发明中表示为“差量”或“δ”)确定为等于216-nbitsq。在此实例中,当nbitsq语法元素的值等于6时,差量等于210且存在26种量化等级。就此而言,对于向量元素v,经量化的向量元素vq等于[v/δ],且-2nbitsq-1<vq<2nbitsq-1。量化单元52可接着执行经量化的向量元素的分类及残余译码。作为一实例,量化单元52可针对给定的经量化的向量元素vq,使用以下等式识别此元素所对应的类别(通过确定类别识别符cid):量化单元52可接着对此类别索引cid进行霍夫曼译码,同时也识别指示vq为正值还是负值的正负号位。量化单元52接下来可识别此类别中的残余。作为一实例,量化单元52可根据以下等式确定此残余:残余=|vq|-2cid-1量化单元52可接着用cid-1个位对此残余进行块译码。在一些实例中,当译码cid时,量化单元52可选择用于nbitsq语法元素的不同值的不同霍夫曼码簿。在一些实例中,量化单元52可提供用于nbitsq语法元素值6,…,15的不同霍夫曼译码表。此外,量化单元52可包含用于在6,…,15的范围内的不同nbitsq语法元素值中的每一者的五个不同霍夫曼码簿,总共50个霍夫曼码簿。就此而言,量化单元52可包含多个不同霍夫曼码簿以适应数个不同统计上下文中的cid的译码。为了进行说明,量化单元52可针对nbitsq语法元素值中的每一者包含:用于译码向量元素一到四的第一霍夫曼码簿;用于译码向量元素五到九的第二霍夫曼码簿;用于译码向量元素九及九以上的第三霍夫曼码簿。当出现以下情形时,可使用此些前三个霍夫曼码簿:经缩减前景v[k]向量55中待压缩的经缩减前景v[k]向量55并非是从经缩减前景v[k]向量55中在时间上后续的对应经缩减前景v[k]向量预测且并非表示合成音频对象((例如)最初通过经脉码调制(pcm)音频对象界定的音频对象)的空间信息。当经缩减前景v[k]向量55中的此经缩减前景v[k]向量55是从经缩减前景v[k]向量55中在时间上后续的对应经缩减前景v[k]向量55预测时,量化单元52可针对nbitsq语法元素值中的每一者另外包含用于译码经缩减前景v[k]向量55中的所述经缩减前景v[k]向量55的第四霍夫曼码簿。当经缩减前景v[k]向量55中的此经缩减前景v[k]向量55表示合成音频对象时,量化单元52也可针对nbitsq语法元素值中的每一者包含用于译码经缩减前景v[k]向量55中的所述经缩减前景v[k]向量55的第五霍夫曼码簿。可针对此些不同统计上下文(即,在此实例中,未经预测及非合成上下文、经预测的上下文及合成上下文)中的每一者开发各种霍夫曼码簿。下表说明霍夫曼表选择及待于位流中指定以使得解压缩单元能够选择适当霍夫曼表的位:pred模式ht信息ht表00ht501ht{1,2,3}10ht411ht5在前表中,预测模式(“pred模式”)指示是否针对当前向量执行了预测,而霍夫曼表(“ht信息”)指示用以选择霍夫曼表一到五中的一者的额外霍夫曼码簿(或表格)信息。预测模式也可表示为下文所论述的pflag语法元素,而ht信息可通过下文所论述的cbflag语法元素来表示。下表进一步说明此霍夫曼表选择过程(在给定各种统计上下文或情形的情况下)。记录合成无predht{1,2,3}ht5具有predht4ht5在前表中,“记录”列指示向量表示经记录的音频对象时的译码上下文,而“合成”列指示向量表示合成音频对象时的译码上下文。“无pred”行指示并不关于向量元素执行预测时的译码上下文,而“具有pred”行指示关于向量元素执行预测时的译码上下文。如此表中所展示,量化单元52在向量表示所记录音频对象且并不关于向量元素执行预测时选择ht{1,2,3}。量化单元52在音频对象表示合成音频对象且并不关于向量元素执行预测时选择ht5。量化单元52在向量表示所记录音频对象且关于向量元素执行预测时选择ht4。量化单元52在音频对象表示合成音频对象且关于向量元素执行预测时选择ht5。量化单元52可基于本发明中所论述的准则的任何组合选择以下各者中的一者以用作输出经切换式量化的v-向量:未经预测的经向量量化的v-向量、经预测的经向量量化的v-向量、未经霍夫曼译码的经纯量量化的v-向量,及经霍夫曼译码的经纯量量化的v-向量。在一些实例中,量化单元52可从包含向量量化模式及一或多个纯量量化模式的一组量化模式中选择量化模式,且基于(或根据)所述选定模式将输入v-向量量化。量化单元52可接着将以下各者中的选定者提供到位流产生单元52以用作经译码前景v[k]向量57:未经预测的经向量量化的v-向量(例如,就权重值或指示权重值的位而言)、经预测的经向量量化的v-向量(例如,就误差值或指示误差值的位而言)、未经霍夫曼译码的经纯量量化的v-向量,及经霍夫曼译码的经纯量量化的v-向量。量化单元52也可提供指示量化模式的语法元素(例如,nbitsq语法元素),及用以解量化或以其它方式重建构v-向量的任何其它语法元素(如下文关于图4及7的实例更详细论述)。包含于音频编码装置20内的音质音频译码器单元40可表示音质音频译码器的多个执行个体,其中的每一者用以编码经能量补偿的环境hoa系数47'及经内插的nfg信号49'中的每一者的不同音频对象或hoa信道,以产生经编码环境hoa系数59及经编码nfg信号61。音质音频译码器单元40可将经编码环境hoa系数59及经编码nfg信号61输出到位流产生单元42。包含于音频编码装置20内的位流产生单元42表示将数据格式化以符合已知格式(其可指为解码装置已知的格式)借此产生基于向量的位流21的单元。换句话说,位流21可表示以上文所描述的方式编码的经编码音频数据。位流产生单元42在一些实例中可表示多路复用器,其可接收经译码前景v[k]向量57、经编码环境hoa系数59、经编码nfg信号61,及背景信道信息43。位流产生单元42可接着基于经译码前景v[k]向量57、经编码环境hoa系数59、经编码nfg信号61及背景信道信息43产生位流21。以此方式,位流产生单元42可借此在位流21中指定向量57以获得如下文关于图7的实例更详细描述的位流21。位流21可包含主要或主位流及一或多个旁侧信道位流。尽管在图3的实例中未展示,但音频编码装置20也可包含位流输出单元,所述位流输出单元基于当前帧将使用基于方向的合成还是基于向量的合成编码而切换从音频编码装置20输出的位流(例如,在基于方向的位流21与基于向量的位流21之间切换)。位流输出单元可基于由内容分析单元26输出的指示执行基于方向的合成(作为检测到hoa系数11是从合成音频对象产生的结果)还是执行基于向量的合成(作为检测到hoa系数经记录的结果)的语法元素执行所述切换。位流输出单元可指定正确的标头语法以指示用于当前帧以及位流21中的相应位流的切换或当前编码。此外,如上文所提及,声场分析单元44可识别bgtot环境hoa系数47,所述bgtot环境hoa系数可基于逐个帧而改变(但时常bgtot可跨越两个或两个以上邻近(在时间上)帧保持恒定或相同)。bgtot的改变可导致在经缩减前景v[k]向量55中表达的系数的改变。bgtot的改变可导致背景hoa系数(其也可被称作“环境hoa系数”),其基于逐个帧而改变(但再次,时常bgtot可跨越两个或两个以上邻近(在时间上)帧保持恒定或相同)。所述改变常常导致就以下方面而言的能量的改变:通过额外环境hoa系数的添加或移除及系数从经缩减前景v[k]向量55的对应移除或系数到经缩减前景v[k]向量55的添加表示的声场。因此,声场分析单元(声场分析单元44)可进一步确定环境hoa系数何时逐帧而改变且产生指示环境hoa系数的改变的旗标或其它语法元素(就用以表示声场的环境分量而言)(其中所述改变也可被称作环境hoa系数的“转变”或被称作环境hoa系数的“转变”)。详细地说,系数减少单元46可产生旗标(其可表示为ambcoefftransition旗标或ambcoeffidxtransition旗标),从而将所述旗标提供到位流产生单元42,以便可将所述旗标包含于位流21中(有可能作为旁侧信道信息的部分)。除指定环境系数转变旗标之外,系数减少单元46也可修改产生经缩减前景v[k]向量55的方式。在一实例中,当确定环境hoa环境系数中的一者在当前帧中处于转变中时,系数减少单元46可指定用于经缩减前景v[k]向量55的v-向量中的每一者的向量系数(其也可被称作“向量元素”或“元素”),其对应于处于转变中的环境hoa系数。同样地,处于转变中的环境hoa系数可添加到背景系数的bgtot总数目或从背景系数的bgtot总数目移除。因此,背景系数的总数目的所得改变影响以下情形:环境hoa系数是包含于还是不包含于位流中,及在上文所描述的第二及第三配置模式中是否针对位流中所指定的v-向量包含v-向量的对应元素。关于系数减少单元46可如何指定经缩减前景v[k]向量55以克服能量的改变的更多信息提供于2015年1月12日申请的标题为“环境higher_order立体混响系数的转变(transitioningofambienthigher_orderambisoniccoefficients)”的第14/594,533号美国申请案中。图4为更详细地说明图2的音频解码装置24的框图。如图4的实例中所展示,音频解码装置24可包含提取单元72、基于方向性的重建构单元90及基于向量的重建构单元92。尽管下文加以描述,但关于音频解码装置24及解压缩或以其它方式解码hoa系数的各种方面的更多信息可在2014年5月29日申请的标题为“用于声场的经分解表示的内插(nterpolationfordecomposedrepresentationsofasoundfield)”的第wo2014/194099号国际专利申请公开案中获得。提取单元72可表示经配置以接收位流21及提取hoa系数11的各种经编码版本(例如,基于方向的经编码版本或基于向量的经编码版本)的单元。提取单元72可确定上文所提及的指示hoa系数11是经由各种基于方向的版本还是基于向量的版本编码的语法元素。当执行基于方向的编码时,提取单元72可提取hoa系数11的基于方向的版本及与所述经编码版本相关联的语法元素(其在图4的实例中表示为基于方向的信息91),将所述基于方向的信息91传递到基于方向的重建构单元90。基于方向的重建构单元90可表示经配置以基于基于方向的信息91以hoa系数11'的形式重建构hoa系数的单元。下文关于图7的实例更详细地描述位流及位流内的语法元素的布置。当语法元素指示hoa系数11是使用基于向量的合成编码时,提取单元72可提取经译码前景v[k]向量57(其可包含经译码权重57及/或索引63或经纯量量化的v-向量)、经编码环境hoa系数59及对应音频对象61(其也可被称作经编码nfg信号61)。音频对象61各自对应于向量57中的一者。提取单元72可将经译码前景v[k]向量57传递到v-向量重建构单元74,且将经编码环境hoa系数59以及经编码nfg信号61提供到音质解码单元80。为了提取经译码前景v[k]向量57,提取单元72可根据以下channelsideinfodata(csid)语法表提取语法元素。表-channelsideinfodata(i)的语法用于前表的语义如下。此有效负载保持用于第i信道的旁侧信息。有效负载的大小及数据取决于信道的类型。channeltype[i]此元素存储表95中所界定的第i信道的类型。activedirsids[i]此元素使用来自附录f.7的900个预定义均匀分布的点的索引指示作用中方向信号的方向。码字0用于用信号通知方向信号的结束。pflag[i]与第i信道的基于向量的信号相关联的预测旗标。cbflag[i]与第i信道的基于向量的信号相关联的用于经纯量量化的v-向量的霍夫曼解码的码簿旗标。codebkidx[i]用信号通知与第i信道的基于向量的信号相关联的用以将经向量量化的v-向量解量化的特定码簿。nbitsq[i]此索引确定与第i信道的基于向量的信号相关联的用于数据的霍夫曼解码的霍夫曼表。码字5确定均匀8位解量化器的使用。两个msb00确定重用前一帧(k-1)的nbitsq[i]、pflag[i]及cbflag[i]数据。ba,bbnbitsq[i]字段的msb(ba)及第二msb(bb)。uintcnbitsq[i]字段的剩余两个位的码字。numvecindices用以将经向量量化的v-向量解量化的向量的数目。addambhoainfochannel(i)此有效负载保持用于额外环境hoa系数的信息。根据csid语法表,提取单元72可首先获得指示信道的类型的channeltype语法元素(例如,其中值0用信号通知基于方向的信号,值1用信号通知基于向量的信号,且值2用信号通知额外环境hoa信号)。基于channeltype语法元素,提取单元72可在三种状况之间切换。集中于状况1以说明本发明中所描述的技术的一实例,提取单元72可获得nbitsq语法元素(即,上述实例csid语法表中的ba语法元素)的最高有效位及nbitsq语法元素(即,上述实例csid语法表中的bb语法元素)的次高有效位。nbitsq(k)[i]的(k)[i]可表示针对第i输送信道的第k帧获得nbitsq语法元素。nbitsq语法元素可表示指示用以将通过hoa系数11表示的声场的空间分量量化的量化模式的一或多个位。在本发明中也可将空间分量称作v-向量或称作经译码前景v[k]向量57。在上述实例csid语法表中,nbitsq语法元素可包含四个位以指示用以压缩在对应vvecdata字段中指定的向量的12种量化模式中的一者(当保留或不使用用于nbitsq语法元素的值零到三时)。12种量化模式包含下文指示的以下模式:0-3:保留4:向量量化5:无霍夫曼译码的纯量量化6:具有霍夫曼译码的6-位纯量量化7:具有霍夫曼译码的7-位纯量量化8:具有霍夫曼译码的8-位纯量量化……16:具有霍夫曼译码的16-位纯量量化在上文中,nbitsq语法元素的从6到16的值不仅指示将执行具有霍夫曼译码的纯量量化,而且指示纯量量化的量化步长。就此而言,量化模式可包括向量量化模式、无霍夫曼译码的纯量量化模式,及具有霍夫曼译码的纯量量化模式。返回到上述实例csid语法表,提取单元72可组合ba语法元素与bb语法元素,其中此组合可为加法,如上述实例csid语法表中所展示。组合的ba/bb语法元素可表示关于是否重用来自前一帧的指示在压缩向量时使用的信息的至少一语法元素的指示符。提取单元72接下来比较组合的ba/bb语法元素与值零。当组合的ba/bb语法元素具有值零时,提取单元72可确定用于第i输送信道的当前第k帧的量化模式信息(即,指示上述实例csid语法表中的量化模式的nbitsq语法元素)与第i输送信道的第k-1帧的量化模式信息相同。换句话说,当经设定为零值时,所述指示符指示重用来自前一帧的所述至少一语法元素。提取单元72类似地确定用于第i输送信道的当前第k帧的预测信息(即,所述实例中指示是否在向量量化或纯量量化期间执行预测的pflag语法元素)与第i输送信道的第k-1帧的预测信息相同。提取单元72也可确定用于第i输送信道的当前第k帧的霍夫曼码簿信息(即,指示用以重建构v-向量的霍夫曼码簿的cbflag语法元素)与第i输送信道的第k-1帧的霍夫曼码簿信息相同。提取单元72也可确定用于第i输送信道的当前第k帧的向量量化信息(即,指示用以重建构v-向量的向量量化码簿的codebkidx语法元素及指示用以重建构v-向量的码向量的数目的numvecindices语法元素)与第i输送信道的第k-1帧的向量量化信息相同。当组合的ba/bb语法元素并不具有值零时,提取单元72可确定用于第i输送信道的第k帧的量化模式信息、预测信息、霍夫曼码簿信息及向量量化信息并不与第i输送信道的第k-1帧的所述情形相同。因此,提取单元72可获得nbitsq语法元素的最低有效位(即,上述实例csid语法表中的uintc语法元素),从而组合ba、bb及uintc语法元素以获得nbitsq语法元素。基于此nbitsq语法元素,当nbitsq语法元素用信号通知向量量化时,提取单元72可获得pflag、codebkidx及numvecindices语法元素,或当nbitsq语法元素用信号通知具有霍夫曼译码的纯量量化时,提取单元72可获得pflag及cbflag语法元素。以此方式,提取单元72可提取用以重建构v-向量的前述语法元素,将此些语法元素传递到基于向量的重建构单元72。提取单元72接下来可从第i输送信道的第k帧中提取v-向量。提取单元72可获得hoadecoderconfig容器应用程序,其包含表示为codedvveclength的语法元素。提取单元72可剖析来自hoadecoderconfig容器应用程序的codedvveclength。提取单元72可根据以下vvecdata语法表获得v-向量。vvec(k)[i]此向量为用于第i信道的第khoaframe()的v-向量。vveclength此变量指示待读出的向量元素的数目。vveccoeffid此向量含有经传输的v-向量系数的索引。vecval介于0与255之间的整数值。aval在解码vvectordata期间使用的暂时变量。huffval待进行霍夫曼解码的霍夫曼码字。sgnval此符号为在解码期间使用的经译码正负号值。intaddval此符号为在解码期间使用的额外整数值。numvecindices用以将经向量量化的v-向量解量化的向量的数目。weightidxweightvalcdbk中用以将经向量量化的v-向量解量化的索引。nbitsw用于读取weightidx以解码经向量量化的v-向量的字段大小。weightvalcbk含有正实数值加权系数的向量的码簿。仅在numvecindices>1的情况下才为有必要的。提供具有256个条目的weightvalcdbk。weightvalpredcdbk含有预测性加权系数的向量的码簿。仅在numvecindices>1的情况下才为有必要的。提供具有256个条目的weightvalpredcdbk。weightvalalpha针对v-向量量化的预测性译码模式使用的预测性译码系数。vvecidx用以将经向量量化的v-向量解量化的vecdict的索引。nbitsidx用于读取vvecidx以解码经向量量化的v-向量的字段大小。weightval用以解码经向量量化的v-向量的实数值加权系数。在前述语法表中,提取单元72可确定nbitsq语法元素的值是否等于四(或,换句话说,用信号通知使用向量解量化重建构v-向量)。当nbitsq语法元素的值等于四时,提取单元72可比较numvecindices语法元素的值与值一。当numvecindices的值等于一时,提取单元72可获得vecidx语法元素。vecidx语法元素可表示指示用以将经向量量化的v-向量解量化的vecdict的索引的一或多个位。提取单元72可将vecidx阵列执行个体化,其中第零元素经设定为vecidx语法元素的值加上一。提取单元72也可获得sgnval语法元素。sgnval语法元素可表示指示在解码v-向量期间使用的经译码正负号值的一或多个位。提取单元72可将weightval阵列执行个体化,其中依据sgnval语法元素的值设定第零元素。当numvecindices语法元素的值并不等于值一时,提取单元72可获得weightidx语法元素。weightidx语法元素可表示指示用以将经向量量化的v-向量解量化的weightvalcdbk阵列中的索引的一或多个位。weightvalcdbk阵列可表示含有正实数值加权系数的向量的码簿。提取单元72接下来可依据在hoaconfig容器应用程序中指定的numofhoacoeffs语法元素(在位流21的开始时作为一实例指定)确定nbitsidx。提取单元72可接着对numvecindices反复,从而从位流21中获得vecidx语法元素且用每一所获得的vecidx语法元素设定vecidx阵列元素。提取单元72并不执行以下pflag语法比较,所述pflag语法比较涉及确定与从位流21中提取语法元素不相关的tmpweightval变量值。因此,提取单元72接下来可获得用于在确定weightval语法元素中使用的sgnval语法元素。当nbitsq语法元素的值等于五时(用信号通知使用无霍夫曼解码的纯量解量化重建构v向量),提取单元72从0到vveclength反复,从而将aval变量设定为从位流21中获得的vecval语法元素。vecval语法元素可表示指示介于0与255之间的整数的一或多个位。当nbitsq语法元素的值等于或大于六时(用信号通知使用具有霍夫曼解码的nbitsq-位纯量解量化重建构v-向量),提取单元72从0到vveclength反复,从而获得huffval、sgnval及intaddval语法元素中的一或多者。huffval语法元素可表示指示霍夫曼码字的一或多个位。intaddval语法元素可表示指示在解码期间使用的额外整数值的一或多个位。提取单元72可将此些语法元素提供到基于向量的重建构单元92。基于向量的重建构单元92可表示经配置以执行与上文关于基于向量的合成单元27所描述的那些操作互逆的操作以便重建构hoa系数11'的单元。基于向量的重建构单元92可包含v-向量重建构单元74、空间-时间内插单元76、前景制订单元78、音质解码单元80、hoa系数制订单元82、淡化单元770,及重新排序单元84。淡化单元770的虚线指示就包含于基于向量的重建构单元92中而言,淡化单元770可为视情况存在的单元。v-向量重建构单元74可表示经配置以从经编码前景v[k]向量57重建构v-向量的单元。v-向量重建构单元74可以与量化单元52的方式互逆的方式操作。换句话说,v-向量重建构单元74可根据以下伪码操作以重建构v-向量:根据前述伪码,v-向量重建构单元74可获得用于第i输送信道的第k帧的nbitsq语法元素。当nbitsq语法元素等于四时(所述情形再次用信号通知执行向量量化),v-向量重建构单元74可比较numvecindicies语法元素与一。如上文所描述,numvecindicies语法元素可表示指示用以将经向量量化的v-向量解量化的向量的数目的一或多个位。当numvecindicies语法元素的值等于一时,v-向量重建构单元74可接着从0直到vveclength语法元素的值反复,从而将idx变量设定为vveccoeffid且将第vveccoeffidv-向量元素(v(i)vveccoeffid[m](k))设定为weightval乘以由[900][vecidx[0]][idx]识别的vecdict条目。换句话说,当numvvecindicies的值等于一时,从表f.8结合表f.11中所展示的8×1加权值的码簿导出向量码簿hoa扩展系数。当numvecindicies语法元素的值并不等于一时,v-向量重建构单元74可将cdblen变量设定为o,其为表示向量的数目的变量。cdblen语法元素指示码向量的辞典或码簿中的条目的数目(其中此辞典在前述伪码中表示为“vecdict”且表示含有用以解码经向量量化的v-向量的hoa扩展系数的向量的具有cdblen个码簿条目的码簿)。当hoa系数11的次序(由“n”表示)等于四时,v-向量重建构单元74可将cdblen变量设定为32。v-向量重建构单元74接下来可从0到o反复,从而将tmpvvec阵列设定为零。在此反复期间,v-向量重建构单元74也可从0到numvecindecies语法元素的值反复,从而将tempvvec阵列的第m条目设定为等于第jweightval乘以vecdict的[cdblen][vecidx[j]][m]条目。v-向量重建构单元74可根据以下伪码导出weightval:在前述伪码中,v-向量重建构单元74可从0直到numvecindices语法元素的值反复,首先确定pflag语法元素的值是否等于0。当pflag语法元素等于0时,v-向量重建构单元74可确定tmpweightval变量,从而将tmpweightval变量设定为等于weightvalcdbk码簿的[codebkidx][weightidx]条目。当pflag语法元素的值并不等于0时,v-向量重建构单元74可将tmpweightval变量设定为等于weightvalpredcdbk码簿的[codebkidx][weightidx]条目加上weightvalalpha变量乘以第i输送信道的第k-1帧的tempweightval。weightvalalpha变量可指上文所提及的阿尔法值,其可在音频编码及解码装置20及24处静态地界定。v-向量重建构单元74可接着依据由提取单元72获得的sgnval语法元素及tmpweightval变量获得weightval。换句话说,v-向量重建构单元74可基于权重值码簿(表示为用于未经预测的向量量化的“weightvalcdbk”及用于经预测的向量量化的“weightvalpredcdbk”,所述两者可表示基于码簿索引(在前述vvectordata(i)语法表中表示为“codebkidx”语法元素)及权重索引(在前述vvectordata(i)语法表中表示为“weightidx”语法元素)中的一或多者编索引的多维表)导出用于用以重建构v-向量的每一对应码向量的权重值。可在旁侧信道信息的一部分中界定此codebkidx语法元素,如下文channelsideinfodata(i)语法表中所展示。上述伪码的剩余向量量化部分涉及计算fnorm以使v-向量的元素正规化,随后将v-向量元素(v(i)vveccoeffid[m](k))计算为等于tmpvvec[idx]乘以fnorm。v-向量重建构单元74可依据vveccoeffid获得idx变量。当nbitsq等于5时,执行均匀8位纯量解量化。与此对比,大于或等于6的nbitsq值可导致霍夫曼解码的应用。上文所提及的cid值可等于nbitsq值的两个最低有效位。预测模式在上述语法表中表示为pflag,而霍夫曼表信息位在上述语法表中表示为cbflag。剩余语法指定解码如何以实质上类似于上文所描述的方式的方式出现。音质解码单元80可以与图3的实例中所展示的音质音频译码器单元40互逆的方式操作以便解码经编码环境hoa系数59及经编码nfg信号61且借此产生经能量补偿的环境hoa系数47'及经内插的nfg信号49'(其也可被称作经内插的nfg音频对象49')。音质解码单元80可将经能量补偿的环境hoa系数47'传递到淡化单元770且将nfg信号49'传递到前景制订单元78。空间-时间内插单元76可以与上文关于空间-时间内插单元50所描述的方式类似的方式操作。空间-时间内插单元76可接收经缩减前景v[k]向量55k且关于前景v[k]向量55k及经缩减前景v[k-1]向量55k-1执行空间-时间内插以产生经内插的前景v[k]向量55k”。空间-时间内插单元76可将经内插的前景v[k]向量55k”转递到淡化单元770。提取单元72也可将指示环境hoa系数中的一者何时处于转变中的信号757输出到淡化单元770,所述淡化单元770可接着确定shcbg47'(其中shcbg47'也可表示为“环境hoa信道47'”或“环境hoa系数47'”)及经内插的前景v[k]向量55k”的元素中的哪一者将淡入或淡出。在一些实例中,淡化单元770可关于环境hoa系数47'及经内插的前景v[k]向量55k”的元素中的每一者相反地操作。即,淡化单元770可关于环境hoa系数47'中的对应环境hoa系数执行淡入或淡出或执行淡入或淡出两者,同时关于经内插的前景v[k]向量55k”的元素中的对应经内插的前景v[k]向量执行淡入或淡出或执行淡入与淡出两者。淡化单元770可将经调整的环境hoa系数47”输出到hoa系数制订单元82且将经调整的前景v[k]向量55k”'输出到前景制订单元78。就此而言,淡化单元770表示经配置以关于hoa系数或其导出项(例如,呈环境hoa系数47'及经内插的前景v[k]向量55k”的元素的形式)的各种方面执行淡化操作的单元。前景制订单元78可表示经配置以关于经调整的前景v[k]向量55k”'及经内插的nfg信号49'执行矩阵乘法以产生前景hoa系数65的单元。就此而言,前景制订单元78可组合音频对象49'(所述方式为借以表示经内插的nfg信号49'的另一种方式)与向量55k”'以重建构hoa系数11'的前景(或换句话说,占优势)方面。前景制订单元78可执行经内插的nfg信号49'乘以经调整的前景v[k]向量55k”'的矩阵乘法。hoa系数制订单元82可表示经配置以将前景hoa系数65组合到经调整的环境hoa系数47”以便获得hoa系数11'的单元。撇号记法反映hoa系数11'可类似于hoa系数11但与hoa系数11不相同。hoa系数11与11'之间的差可起因于归因于有损传输媒体上的传输、量化或其它有损操作产生的损失。图5a为说明音频编码装置(例如,图3的实例中所展示的音频编码装置20)执行本发明中所描述的基于向量的合成技术的各种方面的示范性操作的流程图。最初,音频编码装置20接收hoa系数11(106)。音频编码装置20可调用lit单元30,lit单元30可关于hoa系数应用lit以输出经变换的hoa系数(例如,在svd的状况下,经变换的hoa系数可包括us[k]向量33及v[k]向量35)(107)。音频编码装置20接下来可调用参数计算单元32以按上文所描述的方式关于us[k]向量33、us[k-1]向量33、v[k]及/或v[k-1]向量35的任何组合执行上文所描述的分析以识别各种参数。即,参数计算单元32可基于经变换的hoa系数33/35的分析确定至少一参数(108)。音频编码装置20可接着调用重新排序单元34,重新排序单元34基于参数将经变换的hoa系数(再次在svd的上下文中,其可指us[k]向量33及v[k]向量35)重新排序以产生经重新排序的经变换的hoa系数33'/35'(或,换句话说,us[k]向量33'及v[k]向量35'),如上文所描述(109)。在前述操作或后续操作中的任一者期间,音频编码装置20也可调用声场分析单元44。如上文所描述,声场分析单元44可关于hoa系数11及/或经变换的hoa系数33/35执行声场分析以确定前景信道的总数目(nfg)45、背景声场的阶数(nbg)以及待发送的额外bghoa信道的数目(nbga)及索引(i)(其在图3的实例中可共同地表示为背景信道信息43)(109)。音频编码装置20也可调用背景选择单元48。背景选择单元48可基于背景信道信息43确定背景或环境hoa系数47(110)。音频编码装置20可进一步调用前景选择单元36,前景选择单元36可基于nfg45(其可表示识别前景向量的一或多个索引)选择表示声场的前景或特异分量的经重新排序的us[k]向量33'及经重新排序的v[k]向量35'(112)。音频编码装置20可调用能量补偿单元38。能量补偿单元38可关于环境hoa系数47执行能量补偿以补偿归因于由背景选择单元48移除hoa系数中的各种hoa系数而产生的能量损失(114),且借此产生经能量补偿的环境hoa系数47'。音频编码装置20也可调用空间-时间内插单元50。空间-时间内插单元50可关于经重新排序的经变换的hoa系数33'/35'执行空间-时间内插以获得经内插的前景信号49'(其也可被称作“经内插的nfg信号49'”)及剩余前景方向信息53(其也可被称作“v[k]向量53”)(116)。音频编码装置20可接着调用系数减少单元46。系数减少单元46可基于背景信道信息43关于剩余前景v[k]向量53执行系数减少以获得经缩减前景方向信息55(其也可被称作经缩减前景v[k]向量55)(118)。音频编码装置20可接着调用量化单元52以按上文所描述的方式压缩经缩减前景v[k]向量55且产生经译码前景v[k]向量57(120)。音频编码装置20也可调用音质音频译码器单元40。音质音频译码器单元40可对经能量补偿的环境hoa系数47'及经内插的nfg信号49'的每一向量进行音质译码以产生经编码环境hoa系数59及经编码nfg信号61。音频编码装置可接着调用位流产生单元42。位流产生单元42可基于经译码前景方向信息57、经译码环境hoa系数59、经译码nfg信号61及背景信道信息43产生位流21。图5b为说明音频编码装置执行本发明中所描述的译码技术的示范性操作的流程图。图3的实例中所展示的音频编码装置20的位流产生单元42可表示经配置以执行本发明中所描述的技术的一实例单元。位流产生单元42可确定帧的量化模式是否与时间上的前一帧(其可表示为“第二帧”)的量化模式相同(314)。尽管关于前一帧加以描述,但可关于时间上的后续帧执行所述技术。帧可包含一或多个输送信道的一部分。输送信道的所述部分可包含channelsideinfodata(根据channelsideinfodata语法表形成)以及某一有效负载(例如,图7的实例中的vvectordata字段156)。有效负载的其它实例可包含addambienthoacoeffs字段。当量化模式相同时(“是”316),位流产生单元42可在位流21中指定量化模式的一部分(318)。量化模式的所述部分可包含ba语法元素及bb语法元素,但不包含uintc语法元素。ba语法元素可表示指示nbitsq语法元素的最高有效位的位。bb语法元素可表示指示nbitsq语法元素的次高有效位的位。位流产生单元42可将ba语法元素及bb语法元素中的每一者的值设定为0,借此用信号通知位流21中的量化模式字段(即,作为一实例,nbitsq字段)并不包含uintc语法元素。零值ba语法元素及bb语法元素的此用信号通知也指示将来自前一帧的nbitsq值、pflag值、cbflag值及codebkidx值用作用于当前帧的相同语法元素的对应值。当量化模式并不相同时(“否”316),位流产生单元42可在位流21中指定指示整个量化模式的一或多个位(320)。即,位流产生单元42可在位流21中指定ba、bb及uintc语法元素。位流产生单元42也可基于量化模式指定量化信息(322)。此量化信息可包含关于量化的任何信息,例如向量量化信息、预测信息及霍夫曼码簿信息。作为一实例,向量量化信息可包含codebkidx语法元素及numvecindices语法元素中的一者或两者。作为一实例,预测信息可包含pflag语法元素。作为一实例,霍夫曼码簿信息可包含cbflag语法元素。就此而言,所述技术可使得音频编码装置20能够经配置以获得包括声场的空间分量的经压缩版本的位流21。可通过关于多个球谐系数执行基于向量的合成而产生空间分量。位流可进一步包括来自前一帧的关于是否重用指定在压缩空间分量时使用的信息的标头字段的一或多个位的指示符。换句话说,所述技术可使得音频编码装置20能够经配置以获得包括表示球谐域中的正交空间轴线的向量57的位流21。位流21可进一步包括来自前一帧的关于是否重用指示在压缩(例如,量化)向量时使用的信息的至少一语法元素的指示符(例如,nbitsq语法元素的ba/bb语法元素)。图6a为说明音频解码装置(例如,图4中所展示的音频解码装置24)执行本发明中所描述的技术的各种方面的示范性操作的流程图。最初,音频解码装置24可接收位流21(130)。在接收到位流后,音频解码装置24可调用提取单元72。出于论述的目的假定位流21指示将执行基于向量的重建构,提取单元72可剖析位流以检索上文所提及的信息,将所述信息传递到基于向量的重建构单元92。换句话说,提取单元72可按上文所描述的方式从位流21中提取经译码前景方向信息57(再次,其也可被称作经译码前景v[k]向量57)、经译码环境hoa系数59及经译码前景信号(其也可被称作经译码前景nfg信号59或经译码前景音频对象59)(132)。音频解码装置24可进一步调用解量化单元74。解量化单元74可对经译码前景方向信息57进行熵解码及解量化以获得经缩减前景方向信息55k(136)。音频解码装置24也可调用音质解码单元80。音质音频解码单元80可解码经编码环境hoa系数59及经编码前景信号61以获得经能量补偿的环境hoa系数47'及经内插的前景信号49'(138)。音质解码单元80可将经能量补偿的环境hoa系数47'传递到淡化单元770且将nfg信号49'传递到前景制订单元78。音频解码装置24接下来可调用空间-时间内插单元76。空间-时间内插单元76可接收经重新排序的前景方向信息55k'且关于经缩减前景方向信息55k/55k-1执行空间-时间内插以产生经内插的前景方向信息55k”(140)。空间-时间内插单元76可将经内插的前景v[k]向量55k”转递到淡化单元770。音频解码装置24可调用淡化单元770。淡化单元770可接收或以其它方式获得指示经能量补偿的环境hoa系数47'何时处于转变中的语法元素(例如,ambcoefftransition语法元素)(例如,从提取单元72)。淡化单元770可基于转变语法元素及维持的转变状态信息使经能量补偿的环境hoa系数47'淡入或淡出,从而将经调整的环境hoa系数47”输出到hoa系数制订单元82。淡化单元770也可基于语法元素及维持的转变状态信息,及使经内插的前景v[k]向量55k”中的对应一或多个元素淡出或淡入,从而将经调整的前景v[k]向量55k”'输出到前景制订单元78(142)。音频解码装置24可调用前景制订单元78。前景制订单元78可执行nfg信号49'乘以经调整的前景方向信息55k”'的矩阵乘法以获得前景hoa系数65(144)。音频解码装置24也可调用hoa系数制订单元82。hoa系数制订单元82可将前景hoa系数65加到经调整的环境hoa系数47”以便获得hoa系数11'(146)。图6b为说明音频解码装置执行本发明中所描述的译码技术的示范性操作的流程图。图4的实例中所展示的音频编码装置24的提取单元72可表示经配置以执行本发明中所描述的技术的一实例单元。位流提取单元72可获得指示帧的量化模式是否与时间上的前一帧(其可表示为“第二帧”)的量化模式相同的位(362)。此外,尽管关于前一帧加以描述,但可关于时间上的后续帧执行所述技术。当量化模式相同时(“是”364),提取单元72可从位流21中获得量化模式的一部分(366)。量化模式的所述部分可包含ba语法元素及bb语法元素,但不包含uintc语法元素。提取单元42也可将用于当前帧的nbitsq值、pflag值、cbflag值、codebkidx值及numvertindices值的值设定为与针对前一帧设定的nbitsq值、pflag值、cbflag值、codebkidx值及numvertindices值的值相同(368)。当量化模式并不相同时(“否”364),提取单元72可从位流21中获得指示整个量化模式的一或多个位。即,提取单元72从位流21中获得ba、bb及uintc语法元素(370)。提取单元72也可基于量化模式获得指示量化信息的一或多个位(372)。如上文关于图5b所提及,量化信息可包含关于量化的任何信息,例如向量量化信息、预测信息及霍夫曼码簿信息。作为一实例,向量量化信息可包含codebkidx语法元素及numvecindices语法元素中的一者或两者。作为一实例,预测信息可包含pflag语法元素。作为一实例,霍夫曼码簿信息可包含cbflag语法元素。就此而言,所述技术可使得音频解码装置24能够经配置以获得包括声场的空间分量的经压缩版本的位流21。可通过关于多个球谐系数执行基于向量的合成而产生空间分量。位流可进一步包括来自前一帧的关于是否重用指定在压缩空间分量时使用的信息的标头字段的一或多个位的指示符。换句话说,所述技术可使得音频解码装置24能够经配置以获得包括表示球谐域中的正交空间轴线的向量57的位流21。位流21可进一步包括来自前一帧的关于是否重用指示在压缩(例如,量化)向量时使用的信息的至少一语法元素的指示符(例如,nbitsq语法元素的ba/bb语法元素)。图7为说明根据本发明中所描述的技术的各种方面指定的实例帧249s及249t的图。如图7的实例中所展示,帧249s包含channelsideinfodata(csid)字段154a到154d、hoagaincorrectiondata(hoagcd)字段、vvectordata字段156a及156b以及hoapredictioninfo字段。csid字段154a包含经设定为值10的uintc语法元素(“uintc”)267、经设定为值1的bb语法元素(“bb”)266,及经设定为值0的ba语法元素(“ba”)265,以及经设定为值01的channeltype语法元素(“channeltype”)269。uintc语法元素267、bb语法元素266及ba语法元素265一起形成nbitsq语法元素261,其中ba语法元素265形成nbitsq语法元素261的最高有效位,bb语法元素266形成次高有效位且uintc语法元素267形成最低有效位。如上文所提及,nbitsq语法元素261可表示指示用以编码高阶立体混响音频数据的量化模式(例如,向量量化模式、无霍夫曼译码的纯量量化模式,及具有霍夫曼译码的纯量量化模式中的一者)的一或多个位。csid语法元素154a也包含上文在各种语法表中参考的pflag语法元素300及cbflag语法元素302。pflag语法元素300可表示指示通过第一帧249s的hoa系数11表示的声场的空间分量的经译码元素(其中再次,空间分量可指v-向量)是否是从第二帧(例如,在此实例中,为前一帧)预测的一或多个位。cbflag语法元素302可表示指示霍夫曼码簿信息的一或多个位,所述霍夫曼码簿信息可识别使用霍夫曼码簿(或,换句话说,表格)中的哪一者编码空间分量的元素(或,换句话说,v-向量元素)。csid字段154b包含bb语法元素266及bb语法元素265以及channeltype语法元素269,在图7的实例中,前述各语法元素中的每一者经设定为对应值0及0及01。csid字段154c及154d中的每一者包含具有值3(112)的channeltype字段269。csid字段154a到154d中的每一者对应于输送信道1、2、3及4中的相应输送信道。实际上,每一csid字段154a到154d指示对应有效负载为基于方向的信号(当对应channeltype等于零时)、基于向量的信号(当对应channeltype等于一时)、额外环境hoa系数(当对应channeltype等于二时)还是为空值(当channeltype等于三时)。在图7的实例中,帧249s包含两个基于向量的信号(在给定channeltype语法元素269在csid字段154a及154b中等于1的情况下)及两个空值(在给定channeltype269在csid字段154c及154d中等于3的情况下)。此外,如通过pflag语法元素300指示的音频编码装置20使用的预测经设定为一。此外,如通过pflag语法元素300指示的预测是指指示关于经压缩空间分量v1到vn中的对应经压缩空间分量是否执行预测的预测模式指示。当pflag语法元素300经设定为一时,音频编码装置20可使用通过采取以下情形的差进行的预测:对于纯量量化,来自前一帧的向量元素与当前帧的对应向量元素之间的差,或,对于向量量化,来自前一帧的权重与当前帧的对应权重之间的差。音频编码装置20也确定帧249s中的第二输送信道的csid字段154b的nbitsq语法元素261的值与前一帧(例如,在图7的实例中为帧249t)的第二输送信道的csid字段154b的nbitsq语法元素261的值相同。因此,音频编码装置20针对ba语法元素265及bb语法元素266中的每一者指定值零以用信号通知将前一帧249t中的第二输送信道的nbitsq语法元素261的值重用于帧249s中的第二输送信道的nbitsq语法元素261。因此,音频编码装置20可避免指定帧249s中的第二输送信道的uintc语法元素267以及上文所识别的另一语法元素。图8为说明根据本文中所描述的技术的至少一位流的一或多个信道的实例帧的图。位流450包含各自可包含一或多个信道的帧810a到810h。位流450可为图7的实例中所展示的位流21的一实例。在图8的实例中,音频解码装置24维持状态信息,从而更新状态信息以确定如何解码当前帧k。音频解码装置24可利用来自配置814及帧810b到810d的状态信息。换句话说,音频编码装置20可在位流产生单元42内包含(例如)状态机402,其维持用于编码帧810a到810e中的每一者的状态信息,这是因为位流产生单元42可基于状态机402指定用于帧810a到810e中的每一者的语法元素。音频解码装置24同样可在位流提取单元72内包含(例如)类似状态机402,其基于状态机402输出语法元素(所述语法元素中的一些语法元素未在位流21中明确地指定)。音频解码装置24的状态机402可按与音频编码装置20的状态机402的方式类似的方式操作。因此,音频解码装置24的状态机402可维持状态信息,从而基于配置814(及,在图8的实例中,帧810b到810d的解码)更新状态信息。基于状态信息,位流提取单元72可基于由状态机402维持的状态信息提取帧810e。状态信息可提供数个隐含语法元素,音频编码装置20可在解码帧810e的各种输送信道时利用所述隐含语法元素。可关于任何数目个不同上下文及音频生态系统执行前述技术。下文描述数个实例上下文,但所述技术应限于所述实例上下文。一实例音频生态系统可包含音频内容、影片工作室、音乐工作室、游戏音频工作室、基于信道的音频内容、译码引擎、游戏音频符干(gameaudiostems)、游戏音频译码/呈现引擎,及递送系统。影片工作室、音乐工作室及游戏音频工作室可接收音频内容。在一些实例中,音频内容可表示获取的输出。影片工作室可例如通过使用数字音频工作站(daw)输出基于信道的音频内容(例如,呈2.0、5.1及7.1)。音乐工作室可例如通过使用daw输出基于信道的音频内容(例如,呈2.0及5.1)。在任一状况下,译码引擎可基于一或多个编解码器(例如,aac、ac3、杜比真hd(dolbytruehd)、杜比数字plus(dolbydigitalplus)及dts主音频)接收及编码基于信道的音频内容以供由递送系统输出。游戏音频工作室可例如通过使用daw输出一或多个游戏音频符干。游戏音频译码/呈现引擎可译码音频符干及或将音频符干呈现成基于信道的音频内容以供由递送系统输出。可执行所述技术的另一实例上下文包括音频生态系统,其可包含广播记录音频对象、专业音频系统、消费型装置上俘获、hoa音频格式、装置上呈现、消费型音频、tv及附件,及汽车音频系统。广播记录音频对象、专业音频系统及消费型装置上俘获皆可使用hoa音频格式译码其输出。以此方式,可使用hoa音频格式将音频内容译码成单一表示,可使用装置上呈现、消费型音频、tv及附件及汽车音频系统重放所述单一表示。换句话说,可在通用音频重放系统(即,与需要例如5.1、7.1等的特定配置的情形形成对比)(例如,音频重放系统16)处重放音频内容的单一表示。可执行所述技术的上下文的其它实例包含可包含获取元件及重放元件的音频生态系统。获取元件可包含有线及/或无线获取装置(例如,eigen麦克风)、装置上环绕声俘获器及移动装置(例如,智能电话及平板计算机)。在一些实例中,有线及/或无线获取装置可经由有线及/或无线通信信道耦合到移动装置。根据本发明的一或多个技术,移动装置可用以获取声场。举例来说,移动装置可经由有线及/或无线获取装置及/或装置上环绕声俘获器(例如,集成到移动装置中的多个麦克风)获取声场。移动装置可接着将所获取声场译码成hoa系数以用于由重放元件中的一或多者重放。举例来说,移动装置的用户可记录(获取声场)现场事件(例如,集会、会议、比赛、音乐会等),且将记录译码成hoa系数。移动装置也可利用重放元件中的一或多者来重放hoa经译码声场。举例来说,移动装置可解码hoa经译码声场,且将使得重放元件中的一或多者重新建立声场的信号输出到重放元件中的一或多者。作为一实例,移动装置可利用无线及/或无线通信信道将信号输出到一或多个扬声器(例如,扬声器阵列、声棒(soundbar)等)。作为另一实例,移动装置可利用衔接解决方案将信号输出到一或多个衔接台及/或一或多个衔接的扬声器(例如,智能汽车及/或家庭中的声音系统)。作为另一实例,移动装置可利用头戴式耳机呈现将信号输出到一组头戴式耳机(例如)以建立实际的双耳声音。在一些实例中,特定移动装置可获取3d声场并且在稍后时间重放相同的3d声场。在一些实例中,移动装置可获取3d声场,将所述3d声场编码为hoa,且将经编码3d声场传输到一或多个其它装置(例如,其它移动装置及/或其它非移动装置)以用于重放。可执行所述技术的又一上下文包含可包含音频内容、游戏工作室、经译码音频内容、呈现引擎及递送系统的音频生态系统。在一些实例中,游戏工作室可包含可支持hoa信号的编辑的一或多个daw。举例来说,所述一或多个daw可包含hoa插件及/或可经配置以与一或多个游戏音频系统一起操作(例如,工作)的工具。在一些实例中,游戏工作室可输出支持hoa的新符干格式。在任何状况下,游戏工作室可将经译码音频内容输出到呈现引擎,所述呈现引擎可呈现声场以供由递送系统重放。也可关于示范性音频获取装置执行所述技术。举例来说,可关于可包含共同地经配置以记录3d声场的多个麦克风的eigen麦克风执行所述技术。在一些实例中,eigen麦克风的所述多个麦克风可位于具有大约4cm的半径的实质上球面球的表面上。在一些实例中,音频编码装置20可集成到eigen麦克风中以便直接从麦克风输出位流21。另一示范性音频获取上下文可包含可经配置以接收来自一或多个麦克风(例如,一或多个eigen麦克风)的信号的制作车。制作车也可包含音频编码器,例如图3的音频编码器20。在一些情况下,移动装置也可包含共同地经配置以记录3d声场的多个麦克风。换句话说,所述多个麦克风可具有x、y、z分集。在一些实例中,移动装置可包含可旋转以关于移动装置的一或多个其它麦克风提供x、y、z分集的麦克风。移动装置也可包含音频编码器,例如图3的音频编码器20。加固型视频俘获装置可进一步经配置以记录3d声场。在一些实例中,加固型视频俘获装置可附接到参与活动的用户的头盔。举例来说,加固型视频俘获装置可在用户泛舟时附接到用户的头盔。以此方式,加固型视频俘获装置可俘获表示用户周围的动作(例如,水在用户身后的撞击、另一泛舟者在用户前方说话,等等)的3d声场。也可关于可经配置以记录3d声场的附件增强型移动装置执行所述技术。在一些实例中,移动装置可类似于上文所论述的移动装置,其中添加一或多个附件。举例来说,eigen麦克风可附接到上文所提及的移动装置以形成附件增强型移动装置。以此方式,附件增强型移动装置可俘获3d声场的较高质量版本(与仅使用与附件增强型移动装置成一体式的声音俘获组件的情形相比较)。下文进一步论述可执行本发明中所描述的技术的各种方面的实例音频重放装置。根据本发明的一或多个技术,扬声器及/或声棒可布置于任何任意配置中,同时仍重放3d声场。此外,在一些实例中,头戴式耳机重放装置可经由有线或无线连接耦合到解码器24。根据本发明的一或多个技术,可利用声场的单一通用表示来在扬声器、声棒及头戴式耳机重放装置的任何组合上呈现声场。数个不同实例音频重放环境也可适合于执行本发明中所描述的技术的各种方面。举例来说,以下环境可为用于执行本发明中所描述的技术的各种方面的合适环境:5.1扬声器重放环境、2.0(例如,立体声)扬声器重放环境、具有全高前扩音器的9.1扬声器重放环境、22.2扬声器重放环境、16.0扬声器重放环境、汽车扬声器重放环境,及具有耳挂式耳机重放环境的移动装置。根据本发明的一或多个技术,可利用声场的单一通用表示来在前述重放环境中的任一者上呈现声场。另外,本发明的技术使得呈现器能够从通用表示呈现声场以供在不同于上文所描述的环境的重放环境上重放。举例来说,如果设计考虑禁止扬声器根据7.1扬声器重放环境的恰当置放(例如,如果不可能置放右环绕扬声器),那么本发明的技术使得呈现器能够通过其它6个扬声器进行补偿,使得可在6.1扬声器重放环境上达成重放。此外,用户可在佩戴头戴式耳机时观看运动比赛。根据本发明的一或多个技术,可获取运动比赛的3d声场(例如,可将一或多个eigen麦克风置放于棒球场中及/或周围),可获得对应于3d声场的hoa系数且将所述hoa系数传输到解码器,所述解码器可基于hoa系数重建构3d声场且将经重建构的3d声场输出到呈现器,所述呈现器可获得关于重放环境的类型(例如,头戴式耳机)的指示,且将经重建构的3d声场呈现成使得头戴式耳机输出运动比赛的3d声场的表示的信号。在上文所描述的各种情况中的每一者中,应理解,音频编码装置20可执行方法或另外包括用以执行音频编码装置20经配置以执行的方法的每一步骤的装置。在一些情况下,所述装置可包括一或多个处理器。在一些情况下,所述一或多个处理器可表示借助于存储到非暂时性计算机可读存储媒体的指令配置的专用处理器。换句话说,数组编码实例中的每一者中的技术的各种方面可提供非暂时性计算机可读存储媒体,其具有存储于其上的指令,所述指令在经执行时使得一或多个处理器执行音频编码装置20已经配置以执行的方法。在一或多个实例中,所描述功能可以硬件、软件、固件或其任何组合来实施。如果以软件实施,那么所述功能可作为一或多个指令或代码存储于计算机可读媒体上或经由计算机可读媒体进行传输,且由基于硬件的处理单元执行。计算机可读媒体可包含计算机可读存储媒体,其对应于例如数据存储媒体的有形媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索用于实施本发明中所描述的技术的指令、代码及/或数据结构的任何可用媒体。计算机程序产品可包含计算机可读媒体。同样,在上文所描述的各种情况中的每一者中,应理解,音频解码装置24可执行方法或另外包括用以执行音频解码装置24经配置以执行的方法的每一步骤的装置。在一些情况下,所述装置可包括一或多个处理器。在一些情况下,所述一或多个处理器可表示借助于存储到非暂时性计算机可读存储媒体的指令配置的专用处理器。换句话说,数组编码实例中的每一者中的技术的各种方面可提供非暂时性计算机可读存储媒体,其具有存储于其上的指令,所述指令在经执行时使得一或多个处理器执行音频解码装置24已经配置以执行的方法。借助于实例而非限制,此些计算机可读存储媒体可包括ram、rom、eeprom、cd-rom或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、快闪存储器或可用来存储呈指令或数据结构形式的所要程序代码且可由计算机存取的任何其它媒体。然而,应理解,计算机可读存储媒体及数据存储媒体不包含连接、载波、信号或其它暂时性媒体,而是针对非暂时性有形存储媒体。如本文中所使用,磁盘及光盘包含压缩光盘(cd)、激光光盘、光学光盘、数字多功能光盘(dvd)、磁盘及蓝光光盘,其中磁盘通常以磁性方式再现数据,而光盘通过激光以光学方式再现数据。以上各者的组合也应包含于计算机可读媒体的范围内。指令可由一或多个处理器执行,所述一或多个处理器例如一或多个数字信号处理器(dsp)、通用微处理器、专用集成电路(asic)、现场可编程逻辑阵列(fpga)或其它等效的集成或离散逻辑电路。因此,如本文中所使用的术语“处理器”可指上述结构或适合于实施本文中所描述的技术的任何其它结构中的任一者。另外,在一些方面,可在经配置用于编码及解码的专用硬件及/或软件模块内提供本文中所描述的功能性,或将本文中所描述的功能性并入于组合式编解码器中。而且,所述技术可完全实施于一或多个电路或逻辑元件中。本发明的技术可在广泛多种装置或设备中实施,所述装置或设备包含无线手持机、集成电路(ic)或一组ic(例如,芯片组)。在本发明中描述各种组件、模块或单元以强调经配置以执行所揭示技术的装置的功能方面,但未必需要通过不同硬件单元来实现。确切地说,如上文所描述,各种单元可与合适的软件及/或固件一起组合于编解码器硬件单元中或由互操作性硬件单元的集合提供,硬件单元包含如上文所描述的一或多个处理器。已描述所述技术的各种方面。所述技术的此些及其它方面在以下权利要求书的范围内。当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1