音频信号处理装置、音频信号处理方法及存储介质与流程

本发明涉及对音频信号进行处理的音频信号处理装置、音频信号处理方法及音频信号处理程序。

背景技术：

在如ip(internetprotocol)电话那样将音频信号进行编码及分组化并在互联网中传输时，由于网络拥挤等原因，有时分组丢失(以下将该现象称为“分组丢失(packetloss)”)。在发生分组丢失时，由于必需的音频码丢失而不能进行音频解码，产生声音中断。作为防止因分组丢失而产生的声音中断的技术有音频分组丢失隐藏技术。音频分组丢失隐藏技术用于检测分组丢失，并生成与丢失的分组对应的准音频信号(以下称为“隐藏信号”)。

在作为音频编码方法采用更新编码器/解码器的内部状态的同时进行音频编码的方法的情况下，将不能得到本来应该接收的编码参数，因而音频分组丢失隐藏技术也利用模拟地生成的参数进行解码器的内部状态更新。

作为更新编码器/解码器的内部状态进行音频编码的方法，广泛采用celp(codeexcitedlinearprediction)编码。在celp编码中，假定自回归模型，经由全极型合成滤波器a(i)对激励信号e(n)进行滤波，由此将音频信号合成。即，按照下式来合成音频信号s(n)。a(i)表示线性预测系数(lp(linearprediction)系数)，作为次数采用p＝16等值。

[数式1]

在celp编码中，将对线性预测系数进行数学上的等效而表述的isf(immittancespectralfrequency，导抗谱频率)参数、和过去的激励信号作为内部状态。在产生了分组丢失的情况下，模拟地生成这些参数和信号，因而与本来应该通过解码得到的参数之间产生偏差。由于参数的偏差而引起的合成声音的不匹配，被视听者认为是噪声，大大破坏了主观上的品质。

下面，以音频编码方法采用celp编码的情况为例，对进行音频分组丢失隐藏的音频解码器的结构及动作进行说明。

音频解码器的结构图及动作如图1、图2所示。如图1所示，音频解码器1具有分组丢失检测部11、音频码解码部12、隐藏信号生成部13和内部状态缓存器14。

分组丢失检测部11在正常接收到音频分组的情况下，向音频码解码部12发送控制信号、及音频分组中包含的音频码(正常接收：在图2的步骤s100为“是”的情况)。然后，音频码解码部12按照后面所述进行音频码的解码及内部状态更新(图2的步骤s200、s400)。另一方面，在不能正常接收到音频分组的情况下，分组丢失检测部11向隐藏信号生成部13发送控制信号(分组丢失：在图2的步骤s100为“否”的情况)。然后，隐藏信号生成部13按照后面所述进行隐藏信号的生成及内部状态更新(图2的步骤s200、s400)。反复图2的步骤s100～s400的处理一直到通信结束为止(一直到在步骤s500判定为“是”为止)。

音频码至少包括被编码后的数式2所示的isf参数，

[数式2]

被编码后的第一～第四子帧的基音滞后t^jp、第一～第四子帧的被编码后的自适应码本增益g^jp、第一～第四子帧的被编码后的固定码本增益g^jc、第一～第四子帧的被编码后的固定码本向量c^j(n)。也可以使用数学上的等效的表述即lsf(linespectralfrequency)参数来取代isf参数。在下面的讨论中进行使用了isf参数的说明，但该讨论对使用lsf参数的情况也成立。

在内部状态缓存器中包括数式3所示的过去的isf参数

[数式3]

以及数式4所示的

[数式4]

的等效表述即isp(immittancespectralpair)参数

[数式5]

isf残差参数

[数式6]

过去的基音滞后t^jp、过去的自适应码本增益g^jp、过去的固定码本增益g^jc、自适应码本u(n)。分别包含过去几个子帧的量的参数取决于设计方针。在本说明书中，假定1帧包括4个子帧，但也可以按照设计方针设为其它的值。

<正常接收的情况>

图3示出音频码解码部12的功能结构例。如该图3所示，音频码解码部12具有isf解码部120、稳定性处理部121、lp系数计算部122、自适应码本计算部123、固定码本解码部124、增益解码部125、激励向量合成部126、主滤波器127、和合成滤波器128。但是，主滤波器127不是必须的构成要素。另外，在图3中，为了便于说明，在音频码解码部12内用双点划线示出了内部状态缓存器14，但该内部状态缓存器14也可以不包含在音频码解码部12的内部，而是图1所示的内部状态缓存器14。对于以后的音频码解码部的结构图也一样。

lp系数计算部122的结构图如图4所示，根据被编码后的isf参数计算lp系数的处理流程如图5所示。如图4所示，lp系数计算部122具有isp-isp变换部122a、isp插值部122b、和isp-lpc变换部122c。

首先，说明与根据被编码后的isf参数计算lp系数的处理(图5)相关联的功能结构及动作。

isf解码部120对被编码后的isf参数进行解码，求出数式7所示的isf残差参数，

[数式7]

按照数式9计算数式8所示的isf参数(图5的步骤s1)。其中，meani表示事前通过学习等求出的平均向量。

[数式8]

[数式9]

另外，在此对使用ma预测进行isf参数的计算的示例进行了说明，但也可以是如下所述使用ar预测进行isf参数的计算的结构。在此，紧前面的帧的isf参数表示为数式10，将ar预测的加权系数设为ρi。

[数式10]

[数式11]

稳定性处理部121进行基于数式12的处理，以使isf参数的各要素之间隔开50hz以上的间隔，从而确保滤波器的稳定性(图5的步骤s2)。isf参数是用线谱表述音频频谱包络的形状的参数，彼此的距离越近，频谱的峰值就越大并产生共振。因此，需要确保稳定性的处理，使得在频谱的峰值时的增益不会过大。其中，min_dist表示最小的isf间隔，isf_min表示确保min_dist的间隔所需要的isf的最小值。isf_min通过将相邻的isf的值与min_dist的间隔相加而依次进行更新。另一方面，isf_max表示确保min_dist的间隔所需要的isf的最大值。isf_max通过从相邻的isf的值减去min_dist的间隔而依次进行更新。

[数式12]

lp系数计算部122内的isf-isp变换部122a按照数式15将数式13所示的项变换为数式14所示的isp参数(图5的步骤s3)。其中，c表示事前设定的常数。

[数式13]

[数式14]

[数式15]

isp插值部122b根据内部状态缓存器14中包含的数式16所示的过去的isp参数和数式17所示的上述isp参数，按照数式18计算每个子帧的isp参数(图5的步骤s4)。在进行插值时也可以使用其它系数。

[数式16]

[数式17]

[数式18]

isp-lpc变换部122c将每个子帧的isp参数变换为数式19所示的lp系数(图5的步骤s5)。作为具体的变换步骤，能够使用非专利文献1记载的处理步骤。在此，将先行信号(先読み信号)中包含的子帧的数量设为4，但也可以按照设计方针变更子帧的数量。

[数式19]

下面，说明音频码解码部12的其它结构及动作。

自适应码本计算部123对被编码后的基音滞后(pitchlag)进行解码，计算第一～第四子帧的基音滞后t^jp。然后，自适应码本计算部123使用自适应码本u(n)，按照数式20对每个子帧计算自适应码本向量。通过利用fir滤波器int(i)对自适应码本u(n)进行插值，计算出自适应码本向量。在此，将自适应码本的长度设为nadapt。在插值中使用的滤波器int(i)是事前设定的长度2l+1的fir滤波器，l’表示子帧的采样数。通过使用插值滤波器int(i)，能够以小数点以下的精度利用基音滞后。关于插值滤波器的详细情况，能够使用非专利文献1记载的方法。

[数式20]

固定码本解码部124对被编码后的固定码本向量进行解码，取得第一～第四子帧的固定码本向量c^j(n)。

增益解码部125对被编码后的自适应码本增益及被编码后的固定码本增益进行解码，取得第一～第四子帧的自适应码本增益及固定码本增益。例如，能够利用非专利文献1记载的如下的方法进行自适应码本增益及固定码本增益的解码。根据利用非专利文献1记载的如下的方法，不必像amr-wb的增益编码那样使用帧间预测，因而能够提高抗分组丢失性。

例如，增益解码部125按照以下的处理流程取得固定码本增益。

首先，增益解码部125计算固定码本向量的功率。在此，将子帧的长度设为ns。

[数式21]

然后，增益解码部125对被向量量化后的增益参数进行解码，得到数式22所示的自适应码本增益和数式23所示的量化固定码本增益。根据量化固定码本增益和上述固定码本向量的功率计算如下数式24所示的预测固定码本增益。

[数式22]

[数式23]

[数式24]

最后，增益解码部125对数式25所示的预测系数进行解码，并与预测增益相乘，由此得到数式26所示的固定码本增益。

[数式25]

[数式26]

激励向量合成部126按照数式27所示将自适应码本向量与自适应码本增益相乘，并且将固定码本向量与固定码本增益相乘，再求出乘积之和，由此取得激励信号。

[数式27]

主滤波器127对激励信号向量进行例如基音强调、噪声强调、低频强调这样的后处理。基音强调、噪声强调、低频强调能够使用非专利文献1记载的方法。

合成滤波器128通过线性预测逆向滤波，将以激励信号为驱动音源的解码信号合成。

[数式28]

另外，当在编码器中进行了预加重(pre-emphasis)的情况下，进行去加重(de-emphasis)。

[数式29]

另一方面，当在编码器中未进行预加重的情况下，不进行去加重。

下面，说明有关内部状态更新的动作。

lp系数计算部122利用根据数式30计算的向量更新isf参数的内部状态，以便进行分组丢失时的参数插值。

[数式30]

其中，ωi⁽-^j)表示被存储在缓存器中的第j帧前的isf参数。ωi^c表示事前通过学习等求出的讲话区间的isf参数。β表示常数，例如能够取值如0.75，但不限于此。ωi^c、β例如也可以如非专利文献1记载的isf隐藏(コンシールメント)那样根据表示编码对象帧的性质的索引而变化。

另外，lp系数计算部122也按照下式更新isf残差参数的内部状态。

[数式31]

激励向量合成部126按照下式利用激励信号向量更新内部状态。

[数式32]

u(n)＝u(n+l)(0≤n＜n-l)

u(n+n-l+jl′)＝e^j(n)(0≤n＜l′)

另外，激励向量合成部126按照下式更新增益参数的内部状态。

[数式33]

自适应码本计算部123按照下式更新基音滞后的参数的内部状态。

[数式34]

另外，在此是设为(-2≤j<mla)，但关于j的范围，也可以根据设计方针选择不同的值。

<分组丢失的情况>

图6示出隐藏信号生成部13的功能结构例。如该图6所示，隐藏信号生成部13具有lp系数插值部130、基音滞后插值部131、增益插值部132、噪声信号生成部133、主滤波器134、合成滤波器135、自适应码本计算部136、和激励向量合成部137。其中，主滤波器134不是必须的构成要素。

lp系数插值部130按照数式36来计算数式35表示的内容。另外，ωi^(-j)表示被存储在缓存器中的第j帧前的isf参数。

[数式35]

[数式36]

其中，数式37表示在正常接收到分组时计算出的isf参数的内部状态。α也表示常数，能够取值如0.9，但不限于此。α例如也可以如非专利文献1记载的isf隐藏那样根据表示编码对象帧的性质的索引而变化。

[数式37]

从isf参数得到lp系数的步骤与正常接收到分组时一样。

基音滞后插值部131使用数式38所示的有关基音滞后的内部状态参数，计算数式39所示的基音滞后的预测值。具体的处理步骤能够使用非专利文献1的方法。

[数式38]

[数式39]

增益插值部132能够使用基于非专利文献1记载的数式40所示的方法进行固定码本增益的插值。

[数式40]

噪声信号生成部133生成与固定码本向量相同长度的白色噪声，取代固定码本向量使用。

主滤波器134、合成滤波器135、自适应码本计算部136以及激励向量合成部137的动作，与前述的正常接收到分组时的动作一样。

关于内部状态更新，除了isf残差参数以外，其它与正常接收到分组时一样。isf残差参数的更新由lp系数插值部130按照下式进行。

[数式41]

现有技术文献

专利文献

专利文献1：国际公开2002/035520号公报

专利文献2：国际公开2008/108080号公报

非专利文献

非专利文献1：itu-trecommendationg.718，2008年6月

技术实现要素：

发明要解决的问题

如上所述，celp编码具有内部状态，因而由于在分组丢失时通过插值而得到的参数与本来应该在解码中使用的参数的偏差，产生音质的劣化。尤其是isf参数被实施帧内/帧间的预测编码，因而存在分组丢失的影响在分组丢失恢复后仍继续的问题。

更具体地讲，在从在音频的开始部分附近产生的分组丢失恢复的第一个帧中，确认到功率急剧上升的问题。这在激励信号的功率升高的音频的开始部分中，根据通过分组丢失时的插值处理而得到的isf系数计算出的lp系数的脉冲响应，被认为是由于具有比本来解码器假定的值高的增益而产生的、主观品质上不舒适的不连续声音。

专利文献1的方法生成对所丢失的帧进行插值得到的isf系数，对于从丢失恢复的第一个帧，通过通常的解码而生成isf参数，因而不能抑制上述急剧的功率的上升。

另一方面，在专利文献2的方法中，通过传输在编码侧求出的增益调整用参数(归一化预测残差功率)，并在解码侧的功率调整中使用，能够抑制分组丢失后的帧的激励信号的功率，防止急剧的功率的上升。

图7示出与专利文献2的技术相当的音频解码器1x的功能结构例，图8示出隐藏信号生成部13x的功能结构例。在专利文献2中，音频分组除在现行方法中叙述的参数以外，至少包括归一化预测残差功率的辅助信息。

音频信号生成部1x具有的归一化预测残差功率解码部15从音频分组中解码出归一化预测残差功率的辅助信息，计算参照归一化预测残差功率，输出给隐藏信号生成部13x。

隐藏信号生成部13x的构成要素中除归一化预测残差调整部138以外的构成要素与前述的现有技术相同，因而下面仅对归一化预测残差调整部138进行说明。

归一化预测残差调整部138根据lp系数插值部130输出的lp系数计算归一化预测残差功率。然后，归一化预测残差调整部138使用归一化预测残差功率和参照归一化预测残差功率，计算合成滤波器增益调整系数。最后，归一化预测残差调整部138将合成滤波器增益调整系数与激励信号相乘，输出给合成滤波器135。

根据上述的专利文献2的技术，虽然能够与正常接收时一样抑制分组丢失时的隐藏信号的功率，但是在低比特速率音频编码中，难以确保上述增益调整用参数的传输所需要的比特速率。并且，由于是在隐藏信号生成部中的处理，因而难以应对在恢复帧中由于isf参数的不一致而产生的功率的急剧变化。

因此，本发明的目的在于，降低在从音频开始时刻的分组丢失恢复时产生的不连续声音，改善主观品质。

用于解决问题的手段

本发明的一实施方式的音频信号处理装置具有：不连续估计器，其对在产生分组丢失后第一个正常接收到的音频分组，估计由于音频分组解码的结果所得到的解码音频的振幅急剧增大而产生的不连续性；以及不连续修正器，其修正解码音频的不连续性。

也可以是，上述的不连续估计器根据激励信号的功率估计解码音频的不连续性。

另外，也可以是，上述的不连续估计器根据在激励信号计算中使用的被量化后的码本增益，估计解码音频的不连续性。

也可以是，上述的音频信号处理装置还具有对从编码器传输的有关不连续性的辅助信息进行解码的辅助信息解码器，上述的不连续估计器使用辅助信息解码器对辅助信息码进行解码而输出的有关不连续性的辅助信息，估计解码音频的不连续性。

也可以是，上述的不连续修正器按照不连续性的估计结果修正isf参数或者lsf参数(以下表述为“isf/lsf参数”)。

更具体地讲，也可以是，上述的不连续修正器按照不连续性的估计结果，改变为保证合成滤波器的稳定性而赋予的isf/lsf参数的各要素间的间隔。

此时，也可以是，上述的不连续修正器赋予比通常为保证稳定性而赋予的间隔更大的间隔，作为为保证合成滤波器的稳定性而赋予的isf/lsf参数的各要素间的间隔。

另外，也可以是，上述的不连续修正器使用将截止到预先设定的维数的isf/lsf参数进行等分得到的间隔，作为为保证合成滤波器的稳定性而赋予的isf/lsf参数的各要素间的间隔。

另外，也可以是，上述的不连续修正器利用预先设定的向量置换isf/lsf参数的一部分或者全部。

本发明的一实施方式的音频信号处理装置具有：isf/lsf量化器，其对isf/lsf参数进行量化；isf/lsf隐藏器，其生成有关isf/lsf参数的隐藏信息即隐藏isf/lsf参数；不连续估计器，其使用在所述isf/lsf量化器的量化过程中得到的量化isf/lsf参数、与所述isf/lsf隐藏器生成的隐藏isf/lsf参数之间的距离，估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；以及辅助信息编码器，其对有关不连续性的辅助信息进行编码。

本发明的一实施方式的音频信号处理装置具有：不连续估计器，其估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；辅助信息编码器，其对有关不连续性的辅助信息进行编码；以及isf/lsf量化器，其在所述不连续估计器未估计出不连续性时，在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数，在所述不连续估计器估计出不连续性时，避免在该帧的isf/lsf量化中使用过去的量化isf/lsf残差参数。

本发明的一实施方式的音频信号处理装置具有：辅助信息解码器，其对与产生分组丢失后第一个正常接收到的音频分组中产生的不连续性有关的辅助信息进行解码并输出；不连续修正器，其修正解码音频的不连续性；以及isf/lsf解码器，其在根据所述辅助信息解码器的输出未估计出不连续性时，在该帧的isf/lsf计算中使用过去的量化isf/lsf残差参数，在根据所述辅助信息解码器的输出估计出不连续性时，避免在该帧的isf/lsf计算中使用过去的量化isf/lsf残差参数。

也可以是，音频信号处理装置还具有判定过去的规定数量的帧的分组接收状态的接收状态判定部，不连续修正器采用根据不连续性的估计结果以及分组接收状态的判定结果，进行不连续性的修正的结构。

另外，本发明的一实施方式的音频信号处理装置也能够作为有关音频信号处理方法的发明、有关音频信号处理程序的发明，并能够记述如下。

本发明的一实施方式的音频信号处理方法由音频信号处理装置执行，该音频信号处理方法包括以下步骤：对在产生分组丢失后第一个正常接收到的音频分组，估计由于音频分组解码的结果所得到的解码音频的振幅急剧增大而产生的不连续性；修正解码音频的不连续性。

本发明的一实施方式的音频信号处理方法由音频信号处理装置执行，该音频信号处理方法包括以下步骤：对isf/lsf参数进行量化；生成有关isf/lsf参数的隐藏信息即隐藏isf/lsf参数；使用在所述isf/lsf参数的量化过程中得到的量化isf/lsf参数、与所生成的隐藏isf/lsf参数之间的距离，估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；对有关不连续性的辅助信息进行编码。

本发明的一实施方式的音频信号处理方法由音频信号处理装置执行，该音频信号处理方法包括以下步骤：估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；对有关不连续性的辅助信息进行编码；在未估计出不连续性时，在该帧的isf/lsf量化中使用过去的量化isf/lsf残差参数，在估计出不连续性时，避免在该帧的isf/lsf量化中使用过去的量化isf/lsf残差参数。

本发明的一实施方式的音频信号处理方法由音频信号处理装置执行，该音频信号处理方法包括以下步骤：对与产生分组丢失后第一个正常接收到的音频分组中产生的不连续性有关的辅助信息进行解码并输出；修正解码音频的不连续性；在所述辅助信息表示未估计出不连续性时，在该帧的isf/lsf计算中使用过去的量化isf/lsf残差参数，在所述辅助信息表示估计出不连续性时，避免在该帧的isf/lsf计算中使用过去的量化isf/lsf残差参数。

本发明的一实施方式的音频信号处理程序用于使计算机作为以下要素进行动作：不连续估计器，其对在产生分组丢失后第一个正常接收到的音频分组，估计由于音频分组解码的结果所得到的解码音频的振幅急剧增大而产生的不连续性；以及不连续修正器，其修正解码音频的不连续性。

本发明的一实施方式的音频信号处理程序用于使计算机作为以下要素进行动作：isf/lsf量化器，其对isf/lsf参数进行量化；isf/lsf隐藏器，其生成有关isf/lsf参数的隐藏信息即隐藏isf/lsf参数；不连续估计器，其使用在所述isf/lsf量化器的量化过程中得到的量化isf/lsf参数、与所述isf/lsf隐藏器生成的隐藏isf/lsf参数之间的距离，估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；以及辅助信息编码器，其对有关不连续性的辅助信息进行编码。

本发明的一实施方式的音频信号处理程序用于使计算机作为以下要素进行动作：不连续估计器，其估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；辅助信息编码器，其对有关不连续性的辅助信息进行编码；以及isf/lsf量化器，其在所述不连续估计器未估计出不连续性时，在该帧的isf/lsf量化中使用过去的量化isf/lsf残差参数，在所述不连续估计器估计出不连续性时，避免在该帧的isf/lsf量化中使用过去的量化isf/lsf残差参数。

本发明的一实施方式的音频信号处理程序用于使计算机作为以下要素进行动作：辅助信息解码器，其对与产生分组丢失后第一个正常接收到的音频分组中产生的不连续性有关的辅助信息进行解码并输出；不连续修正器，其修正解码音频的不连续性；以及isf/lsf解码器，其在根据所述辅助信息解码器的输出未估计出不连续性时，在该帧的isf/lsf计算中使用过去的量化isf/lsf残差参数，在根据所述辅助信息解码器的输出估计出不连续性时，避免在该帧的isf/lsf计算中使用过去的量化isf/lsf残差参数。

本发明提供一种音频信号处理装置，该音频信号处理装置具有：

不连续估计器，其估计解码音频由于该解码音频的振幅急剧增大而产生的不连续性，所述解码音频是对在产生分组丢失后第一个正常接收到的音频分组进行解码而得到的；以及

不连续修正器，其修正所述解码音频的不连续性。

本发明提供一种音频信号处理装置，该音频信号处理装置具有：

isf/lsf量化器，其对isf/lsf参数进行量化；

isf/lsf隐藏器，其生成隐藏isf/lsf参数，所述隐藏isf/lsf参数是isf/lsf参数的隐藏信息；

不连续估计器，其使用由所述isf/lsf量化器得到的量化isf/lsf参数、与所述isf/lsf隐藏器生成的隐藏isf/lsf参数之间的距离，估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；以及

辅助信息编码器，其对用于不连续性的估计的辅助信息进行编码。

本发明提供一种音频信号处理装置，该音频信号处理装置具有：

不连续估计器，其估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；

辅助信息编码器，其对用于不连续性的估计的辅助信息进行编码；以及

isf/lsf量化器，其在所述不连续估计器未估计出不连续性时，在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数，在所述不连续估计器估计出不连续性时，避免在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数。

本发明提供一种音频信号处理装置，该音频信号处理装置具有：

辅助信息解码器，其对用于解码音频的不连续性的估计的辅助信息进行解码并输出，所述不连续性是在产生分组丢失后第一个正常接收到的音频分组中产生的；

不连续修正器，其修正解码音频的不连续性；以及

isf/lsf解码器，其在由所述辅助信息解码器输出的所述辅助信息表示未产生不连续性时，在相应帧的isf/lsf计算中使用过去的量化isf/lsf残差参数，在由所述辅助信息解码器输出的所述辅助信息表示产生不连续性时，避免在相应帧的isf/lsf计算中使用过去的量化isf/lsf残差参数。

本发明提供一种由音频信号处理装置执行的音频信号处理方法，该音频信号处理方法包括以下步骤：

估计解码音频由于该解码音频的振幅急剧增大而产生的不连续性，所述解码音频是对在产生分组丢失后第一个正常接收到的音频分组进行解码而得到的；

修正所述解码音频的不连续性。

本发明提供一种由音频信号处理装置执行的音频信号处理方法，该音频信号处理方法包括以下步骤：

对isf/lsf参数进行量化；

生成隐藏isf/lsf参数，所述隐藏isf/lsf参数是isf/lsf参数的隐藏信息；

使用量化isf/lsf参数、与所生成的隐藏isf/lsf参数之间的距离，估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；

对用于不连续性的估计的辅助信息进行编码。

本发明提供一种由音频信号处理装置执行的音频信号处理方法，该音频信号处理方法包括以下步骤：

估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；

对用于不连续性的估计的辅助信息进行编码；

在未估计出不连续性时，在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数，在估计出不连续性时，避免在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数。

本发明提供一种由音频信号处理装置执行的音频信号处理方法，该音频信号处理方法包括以下步骤：

对用于解码音频的不连续性的估计的辅助信息进行解码并输出，所述不连续性是在产生分组丢失后第一个正常接收到的音频分组中产生的；

修正所述解码音频的不连续性；

在所述辅助信息表示未产生不连续性时，在相应帧的isf/lsf计算中使用过去的量化isf/lsf残差参数，在所述辅助信息表示产生不连续性时，避免在相应帧的isf/lsf计算中使用过去的量化isf/lsf残差参数。

本发明提供一种非暂时性存储介质，其存储有音频信号处理程序，该音频信号处理程序使计算机作为以下要素进行动作：

不连续估计器，其估计解码音频由于该解码音频的振幅急剧增大而产生的不连续性，所述解码音频是对在产生分组丢失后第一个正常接收到的音频分组进行解码而得到的；以及

不连续修正器，其修正所述解码音频的不连续性。

本发明提供一种非暂时性存储介质，其存储有音频信号处理程序，该音频信号处理程序使计算机作为以下要素进行动作：

isf/lsf量化器，其对isf/lsf参数进行量化；

isf/lsf隐藏器，其生成隐藏isf/lsf参数，所述隐藏isf/lsf参数是isf/lsf参数的隐藏信息；

不连续估计器，其使用由所述isf/lsf量化器得到的量化isf/lsf参数、与所述isf/lsf隐藏器生成的隐藏isf/lsf参数之间的距离，估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；以及

辅助信息编码器，其对用于不连续性的估计的辅助信息进行编码。

本发明提供一种非暂时性存储介质，其存储有音频信号处理程序，该音频信号处理程序使计算机作为以下要素进行动作：

不连续估计器，其估计在产生分组丢失后第一个正常接收到的音频分组中产生的不连续性；

辅助信息编码器，其对用于不连续性的估计的辅助信息进行编码；以及

isf/lsf量化器，其在所述不连续估计器未估计出不连续性时，在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数，在所述不连续估计器估计出不连续性时，避免在相应帧的isf/lsf量化中使用过去的量化isf/lsf残差参数。

本发明提供一种非暂时性存储介质，其存储有音频信号处理程序，该音频信号处理程序使计算机作为以下要素进行动作：

辅助信息解码器，其对用于解码音频的不连续性的估计的辅助信息进行解码并输出，所述不连续性是在产生分组丢失后第一个正常接收到的音频分组中产生的；

不连续修正器，其修正所述解码音频的不连续性；以及

isf/lsf解码器，其在所述辅助信息表示未产生不连续性时，在相应帧的isf/lsf计算中使用过去的量化isf/lsf残差参数，在所述辅助信息表示产生不连续性时，避免在相应帧的isf/lsf计算中使用过去的量化isf/lsf残差参数。

发明效果

根据如上所述的本发明，能够降低在从音频开始时刻的分组丢失恢复时产生的所述不连续声音，改善主观品质。

附图说明

图1是音频解码器的结构图。

图2是音频解码器的处理流程。

图3是音频码解码部的功能结构图。

图4是lp系数计算部的功能结构图。

图5是计算lp系数的处理流程。

图6是隐藏信号生成部的功能结构图。

图7是专利文献2的音频解码器的结构图。

图8是专利文献2的隐藏信号生成部的功能结构图。

图9是第1实施方式的音频码解码部的功能结构图。

图10是第1实施方式的lp系数计算部的处理流程。

图11是第1实施方式的音频码解码部的功能结构图。

图12是第1实施方式的变形例1的第2稳定性处理部的处理流程。

图13是第2实施方式的音频码解码部的功能结构图。

图14是第2实施方式的lp系数计算部的功能结构图。

图15是第2实施方式的lp系数计算的处理流程。

图16是第4实施方式的音频编码器的结构图。

图17是第4实施方式的音频编码器的结构图。

图18是第4实施方式的lp分析/编码器的结构图。

图19是第4实施方式的lp分析/编码器的处理流程。

图20是第4实施方式的音频码解码部的功能结构图。

图21是第4实施方式的lp系数计算部的处理流程。

图22是第5实施方式的lp分析/编码器的结构图。

图23是第5实施方式的lp分析/编码器的处理流程。

图24是第4实施方式的音频码解码部的功能结构图。

图25是第5实施方式的lp系数计算部的处理流程。

图26是第7实施方式的音频解码器的结构图。

图27是第7实施方式的音频解码器的处理流程。

图28是第7实施方式的音频码解码部的功能结构图。

图29是第7实施方式的lp系数计算的处理流程。

图30是示出计算机的硬件结构例的图。

图31是计算机的外观图。

图32的(a)、(b)、(c)及(d)是示出音频信号处理程序的各种结构例的图。

具体实施方式

下面，使用附图详细说明本发明的音频信号处理装置、音频信号处理方法及音频信号处理程序的优选的实施方式。另外，在附图的说明中对相同要素标注相同的标号，并省略重复说明。

[第1实施方式]

第1实施方式的音频信号处理装置具有与前述的图1的音频解码器1相同的结构，其特征在于音频码解码部，下面对音频码解码部进行说明。

图9示出第1实施方式的音频码解码部12a的功能结构图，图10示出lp系数计算处理的流程图。图9的音频码解码部12a相对于前述的图3的结构追加了不连续检测部129。与现有技术的不同仅在于lp系数计算处理，因而在此对有关lp系数计算处理的各个部分的动作进行说明。

不连续检测部129参照解码得到的固定码本增益gc⁰及内部状态中包含的固定码本增益gc^-1，按照下式比较增益的变化与阈值(图10的步骤s11)。

[数式42]

在增益的变化超过阈值的情况下，检测为发生不连续(以下，也简称为“检测出不连续”)，向稳定性处理部121输出有关发生不连续的检测结果的控制信号。

另外，在进行增益的变化与阈值的比较时，也可以使用下式。

[数式43]

另外，也可以是，将当前帧中包含的第一～第四子帧的固定码本增益中的最大者设为gc^(c)，将内部状态中包含的固定码本增益中的最小者设为gc^(p)，按照下式进行增益的变化与阈值的比较。

[数式44]

当然，也可以使用下式。

[数式45]

在第1实施方式的上述示例中，示出了使用紧前面一帧(丢失帧)的第四子帧的固定码本增益gc^-1、和当前帧的第一子帧的固定码本增益gc⁰进行不连续检测的例子，但也可以是，在对内部状态中包含的固定码本增益及当前帧中包含的固定码本增益分别计算出平均值后，进行增益的变化与阈值的比较。

isf解码部120进行与现有技术相同的动作(图10的步骤s12)。

在不连续检测部129检测出不连续的情况下，稳定性处理部121通过以下的处理来修正isf参数(图10的步骤s13)。

首先，稳定性处理部121对于被存储在内部状态缓存器14中的数式46所示的isf参数，进行使各要素之间隔开是通常的m-1倍的间隔的处理。通过赋予比通常大非常多的间隔，实现抑制频谱包络中的过大的峰值和谷值的效果。其中，min_dist表示最小的isf间隔，isf_min表示确保min_dist的间隔所需要的isf的最小值。isf_min通过将相邻的isf的值与min_dist的间隔相加而依次进行更新。另一方面，isf_max表示确保min_dist的间隔所需要的isf的最大值。isf_max通过从相邻的isf的值中减去min_dist的间隔而依次进行更新。

[数式46]

[数式47]

然后，稳定性处理部121对于当前帧的isf参数，进行使各要素之间隔开是通常的m0倍的间隔的处理。在此，设为1<m0<m-1，但也可以将m-1或者m0任意一方设定为1，将另一方设定为大于1的值。

[数式48]

另外，在不连续检测器未检测出不连续的情况下，稳定性处理部121进行与在通常的解码过程中实施的处理一样的以下处理。

[数式49]

也可以是，检测出不连续时的要素之间的最小间隔按照isf的频率而变化。检测出不连续时的要素之间的最小间隔只要与通常的解码处理的最小的要素之间的间隔不同即可。

lp系数计算部122内的isf-isp变换部122a按照数式52，将数式50所示的isf参数分别变换为数式51所示的isp参数(图10的步骤s14)。其中，c表示事前设定的常数。

[数式50]

[数式51]

[数式52]

isp插值部122b根据数式53所示的过去的isp参数和数式54所示的上述isp参数，按照数式55计算每个子帧的isp参数(图10的步骤s15)。也可以使用其它的系数进行插值。

[数式53]

[数式54]

[数式55]

isp-lpc变换部122c将每个子帧的isp参数变换为数式56所示的lp系数(图10的步骤s16)。在此，将先行信号中包含的子帧的数量设为4，但也可以按照设计方针变更子帧的数量。作为具体的变换步骤，能够采用非专利文献1记载的处理步骤。

[数式56]

另外，isf-isp变换部122a将被存储在内部状态缓存器14中的数式57所示的isf参数，按照数式58进行更新。

[数式57]

[数式58]

此时，即使在检测出不连续的情况下，isf-isp变换部122a也可以通过执行以下的步骤，使用isf参数的计算结果更新被存储在内部状态缓存器中的数式59所示的isf参数。

[数式59]

[数式60]

如以上的第1实施方式那样，能够根据在计算激励信号时使用的被量化的码本增益，估计解码音频的不连续性，并且能够按照不连续性的估计结果，修正isf/lsf参数(例如为保证合成滤波器的稳定性而赋予的isf/lsf参数的各要素之间的间隔)。因此，能够降低在从音频开始时刻的分组丢失恢复时产生的不连续声音，改善主观品质。

[第1实施方式的变形例]

图11示出第1实施方式的变形例的音频码解码部12s的功能结构图。与图3的现有技术的结构的不同仅在于不连续检测部129和第2稳定性处理部121s，因而对这两个要素的动作进行说明。第2稳定性处理部121s具有增益调整部121x和增益相乘部121y，第2稳定性处理部121s的处理流程如图12所示。

不连续检测部129与第1实施方式的不连续检测部129一样，参照进行解码而得到的固定码本增益gc⁰及内部状态中包含的固定码本增益gc^-1，将增益的变化与阈值进行比较。并且，不连续检测部129将包括有关增益的变化是否超过阈值的信息的控制信号发送给增益调整部121x。

增益调整部121x从控制信号读出有关增益的变化是否超过阈值的信息，在增益的变化超过阈值的情况下，将事前设定的增益gon输出给增益相乘部121y。另一方面，增益调整部121x在增益的变化未超过阈值的情况下，将事前设定的增益goff输出给增益相乘部121y。这样的增益调整部121x的动作对应于图12的步骤s18。

增益相乘部121y将合成滤波器128输出的合成信号与上述增益gon或者增益goff相乘(图12的步骤s19)，并输出所得到的解码信号。

在此，也可以构成为从lp系数计算部122输出lp系数或者isf参数，并输入第2稳定性处理部121s(在图11中示出从lp系数计算部122向增益调整部121x的用虚线示出的结构)。在这种情况下，应该相乘的增益是使用由lp系数计算部122计算出的lp系数或者isf参数决定的。

如以上的变形例那样，通过在音频码解码部12s中追加第2稳定性处理部121s，并按照增益的变化是否超过阈值来调整增益，能够得到适当的解码信号。

另外，也可以是，第2稳定性处理部121s将上述计算出的增益与激励信号相乘，并输出给合成滤波器128。

[第2实施方式]

第2实施方式的音频信号处理装置具有与前述的图1的音频解码器1相同的结构，其特征在于音频码解码部，下面对音频码解码部进行说明。图13示出音频码解码部12b的功能结构例，图14示出有关lp系数的计算处理的功能结构例，图15示出lp系数的计算处理的流程。图13的音频码解码部12b相对于前述的图3的结构追加了不连续检测部129。

isf解码部120与现有技术一样地计算isf参数(图15的步骤s21)。

稳定性处理部121与现有技术一样地，进行使数式61所示的isf参数的各要素之间隔开50hz以上的间隔的处理，以便确保滤波器的稳定性(图15的步骤s22)。

[数式61]

isf-isp变换部122a与第1实施方式一样地，将稳定性处理部121输出的isf参数变换为isp参数(图15的步骤s23)。

isp插值部122b与第1实施方式一样地，根据数式62所示的过去的isp参数和通过isf-isp变换部122a的变换而得到的数式63所示的isp参数，计算每个子帧的isp参数(图15的步骤s24)。

[数式62]

[数式63]

isp-lpc变换部122c与第1实施方式一样地，将每个子帧的isp参数变换为数式64所示的lp系数(图15的步骤s25)。在此，将先行信号中包含的子帧的数量设为4，但也可以根据设计方针变更子帧的数量。

[数式64]

内部状态缓存器14利用新的isf参数更新过去存储的isf参数。

不连续检测部129从内部状态缓存器14读出分组丢失的帧中的第四子帧的lp系数，并计算分组丢失的帧中的第四子帧的lp系数的脉冲响应的功率。分组丢失的帧中的第四子帧的lp系数能够使用在分组丢失时图6的隐藏信号生成部13中包含的lp系数插值部130输出而蓄积在内部状态缓存器14中的数式65所示的系数。

[数式65]

并且，不连续检测部129例如根据数式66检测不连续(图15的步骤s26)。

[数式66]

e0-e-l＞thres

在增益的变化未超过阈值的情况下(图15的步骤s27为否的情况下)，不连续检测部129未检测出发生不连续，从isp-lpc变换部122c输出lp系数而结束处理。另一方面，在增益的变化超过阈值的情况下(图15的步骤s27为“是”的情况下)，不连续检测部129检测出发生不连续，向稳定性处理部121发送有关发生不连续的检测结果的控制信号。在接收到控制信号的情况下，稳定性处理部121与第1实施方式一样地修正isf参数(图15的步骤s28)。以后，isf-isp变换部122a、isp插值部122b及isp-lpc变换部122c的动作(图15的步骤s29、s2a、s2b)与上述情况相同。

如以上的第2实施方式那样，能够根据激励信号的功率估计解码信号的不连续性，能够与第1实施方式一样地降低不连续声音、改善主观品质。

[第3实施方式]

在检测出不连续时，也可以利用其它的方法修正isf参数。在第3实施方式中，只有稳定性处理部121与第1实施方式不同，因而仅对稳定性处理部121的动作进行说明。

在不连续检测部129检测出不连续的情况下，稳定性处理部121进行以下的处理来修正isf参数。

对于被存储在内部状态缓存器14中的数式67所示的isf参数，稳定性处理部121根据下式来置换截止到低次p’维数(0<p’≦p)的isf参数。在此设为如数式68、数式69所示。

[数式67]

[数式68]

[数式69]

另外，也可以是，稳定性处理部121利用如下所示事前通过学习而得到的p’维向量覆盖低次p’维的isf参数。

[数式70]

然后，对于当前帧的isf参数，稳定性处理部121既可以如第1实施方式那样进行使各要素之间隔开是通常的m0倍的间隔的处理，也可以按照下式来决定。在此设为如数式71、数式72所示。

[数式71]

[数式72]

另外，稳定性处理部121也可以用事前学习得到的p’维向量覆盖。

[数式73]

另外，上述p’维向量也可以是在解码过程中学习得到的，例如也可以设为如数式74所示。但是，也可以在解码开始时的帧中将ωi^-1设为预先设定的p’维向量ωi^init。

[数式74]

内部状态缓存器14利用新的isf参数更新过去存储的isf参数。

如以上的第3实施方式那样，能够使用将截止到预先设定的维数的isf/lsf参数进行等分得到的间隔，作为为保证合成滤波器的稳定性而赋予的isf/lsf参数的各要素间的间隔，与第1、第2实施方式一样，能够降低不连续声音、改善主观品质。

[第4实施方式]

在第4实施方式中说明这样的实施方式，编码侧检测不连续的发生，将不连续判定码(表示检测结果的码)包含在音频码中传输给解码侧，解码侧根据音频码中包含的不连续判定码决定稳定性处理的处理内容。

(关于编码侧)

图16示出编码器2的功能结构例，图17示出编码器2的处理的流程图。如图16所示，编码器2具有lp分析/编码部21、残差编码部22和码复用部23。

其中，lp分析/编码部21的功能结构例如图18所示，lp分析/编码部21的处理的流程图如图19所示。如图18所示，lp分析/编码部21具有lp分析部210、lp-isf变换部211、isf编码部212、不连续判定部213、isf隐藏部214、isf-lp变换部215、和isf缓存器216。

在lp分析/编码部21中，lp分析部210对输入信号进行线性预测分析，并求出线性预测系数(图17的步骤t41、图18的步骤u41)。在计算线性预测系数时，在根据音频信号计算出自相关函数后，能够采用莱文森-杜宾(levinson-durbin)算法等。

lp-isf变换部211与第1实施方式一样将计算出的线性预测系数变换为isf参数(步骤t42、u42)。从线性预测系数向isf参数的变换也可以采用非专利文献记载的方法。

isf编码部212利用事前设定的方法对isf参数进行编码来计算出isf码(步骤t43、u43)，将在编码的过程中得到的量化isf参数输出给不连续判定部213、isf隐藏部214和isf-lp变换部215(步骤u47)。在此，量化isf参数与对isf码进行逆量化得到的isf参数相同。作为编码的方法，也可以采用向量编码、或利用向量量化等对紧前面一帧的isf以及与事前通过学习而设定的平均向量之间的误差向量进行编码。

不连续判定部213对在不连续判定部213内置的内部缓存器(未图示)中存储的不连续判定标志进行编码，并输出所得到的不连续判定码(步骤u47)。另外，不连续判定部213使用从isf缓存器216读出的数式75所示的隐藏isf参数和数式76所示的量化isf参数，按照数式77进行不连续的判定(步骤t44、u46)，将其判定结果存储在不连续判定部213的内部缓存器中。其中，thresω表示事前设定的阈值，p’表示满足下式的整数(0<p’≦p)。

[数式75]

[数式76]

[数式77]

在此，说明了使用isf参数彼此间的欧几里得距离进行不连续判定的示例，但也可以利用其它的方法进行不连续判定。

isf隐藏部214通过与解码器侧的isf隐藏部一样的处理，根据量化isf参数计算隐藏isf参数，将得到的隐藏isf参数输出给isf缓存器216(步骤u44、u45)。isf隐藏处理的处理步骤如果是与解码器侧的分组丢失隐藏部相同的处理，则可以是任何方法。

isf-lp变换部215对上述量化isf参数进行变换并计算量化线性预测系数，将得到的量化线性预测系数向残差编码部22输出(步骤t45)。关于将isf参数变换为量化线性预测系数的方法，也可以采用非专利文献记载的方法。

残差编码部22使用量化线性预测系数对音频信号进行滤波，并计算残差信号(步骤t46)。

然后，残差编码部22通过使用celp或者tcx(transformcodedexcitation)的编码单元、切换使用celp和tcx的编码单元等，对残差信号进行编码，并输出残差码(步骤t47)。残差编码部22的处理与本发明的关联性较低，因而省略说明。

编码复用部23按照规定的顺序将isf码、便利性判定码及残差码合并，并输出所得到的音频码(步骤t48)。

(关于解码侧)

第4实施方式的音频信号处理装置具有与前述的图1的音频解码器1相同的结构，其特征在于音频码解码部，下面对音频码解码部进行说明。图20示出音频码解码部12d的功能结构例，图21示出lp系数的计算处理的流程。图20的音频码解码部12d相对于前述的图3的结构追加了不连续检测部129。

isf解码部120对isf码进行解码，输出给稳定性处理部121和内部状态缓存器14(图21的步骤s41)。

不连续检测部129对不连续判定码进行解码，将得到的不连续检测结果输出给稳定性处理部121(图21的步骤s42)。

稳定性处理部121进行与不连续检测结果对应的稳定性处理(图21的步骤s43)。稳定性处理部的处理步骤能够使用与第1实施方式及第3实施方式相同的方法。

另外，也可以是，稳定性处理部121根据从不连续判定码得到的不连续检测结果、以及音频码中包含的其它的参数，按照下面所述进行稳定性处理。例如，也可以构成为，稳定性处理部121按照下式计算isf稳定度stab，在isf稳定度stab超过阈值的情况下，即使是得到了表示从不连续判定码检测出不连续的不连续检测结果时，也进行如同未检测出不连续那样的稳定性处理。其中，c表示事前设定的常数。

[数式78]

lp系数计算部122内的isf-isp变换部122a通过与第1实施方式一样的处理步骤，将isf参数变换为isp参数(图21的步骤s44)。

isp插值部122b通过与第1实施方式一样的处理步骤，计算每个子帧的isp参数(图21的步骤s45)。

isp-lpc变换部122c通过与第1实施方式一样的处理步骤，将对每个子帧计算出的isp参数变换为lpc参数(图21的步骤s46)。

在如上所述的第4实施方式中，在编码侧进行不连续判定(作为一例，使用了隐藏isf参数和量化isf参数彼此间的欧几里得距离的不连续判定)，对有关其判定结果的辅助信息进行编码而向解码侧输出，在解码侧使用解码得到的辅助信息进行不连续性的估计。通过这样在编码侧和解码侧进行协作，能够执行与在编码侧的不连续判定结果对应的合适的处理。

[第5实施方式]

(关于编码侧)

编码器的功能结构与第4实施方式的图16的功能结构相同，编码器的处理流程与第4实施方式的图17的处理流程相同。在此，对与第4实施方式不同的第5实施方式的lp分析/编码部进行说明。

图22示出lp分析/编码部的功能结构例，图23示出lp分析/编码部的处理的流程图。如图22所示，lp分析/编码部21s具有lp分析部210、lp-isf变换部211、isf编码部212、不连续判定部213、isf隐藏部214、isf-lp变换部215、和isf缓存器216。

在这样的lp分析/编码部21s中，lp分析部210通过与第4实施方式一样的处理，对输入信号进行线性预测分析，并求出线性预测系数(图23的步骤u51)。

lp-isf变换部211通过与第4实施方式一样的处理，将计算出的线性预测系数变换为isf参数(图23的u52)。从线性预测系数至isf参数的变换也可以采用非专利文献记载的方法。

isf编码部212读出在不连续判定部213的内部缓存器(未图示)中存储的不连续判定标志(图23的u53)。

<不连续判定标志表示检测出不连续的情况>

isf编码部212对按照数式79计算出的isf残差参数ri进行向量量化来计算isf码(图23的u54)。在此，将lp-isf变换部计算出的isf参数设为ωi，将事前通过学习而求出的平均向量设为meani。

[数式79]

ri＝ωi-meani

然后，isf编码部212使用对isf残差参数ri进行量化得到的数式80所示的量化isf残差参数，按照数式81所示更新isf残差参数缓存器(图23的u55)。

[数式80]

[数式81]

<不连续判定标志表示未检测出不连续的情况>

isf编码部212对按照数式83计算出的isf残差参数ri进行向量量化来计算isf码(图23的u54)。在此，将在紧前面一帧中通过解码而得到的isf残差参数设为数式82所示。

[数式82]

[数式83]

然后，isf编码部212使用对isf残差参数ri进行量化得到的数式84所示的量化isf残差参数，按照数式85所示更新isf残差参数缓存器(图23的u55)。

[数式84]

[数式85]

通过以上的步骤，isf编码部212计算出isf码，将在编码的过程中得到的量化isf参数输出给不连续判定部213、isf隐藏部214和isf-lp变换部215。

isf隐藏部214与第4实施方式一样地，通过与解码器侧的isf隐藏部一样的处理，根据量化isf参数计算隐藏isf参数，并输出给isf缓存器216(图23的步骤u56、u58)。isf隐藏处理的处理步骤如果是与解码器侧的分组丢失隐藏部相同的处理，则可以是任何方法。

不连续判定部213通过与第4实施方式一样的处理进行不连续的判定，将判定结果存储在不连续判定部213的内部缓存器(未图示)中(图23的步骤u57)。

isf-lp变换部215与第4实施方式一样地，对上述量化isf参数进行变换，计算量化线性预测系数，并向残差编码部22(图16)输出(图23的步骤u58)。

(关于解码侧)

第5实施方式的音频信号处理装置具有与前述的图1的音频解码器1相同的结构，其特征在于音频码解码部，下面对音频码解码部进行说明。图24示出音频码解码部12e的功能结构例，图25示出lp系数的计算处理的流程。图24的音频码解码部12e相对于前述的图3的结构追加了不连续检测部129。

不连续检测部129对不连续判定码进行解码，将得到的不连续判定标志输出给isf解码部120(图25的步骤s51)。

isf解码部120根据不连续判定标志的值，按照下面所述计算isf参数，将isf参数输出给稳定性处理部121和内部状态缓存器14(图25的步骤s52)。

<不连续判定标志表示检测出不连续的情况>

isf解码部120将对isf码进行解码得到的量化isf残差参数设为数式86，将事前通过学习而求出的平均向量设为meani，按照数式88求出量化isf参数。

[数式86]

[数式87]

[数式88]

然后，isf解码部120按照下式更新被存储在内部状态缓存器14中的isf残差参数。

[数式89]

<不连续判定标志表示未检测出不连续的情况>

isf解码部120从内部状态缓存器14读出在紧前面一帧中通过解码而得到的数式90所示的isf残差参数，根据所得到的数式91所示的isf残差参数、事前通过学习而求出的平均向量meani、以及对isf码进行解码得到的数式92所示的量化isf残差参数，按照数式94求出数式93所示的量化isf参数。

[数式90]

[数式91]

[数式92]

[数式93]

[数式94]

然后，isf解码部120按照下式更新被存储在内部状态缓存器14中的isf残差参数。

[数式95]

稳定性处理部121进行与在第1实施方式中说明的未检测出不连续的情况一样的处理(图25的步骤s53)。

lp系数计算部122内的isf-isp变换部122a通过与第1实施方式一样的处理步骤，将isf参数变换为isp参数(图25的步骤s54)。

isp插值部122b通过与第1实施方式一样的处理步骤，计算每个子帧的isp参数(图25的步骤s55)。

isp-lpc变换部122c通过与第1实施方式一样的处理步骤，将对每个子帧计算出的isp参数变换为lpc参数(图25的步骤s56)。

在如上所述的第5实施方式中，在编码侧，在不连续判定标志表示未检测出不连续的情况下，使用在紧前面的一帧中通过解码而得到的isf残差参数进行isf残差参数的向量量化，而在不连续判定标志表示检测出不连续的情况下，避免使用在紧前面一帧中通过解码而得到的isf残差参数。同样，在解码侧，在不连续判定标志表示未检测出不连续的情况下，使用在紧前面一帧中通过解码而得到的isf残差参数计算量化isf参数，而在不连续判定标志表示检测出不连续的情况下，避免使用在紧前面一帧中通过解码而得到的isf残差参数。这样通过在编码侧和解码侧进行协作，能够执行与不连续判定结果对应的合适的处理。

[第6实施方式]

也可以将上述第1～第5实施方式进行组合。例如，也可以如第4实施方式记载的那样，在解码侧，对来自编码侧的音频码中包含的不连续判定码进行解码来检测不连续，在检测出不连续的情况下执行以下所述的步骤。

对于被存储在内部状态缓存器中的数式96所示的isf参数，按照第3实施方式所述，利用数式97置换截止到低次p’维(0<p’≦p)的isf参数。

[数式96]

[数式97]

另一方面，对于当前帧的isf参数，按照第5实施方式所述根据下式进行计算。

[数式98]

以后，使用通过上述步骤求出的isf参数，与第1实施方式一样地，通过isf-isp变换部122a、isp插值部122b、isp-lpc变换部122c的处理来求出lp系数。

如上所述，将第1～第5实施方式进行任意组合得到的方式也是有效的。

[第7实施方式]

在上述第1～第6实施方式及变形例中，也可以考虑解码侧的帧丢失的情况(例如，一个帧丢失或者连续帧丢失的情况)。另外，在第7实施方式中，对于不连续检测，例如可以使用对音频码中包含的不连续判定码进行解码的结果进行不连续检测，其方法不限于上述方法。

第7实施方式的音频信号处理装置具有与前述的图1的音频解码器1相同的结构，其特征在于音频码解码部，因而下面对音频码解码部进行说明。

图26示出第7实施方式的音频解码器1s的结构例，图27示出音频解码器的处理的流程图。如图26所示，音频解码器1s除了前述的音频码解码部12g、隐藏信号生成部13及内部状态缓存器14以外，还具有判定过去数帧中的分组接收状态并存储分组丢失履历的接收状态判定部16。

接收状态判定部16判定分组接收状态，根据判定结果更新分组丢失履历信息(图27的步骤s50)。

在检测出分组丢失的情况下(在步骤s100为“否”的情况下)，接收状态判定部16将该帧的分组丢失检测结果输出给隐藏信号生成部13，隐藏信号生成部13进行前述的隐藏信号的生成及内部状态的更新(步骤s300、s400)。另外，隐藏信号生成部13也可以将分组丢失履历信息用于参数的插值等。

另一方面，在未检测出分组丢失的情况下(在步骤s100为“是”的情况下)，接收状态判定部16将包括该帧的分组丢失检测结果的分组丢失履历信息、和接收分组中包含的音频码，输出给音频码解码部12，音频码解码部12进行前述的音频码的解码及内部状态的更新(步骤s200、s400)。

以后，反复步骤s50～s400的处理一直到通信结束为止(一直到在步骤s500判定为是为止)。

图28示出音频码解码部12g的功能结构例，图29示出lp系数的计算处理的流程。在此，对仅在lp系数计算部122使用分组丢失履历信息的示例进行说明，但也可以构成为将分组丢失履历信息输入其它的构成要素并使用。

在音频码解码部12g中，除了有关lp系数的计算处理的结构以外，其它结构与第1实施方式相同，因而下面说明有关lp系数的计算处理的结构及动作。

isf解码部120与第1实施方式一样地对isf码进行解码，并向稳定性处理部121输出isf参数(图29的步骤s71)。

不连续检测部129参照分组丢失履历信息判定接收状态(步骤s72)。例如也可以是，不连续检测部129预先存储诸如3帧前为分组丢失、2帧前为正常接收、1帧前为分组丢失这样特定的接收模式，在出现了相应的接收模式的情况下，将接收状态标志设为off，在除此以外的情况时将接收状态标志设为on。

另外，不连续检测部129与前述的第1～第6实施方式中任意一个方式的方法一样地进行不连续检测。

并且，稳定性处理部121例如按照以下所述，按照接收状态标志及不连续检测的结果进行稳定性处理(步骤s73)。

在接收状态标志为off的情况下，无论不连续检测的结果怎样，稳定性处理部121都进行与未检测出不连续时一样的处理。

另一方面，在接收状态标志为on、而且不连续检测的结果是未检测出不连续的情况下，稳定性处理部121进行与未检测出不连续时一样的处理。

另外，在接收状态标志为on、而且不连续检测的结果是检测出不连续的情况下，稳定性处理部121进行与检测出不连续时一样的处理。

以后，lp系数计算部122内的isf-isp变换部122a、isp插值部122b及isp-lpc变换部122c的动作(步骤s74～s76)与第1实施方式一样。

在如上所述的第7实施方式中，通过进行与不连续检测的结果和接收状态标志的状态对应的稳定性处理，能够执行考虑了帧丢失的状况(例如一个帧丢失或者连续帧丢失的情况)的精度更加良好的处理。

[关于音频信号处理程序]

下面，对使计算机作为本发明的音频信号处理装置进行动作的音频信号处理程序进行说明。

图32是示出音频信号处理程序的各种结构例的图。图30是示出计算机的硬件结构例的图，图31是计算机的外观图。在图32的(a)～(d)分别示出的音频信号处理程序p1～p4(以下统称为“音频信号处理程序p”)能够使图31和图32所示的计算机c10作为音频信号处理装置进行动作。另外，在本说明书中说明的音频信号处理程序p不限于如图31和图32所示的计算机，也能够使移动电话、便携信息终端、便携式个人电脑这样任意的信息处理装置按照该音频信号处理程序p进行动作。

音频信号处理程序p被存储在记录介质m中进行提供。另外，作为记录介质m，示例了软盘、cd-rom、dvd、或者rom等记录介质、或者半导体存储器等。

如图30所示，计算机c10具有软盘驱动装置、cd-rom驱动装置、dvd驱动装置等的读取装置c12、作业用存储器(ram)c14、存储在记录介质m中存储的程序的存储器c16、显示器c18、作为输入装置的鼠标c20及键盘c22、用于进行数据等的发送接收的通信装置c24、控制程序的执行的中央运算部(cpu)c26。

在记录介质m被插入读取装置c12时，计算机c10能够从读取装置c12访问被存储在记录介质m中的音频信号处理程序p，通过音频信号处理程序p能够作为音频信号处理装置进行动作。

音频信号处理程序p也可以如图31所示作为被叠加在载波中的计算机数据信号w经由网络进行提供。在这种情况下，计算机c10将通过通信装置c24接收到的音频信号处理程序p存储在存储器c16中，并能够执行音频信号处理程序p。

音频信号处理程序p能够采用图32的(a)～(d)所示的各种结构。这些结构分别对应于在权利要求书中记载的有关音频信号处理程序p的权利要求18～21的结构。例如，图32(a)所示的音频信号处理程序p1具有不连续估计模块p11和不连续修正模块p12。图32(b)所示的音频信号处理程序p2具有isf/lsf量化模块p21、isf/lsf隐藏模块p22、不连续估计模块p23和辅助信息编码模块p24。图32(c)所示的音频信号处理程序p3具有不连续估计模块p31、辅助信息编码模块p32和isf/lsf量化模块p33。图32(d)所示的音频信号处理程序p4具有辅助信息解码模块p41、不连续修正模块p42和isf/lsf解码模块p43。

根据以上说明的各种实施方式，能够降低在从音频开始时刻的分组丢失恢复时产生的不连续声音，改善主观品质。

作为发明的第一个特征的稳定性处理部，当在分组丢失后第一个正常接收到的分组中检测出不连续的情况下，例如通过使对isf参数的各要素之间赋予的间隔大于通常情况时，能够防止lp系数的增益过大。由于能够防止lp系数的增益和激励信号的功率都增加，因而能够减少合成信号的不连续，降低主观品质劣化。另外，也可以是，稳定性处理部将利用lp系数等计算出的增益与合成信号相乘，由此减少合成信号的不连续。

另外，作为发明的第二个特征的不连续检测器监视在分组丢失后第一个正常接收到的分组中包含的激励信号的增益，对于在激励信号的增益中产生了固定值以上的增加的分组估计不连续性。

标号说明

1、1s、1x音频解码器；11分组丢失检测部；12、12a、12b、12c、12d、12e、12g、12s音频码解码部；13、13x隐藏信号生成部；14内部状态缓存器；15归一化预测误差功率解码部；16接收状态判定部；21、21s分析/编码部；22残差编码部；23码复用部；120isf解码部；121、121s稳定性处理部；121x增益调整部；121y增益相乘部；122lp系数计算部；122aisf-isp变换部；122bisp插值部；122cisp-lpc变换部；123自适应码本计算部；124固定码本解码部；125增益解码部；126激励向量合成部；127主滤波器；128合成滤波器；129不连续检测部；130lp系数插值部；131基音滞后插值部；132增益插值部；133噪声信号生成部；134主滤波器；135合成滤波器；136自适应码本计算部；137激励向量合成部；138归一化预测残差调整部；210lp分析部；211lp-isf变换部；212isf编码部；213不连续判定部；214isf隐藏部；215isf-lp变换部；216isf缓存器；c10计算机；c12读取装置；c14作业用存储器；c16存储器；c18显示器；c20鼠标；c22键盘；c24通信装置；c26cpu；m记录介质；p1～p4音频信号处理程序；p11不连续估计模块；p12不连续修正模块；p21isf/lsf量化模块；p22isf/lsf隐藏模块；p23不连续估计模块；p24辅助信息编码模块；p31不连续估计模块；p32辅助信息编码模块；p33isf/lsf量化模块；p41辅助信息解码模块；p42不连续修正模块；p43isf/lsf解码模块。