专利名称：图像编码设备、图像编码方法和程序的制作方法
技术领域：
本技术涉及一种图像编码设备、图像编码方法和程序。具体地，可以通过针对其他视点的参考图片的数量选择时间方向或视差方向上的参考图片候选来生成参考图片列表，以改进编码效率。
背景技术：
近年来，将图像信息处理为数字数据的并且遵照如MPEG2 (ISO (国际标准化组织)/IEC (国际电工委员会)13818-2)的方法的设备在通过广播站等进行信息传递以及通过普通家庭进行信息接收这两方面得到广泛使用，其中，该方法为了高效地传送并存储信息而使用图像信息所特有的冗余性、通过诸如离散余弦变换的正交变换和运动补偿来压缩图像信息。此外，能够实现高编码效率的、被称为H. 264和MPEG4PartlO (AVC (高级视频 编码))的方法(下文中，称为“H. 264/AVC”)越来越多地被使用，但是与MPEG2等相比，其编码和解码需要更多的运算量。根据这样的压缩和编码方法，使用了利用参考图片的画面间预测编码，并且在例如H.264/AVC中，可以从多个编码图片中选择参考图片。所选的每个参考图片均由被称为参考索引的变量来管理。根据日本专利申请早期公开第2010-63092号，根据距待编码的图片的时间距离在包含在多个参考图片中的两个参考图片之间分配参考索引，从而能够改进图像质量和编码效率。
发明内容
当对动态图像进行压缩和编码时，不仅使用对一个视点的动态图像的压缩和编码，而且使用对多个视点的动态图像的压缩和编码。在对多个视点的动态图像的压缩和编码中，将一个视点的动态图像设置为基本视图，将其他视点的动态图像设置为从属视图(dependent view),并且将基本视图的图片或多个视点的编码图片用作参考图片。如果使得仅使用时间方向上的参考图片的基本视图的参考图片的数量和能够使用时间方向或视差方向上的参考图片的从属视图的参考图片的数量相等，则可以使得基本视图的处理量与从属视图的处理量等同。因此，当基本视图和从属视图交替地用于由编码器进行编码时，由于在基本视图与从属视图之间处理量是等同的，因此使得诸如切换的控制更加容易。如果为基本视图和从属视图中的每一个设置编码器以进行编码，则由于处理量在基本视图与从属视图之间是等同的，因此不必使用与用于对基本视图进行编码的编码器相比具有更高处理能力的用于对从属视图进行编码的编码器。然而，如果限制从属视图的参考图片的数量并且使得该数量等于基本视图的参考图片的数量，则出现了如何选择参考图片的问题。因此，期望提供如下的图像编码设备、图像编码方法和程序其能够通过针对其他视点的参考图片的数量选择时间方向或视差方向上的参考图片候选来生成参考图片列表，以改进编码效率。根据本技术的实施例，提供了一种图像编码设备，其包括特征量生成单元，通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及参考图片列表生成单元，通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。根据本技术的图像编码设备通过将在时间方向上与第一视点图片(例如，从属视片)不同的参考图片和第二视点图片(例如，与第一视点图片不同的基本视图)的参考图片设置为参考图片的候选，针对参考图片的每个候选来计算表示图片之间的相关性的特征量(例如，SAD值或SATD值)。通过基于特征量从参考图片的候选中选择与基本视片的参考图片一样多的从属视片的参考图片来生成参考图片列表。如果基于针对从属视片是GOP起始图片的情况的特征量的判别值等于或小于阈值，则基本视片(即，视 差方向上的参考图片)包括在下一图片的参考图片列表中。如果判别值大于阈值，则参考图片列表仅包括下一图片的在时间方向上的参考图片。作为另一种方法，根据基于在第一视点图片是第一个图片时所获得的特征量的判别值与阈值之间的比较结果，更新参考图片的图案或者保持之前紧接的参考图片的图案。如果基本视图的参考图片包括在参考图片列表中，则保持针对包括基本视图的参考图片的情况的特征量，并且如果参考图片列表仅在预定时段内包括时间方向上的参考图片，则用针对锚图片(anchor picture)所算出的特征量更新所保存的特征量。如果图片的参考图片列表仅包含时间方向上的参考图片，则将针对该图片所算出的特征量和所保存的特征量进行比较，并且基于比较结果选择下一图片的参考图片。另外，如果该图片的参考图片列表包括基本视图的参考图片，则仅估计时间方向上的参考图片的特征量，并且基于估计特征量与针对包括基本视图的参考图片的情况的特征量之间的比较结果，选择下一图片的参考图片。通过使用针对从属视片的参考图片列表仅包括时间方向上的参考图片的情况的特征量和针对基本视图的图片的特征量来预先生成估计处理信息、并且使用与估计特征量的从属视片对应的基本视片的特征量和估计处理信息，计算估计特征量。如果基本视图的参考图片包含在参考图片列表中的状态持续了预定时段，则通过仅包括时间方向上的参考图片来更新参考图片列表。另外，如果第一图片和第二图片是隔行素材(interlaced material)并且参考图片列表包含基本视图的参考图片，则基于特征量而从时间方向上的参考图片中选择同相或反相的参考图片。也使用参考索引比等作为特征量。根据本技术的另一实施例，提供了一种图像编码方法，包括通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。根据本技术的另一实施例，提供了一种用于使计算机通过使用参考图片列表对第一视点图片和第二视点图片执行编码处理的程序，该程序使得计算机执行如下过程通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。根据本技术的程序是例如可以通过存储介质或通信介质(例如，通过诸如光盘、磁盘和半导体存储器的存储介质或者诸如网络的通信介质)以计算机可读形式提供给可以执行各种程序代码的通用计算机的程序。通过以计算机可读形式提供这样的程序，在计算机上实现根据该程序的处理。根据本技术，特征量生成单元通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来计算表示图片之间的相关性的特征量。参考图片列表生成单元通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。因此，可以通过从时间方向和视差方向上的参考图片的候选中选择参考图片来生成参考图片的数量等于第二视点图片的参考图片的数量的参考图片列表，以使得编码效率得到改进。·
图I是示出图像编码设备的实施例的配置的图；图2是示出图像编码处理操作的流程图；图3是示出特征量生成单元的配置的图；图4是示出参考图片列表生成单元的配置的图；图5是示出参考图片列表生成单元的操作的流程图；图6是示出基本视图与从属视图之间的一般参考关系的图；图7是示出当使得基本视图和从属视图具有相等数量的参考图片时的参考关系的图；图8是示出第一个图片的参考关系的图；图9是示出判别值大于阈值的情况的图；图10是示出判别值等于或小于阈值的情况的图；图11是示出在之前紧接的预定时段内从未采用视线方向上的参考图片作为包含视差方向上的参考图片的图案的情况的图；图12是示出当前图片仅包含时间预测的情况的图；图13是示出当前图片包含视差预测的情况的图；图14是示出B图片形式的当前图片仅包含时间预测的情况的图；图15是示出通过将参考图案设置为仅在时间方向上的参考图片的图案来更新估计处理信息的情况的图；图16是示出在基本视图与从属视图为隔行素材时的参考关系的图；图17是示出在使得隔行素材中的基本视图和从属视图具有相等数量的参考图片时的参考关系的图；图18是示出从属视图中的顶场的第一个图片的参考关系的图；图19是示出从属视图中的底场的第一个图片的参考关系的图20是示出从属视图中的底场的第一个图片的处理的图；图21是示出当前图片仅包含时间预测的情况的图；图22是示出当前图片包括视差预测的情况的图；图23是示出在使得隔行素材中的基本视图和从属视图具有相等数量的包括B图片的参考图片时的参考关系的图；图24是示出在将参考索引比用作特征量时的操作的流程图；图25是示出通过使用参考索引比确定是否选择关于视差同相或反相的参考图片的操作的流程图；图26是例示记录和再现设备的示意性配置的图；以及
图27是例示成像设备的示意性配置的图。
具体实施例方式下文中，将参照附图详细地描述本公开内容的优选实施例。应注意，在本说明书和附图中，具有基本上相同的功能和结构的结构元件以相同的附图标记表示，并且省略对这些结构元件的重复说明。以下将描述执行本技术的实施例。将按以下所示顺序提供描述I.图像编码设备的配置2.图像编码设备的操作3.特征量生成单元的配置和操作4.参考图片列表生成单元的配置和操作5.在使用逐行素材(progressive material)时的操作6.在使用隔行素材时的操作7.参考图案的其他确定操作8.软件处理9.应用示例〈I.图像编码设备的配置〉图I示出根据本技术的图像编码设备的实施例的配置。图像编码设备10包括模/数转换器(A/D转换器)11、画面排序缓冲器12、减法器13、正交变换单元14、量化单元15、无损编码单元16、存储缓冲器17和速率控制器18。另外，图像编码设备10包括逆量化单元21、逆正交变换单元22、加法器22、解块滤波处理单元24、帧存储器25、选择器26、帧内预测单元31、运动预测/补偿单元32、预测图像/最佳模式选择单元33、特征量生成单元35和参考图片列表生成单元36。A/D转换器11将模拟图像信号转换成数字图像数据，并将数字图像数据输出到画面排序缓冲器12。画面排序缓冲器12对从A/D转换器11输出的图像数据的帧进行排序。画面排序缓冲器12根据与编码处理相关联的GOP (图片组)对帧进行排序，并且将排序后的图像数据输出到减法器13、帧内预测单元31和运动预测/补偿单元32。从画面排序缓冲器12输出的图像数据和由稍后描述的预测图像/最佳模式选择单元33选择的预测图像数据被提供给减法器13。减法器13计算作为从画面排序缓冲器12输出的图像数据与从预测图像/最佳模式选择单元33提供的预测图像数据之间的差的预测误差数据，并且将预测误差数据输出到正交变换单元14。正交变换单元14对从减法器13输出的预测误差数据执行诸如离散余弦变换(DCT)和卡-洛变换(Karhunen-Loeve transform)的正交变换处理。正交变换单兀14将通过执行正交变换处理所获得的转换因子数据输出到量化单元15。量化单元15具有从正交变换单元14输出的转换因子数据和从稍后描述的速率控制器I8向其提供的速率控制信号。量化单元15对转换因子数据进行量化，并将量化数据输出到无损编码单元16和逆量化单元21。量化单元15通过基于来自速率控制器18的速率控制信号切换量化参数(量化位阶)来改变量化数据的比特率。无损编码单元16具有从量化单元15输出的量化数据和从帧内预测单元31、运动预测/补偿单元32、预测图像/最佳模式选择单元33向其提供的预测模式信息。预测模式信息包括使得能够根据帧内预测或帧间预测、预测模式、运动矢量信息和参考图片信息识别预测块大小的宏块类型。无损编码单元16通过对量化数据进行例如可变长度编码或算·术编码来执行无损编码处理以生成编码流，并将编码流输出到存储缓冲器17。此外，无损编码单元16对从稍后描述的参考图片列表生成单元36提供的参考图片列表信息和预测模式
息进行编码并将其包括在编码流中。存储缓冲器17存储来自无损编码单元16的编码流。此外，存储缓冲器17以根据传输路径的传输速度输出所存储的编码流。速率控制器18监控存储缓冲器17的空闲空间，并且根据空闲空间生成速率控制信号，以将速率控制信号输出到量化单元15。速率控制器18从例如存储缓冲器17获取表示空闲空间的信息。如果空闲空间小，则速率控制器18利用速率控制信号降低量化数据的比特率。如果存储缓冲器17的空闲空间充分大，则速率控制器18利用速率控制信号提高量化数据的比特率。逆量化单元21对从量化单元15提供的量化数据执行逆量化处理。逆量化单元21将通过执行逆量化处理所获得的转换因子数据输出到逆正交变换单元22。逆正交变换单元22将通过对从逆量化单元21提供的转换因子数据执行逆正交变换处理而获得的数据输出到加法器23。加法器23将从逆正交变换单元22提供的数据与从预测图像/最佳模式选择单元33提供的预测图像数据相加，以生成解码图像数据，并且将解码图像数据输出到解块滤波处理单元24和帧存储器25。解块滤波处理单元24执行滤波处理以减小当对图像进行编码时所产生的块失真。解块滤波处理单元24执行滤波处理以从自加法器23提供的解码图像数据去除块失真，并将滤波处理后的图像数据输出到帧存储器25。帧存储器25保存从加法器23提供的解码图像数据和从解块滤波处理单元24提供的滤波处理后的解码图像数据作为参考图像的图像数据。选择器26将为了进行帧内预测而从帧存储器25读取的在滤波处理之前的参考图像数据提供给帧内预测单元31。此外，选择器26将为了进行帧间预测而从帧存储器25读取的在滤波处理之后的参考图像数据提供给运动预测/补偿单元32。帧内预测单元31通过使用从画面排序缓冲器12输出的待编码的图像的图像数据以及从帧存储器25读取的在滤波处理之前的参考图像数据，执行作为候选的全部帧内预测模式的帧内预测处理。另外，帧内预测单元31针对每个帧内预测模式计算成本函数值，并且选择具有所算出的最小成本函数值的帧内预测模式(即，实现了最优编码效率的帧内预测模式)作为最佳帧内预测模式。帧内预测单元31将在最佳帧内预测模式下所生成的预测图像数据、关于最佳帧内预测模式的预测模式信息和最佳帧内预测模式下的成本函数值输出到预测图像/最佳模式选择单元33。此外，帧内预测单元31将在每种帧内预测模式的帧内预测处理中的关于帧内预测模式的预测模式信息输出到无损编码单元16，以如稍后将描述的那样获得用于计算成本函数值的生成代码量。运动预测/补偿单元32针对对应于宏块的全部预测块大小执行运动预测/补偿处理。运动预测/补偿单元32通过使用从帧存储器25读取的在滤波处理之后的参考图像数据，针对从画面排序缓冲器12读取的待编码的图像中的每个预测块大小的每个图像而检测运动矢量。另外，运动预测/补偿单元32通过基于所检测到的运动矢量对参考图像执行运动补偿处理来生成预测图像。此外，运动预测/补偿单元32针对每个预测块大小来计算成本函数值，并且选择具有所算出的最小成本函数值的预测块大小(即，实现最优编码效 率的预测块大小)作为最佳帧间预测模式。运动预测/补偿单元32将在最佳帧间预测模式下所生成的预测图像数据、关于最佳帧间预测模式的预测模式信息和最佳帧间预测模式下的成本函数值输出到预测图像/最佳模式选择单元33。运动预测/补偿单元32将在每个预测块大小的帧间预测处理中的关于帧间预测模式的预测模式信息输出到无损编码单元16，以获得用于计算成本函数值的生成代码量。作为帧间预测模式，运动预测/补偿单元32还对跳过的宏块进行预测或者在直接模式下进行预测。预测图像/最佳模式选择单元33以宏块为单位对从帧内预测单元31提供的成本函数值与从运动预测/补偿单元32提供的成本函数值进行比较，并且选择具有较小的成本函数值的模式作为实现最优编码效率的最佳模式。此外，预测图像/最佳模式选择单元33将在最佳模式下所生成的预测图像数据输出到减法器13和加法器23。另外，预测图像/最佳模式选择单元33将最佳模式的预测模式信息输出到无损编码单元16。特征量生成单元35生成表示待编码的图片与参考图片之间的相关性的特征量。对于生成特征量，例如，使用作为为了由运动预测/补偿单元32检测运动矢量而算出的差值绝对值和的SAD (绝对差值和)值、或者作为通过对编码图片与参考图片之间的差数据执行哈达玛变换而获得的差值绝对值和的SATD (绝对变换差值和)值，生成特征量。基于运动预测/补偿单元32检测到的运动矢量而算出的全局运动矢量可以用作特征量。另外，也可以使用由速率控制器获得的复杂度、由预测图像/最佳模式选择单元33获得的参考索引t匕、或者摄影技巧(固定/平移/倾斜/缩放)、视差信息或者深度信息。参考图片列表生成单元36基于特征量生成单元35生成的特征量，确定是否将视差方向上的图片包括在参考图片列表中。参考图片列表生成单元36以每个预定单位进行确定。例如，如果针对每个场景进行确定，则参考图片列表生成单元36区分场景以在进行确定之前生成同一场景的全部的特征量。如果针对每个GOP进行确定，则参考图片列表生成单元36在进行确定之前生成整个GOP的特征量。另外，如果针对每个图片进行确定，则参考图片列表生成单元36在进行确定之前分别针对每种图片类型而生成特征量。参考图片列表生成单元36基于通过以每个预定单位进行确定所获得的确定结果来生成参考图片列表，并且将参考图片列表输出到无损编码单元16。此外，参考图片列表生成单元36通过从帧存储器25向运动预测/补偿单元32提供参考图片列表中所示出的参考图片来执行编码处理。〈2.图像编码设备的操作〉图2是示出图像编码处理操作的流程图。在步骤STll中，A/D转换器11对输入图像信号进行A/D转换。在步骤ST12中，画面排序缓冲器12对画面进行排序。画面排序缓冲器12存储从A/D转换器11提供的图像数据，以将由每个图片表示的顺序排序成编码顺序。在步骤ST13中，减法器13生成预测误差数据。减法器13通过计算在步骤ST12中所排序的图像的图像数据与由预测图像/最佳模式选择单元33选择的预测图像数据之间的差，生成预测误差数据。预测误差数据相比于原始图像数据具有较小的数据量。因此，当与直接对图像进行编码的情况相比时，能够压缩数据量。当预测图像/最佳模式选择单·元33以切片(slice)为单位选择从帧内预测单元31提供的预测图像和来自运动预测/补偿单元32的预测图像时，在从帧内预测单元31提供的预测图像被选择的切片中进行帧内预测。在来自运动预测/补偿单元32的预测图像被选择的切片中进行帧间预测。在步骤ST14中，正交变换单元14执行正交变换处理。正交变换单元14对从减法器13提供的预测误差数据执行正交变换。更具体地，对预测误差数据执行诸如离散余弦变换和卡-洛变换的正交变换，并输出转换因子数据。在步骤ST15中，量化单元15执行量化处理。量化单元15对转换因子数据进行量化。对于量化，控制速率，如将在稍后描述的步骤ST25的处理中所述的那样。在步骤ST16中，逆量化单元21执行逆量化处理。逆量化单元21以与量化单元15的属性对应的属性对经量化单元15量化后的转换因子数据进行逆量化。在步骤ST17中，逆正交变换单元22执行逆正交变换处理。逆正交变换单元22以与正交变换单元14的属性对应的属性对经逆量化单元21逆量化后的转换因子数据执行逆正交变换。在步骤ST18中，加法器23生成解码图像数据。加法器23将从预测图像/最佳模式选择单元33提供的预测图像数据与处于对应于预测图像的位置的在逆正交变换之后的数据相加，以生成解码图像数据。在步骤ST19中，解块滤波处理单元24执行解块滤波处理。解块滤波处理单元24通过对从加法器23输出的解码图像数据进行滤波来去除块失真。此外，解块滤波处理单元24使得即使存储图像数据的线存储器的存储容量减小也能够进行垂直滤波处理。更具体地，解块滤波处理单元24根据通过边界检测在垂直方向上在块之间检测到的边界，控制用于对位于边界之上的块的滤波操作的图像范围。在步骤ST20中，帧存储器25存储解码图像数据。帧存储器25存储解块滤波处理之前的解码图像数据。在步骤ST21中，帧内预测单元31和运动预测/补偿单元32均执行预测处理。即，帧内预测单元31在帧内预测模式下执行帧内预测处理，并且运动预测/补偿单元32在帧间预测模式下执行运动预测/补偿处理。采用上述处理，分别执行在作为候选的预测模式下的预测处理，以计算在作为候选的预测模式下的每个成本函数值。然后，基于所算出的成本函数值来选择最佳帧内预测模式和最佳帧间预测模式，并且将在所选择的预测模式下所生成的预测图像、其成本函数和预测模式信息提供给预测图像/最佳模式选择单元33。在预测处理中，运动预测/补偿单元32通过使用参考图片列表生成单元36生成的参考图片列表中所示出的参考图片来生成预测图像。在步骤ST22中，预测图像/最佳模式选择单元33选择预测图像数据。预测图像/最佳模式选择单元33基于从帧内预测单元31和运动预测/补偿单元32输出的每个成本函数值，判定实现最优编码效率的最佳模式。另外，预测图像/最佳模式选择单元33选择所判定的最佳模式下的预测图像数据，并且将预测图像数据提供给减法器13和加法器23。如上所述，预测图像用于步骤ST13和ST18中的操作。在步骤ST23中，无损编码单元16执行无损编码处理。无损编码单元16对从量化单元15输出的量化数据进行无损编码。即，通过对量化数据执行诸如可变长度编码和算术 编码的无损编码来压缩数据。此时，还对在上述步骤ST22中输入到无损编码单元16中的预测模式信息和参考图片列表信息进行无损编码。另外，将预测模式信息的无损编码数据与通过对量化数据进行无损编码所生成的编码流的报头信息相加。在步骤ST24中，存储缓冲器17通过执行存储处理来存储编码流。存储在存储缓冲器17中的编码流在适当时被读取并且经由传送路径传送到解码侧。在步骤ST25中，速率控制器18控制速率。当存储缓冲器17存储编码流时，速率控制器18控制量化单元15的量化操作的速率，使得存储缓冲器17中不会发生上溢或下溢。<3.特征量生成单元的配置和操作>图3示出特征量生成单元的配置。下文中将说明用于生成从属视图的参考图片列表的特征量的生成。特征量生成单元35通过例如使用在被选择作为图片中的每个块的最佳模式时图片中的SATD值的平均值，生成特征量。特征量生成单元35通过将基本视图的参考图片设置为候选来生成在时间方向上与从属视图中的图片不同的参考图片以及针对参考图片的每个候选的表示图片相关性的特征量，并且将所生成的特征量输出到参考图片列表生成单元36。特征量生成单元35生成估计处理信息以估计特征量，并且将估计处理信息输出到参考图片列表生成单元36。另夕卜，特征量生成单元35基于参考图片列表生成单元36生成的参考图片列表来更新所存储的特征量和估计处理信息。特征量生成单元35包括视差存在(parallax present)特征量更新单元351、视差存在特征量存储单元352、估计处理信息更新单元353和估计处理信息存储单元354。当进行时间预测和视差预测时，视差存在特征量更新单元351将针对视差方向上的参考图片用于运动预测的情况的特征量作为视差存在特征量SATDiv存储在视差存在特征量存储单元352中。然后，每当计算视差存在特征量SATDiv时，视差存在特征量更新单元351更新存储在视差存在特征量存储单元352中的视差存在特征量SATDiv。另外，如将在稍后所述的那样，如果在预定时段(例如，一个或多个GOP时段)内从未更新视差存在特征量SATDiv，则视差存在特征量更新单元351针对每种图片类型而更新视差存在特征量SATDiv。视差存在特征量更新单元351将更新后的视差存在特征量SATDiv输出到参考图片列表生成单元36。因此，视差存在特征量更新单元351防止视差存在特征量SATDiv变为不相关的特征量，而无需通过更新视差存在特征量SATDiv来更新。
估计处理信息更新单元353计算估计处理信息Psc并使得估计处理信息存储单元354存储估计处理信息Psc，其中该估计处理信息Psc用于估计针对仅进行时间预测的情况的特征量。然后，估计处理信息更新单元353更新存储在估计处理信息存储单元354中的估计处理信息Psc。当从属视图仅包含时间预测时，如公式(I)所示，估计处理信息更新单元353计算从属视图的特征量SATDdv与基本视图的特征量SATDbv之比，以将该比设置为估计处理信息Psc。如果使用时间预测和视差预测，则使用所算出的估计处理信息Psc(H-I)。这是因为实验表明，如果在不同时间处的图像之间的时间距离很近，则估计处理信息Psc甚至针对这些图像也能取相似值(高相关)。
权利要求
1.ー种图像编码设备，包括 特征量生成単元，通过将在时间方向上与第一视点图片不同的所述第一视点图片和与所述第一视点图片不同的第二视点图片设置为參考图片的候选，针对所述參考图片的每个候选来生成表示图片之间的相关性的特征量；以及 參考图片列表生成単元，通过基于所述特征量从所述參考图片的候选中选择与所述第ニ视点图片的參考图片一祥多的所述第一视点图片的參考图片，生成參考图片列表。
2.根据权利要求I所述的图像编码设备， 其中，在基于针对所述第一视点图片是图片组GOP起始图片的情况的特征量的判别值等于或小于阈值的情况下，所述參考图片列表生成单元将第二视点參考图片包括在下ー图片的參考图片列表中，而在所述判别值大于所述阈值的情况下，所述參考图片列表生成单元仅将所述时间方向上的參考图片包括在所述下ー图片的參考图片列表中。
3.根据权利要求I所述的图像编码设备， 其中，所述參考图片列表生成単元根据基于在所述第一视点图片是图片组起始图片时所获得的特征量的判别值与阈值之间的比较结果，更新所述參考图片的图案或者保持之前紧接的參考图片的图案。
4.根据权利要求I所述的图像编码设备， 其中，在第二视点參考图片被包括在所述參考图片列表中的情况下，所述參考图片列表生成単元保存针对包括所述第二视点參考图片的情况的特征量，而在所述參考图片列表在预定时段内仅包含所述时间方向上的參考图片的情况下，所述參考图片列表生成单元更新由针对图片组起始帧中的图片或者每个场的起始图片所算出的特征量保存的特征量。
5.根据权利要求4所述的图像编码设备， 其中，在所述图片的所述參考图片列表仅包含所述时间方向上的參考图片的情况下，所述參考图片列表生成単元将针对所述图片所算出的特征量与所保存的特征量进行比较，并且基于比较结果选择下ー图片的參考图片。
6.根据权利要求I所述的图像编码设备， 其中，在所述图片的參考图片列表包括第二视点參考图片的情况下，所述參考图片列表生成単元基于估计特征量与针对包括所述第二视点參考图片的情况的特征量之间的比较结果，选择下ー图片的參考图片，其中，所述估计特征量用于估计仅所述时间方向上的參考图片的特征量。
7.根据权利要求6所述的图像编码设备， 其中，所述特征量生成単元通过使用针对所述第一视点图片的參考图片列表仅包含所述时间方向上的參考图片的情况的特征量以及针对所述第二视点图片的特征量来预先生成估计处理信息，并且根据与用于估计特征量的所述第一视点图片对应的所述第二视点图片的特征量以及所述估计处理信息，计算所述估计特征量。
8.根据权利要求7所述的图像编码设备， 其中，在所述參考图片列表包含所述第二视点參考图片的状态持续预定时段的情况下，所述參考图片列表生成単元仅将所述时间方向上的參考图片包括在所述參考图片列表中，并且 其中，所述特征量生成単元通过使得所述參考图片列表仅包含所述时间方向上的參考图片来更新所述估计处理信息。
9.根据权利要求I所述的图像编码设备， 其中，所述特征量生成单元通过使用绝对变换差值和值即SATD值或绝对差值和值即SAD值生成所述特征量。
10.根据权利要求I所述的图像编码设备， 其中，所述特征量生成单元使用参考索引比作为所述特征量。
11.根据权利要求I所述的图像编码设备， 其中，所述第一视点图片和所述第二视点图片是隔行素材，并且 其中，在所述参考图片列表包含第二视点参考图片的情况下，所述参考图片列表生成单元基于所述特征量而从所述时间方向上的参考图片中选择同相或反相的参考图片。
12.—种图像编码方法，包括 通过将在时间方向上与第一视点图片不同的所述第一视点图片和与所述第一视点图片不同的第二视点图片设置为参考图片的候选，针对所述参考图片的每个候选来生成表示图片之间的相关性的特征量；以及 通过基于所述特征量从所述参考图片的候选中选择与所述第二视点图片的参考图片一样多的所述第一视点图片的参考图片，生成参考图片列表。
13.一种用于使计算机通过使用参考图片列表来执行第一视点图片和第二视点图片的编码处理的程序，所述程序使得所述计算机执行如下过程 通过将在时间方向上与第一视点图片不同的所述第一视点图片和与所述第一视点图片不同的第二视点图片设置为参考图片的候选，针对所述参考图片的每个候选来生成表示图片之间的相关性的特征量；以及 通过基于所述特征量从所述参考图片的候选中选择与所述第二视点图片的参考图片一样多的所述第一视点图片的参考图片，生成所述参考图片列表。
全文摘要
本发明提供了一种图像编码设备、图像编码方法和程序，其中，该图像编码设备包括特征量生成单元，通过将在时间方向上与第一视点图片不同的第一视点图片和与第一视点图片不同的第二视点图片设置为参考图片的候选，针对参考图片的每个候选来生成表示图片之间的相关性的特征量；以及参考图片列表生成单元，通过基于特征量从参考图片的候选中选择与第二视点图片的参考图片一样多的第一视点图片的参考图片，生成参考图片列表。
文档编号H04N7/50GK102957910SQ20121027376
公开日2013年3月6日 申请日期2012年8月2日 优先权日2011年8月9日
发明者染谷清登 申请人:索尼公司