专利名称：使用视角时间参考图像缓冲器的预测编码/解码装置及使用其的方法
技术领域：
本发明涉及使用一个或两个附加参考帧緩冲器来提高多视角视频的压缩率的 预测编码/解码的装置和方法。
背景技术：
为了提供逼真的视频服务，已在各种应用领域中使用了多视角视频。这 样的多视角视频被压缩，并且压缩后的多视角视频被传输给用户以便提供相 关服务。尽管根据常规编码和压缩方案压缩了多视角视频，但是其要求和要 传输给用户的视角数量的两倍一样多的大量的数据。因此，需要宽的带宽来 提供多视角视频的相关服务。为了有效地传输多视角视频数据，使用相邻摄像机视角和当前视角的冗 余信息来提高压缩率。通常通过从具有高相关性的 一 组数据中移除冗余信息、 将该组数据变换为不具相关性的数据并且编码变换后的数据来提高压缩率。图像緩冲器。也就是说，常规的基于AVC的多视角编码严格地考虑视角之间 的预测编码的效率。因此，要求提高预测编码的效率。作为编码多个图像的常规方法，引入了用于处理与两个视角相关的立体 视频的方法。作为用于基于多于三个视角处理多视角视频的方法，引入了处 理多镜头反射固体(multiple lens reflex solid)的多视角视频的方法，以及处理从 相邻设置的摄像机获得的多视角视频的方法。用于使用MPEG-2多视角概况 (MultiView Profile, MVP)和MPEG-4时间可伸缩性(TS)进行编码的技术被广 泛用于编码立体碎见频。在第10-2002-0021757号韩国专利申请和第10-2003-0002116号韩国专利 申请中介绍了使用MPEG-2 MVP和MPEG-4 TS编码的技术。在由 Kwang-Hoon Son发表的名为"multiview video CODEC using view scalability" 的文章中，以及由Yong-Tae Kim发表的名为"method for estimating motion andvariation in stereoscopic video with boundary directivity"的另 一文章中也介绍了 上述技术。在第10-2002-0021757号韩国专利申请和Son的文章中,都提出了图像组 (GOP)。第10-2002-0021757号韩国专利申请也使用基于MPEG-2的CODEC 。 第10-2002-0021757号韩国专利申请专注于压缩，Kim的文章专注于使用基于 MPEG-2的CODEC增加视角单元中的可伸缩性。第10-2003-0002116号韩国专利申请创建了中心视点的比特流,并且创建 的中心视点的参考图像被用于创建左/右视点图像的比特流。在Kim的文章 中，提出了通过减少立体视频中的预测空间和时间视差的误差来提高压缩率 的方法。除了第10-2003-0002116号韩国专利申请，由于与MPEG - 2的兼容性， 在编码P图像时，上述的常规技术使用单个预测运动向量。由于为编码B图 像使用两个向量，所以使用来自先前帧的运动向量和来自当前时间中的相邻 视点的视差向量。第10-2003-0002116号韩国专利申请使用 一个运动向量和一 个视差向量来参考中心视点图像。在B图像的情况中，向量的使用与典型的 MPEG-2类似，并且在左/右视点的时间轴上不出现B图像。由于与MPEG-2的兼容性，这些常规技术使用不多于两个的运动向量或 者视差向量。当编码MPEG-2的B图像时，不能在时间轴上执行双向预测编 码。进一步，当编码I图像时，通过增加视点的数量来减小视点之间的距离 和基线的尺寸。它不是合适的视差向量预测方法。它需要将相邻视点变换为 当前视点的步骤。而且，由于采用同样的方案对本质上不同的^L差向量和运动向量编码， 因此压缩率也会降低。也就是说，视差向量的尺寸通常大于运动向量。当在 先前块选择运动向量以及在后续块选择视差向量时，从对向量差执行熵编码 的编码器的特征角度而言向量的差并不显著。而且，当执行像AVC—样的上 下文自适应熵编码时，不能获得反映上下文的效果。
发明内容
技术问题因此，本发明的一个目的是提供一种使用附加视角时间参考图像緩冲器 以及在H.264中使用的列表-0和列表-l缓沖器进行预测编码/解码的装置和方法，以便当编码多视角视频时利用运动向量和视差向量的大多数特征。本发明的另 一个目的是通过一种编码多视角视频的方法提供各种多视角视频服务，该编码多视角视频的方法是通过有效地移除视点的冗余信息而减少单视角编码器的数据量而实现的。 技术方案根据本发明的一个方面，提供一种使用视角时间参考图像緩冲器的预测编码装置，包括多视角参考图像提供单元，用于根据时间和空间图像组(GOP) 结构信息为预测编码提供参考图像；预测单元，用于通过预测当前编码的图 像参考从多视角参考图像提供单元输入的参考图像的哪个部分来创建向量； 变换和量化单元，用于获得从预测单元输入的预测信号和当前编码的图像信 号之间的差信号，变换所获得的差信号、量化变换后的信号，并且压缩量化 后的信号；以及熵编码单元，用于根据预定方案编码来自变换和量化单元的 量化后的信号以及从预测单元提供的向量，并且输出编码后的信号。根据本发明的另 一个方面，提供了 一种使用视角时间参考图像缓沖器预 测编码的方法，该方法包括步骤a)根据时间和空间GOP结构信息为预测编 码提供参考图像；b)使用所提供的参考图像创建向量并且预测当前编码的图 像；c)变换预测信号，量化变换后的信号，并且压缩量化后的信号；以及d) 根据预定编码方案对为预测单元提供的量化后的信号和向量进行编码并且输 出压缩后的信号。根据本发明的另 一个方面，提供了 一种用于解码通过对从多个摄像机获 得的多视角图像进行编码而获得的信号的装置，该装置包括解码单元，用 于通过熵解码、逆重排列、逆量化和逆变换对从外部输入的信号进行解码； 基于时间和空间GOP的图像恢复单元，用于根据使用时间和空间GOP配置 信息从解码单元输入的解码信号恢复多视角图像，所述时间和空间GOP配置 信息表达用于预测编码的时间上和空间上的图像之间的参考关系；以及场景 合成单元，用于合成从基于时间和空间GOP的图像恢复单元恢复的多视角图 像，并且输出合成的多视角图像，其中所述熵解码使用运动向量和视差向量。根据本发明的另一个方面，提供了一种解码方法，包括步骤a)通过熵 解码、逆重排列、逆量化和逆变换对从外部输入的信号进行解码；b)使用时 间和空间GOP配置信息从解码后的信号中恢复多视角图像，该时间和空间 GOP配置信息表达用于预测编码的时间上和空间上的图像之间的参考关系；以及C)合成所恢复的多视角图像并且输出合成的多视角图像，其中所述熵解 码使用运动向量和视差向量。 有益效果本发明涉及用于有效地执行视角到视角预测编码的装置和方法，其允许 获得、压缩、传输、恢复和显示多视角视频的多视角视频服务。因此，其可以用于3D显示服务、欧姆尼视频服务(omhni video service)、全景视频服务和 自由视点TV服务。而且，当编码多视角视频时，使用相邻视点的信息可以 提高压缩率。
通过后续参照附图对本发明优选实施例的描述，本发明的上述及其它目 的和特征将变得更为明显，其中图1是示出根据本发明一个实施例的多视角视频编码/解码系统的框图； 图2是示出根据本发明一个实施例的用于时间预测编码的参考视频缓沖 器和用于空间预测编码的参考视频缓冲器的框图；以及图3是示出图2中示出的多视角参考视频提供单元的框图。
具体实施方式
通过后续参考附图对实施例进行的描述，本发明的其它目的和方面将更 为明显，此后进行详细描述。图1是示出根据本发明一个实施例的多视点视频编码/解码系统的框图。 参考图1，根据本发明的多视角视频编码/解码系统包括多视角视频编 码装置100,用于编码和压缩由从N个摄像机获得的N个视点图像构成的多 视角视频，以及将所压缩的多视角视频作为比特流传输；以及多视角视频解 码装置200,用于接收比特流、解码和合成所接收的比特流以便恢复多视角 视频。多视角编码装置100包括时间和空间图像组(GOP)形成单元110和多视角 编石马单元120。时间和空间GOP形成单元110接收来自多个(N个)摄像机或者用户的N 个多视角图像以及摄像机信息，所述摄像机信息包括N个视角摄像机的特征、 位置和设置。基于所接收的N个多视角图像和摄像机信息，时间和空间GOP形成单元110创建时间和空间GOP信息，并且输出所创建的时间和空间GOP 信息。多视角编码单元120使用时间和空间GOP信息以及摄像机信息对多视角 图像执行预测编码。多视角4见频解码装置200包括多视角解码单元610、基于时间和空间GOP 的图像恢复单元220和场景合成单元230。多视角解码单元610接收比特流 并且解码所接收的比特流。基于时间和空间GOP的图像恢复单元220使用时 间和空间GOP信息来恢复多视角视频，而场景合成单元230根据相关应用来 恰当地合成所恢复的多视角视频，并且向用户提供合成的多视角视频。下文中，将描述根据本发明的多视角视频解码装置的操作。多视角解码单元210通过熵编码、逆重排列、逆量化和逆变换来处理所 接收的比特流。基于时间和空间GOP的图像恢复单元220使用包括在比特流 中的时间和空间GOP信息来从逆变换后的信号中恢复多视角图像。场景合成 单元230合成所恢复的多视角图像。而且，在当前解码的图像的视点与参考图像的视点相同时，基于时间和 空间GOP图像的恢复单元220根据时间和空间GOP信息执行运动补偿，而 在当前编码图像的视点与邻近参考图像的图像的视点相同时，执行视差/运动 补偿。图2是示出根据本发明实施例的包括用于时间预测编码的参考图像緩冲 器和用于空间预测编码的参考图像緩冲器的多视角视频编码装置的框图。如图2中示出的，多视角编码单元包括多视角参考图像提供单元340、预 测单元310、变换和量化单元320以及熵编码单元W0。预测单元310、变换和量化单元320以及熵编码单元330执行和H.264中 的操作相同的操作。也就是说，预测单元310执行帧间预测和帧内预测。在 解码和去块滤波(de-blocking filtering)后，帧间预测使用存储在緩沖器中的参 考图像预测当前图像的块。也就是说，帧间预测从参考图像中找到与要编码 的块最相似的块。帧内预测从被解码的同 一 图像的块找到与要编码的当前块 最相似的块。在变换和量化差信号后，变换和量化单元320压缩来自预测单元310的 预测块和要编码的块之间的差信号。熵编码单元330通过基于预定编码方案 编码量化后的视频数据来创建基于H.264的比特流。当输入的参考图像的视点与编码的当前图像的视点相同时，视差/运动预测单元311和;现差/运动补偿单元313充当运动预测和运动补偿单元。视差/ 运动预测单元311向熵编码单元330传递运动向量(MV)和视差向量(DV),并 且熵编码单元330对运动向量和视差向量执行熵编码。多视角参考图像提供单元340逆量化和逆变换来自变换和量化单元320 的量化后的图像以创建多视角恢复图像，并且存储所述多视角恢复图像。同 样，多视角参考图像提供单元340接收所恢复的多视角图像，所恢复的图像 在由变换和量化单元320变换和量化图像信号后被逆量化和逆变换用于预测 编码。同样，多视角参考图像提供单元340根据来自时间和空间GOP形成单 元310的GOP结构信息选择参考图像，并且向视差/运动补偿单元和视差/ 运动预测单元提供选定的参考图像。相应地，可以根据以所述GOP结构信息 表达的多视角图像的参考关系来执行预测编码。进一步，多视角参考图像提 供单元340向重排列单元331提供包括时间和空间GOP结构信息的补充信 息，并且使用时间和空间GOP结构信息对当前预测编码的图像信息执行熵编 码，并且传输熵编码后的信息以在解码时使用所述时间和空间GOP结构信 良图3是示出图2中示出的多视角参考视频提供单元的框图。参考图3，多视角参考图像提供单元340包括恢复图像緩冲器341、第一相邻视角参考图像緩沖器342、第二相邻视角参考图像緩沖器343、视点变换单元345和346以及参考图像选择单元347。恢复图像緩冲器341从滤波器接收当前视点不同时间的恢复图像，并且临时存储接收到的图像。恢复图像緩冲器341向参考图像选择单元347输出所存储的图像。第一相邻参考图像緩沖器342(列表-2)从滤波器接收恢复图像，并且临时 将接收到的图像存储为参考图像，该恢复图像是在当前时间的其它时间被编 码后恢复的。第二相邻参考图像緩冲器(列表-3)343从滤波器接收恢复的图像 和另一个恢复的图像，并且临时将接收到的图像存储为参考图像，该恢复的 图像是在未来时间的其它视点被编码后恢复的，而该另 一个恢复的图像是在 过去时间的其它视点被编码后恢复的。随后，第二相邻参考图像緩沖器343 向视点变换单元346输出存储的图像。视点变换单元345和346通过对当前摄像机视点的色彩平衡、对当前视点图像的全体运动补偿和使用先前输入的摄像机信息的校正来变换图像，以便使用与从第一相邻视点参考图像緩沖器342和第二相邻视点参考图像緩冲 器343输入的相邻视点图像相比恰当的参考图像。参考图像选择单元347为根据从时间和空间GOP形成单元110输入的时 间和空间GOP结构信息进行的当前预测编码从输入的参考图像中选择参考 图像。选定的参考图像被输出给视差/运动预测单元311和视差/运动补偿单元 313。而且，参考图像选择单元347创建包括GOP结构信息的补充信息并且 向重排列单元331输出所创建的补充信息。在图3中示出的缓沖器、列表-0/列表-l 341、列表-2 342和列表-3 343独 立于每个视点存在并且独立于每个视点而被管理。视差向量不仅表示在同 一时间的其它视点的图像之间的距离，还表示不 同时间的同一视点的图像之间的距离。也就是说，当前视点的当前图像和同 一时间的不同视点的图像之间的距离是视差，并且与当前视点的图像不同的 视点的图像中的先前图像和后续图像之间的距离也是视差。通过列表-2 342 和列表-3 343管理用于计算视差向量的图像。如上所述，由于运动向量和视差向量的尺寸不同，所以在连续的块的向 量特征不同时，以及在当前向量和先前向量之间的差在基于块的向量编码中 被编码和传输时，选择运动向量和视差向量之一的常规多视角视频编码器会 失去上下文自适应熵编码(诸如CABAC)的优点。在下文中，将描述根据本实施例的用于克服上述问题的、对从不同视点 图像获得的视差向量编码的方法。作为根据本实施例的编码视差向量的第一方法，为每个块分离视差向量 和运动向量并且被分别编码为上下文自适应。作为第二方法，不同视点图像 之间的整体视差被补偿，并且通过将视差向量当作运动向量对运动向量执行 预测编码。作为第三方法，列表-0 341和列表-2 342被合成为一个緩冲器， 并且列表-1341和列表-3 343被合成为一个緩冲器。随后，通过将合成的緩 沖器区分为时间轴缓沖器或者视点緩冲器来执行预测编码。在第一方法中，如果输入的图像的视点是基视点，则仅仅和常规单视点 视频编码器一样使用运动向量。在图像是其它视点的情况中，使用运动向量 和视差向量中的一个，或者运动向量和视差向量的组合。在此，通过每个块 的类型(例如MB类型)来解码使用向量的范围。对于视差向量，选择列表-2 342和列表-3 343作为参考图像缓冲器，而选择列表-O和列表-l緩沖器341作为 运动向量的参考图像缓冲器。熵编码单元330为视差向量和运动向量创建查找表并且将视差向量和运 动向量编码为上下文自适应，以便分离视差向量和运动向量，并且编码已分离的向量。由于在分离视差向量和运动向量后对向量进行编码，所以出现在 熵编码中的问题被消除，并且和作为单视点视频编码方案的双向预测编码图 像的B图像一样，使用多个向量来改善编码效率。也就是说，在第一方法中， 使用时间轴上来自列表-0和列表-1的两个参考图像以及视点上来自列表-2和 列表-3的其它两个参考图像，获得运动向量或者视差向量，并且通过为所获 得的运动向量和视差向量的每一个创建查找表来为每个块分离和编码视差向 量和运动向量。在编码视差向量的第二方法中，如果输入的图像是和常规单视点视频解 码器一样的基视点，则仅仅使用运动向量。对于其它视点的图像，通过将运 动向量和视差向量视为同一向量来执行预测编码。此处，因为从列表-2 342或者列表-3 343获得的向量是视差向量，所以为了克服熵编码的问题，补偿 整体视差向量，并且编码整体视差的差。也就是说，通过补偿整体视差向量 来补偿运动向量和视差向量之间的特征差异来克服熵编码的问题。:接照下面的式编码运动向量和纟见差向量。VD=MV-PMV,当使用PMV编码MV时 'VD=DV-GDV-PMV ,当使用PMV编码DV时 -VD=MV+GDV-PDV ,当使用PDV编码MV时VENDV-PDV ,当使用PDV编码DV时公式1在公式l中，MV表示运动向量、DV表示视差向量、PMV表示从相邻块 获得的预测运动向量、PDV是从相邻块获得的预测视差向量，并且GDV表 示从不同视点的图像之间的距离产生的整体视差向量。可以使用整体运动向 量预测方法或者摄像机参数获得GDV。而且，VD是要编码的向量差。在第二方法中，如果从相邻块获得的预测值是预测运动向量并且MV是 要编码的向量，则熵编码单元30如公式1中的第 一种情况那样编码视差向量。 而且，如果预测值是PDV并且DV是要编码的向量，则熵编码单元30如公 式1中的第四种情况那样编码视差向量。进一步，如果从相邻块获得的预测值是PMV并且DV是要编码的向量，则熵编码单元30使用下列数值来编码 视差向量所述数值是通过从DV中减去GDV和PMV(如在第二种情况中示 出的向量差)获得的。最后，如果从相邻块获得了 PDV并且对当前MV进行 编码，则熵编码单元30对通过从MV和GDV之和减去PDV所获得的向量 差进行编码。如所示出的，最多可以使用四个向量。第三方法和H.264緩沖器管理方案一样，通过组合视角到视角缓沖器和时 间轴緩沖器而使用两个緩冲器。在这种情况下，可以从列表-0/列表-2緩沖器 和列表-l/列表-3緩冲器中最多获得两个向量。并且，根据緩冲器的索引可以 区分^L差向量和运动向量。此处，^f吏用相邻块的PMV或者PDV有区别地对 运动向量和视差向量进行编码。获得视差向量的方法与第二方法中的相同。本申请包括在2005年7月18日向韩国知识产权局提交的第2005-0064992 号韩国专利申请的主题，该申请的全部内容在此被引入作为参考。虽然参照特定优选实施例描述了本发明，但是本领域技术人员应当明了 可以在不背离在后续权利要求中定义的本发明的范围的情况下，对本发明做 出各种变化和改变。
权利要求
1.一种使用视角时间参考图像缓冲器的预测编码装置，包括多视角参考图像提供单元，用于根据时间和空间图像组(GOP)结构信息为预测编码提供参考图像；预测单元，用于通过预测当前编码的图像参考从所述多视角参考图像提供单元输入的参考图像的哪个部分来创建向量；变换和量化单元，用于获得从所述预测单元输入的预测信号和当前编码的图像信号之间的差信号，变换所获得的差信号，量化变换后的信号，以及压缩量化后的信号；以及熵编码单元，用于根据预定方案编码来自所述变换和量化单元的量化后的信号以及从所述预测单元提供的向量，并且输出编码后的信号。
2. 如权利要求1所述的预测编码装置，其中所述预测单元包括 视差/运动预测单元，用于如果输入的参考图像的视点与当前编码的图像相同，则通过预测运动创建运动向量，以及当参考图像的视点与当前编码的 图像的视点不同时，创建视差向量；以及视差/运动补偿单元，用于如果输入的参考图像的视点与当前编码的图像 相同，则补偿运动，以及当参考图像的视点与当前编码的图像的视点不同时， 补偿视差。
3. 如权利要求1所述的预测编码装置，其中所述多视角参考图像提供单 元包括恢复图像存储单元，用于存储和输出当前视点不同时间的恢复图像； 第一相邻视点参考图像存储单元，用于存储和输出相邻视点当前时间的 恢复图像；第二相邻视点参考图像存储单元，用于存储和输出相邻视点不同时间的 恢复图像；视点变换单元，用于根据先前输入的摄像机信息，将从第一相邻视点参 考图像存储单元和第二相邻视点参考图像存储单元输入的相邻视点图像变换 为当前视点图像；以及参考图像选择单元，用于根据从GOP信息产生单元输入的时间和空间 GOP结构信息，选择从所述恢复图像存储单元和所述视点变换单元输入的图像之一作为参考图像。
4. 如权利要求1所述的预测编码装置，其中熵编码单元为从预测单元输 入的运动向量和视差向量创建查找表，基于创建的查找表分离运动向量和视 差向量，并且对运动向量和视差向量执行熵编码。
5. 如权利要求1所述的预测编码装置，其中熵编码单元通过编码视差向 量和整体视差向量之间的向量差来补偿运动向量和视差向量之间的特征差 异。
6. 如权利要求5所述的预测编码装置，其中如果从相邻块获得的预测值是预测运动向量PMV并且当前块是运动向 量，则熵编码单元对运动向量和PMV之间的向量差进4亍编码，如果从相邻块获得的预测值是预测视差向量PDV并且当前块是视差向 量，则熵编码单元对视差向量和PDV之间的向量差进行编码，如果从相邻块获得的预测值是预测运动向量并且当前块是视差向量，则 熵编码单元对通过从视差向量中减去整体视差向量和预测运动向量而获得的 向量差进行编码，以及如果从相邻块获得的预测值是预测视差向量并且当前块是运动向量，则 熵编码单元对通过从运动向量和整体视差向量GDV之和中减去预测视差向 量而获得的向量差进行编码。
7. —种使用视角时间参考图像緩冲器进行预测编码的方法，该方法包括 以下步骤a) 根据时间和空间GOP结构信息为预测编码提供参考图像；b) 使用所提供的参考图像创建向量并且预测当前编码的图像；c) 变换预测信号，量化变换后的信号，并且压缩量化后的信号；以及d) 根据预定编码方案对为预测单元提供的量化后的信号和向量进行编码 并且输出压缩后的信号。
8. 如权利要求7所述的方法，其中步骤b)还包括步骤b-1 )如果输入的参考图像的视点与当前编码的图像相同，则通过预测运动 来创建运动向量，以及当参考图像的视点与当前编码的图像的视点不同时， 创建视差向量；以及b-2)如果输入的参考图像的视点与当前编码的图像相同，则补偿运动， 以及当参考图像的视点与当前编码的图像的视点不同时，补偿视差。
9. 如权利要求7所述的方法，其中在步骤d)，创建用于从预测单元输入的运动向量和视差向量的查找表，基于所创建的查找表分离运动向量和视差 向量，并且对运动向量和视差向量执行熵编码。
10. 如权利要求7中所述的方法，其中在步骤d),通过对视差向量和整 体视差向量之间的向量差进行编码来补偿运动向量和视差向量之间的特征差 异。
11. 如权利要求IO所述的方法，其中在步骤d):如果从相邻块获得的预测值是预测运动向量PMV并且当前块是运动向 量，则对运动向量和PMV之间的向量差进行编码，如果从相邻块获得的预测值是预测视差向量PDV并且当前块是视差向 量，则对视差向量和预测视差向量之间的向量差进行编码，如果从相邻块获得的预测值是预测运动向量并且当前块是视差向量，则 对通过从视差向量中减去整体视差向量和预测运动向量而获得的向量差进行 编码，以及如果从相邻块获得的预测值是预测视差向量并且当前块是运动向量，则 对通过从运动向量和整体视差向量GDV之和中减去预测视差向量而获得的 向量差进行编码。
12. —种对通过编码从多个摄像机获得的多视角图像而创建的信号进行 解码的装置，该装置包括解码单元，用于通过熵解码、逆重排列、逆量化和逆变换对从外部输入的信号进行解码；基于时间和空间GOP的图像恢复单元，用于根据使用时间和空间GOP 配置信息从解码单元输入的解码信号恢复多视角图像，所述GOP配置信息表 达用于预测编码的时间上和空间上的图像之间的参考关系；以及场景合成单元，用于合成从基于时间和空间GOP的图像恢复单元恢复的 多视角图像，以及输出合成的多视角图像，其中所述熵解码使用运动向量和视差向量。
13. 如权利要求12所述的装置，其中所述熵解码对输入信号进行解码，其中通过为运动向量和视差向量创建 查找表来分离运动向量和视差向量而解码所述输入信号。
14. 如权利要求12所述的装置，其中所述熵解码对通过对整体视差向量和视差向量之间的向量差进行编码而 创建的输入信号进行解码。
15. —种解码方法，包括步骤a) 通过熵解码、逆重排列、逆量化和逆变换对从外部输入的信号进行解码；b) 使用时间和空间GOP配置信息从解码后的信号中恢复多视角图像，所 述时间和空间GOP配置信息表达用于预测编码的时间上和空间上的图像之 间的参考关系；以及c) 合成所恢复的多视角图像并且输出合成的多视角图像， 其中所述熵解码使用运动向量和视差向量。
16. 如权利要求15所述的解码方法，其中所述熵解码对输入信号进行解 码，其中通过为运动向量和视差向量创建查找表来分离运动向量和视差向量 而解码所述输入信号。
17. 如权利要求15所述的解码方法，其中所述熵解码对通过编码整体视 差向量和视差向量之间的向量差而创建的输入信号进行解码。
全文摘要
提供一种用于预测编码/解码的装置和方法，其使用一个或两个附加参考帧缓冲器来提高多视角视频的压缩率。所述预测编码装置包括多视角参考图像提供单元，用于根据时间和空间GOP结构信息为预测编码提供参考图像；预测单元，用于通过预测当前编码的图像参考从多视角参考图像提供单元输入的参考图像的哪个部分来创建向量；变换和量化单元，用于获得从预测单元输入的预测信号与当前编码的图像信号之间的差信号，变换所获得的差信号，量化变换后的信号，并且压缩量化后的信号；以及熵编码单元，用于根据预定方案编码量化后的信号和向量并且输出编码后的信号。
文档编号H04N7/32GK101253774SQ200680032075
公开日2008年8月27日 申请日期2006年7月18日 优先权日2005年7月18日
发明者曹叔嬉, 李寿寅, 李英烈, 许南淏, 金大熙, 金钟律 申请人:韩国电子通信研究院