、ROM (Read Only Memory，只读存储器）、〇KCompact Disc，紧致盘)-R0M等可移动介质、内置于 计算机系统的硬盘等存储装置。进而，"计算机可读取的记录介质"也可以还包含像经由因 特网等网络或电话线路等通信线路来发送程序的情况下的通信线那样在短时间的期间动 态地保持程序的记录介质、像该情况下的成为服务器或客户端的计算机系统内部的易失性 存储器那样将程序保持固定时间的记录介质。此外，上述程序也可以是用于实现前述的功 能的一部分的程序，进而，还可以是能通过与已经记录在计算机系统中的程序的组合来实 现前述的功能的程序，此外，活动图像编码装置100和活动图像解码装置200也可以是使用 PLD(Programmable Logic Device，可编程逻辑器件）、FPGA(Field Programmable Gate Array，现场可编程门阵列)等硬件来实现的程序。
[0107]以上，参照附图来说明了本发明的实施方式，但是，上述实施方式只不过是本发明 的例示，显然本发明并不限定于上述实施方式。因此，也可以在不偏离本发明的技术思想和 范围的范围内进行结构要素的追加、省略、替换、其它变更。
[0108] 产业上的可利用性 本发明能够应用于在例如使用从与拍摄了编码(解码)对象图像的视点不同的视点拍 摄的图像和针对这些图像中的被摄物的深度图来对编码(解码)对象图像进行视点合成预 测时即使该深度图不表现高精度的视差信息也达成高的编码效率的用途。
[0109] 附图标记的说明 100…活动图像编码装置 10 l···编码对象图像输入部 102…编码对象图像存储器 103…参照视点运动信息输入部 104···深度图输入部 105…运动信息生成部 106…视点合成图像生成部 107…图像编码部 108…图像解码部 109…参照图像存储器 200…活动图像解码装置 201…位流输入部 202…位流存储器 203…参照视点运动信息输入部 204…深度图输入部 205…运动信息生成部 206…视点合成图像生成部 207…图像解码部 208…参照图像存储器。
【主权项】
1. 一种活动图像编码装置，在对由多个不同的视点的活动图像构成的多视点活动图像 的1帧进行编码时，使用针对与编码对象图像不同的参照视点的参照视点图像的运动信息 即参照视点运动信息和针对所述多视点活动图像中的被摄物的深度图，一边在不同的视点 间进行预测一边按照作为对所述编码对象图像进行分割后的区域的编码对象区域的每一 个进行编码，其中，所述活动图像编码装置具备： 对应区域设定部，针对所述编码对象区域设定所述深度图上的对应区域； 区域分割部，设定作为对所述编码对象区域进行分割后的区域的预测区域； 视差矢量生成部，按照每个所述预测区域，使用所述对应区域内的该预测区域所对应 的区域中的深度信息来生成针对所述参照视点的视差矢量； 运动信息生成部，基于针对所述参照视点的所述视差矢量，根据所述参照视点运动信 息来生成所述预测区域中的运动信息；以及 预测图像生成部，使用所述预测区域中的所述运动信息来生成针对所述预测区域的预 测图像。2. 根据权利要求1所述的活动图像编码装置，其中， 所述视差矢量生成部还针对所述编码对象区域生成针对所述深度图的视差矢量， 所述对应区域设定部将由针对所述深度图的所述视差矢量示出的区域设定为所述对 应区域。3. 根据权利要求2所述的活动图像编码装置，其中，所述视差矢量生成部使用在对与所 述编码对象区域邻接的区域进行编码时使用的视差矢量来设定针对所述深度图的所述视 差矢量。4. 根据权利要求1至3的任一项所述的活动图像编码装置，其中，所述区域分割部基于 所述对应区域内的深度信息来设定针对所述编码对象区域的区域分割。5. 根据权利要求1至4的任一项所述的活动图像编码装置，其中，所述视差矢量生成部 按照每个所述预测区域根据所述对应区域内的该预测区域所对应的所述区域中的所述深 度信息设定代表深度，基于该代表深度来设定针对所述参照视点的所述视差矢量。6. 根据权利要求1至权利要求5的任一项所述的活动图像编码装置，其中，所述运动信 息生成部使用针对所述预测区域预先确定的像素的位置和针对所述参照视点的所述视差 矢量来求取在所述参照视点的对应位置，将所述参照视点运动信息之中的针对包含该对应 位置的区域提供的运动信息作为所述预测区域中的所述运动信息。7. 根据权利要求1至权利要求6的任一项所述的活动图像编码装置，其中， 还具备参照图像设定部，所述参照图像设定部针对所述编码对象图像将在编码对象视 点的与所述编码对象图像不同的已经编码完毕的1帧设定为参照图像， 所述运动信息生成部配合所述编码对象图像与所述参照图像的时间间隔缩放根据所 述参照视点运动信息得到的运动信息，由此，生成所述预测区域中的所述运动信息。8. 根据权利要求1至权利要求7的任一项所述的活动图像编码装置，其中，所述预测图 像生成部使用第一预测图像和第二预测图像来生成针对所述预测区域的所述预测图像，所 述第一预测图像使用所述预测区域中的所述运动信息来生成，所述第二预测图像使用针对 所述参照视点的所述视差矢量和所述参照视点图像来生成。9. 一种活动图像解码装置，在根据由多个不同的视点的活动图像构成的多视点活动图 像的码数据对解码对象图像进行解码时，使用针对与所述解码对象图像不同的参照视点的 参照视点图像的运动信息即参照视点运动信息和针对所述多视点活动图像中的被摄物的 深度图，一边在不同的视点间进行预测一边按照作为对所述解码对象图像进行分割后的区 域的解码对象区域的每一个进行解码，其中，所述活动图像解码装置具备： 对应区域设定部，针对所述解码对象区域设定所述深度图上的对应区域； 区域分割部，设定作为对所述解码对象区域进行分割后的区域的预测区域； 视差矢量生成部，按照每个所述预测区域，使用所述对应区域内的该预测区域所对应 的区域中的深度信息来生成针对所述参照视点的视差矢量； 运动信息生成部，基于针对所述参照视点的所述视差矢量，根据所述参照视点运动信 息来生成所述预测区域中的运动信息；以及 预测图像生成部，使用所述预测区域中的所述运动信息来生成针对所述预测区域的预 测图像。10. 根据权利要求9所述的活动图像解码装置，其中， 所述视差矢量生成部还针对所述解码对象区域生成针对所述深度图的视差矢量， 所述对应区域设定部将由针对所述深度图的所述视差矢量示出的区域设定为所述对 应区域。11. 根据权利要求10所述的活动图像解码装置，其中，所述视差矢量生成部使用在对与 所述解码对象区域邻接的区域进行解码时使用的视差矢量来设定针对所述深度图的所述 视差矢量。12. 根据权利要求9至权利要求11的任一项所述的活动图像解码装置，其中，所述区域 分割部基于所述对应区域内的深度信息来设定针对所述解码对象区域的区域分割。13. 根据权利要求9至权利要求12的任一项所述的活动图像解码装置，其中，所述视差 矢量生成部按照每个所述预测区域根据所述对应区域内的该预测区域所对应的所述区域 中的所述深度信息设定代表深度，基于该代表深度来设定针对所述参照视点的所述视差矢 量。14. 根据权利要求9至权利要求13的任一项所述的活动图像解码装置，其中，所述运动 信息生成部使用针对所述预测区域预先确定的像素的位置和针对所述参照视点的所述视 差矢量来求取在所述参照视点的对应位置，将所述参照视点运动信息之中的针对包含该对 应位置的区域提供的运动信息作为所述预测区域中的所述运动信息。15. 根据权利要求9至权利要求14的任一项所述的活动图像解码装置，其中， 还具备参照图像设定部，所述参照图像设定部针对所述解码对象图像将在解码对象视 点的与所述解码对象图像不同的已经解码完毕的1帧设定为参照图像， 所述运动信息生成部配合所述解码对象图像与所述参照图像的时间间隔缩放根据所 述参照视点运动信息得到的运动信息，由此，生成所述预测区域中的所述运动信息。16. 根据权利要求9至权利要求15的任一项所述的活动图像解码装置，其中，所述预测 图像生成部使用第一预测图像和第二预测图像来生成针对所述预测区域的所述预测图像， 所述第一预测图像使用所述预测区域中的所述运动信息来生成，所述第二预测图像使用针 对所述参照视点的所述视差矢量和所述参照视点图像来生成。17. -种活动图像编码方法，在对由多个不同的视点的活动图像构成的多视点活动图 像的1帧进行编码时，使用针对与编码对象图像不同的参照视点的参照视点图像的运动信 息即参照视点运动信息和针对所述多视点活动图像中的被摄物的深度图，一边在不同的视 点间进行预测一边按照作为对所述编码对象图像进行分割后的区域的编码对象区域的每 一个进行编码，其中，所述活动图像编码方法具有： 对应区域设定步骤，针对所述编码对象区域设定所述深度图上的对应区域； 区域分割步骤，设定作为对所述编码对象区域进行分割后的区域的预测区域； 视差矢量生成步骤，按照每个所述预测区域，使用所述对应区域内的该预测区域所对 应的区域中的深度信息来生成针对所述参照视点的视差矢量； 运动信息生成步骤，基于针对所述参照视点的所述视差矢量，根据所述参照视点运动 信息来生成所述预测区域中的运动信息；以及 预测图像生成步骤，使用所述预测区域中的所述运动信息来生成针对所述预测区域的 预测图像。18. -种活动图像解码方法，在根据由多个不同的视点的活动图像构成的多视点活动 图像的码数据对解码对象图像进行解码时，使用针对与所述解码对象图像不同的参照视点 的参照视点图像的运动信息即参照视点运动信息和针对所述多视点活动图像中的被摄物 的深度图，一边在不同的视点间进行预测一边按照作为对所述解码对象图像进行分割后的 区域的解码对象区域的每一个进行解码，其中，所述活动图像解码方法具有： 对应区域设定步骤，针对所述解码对象区域设定所述深度图上的对应区域； 区域分割步骤，设定作为对所述解码对象区域进行分割后的区域的预测区域； 视差矢量生成步骤，按照每个所述预测区域，使用所述对应区域内的该预测区域所对 应的区域中的深度信息来生成针对所述参照视点的视差矢量； 运动信息生成步骤，基于针对所述参照视点的所述视差矢量，根据所述参照视点运动 信息来生成所述预测区域中的运动信息；以及 预测图像生成步骤，使用所述预测区域中的所述运动信息来生成针对所述预测区域的 预测图像。19. 一种活动图像编码程序，其中，用于使计算机执行根据权利要求17所述的活动图像 编码方法。20. -种活动图像解码程序，其中，用于使计算机执行根据权利要求18所述的活动图像 解码方法。
【专利摘要】一边预测由多个不同的视点的活动图像构成的多视点活动图像一边进行编码/解码的活动图像编码/解码装置具备：对应区域设定部，针对编码/解码对象区域设定深度图上的对应区域；区域分割部，设定作为对编码/解码对象区域进行分割后的区域的预测区域；视差矢量生成部，按照每个预测区域，使用对应区域内的该预测区域所对应的区域中的深度信息来生成针对参照视点的视差矢量；运动信息生成部，基于针对参照视点的视差矢量，根据参照视点运动信息来生成预测区域中的运动信息；以及预测图像生成部，使用预测区域中的运动信息来生成针对预测区域的预测图像。
【IPC分类】H04N19/597, H04N13/00
【公开号】CN105612748
【申请号】CN201480056611
【发明人】志水信哉, 杉本志织, 小岛明
【申请人】日本电信电话株式会社
【公开日】2016年5月25日
【申请日】2014年10月15日
【公告号】WO2015056712A1