影像转换装置、影像输出装置、影像转换系统、影像、记录介质、影像转换方法及影像输出方法

专利名称：影像转换装置、影像输出装置、影像转换系统、影像、记录介质、影像转换方法及影像输出方法
技术领域：
本发明涉及一种影像转换装置，其用于将多视点影像的像素配置转换成立体影像显示用的像素配置。
背景技术：
通过使用视差屏障方式、双面凸透镜方式等令使用者产生视差，从而实现影像的立体感的立体影像显示装置，如专利文献1等所述，一直以来就是众所周知的。这里，对于影像的立体感，需要向立体影像显示装置发送立体显示用的影像。具体来说就是，需要发送根据与想要显示立体影像的立体影像显示装置对应的像素配置预先制作的影像，或者将现有影像的像素配置转换成与立体影像显示装置对应的像素配置。作为用于将影像的像素配置转换成与立体影像显示装置对应的像素配置的现有技术，专利文献1的0088段及图1中公开了一种将影像的像素配置转换成与视差屏障方式的立体影像显示装置对应的像素配置的技术。作为在装置内将影像的像素配置转换成立体显示用的技术解决手段，该0088段及图1中公开了一种具备图像合成电路的立体影像显示
直ο已有技术文献专利文献专利文献1日本特开2004-179806(2004年6月M日公布)非专利文献非专利文献1Visumotion GMBH 提供的软件 “Display Configurator” 及 “3D MovieCenter” 的手册

发明内容
发明所要解决的课题但是，专利文献1中的立体影像显示装置，如上所述，由于其装置内设置有将影像的像素配置转换成立体显示用的装置，所以造价很高。而且，因为要将影像的像素配置转换成立体显示用的，所以在与视差屏障的调整上要精确，也很不容易校准。此外，即使在向立体影像显示装置输出影像的装置内，即在通过地面波、卫星广播、来自网络上的流播放或下载来获取影像的机顶盒，或者独立的DVD播放机、Blu-ray (注册商标)播放器等播放机器(也包含具有录像功能的)的装置内，设置有将影像的像素配置转换成立体显示用的装置，上述问题也同样会发生。另外，用个人电脑运行非专利文献1所述软件，并将影像的像素配置转换成立体显示用的话，高速的CPU、大容量的存储器、高性能的显卡等资源的消耗很大且昂贵，供应也很困难。而且，从个人电脑特有的软件的安装到内容的登记、Os、软件的启动、软件的关闭、OS关机、死机、故障等，现场操作很费力，难以稳定地运作。所以，实际上还需要有运行非专利文献1所述软件的专用个人电脑。上述问题都已成为了立体影像显示技术普及的障碍。因此，本发明为了扫除上述障碍，其课题就是提供一种廉价且实用性高的立体影像显示技术。具体来说就是，在硬件设备上实现影像的与立体影像显示装置对应的像素配置转换。课题的解决方案为了解决上述课题，本发明的影像转换装置的特征在于，其设置有从影像输出装置将多视点影像作为影像信号接收的接收装置，将由该接收装置接收的该多视点影像一帧一帧地存储到存储元件的存储装置，对根据预先设定的转换控制信息将由该存储装置存储到该存储元件中的该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制的转换控制装置，根据从该转换控制装置得到的指示即时转换该像素配置的转换装置，以及将由该转换装置转换了该像素配置的影像作为影像信号发送到立体影像显示装置的发送装置。根据上述特征，本发明的影像转换装置与影像输出装置及立体影像显示装置是另外的装置，因此，可以直接沿用现有的影像输出装置及立体影像显示装置来提供立体影像。所述多视点影像是用于生成立体图像的多个中间图像，其中该立体图像是从在第 1视点至第N视点的多个视点上拍摄及/或描画的多个视点图像转换而来的，RGB阶梯配置像素区块，将沿斜方向在拐角处使子像素相连并排列成3行的RGB阶梯配置像素单元， 在水平方向上从该第1视点至第N视点连接并排列，为了将该RGB阶梯配置像素区块重复配置并生成该立体图像，在与构成该RGB阶梯配置像素单元的子像素的配置位置对应的、 该多个视点图像上的对应位置附近，配置了至少一个以上的像素单元，从构成该些像素单元的子像素的RGB值进行插值，求出构成该RGB阶梯配置像素单元的子像素的各个R值、G 值、B值，将构成该RGB阶梯配置像素单元的子像素在水平方向上按照R、G、B的顺序并排的 RGB并列配置像素单元，按照在该多个视点的每一个上集中配置的配置规则进行配置，并生成该多个视点的每一个视点的该中间图像，由此，该立体图像的该RGB阶梯配置像素单元与该多个中间图像的该RGB并列配置像素单元的总数，或者分别构成这两者的子像素的总数，最好是相同数目。根据上述特征，不使用高速的特殊电脑，通过构成每个视点的图像的像素数的总数与立体图像的像素数相同的最低限度的必要分辨率，就可以实现可压缩的中间图像的生成，以及，仅通过构成所述中间图像的子像素的配置变更(映射)，就可以生成可实现立体感的立体图像。所述RGB阶梯配置像素单元最好是，各行的子像素为一列，且由具有R值、G值、B 值的3个该子像素构成；所述RGB并列配置像素单元最好是，在一行上，将该3个子像素按照R、G、B的顺序并排成3列。由此，在子像素是以1比3的比率纵长的长方形的情况下，将可以最适合实现立体感的3个子像素沿斜方向在拐角处连接并排列成3行1列，能够生成可转换成具有这种子像素的配置的立体图像的多个中间图像。所述RGB阶梯配置像素单元最好是，各行的子像素为两列，该两列的每一列都是由具有R值、G值、B值的3个该子像素构成的；所述RGB并列配置像素单元最好是，在一行上，将在该RGB阶梯配置像素单元的第一列上配置成3行的3个子像素按照R、G、B的顺序并排成3列，在水平方向上与该排列连接，将在该RGB阶梯配置像素单元的第二列上排列成 3行的3个子像素按照R、G、B的顺序并排成3列。另外，所述RGB阶梯配置像素单元最好是，各行的子像素为3列，该3列的每一列都是由具有R值、G值、B值的3个该子像素构成的；所述RGB并列配置像素单元最好是，在一行上，将在该RGB阶梯配置像素单元的第一列上配置成3行的3个子像素按照R、G、B的顺序并排成3列，在水平方向上与该排列连接，将在该RGB阶梯配置像素单元的第二列上排列成3行的3个子像素按照R、G、B的顺序并排成3列，与该排列进一步连接，将在该RGB阶梯配置像素单元的第三列上排列的3个子像素按照R、G、B的顺序并排。另外，通过将所述多个中间图像配置成由作为图像帧至少在纵方向上三等分的第一行至第三行构成的多个瓷砖状，构成所述RGB阶梯配置像素单元的子像素与构成所述 RGB并列配置像素单元的子像素，在配置有所述立体图像与该多个中间图像的该图像帧上， 最好纵横方向上都是相同数目。通过将各视点的图像配置成瓷砖状，中间图像与裸眼立体显示器(立体图像)的分辨率/纵横比相同，可以非常廉价地提供一种富有实用性的立体图像显示系统，该立体图像显示系统可以通过立体图像生成装置(转换器)，将由蓝光(Blue Ray)或STB等标准的图像输出装置或图像发布服务器以标准格式输出或发送的中间图像，简便地生成立体图像的。另外，在所述多个视点为两个视点的情况下，最好在所述第一行的瓷砖上配置第1 视点的所述中间图像的2/3，在与所述第二行的第1瓷砖上的第1视点的该中间图像的1/3 相连接的第2瓷砖上，配置第2视点的该中间图像的1/3，在所述第三行的瓷砖上配置第2 视点的该中间图像的2/3 ；在所述多个视点为3个视点的情况下，最好在各行的瓷砖上配置各视点的中间图像；在所述多个视点为4 6个视点的情况下，最好在各行的第一块的瓷砖上配置第1 3视点的该中间图像，在与第1 3视点的该中间图像连接的第一行至第三行上所配置的瓷砖上，配置剩余视点的该中间图像；在所述多个视点为7 9个视点的情况下，最好在各行的第一块的瓷砖上配置第1 3视点的该中间图像，在与第1 3视点的该中间图像连接的第一行至第三行的瓷砖上，配置第4 6视点的该中间图像，在与第4 6视点的该中间图像连接的第一行至第三行上所配置的瓷砖上，配置剩余视点的该中间图像；在所述多个视点为10个以上的视点的情况下，最好也同样从第1视点开始，依次在各行的瓷砖上配置该中间图像的一部分或全部。另外，最好将所述多视点影像作为影像信号接收，该多视点影像是根据将所述多个中间图像在帧内分割配置成了瓷砖状的图像形成的一个影像。所述发送装置最好向所述立体影像显示装置发送与所述接收装置从所述影像输出装置接收的影像信号为同一标准的影像信号。根据上述特征，即使通过所述影像转换装置，影像信号的标准也不会变化，因此， 影像输出装置相对于本发明的影像转换装置，假如不通过影像转换装置的话，无需对直接发送到立体影像显示装置的影像信号施加任何改变，就可以发送同一标准的影像信号，因此，可以直接沿用现有的影像输出装置及立体影像显示装置。
11
所述接收装置最好通过电气连接或无线通信从所述影像输出装置接收影像信号； 所述发送装置最好通过电气连接或无线通信向所述立体影像显示装置发送影像信号。根据上述特征，本发明的影像转换装置仅通过电气连接或无线通信的简单设定， 就可以实现立体影像显示。所述接收装置最好将所述多视点影像作为影像信号接收，该多视点影像是根据将形成各视点用影像的图像在帧内分割配置成了瓷砖状的图像形成的一个影像。所述接收装置最好将所述多视点影像作为影像信号接收，该多视点影像是将非可逆性压缩的影像通过所述影像输出装置解压缩后的影像。所述接收装置最好将所述多视点影像作为影像信号接收，该多视点影像是，根据将形成各视点用影像(k视点影像)的图像(kFt、t = 1 1)在同一时间一帧一帧地按照视点影像顺序(k= 1 η)排列并进一步在时间方向上排列的图像(F，t，、t，= 1 η·1)， 形成的影像。所述接收装置最好将所述多视点影像作为影像信号接收，该多视点影像是，根据将形成各视点用影像(k视点影像)的图像的同一扫描线图像信息(Si、i = 1 j)按照视点影像顺序(k= 1 η)排列并将该扫描线图像信息的全部都配置在一帧的图像上的图像 (δ’1’、 = 1 η· j)，形成的影像。根据上述特征，本发明的影像转换装置可以直接使用现有的影像文件的标准，来实现立体影像显示。<影像信息识别装置>所述接收装置最好进一步将通过电气连接或无线通信存储到外部存储装置中的转换控制信息作为控制信号接收；所述转换控制装置最好在该接收装置接收该控制信号时，代替所述预先设定的转换控制信息，根据该外部存储装置中存储的转换控制信息，对将由所述存储装置存储到所述存储元件中的所述多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制。根据上述特征，通过外部存储装置，可以将新的转换控制信息附加到影像转换装置。所述接收装置最好进一步从所述影像输出装置将平面影像作为影像信号接收，除了该影像信号外，还接收控制信号；所述转换控制装置最好对基于该控制信号的、关于该接收装置从影像输出装置接收的影像是所述多视点影像还是该平面影像又或者是该多视点影像与该平面影像混杂的影像的辨别，进行控制，只有在辨别该影像是该多视点影像还是该多视点影像与该平面影像混杂的影像时，才对向该多视点影像的立体影像显示用的像素配置转换的指示进行控制；所述发送装置最好进一步将该平面影像作为影像信号发送到所述立体影像显示装置。根据上述特征，可以根据来自影像输出装置的控制信号，将与该多视点影像对应的新的转换控制信息附加到影像转换装置。所述影像转换装置最好进一步设置有影像信息解析装置；所述接收装置最好代替所述控制信号及所述多视点影像，将根据预先确定的配置模式嵌入有作为影像信息在所述多视点影像的第一帧或全帧的预先确定的位置上定义的多个像素信息的影像作为影像信号接收；该影像信息解析装置最好根据该预先确定的配置模式特定该像素信息的嵌入位置，辨别有无用于核对该影像信息的表头，在有表头时解析该影像信息；所述转换控制装置最好根据该表头的有无，进一步对该影像是多视点影像还是平面影像的辨别进行控制，只有在辨别该影像是否是该多视点影像时，才根据由该影像解析装置解析的该影像信息，对将该多视点影像转换成立体影像显示用的像素配置的指示进行控制；所述发送装置最好将由该转换装置转换了该像素配置的影像或平面影像作为影像信号，发送到所述立体影像显示装置。根据上述特征，根据嵌入到影像中的影像信息，可以将与该多视点影像对应的新的转换控制信息附加到影像转换装置。所述接收装置最好将所述多视点影像与平面影像作为一个影像混杂的影像作为影像信号来接收；所述影像信息解析装置最好解析该混杂的影像的全帧的该影像信息，只有在辨别该混杂的影像的帧是否是该多视点影像时，才对向该多视点影像的立体影像显示用的像素配置转换的指示进行控制；所述发送装置最好进一步将该平面影像作为影像信号发送到所述立体影像显示装置。根据上述特征，本发明的影像转换装置即使在一个影像文件中混杂有多视点影像与平面影像，也可以只转换多视点影像的帧。特别是，虽然以往即使是平面影像的帧也会存在需要准备平铺配置多个相同影像，为平面影像时的分辨率降低的问题，但是，在平面影像上可以使用像普通平面影像那样将一个影像配置在帧整体上的影像，在为平面影像时已经不需要再准备平铺配置多个相同影像了。所述转换控制装置最好根据由所述影像信息解析装置解析的所述影像信息，控制识别至少所述多视点影像的扫描方式、该多视点影像的分辨率、该多视点影像的视点数、以及所述立体影像显示装置的视点数中的一个，代替所述预先设定的转换控制信息，根据该扫描方式、该多视点影像的分辨率、该多视点影像的视点数以及该立体影像显示装置的视点数，对将该多视点影像转换成立体影像显示用的像素配置的指示进行控制。根据上述特征，本发明的影像转换装置，使用者无需将嵌入在影像文件中的影像信息另行输入就可以自行识别，然后可以根据该影像信息将多视点影像转换成立体影像显示用的像素配置。所述接收装置最好将根据预先确定的配置模式嵌入有多个像素矩阵的影像作为影像信号接收，该像素矩阵将作为同一影像信息定义的像素信息在XY方向上连接并多个配置；所述影像信息解析装置最好根据该预先确定的配置模式特定该像素矩阵的嵌入位置，解析该像素矩阵的预先确定的位置上的该影像信息。根据上述特征，本发明的影像转换装置通过影像信息解析装置解析像素矩阵预先确定的位置上的影像信息，即使从嵌入位置周围的像素受到了影响，也可以解析原本所定义的影像信息。所述影像信息解析装置最好根据中心位置的像素信息或中心位置周边的多个像素信息的平均值来解析影像信息。根据上述特征，影像信息解析装置根据从嵌入位置周围的像素特别难以受到影响的中心位置的像素信息或中心位置周边的多个像素信息的平均值来解析影像信息，由此， 可以更准确地解析影像信息。所述接收装置最好将沿所述多视点影像的上端嵌入有所述像素矩阵的影像作为影像信号接收。根据上述特征，像素矩阵嵌入在使用者看来并不起眼的多视点影像的上端，因此， 可以防止由于嵌入像素矩阵所造成的影像品质的降低。所述接收装置最好将根据预先确定的配置模式嵌入有多个所述像素矩阵的影像作为影像信号接收，在该像素矩阵的外周部分，代替所述像素信息，配置了邻接该像素矩阵的像素与该像素信息之间的中间值的像素，或者对两个像素进行了预先确定的加权并插值的像素。根据上述特征，可以降低由于嵌入像素矩阵所造成的对影像的影响。所述接收装置最好将仅有所述像素信息的预先确定的位数的前面的位作为影像信息定义的影像作为影像信号来接收；所述影像信息解析装置最好仅参照该多个像素信息的该预先确定的位数的前面的位来解析影像信息。根据上述特征，像素信息仅将前面的位作为影像信息来定义，影像信息解析装置仅参照前面的位来解析影像信息，由此，即使像素信息的值发生变化，也不会对解析结果造成影响。所述接收装置最好从所述立体影像显示装置接收控制信号；所述转换控制装置最好根据该控制信号，控制识别至少该立体影像显示装置的扫描方式、该立体影像显示装置的分辨率、该立体影像显示装置的视点数、以及该立体影像显示装置的像素配置方法中的一个，代替所述预先设定的转换控制信息，而根据该立体影像显示装置的扫描方式、该立体影像显示装置的分辨率、该立体影像显示装置的视点数、以及该立体影像显示装置的转换方法，对将该多视点影像转换成立体影像显示用的像素配置的指示进行控制。根据上述特征，根据来自立体影像显示装置的控制信号，可以将与该多视点影像对应的新的转换控制信息附加到影像转换装置。所述像素配置方法最好通过对一个以上的像素的组合进行重复而形成的，由构成一个像素的行数、构成该一个像素的子像素数、在该像素的组合内连接的像素数、以及每个该像素的连接位置摄动子像素数构成。所述接收装置最好通过在显示器前面留有一定空隙地粘贴了视差屏障的所述立体影像显示装置，其中该视差屏障是根据不可视区域和多个配置成从上到下以一定倾斜度使狭缝或孔连续的狭缝状的透射区域形成的，将构成像素的子像素的尺寸、该透射区域的平均倾斜度、与该狭缝或该孔的水平方向的该透射区域的平均宽度相当的子像素数、与相邻的该狭缝或该孔的中心间的平均距离相当的子像素数、以及显示装置的分辨率，作为控制信号接收；所述转换控制装置最好根据该控制信号，选择转换成可以将多视点影像最有效地实现立体影像显示的像素配置的像素配置转换法，对根据该像素配置转换法转换的指示进行控制。根据上述特征，仅通过向影像转换装置提供一些与立体影像显示装置有关的信息，就可以实现最佳的像素配置的转换。所述影像转换装置最好进一步设置有转换控制信息存储装置；所述接收装置最好接收进一步定义了索引信息的所述控制信号，或者，将根据预先确定的配置模式嵌入有进一步定义了索引信息的多个像素信息的影像作为影像信号接收；该转换控制信息存储装置最好在所述转换控制装置根据所述控制信号或所述影像信号指示所述转换装置进行所述多视点影像的像素配置的转换时，将转换指示作为新的转换控制信息，并使其与该索引信息相对应存储；该转换控制装置最好在与该接收装置接收的该控制信号或该影像信号的该索引信息相对应的转换控制信息存储在该转换控制信息存储装置中时，根据该转换控制信息存储装置中存储的转换控制信息，对将该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制。根据上述特征，通过在控制信号或影像信息中定义索引信息，并且转换控制信息存储装置将转换控制信息与索引信息相对应着存储，转换控制装置在再次使用已用过一次的转换控制信息时，无需再次取得控制信号或影像信息，根据转换控制信息存储装置中存储的转换控制信息，就可以指示转换装置进行影像的转换。所述接收装置最好进一步通过外部输入装置接收定义了索引信息的输入信号；所述转换控制装置最好代替所述控制信号或所述影像信号，在与该接收装置接收的该输入信号的该索引信息相对应的转换控制信息存储在所述转换控制信息存储装置中时，根据该转换控制信息存储装置中存储的转换控制信息，对将该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制。本发明的影像输出装置的特征在于，其是由拍摄各视点用影像的多个摄像装置， 在将形成该多个摄像装置所拍摄的该各视点用影像的图像在帧内分割配置成了瓷砖状的图像上即时配置并形成一个影像的影像配置装置，以及，对于将构成该一个影像的像素的配置进行转换的所述影像转换装置，将该一个影像作为影像信号向其发送的发送装置构成的。根据上述特征，可以实时拍摄多视点影像，并即时输出立体影像。本发明的影像转换系统的特征在于，其设置有，将多视点影像作为影像信号发送的影像输出装置，通过该影像输出装置将该多视点影像作为影像信号接收的接收装置，将由该接收装置接收的影像一帧一帧地存储到存储元件中的存储装置，对将该存储装置中存储的影像的像素配置转换成预先确定的立体影像显示用的像素配置指示进行控制的转换控制装置，根据从该转换控制装置得到的指示即时转换该像素配置的转换装置，将由该转换装置转换了该像素配置的影像作为影像信号发送的发送装置，以及接收由该发送装置发送的影像信号，显示立体影像的显示装置。根据上述特征，影像转换装置与影像输出装置及立体影像显示装置是不同的装置，因此，可以直接沿用现有的影像输出装置及立体影像显示装置来提供立体影像。所述影像转换系统最好进一步设置有拍摄各视点用影像的多个拍摄装置，以及， 在将形成该多个摄像装置所拍摄的该各视点用影像的图像在帧内分割配置成了瓷砖状的图像上即时配置并形成一个影像，然后发送到所述影像播放装置的影像配置装置；该影像输出装置最好将该影像配置装置转换的影像作为影像信号发送。所述显示装置最好是在显示器前面留有一定空隙地粘贴了视差屏障的所述立体影像显示装置，其中该视差屏障是根据不可视区域和多个配置成从上到下以一定倾斜度使狭缝或孔连续的狭缝状的透射区域形成的；所述接收装置最好将该透射区域的平均倾斜度、与该狭缝或该孔的水平方向的该透射区域的平均宽度相当的子像素数、与相邻的该狭缝或该孔的中心间的平均距离相当的子像素数、构成像素的子像素的尺寸、以及显示装置的分辨率，作为控制信号接收；所述转换控制装置最好根据该控制信号，选择转换成可以将多视点影像最有效地实现立体影像显示的像素配置的像素配置转换法，对所述转换装置使用该像素配置转换法转换的指示进行控制。本发明的影像的特征在于，在多视点影像的第一帧或全帧的预先确定的位置上， 根据预先确定的配置模式，嵌入有将用于核对影像信息的表头和转换控制信息作为影像信息定义的多个像素信息。本发明的影像最好将多视点影像与平面影像作为一个影像混杂的影像，最初的影像在该多视点影像中时，在第一帧的预先确定的位置上，在所述影像信息中进一步设置有用于辨别该混杂的影像的辨别信息；最初的影像在该平面影像中时，在第一帧的预先确定的位置上，根据预先确定的配置模式，嵌入有将用于核对影像信息的表头和用于辨别该混杂的影像的辨别信息作为影像信息定义的多个像素信息。本发明的影像最好超过预先确定的帧数以上，根据同一配置模式嵌入有作为同一影像信息定义的所述像素信息。本发明的影像的特征在于根据预先确定的配置模式嵌入有多个像素矩阵，该像素矩阵将用于核对影像信息的表头和转换控制信息作为影像信息定义，在XY方向上连续配置了多个同一像素信息。所述影像最好根据预先确定的配置模式在所述像素矩阵的外周部分嵌入有多个像素矩阵，该像素矩阵，代替所述像素信息，在邻接该像素矩阵的像素信息与定义所述影像信息的像素信息上，配置了具有以预先确定的加权进行了线性插值的像素信息的像素。所述影像信息最好至少是，用于辨别是否是将所述多视点影像与平面影像作为一个影像混杂的影像的辨别信息、该影像的扫描方式的辨别信息、影像的分辨率、以及所述影像的视点数中的一个。所述影像最好记录在记录介质中。本发明的影像转换方法的特征在于，从影像输出装置将多视点影像作为影像信号接收，将接收的该多视点影像一帧一帧地存储到存储元件，指示根据预先设定的转换控制信息，将该存储元件中存储的该多视点影像的像素配置转换成立体影像显示用的像素配置，根据该指示，即时转换该像素配置，将转换了该像素配置的影像作为影像信号发送到立体影像显示装置。本发明的影像输出方法的特征在于，通过多个摄像装置拍摄各视点用影像，从在由该多个摄像装置拍摄的第1视点至第N视点的多个视点上所拍摄的多个视点图像，通过影像配置装置生成权利要求2所述的多个中间图像，在将该多个中间图像在帧内分割配置成瓷砖状的图像上即时配置形成一个影像，对于将构成该一个影像的像素的配置进行转换的影像转换装置，通过发送装置将该一个影像作为影像信号发送。本发明通过在硬件设备上实现与影像的立体影像显示装置对应的像素配置转换， 可以提供一种廉价且富有实用性的立体影像显示技术。


图1表示本发明的影像转换装置1的实施方式的一个示例的外观图。图2表示本发明的影像转换装置1的实施方式的一个示例的外观图。图3表示本发明的影像转换装置1的实施方式的一个示例的外观图。
图4表示本发明的影像转换装置1的实施方式的一个示例的外观图。图5表示本发明的影像转换装置1的实施方式的一个示例的外观图。图6表示本发明的影像转换装置1的实施方式的一个示例的外观图。图7表示本发明的影像转换装置1的实施方式的一个示例的框图。图8表示本发明的影像转换装置1的实施方式的一个示例的框图。图9表示本发明的影像转换装置1的实施方式的一个示例的框图。图10表示本发明的影像转换装置1的实施方式的一个示例的框图。图11表示本发明的影像转换装置1的实施方式的一个示例的框图。图12表示本发明的影像转换装置1的实施方式的一个示例的框图。图13表示在本发明的影像转换装置1上使用的立体影像显示装置的视差屏障的形状的一个示例。图14表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第一实施例。图15表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第二实施例。图16表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第三实施例。图17表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第四实施例。图18表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第五实施例。图19表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第一实施例。图20表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第二实施例。图21表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第三实施例。图22表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第四实施例。图23八色的原始影像文件23的示意图。图24嵌入有7个像素矩阵22的像素嵌入式影像文件M的示意图。图25说明影像信息实际上表示什么样的信息。图26说明影像信息实际上表示什么样的信息。图27表示通过在多视点影像上嵌入常作为影像信息定义的像素信息21来进行平面影像与多视点影像的辨别的方法的流程图。图观表示通过仅在多视点影像开始及结束的瞬间的影像上嵌入作为影像信息定义的像素信息21来进行平面影像与多视点影像的辨别的方法的流程图。图29大致表示中间图像生成装置、立体图像生成装置及立体图像生成系统的结构的框图。
图30表示通过中间图像生成装置、立体图像生成系统运行的信息处理的流程 图。图31关于中间图像的生成方法的实施方式的说明图。图32关于中间图像的生成方法的实施方式的说明图。图33关于中间图像的生成方法的实施方式的说明图。图34关于中间图像的生成方法的实施方式的说明图。图35关于中间图像生成ー览表的说明图。图36表示中间图像的图像帧的配置的示例。图37图像帧的差异的说明图。图38表示由多个中间图像构成的图像帧的示例。图39表示RGB阶梯配置像素単元的配置例。图40表示裸眼立体图像显示装置上的子像素的形状的示例。附图标记1影像转换装置2影像输出装置3影像显示装置4影像数据线5控制数据线6第一一览表7 遥控8 USB 存储器9第二ー览表10第三ー览表11照相机12接收部13存储部14转换控制部15 转换部16影像转换装置的发送部17影像信息解析部18转换控制信息存储部19影像配置部20影像输出装置的发送部21 像素信息22像素矩阵23原始影像文件24像素嵌入影像文件26 对象物27视点图像
28注视点
29立体图像
30RGB阶梯配置像素单元
31中间图像生成装置
33中央处理装置
35存储装置
36RGB并列配置像素单元
37中间图像
38图像帧
41第一信息处理装置
43压缩装置
45发送装置
47第二信息处理装置
49解压缩装置
51接收装置
61立体图像生成装置
65立体图像显示装置
具体实施例方式关于本发明的实施方式，说明如下。〈整体概要〉通过外观图及框图，对本发明的影像转换装置1的整体概要进行如下说明。〈外观〉图1是表示本发明的影像转换装置1的实施方式的一个示例的外观图。如该图所示，第一实施方式的影像转换装置1与一般的影像输出装置2、一般的立体影像显示装置3 (显示器)之间通过影像数据线4电气连接使用，从影像输出装置2接收作为影像信号(影像输入信号)发送的多视点影像，然后根据预先设定的转换控制信息 (扫描方式、视点数、分辨率、像素配置法等信息。详见后述。)转换成立体影像显示用的像素配置，再将像素配置转换后的影像作为影像信号(影像输出信号)发送到立体影像显示装置3。这里的将影像转换装置1、影像输出装置2、立体影像显示装置3电气连接的影像数据线4，具体来说，可以使用一直以来广泛使用的，将RGB、VDI、HMVI等标准的影像输出装置2与立体影像显示装置3电气连接并发送影像信号的数据线。图2是表示本发明的影像转换装置1的实施方式的一个示例的外观图。另外，如该图所示，影像转换装置1也可以通过与影像输出装置2和立体影像显示装置3中的任意一方或双方由控制数据线5进一步电气连接，接收控制信号。控制信号，详见后述，是指向影像转换装置1提供扫描方式、分辨率、视点数、显示配置方法等影像以外的转换控制信息的信号。这里的控制数据线5，具体来说，可以使用一直以来广泛使用的，将i · LINK、串行等标准的影像输出装置2与立体影像显示装置3电气连接的控制数据线5。但是，为了便于说明，在该图中是将影像数据线4与控制数据线5作为不同的数据线进行说明的，但是也可以将这些数据线束成一根数据线。图3是表示本发明的影像转换装置1的实施方式的一个示例的外观图。如该图所示，该实施方式中的影像转换装置1通过未图示出的无线通信装置从影像输出装置2接收作为影像信号(影像输入信号)发送的多视点影像，然后转换成立体影像显示用的像素配置，再将像素配置转换后的影像作为影像信号(影像输出信号)发送到立体影像显示装置3。这里的无线通信装置，可以使用一直以来广泛使用的无线LAN(无线局域网)、 Bluetooth (注册商标)、UffB等标准的无线通信装置。图4是表示本发明的影像转换装置1的实施方式的一个示例的外观图。如该图所示，该实施方式中的影像转换装置1预先存储多个转换控制信息作为与索引信息相关联的第一一览表6，通过输入机器，如遥控7，输入索引信息，这样就能输出与所述索引信息对应的转换控制信息。此外，该图中表示了扫描方式与视点数作为转换控制信息存储，分辨率、像素配置方法等信息自然也可以存储。另外，转换控制信息除了预先存储在影像转换装置1中的，也可以使用在外部存储介质如USB存储器8中作为与索引信息相关联的第二一览表9存储的转换控制信息。此外，虽然没有图示出，但是不仅从外部存储介质，还可以从网络上下载，从地面波和卫星广播中获取数据。而且，在影像转换装置1获取预先未存储的转换控制信息时，也可以重新生成附加了所获取的转换控制信息的第三一览表10。这种情况下，从下次开始，仅输入索引信息就能进行转换控制信息的切换了。图5是表示本发明的影像转换装置1的实施方式的一个示例的外观图。如该图所示，该实施方式中的影像转换装置1接收由影像输出装置2将多个视点用照相机11实时拍摄的各视点用影像转换成配置成瓷砖状的多视点影像并输出的影像， 然后转换成立体影像显示用的像素配置，再将像素配置转换后的影像作为影像信号(影像输出信号)发送到立体影像显示装置3。图6是表示本发明的影像转换装置1的实施方式的一个示例的外观图。如该图所示，该实施方式中的影像转换装置1与多个视点用照相机11直接连接， 将照相机11实时拍摄的各视点用影像直接作为多视点影像分别接收，然后转换成立体影像显示用的像素配置，再将像素配置转换后的影像作为影像信号(影像输出信号)发送到立体影像显示装置3。此外，本发明的影像转换装置1和影像输出装置2、立体影像显示装置3总称为影像转换系统。〈框图〉图7是表示本发明的影像转换装置1的实施方式的一个示例的框图。如该图所示，该实施方式中的影像转换装置1是由将多视点影像作为影像信号从影像输出装置2接收的接收部12，和将通过该接收部12 (接收装置)接收的该多视点影像一帧一帧地存储到存储元件的存储部13 (存储装置)，和指示将通过该存储部13存储到该存储元件的该多视点影像的像素配置根据预先设定的转换控制信息转换成立体影像显示用的像素配置，对该指示进行控制的转换控制部14 (转换控制装置)，和根据从该转换控制部14得到的指示，即时转换该像素配置的转换部15(转换装置)，以及，将通过该转换部 15转换了该像素配置的影像作为影像信号发送到立体影像显示装置3的影像转换装置的发送部16 (发送装置)构成的。图8是表示本发明的影像转换装置1的实施方式的一个示例的框图。如该图所示，该实施方式中的影像转换装置1在存储部13与转换控制部14之间进一步设置有影像信息解析部17 (影像信息解析装置)。图9是表示本发明的影像转换装置1的实施方式的一个示例的第三框图。如该图所示，该实施方式中的影像转换装置1中进一步与转换控制部14连接有转换控制信息存储部18 (转换控制信息存储装置)。图10是表示本发明的影像转换装置1的实施方式的一个示例的框图。如该图所示，该实施方式中的影像转换装置1设置有上述的影像信息解析部17与转换控制信息存储部18。图11是表示本发明的影像转换装置1的实施方式的一个示例的框图。如该图所示，该实施方式中的影像转换装置1与设置有多个视点用照相机11 (摄像装置)、影像配置部19 (影像配置装置)、影像输出装置的发送部20的影像输出装置2相连接。图12是表示本发明的影像转换装置1的实施方式的一个示例的框图。如该图所示，该实施方式中的影像转换装置1与多个视点用照相机11相连接。<影像输出装置>关于本发明的影像转换装置1接收影像信号(影像输入信号)的影像输出装置2， 进行如下说明。按照本发明的宗旨，影像输出装置2最好直接沿用现有的影像输出技术。S卩，影像输出装置2最好是现有的通过地面波、卫星广播、来自网络上的流播放或下载来获取影像的机顶盒，或者独立的DVD播放机、Blu-ray (注册商标)播放器等播放机器(也包含具有录像功能的)。另外，如图5所示，影像输出装置2也可以设置有多个视点用照相机11。这种情况下，就能将照相机11拍摄的多个影像实时转换成通过影像配置部19配置成瓷砖状的多视
点影像。〈立体影像显示装置3>关于本发明的影像转换装置1发送影像信号(影像输出信号)的立体影像显示装置3(显示器)，进行以下说明。按照本发明的宗旨，立体影像显示装置3无需对现有的立体影像显示装置施加任何改良，最好直接沿用。即，立体影像显示装置3最好是现有的采用视差屏障方式、光栅方式等的液晶显示器、等离子显示器、有机EL显示器等立体影像显示装置。但是，除了上述立体影像显示装置以外，当然也能使用本发明的影像转换装置1。〈视差屏障的具体示例〉
此外，立体影像显示装置3具有的视差屏障的狭缝的形状，如图13(a)所示，为斜直线状的狭缝，图13(b)为斜阶梯状的狭缝，(c)为使椭圆弧连接的团状的狭缝，(d)为将灯笼状的孔分别沿斜方向配置的视差屏障，(e)为将平行四边形的孔分别沿斜方向配置的视差屏障，使用哪种都可以。〈本发明中所用的影像〉本发明的影像转换装置1转换的影像如下所述。〈八瓷砖影像〉图14表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第一实施例。该影像是众所周知的，可以通过将多视点影像配置成瓷砖状的瓷砖格式来制作。通常，配置成瓷砖格式后再生成预先确定的动画压缩文件。分辨率是任意的，通常使用非可逆性压缩的动画压缩标准MPG2的情况比较多。虽然未图示出，但是，最好形成与任意的视点数(例如，4 9个视点)对应的瓷砖格式作为多视点影像。<标准化六瓷砖影像>图15表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第二实施例。其为本发明推荐的多视点影像的标准化瓷砖格式，为了转换成立体影像显示用的像素配置而只配置有从多视点影像读出的像素。虽然未图示出，但是，最好形成与任意的视点数(例如，4 9个视点)对应的瓷砖格式作为多视点影像。特别是根据将构成一个像素的RGB的3个子像素斜配置成3行3列的像素配置方法，最好以16 9的纵横比将任意分辨率的图像标准化为水平960像素、垂直360像素后作为各视点的图像，然后再转换成立体影像显示用的像素配置。由此，6个视点的瓷砖影像的分辨率可以为1920X1080，可以作为高清影像来接收瓷砖影像，然后根据转换成画质最无缺损的立体影像并接收的同一影像信号标准来输出。此外，即使不是标准化瓷砖格式，如果如图36所示形成瓷砖格式的话， 即使是两个视点以上的任一视点数，各视点的中间图像配置成瓷砖状的图像帧与裸眼立体显示器(立体图像)的分辨率/纵横比也会变成相同的，通过蓝光(Blue Ray)或STB等一般的图像输出装置或图像发布系统，可以接收根据RGB、VDI、HMVI等典型的影像信号标准输出或发送的影像信号，然后根据转换成画质最无缺损的立体影像并接收的同一标准的影像信号来输出。由此，可以在目前的显示器上粘贴视差屏障，或者更换成裸眼立体显示器， 并在这些显示器与现在使用的一般的图像输出装置或图像发布系统之间安装影像转换装置1，这样就可以非常廉价地提供一种富有实用性的立体图像显示系统。<多流影像>图16表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第三实施例。该影像是众所周知的，可以通过动画压缩标准MPG4的多流来制作。在一个动画文件中可以记录同步的多个动画。将所接收的第1视点至第η视点的图像以预先确定的配置存储到存储装置中，转换成立体影像显示用的像素配置。<将多视点影像沿时间方向重复分配>图17表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第四实施例。多视点影像分配在连接各视点的影像的各帧上，沿时间方向重复形成。将所接收的第1视点至第η视点的图像依次存储到存储装置中，转换成立体影像显示用的像素配置。
<将多视点影像在每条扫描线上重复分配>图18表示由本发明的影像转换装置1将其作为影像信号来接收的多视点影像的第五实施例。多视点影像分配在连接各视点的影像的各扫描线上，沿扫描线方向重复形成。 将所接收的图像存储到存储装置中，从形成各视点的图像的扫描线上的像素转换成立体影像显示用的像素配置。此外，也可以制作一个使上述多视点影像与平面影像混在一起的影像文件。<影像格式>图19表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第一实施例。该图(a)表示影像上的像素信息21的嵌入位置。如该图(a)所示，像素信息21嵌入在影像的左上端部。但是，像素信息21的嵌入位置是基于预先定义的配置模式的，因此， 虽然没有必要常位于左上端部，但是影像的端部是与立体影像显示装置3的监控帧重叠的部分，使用者看不见，因此，具有即使嵌入像素信息21也不影响对于使用者的立体影像显示的优点。该图(b)是表示所嵌入的像素信息21的扩大图。如该图(b)所示，像素信息21 无间隙地嵌入在一横行中。但是，虽然未图示出，但也可以保持预先确定的间隔嵌入。图20表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第二实施例。该图(a)表示影像上的像素信息21的嵌入位置。该图(b)是嵌入像素信息21的部分的扩大图。在第二实施例中，作为同一影像信息定义的像素信息21在XY方向上连续不断，嵌入有多个配置的像素矩阵22。该图(c)是表示该图(b)的一个像素矩阵22的扩大图。中央的由粗线框所包围的3X3的矩阵是像素矩阵22，配置有9个定义了同一影像信息的像素信息Cm ·η。在本发明的影像转换装置1中，从用圆印章表示的像素矩阵22中央的像素信息21解析影像信息。 此外，该像素矩阵22中央的像素信息21的位置，适合根据预先定义的配置模式，通过特定像素信息21的XY坐标来特定位置。但是，也可以从像素矩阵22中的多个像素信息21的平均值求出影像信息。图21表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第三实施例。该图(a)表示影像上的像素信息21的嵌入位置。该图(b)是嵌入像素信息21的部分的扩大图。该图(c)表示该图(b)的一个像素矩阵22的扩大图。在第三实施例中，作为影像信息定义的像素信息21配置在像素矩阵22的中央，在像素矩阵22的外周部分，嵌入了邻接像素矩阵22的像素与像素信息21之间的中间值的像素信息21。图22表示由本发明的影像转换装置1将其作为影像信号来接收的，嵌入有定义了影像信息的像素信息21的多视点影像的第四实施例。该图(a)表示影像上的像素信息21的嵌入位置。该图(b)是嵌入像素信息21的部分的扩大图。在第四实施例中，像素矩阵22由 2X 3构成，与第三实施例的像素矩阵22相比去掉了上面一行的像素信息21，配置在影像的
23上端部。因为如果像素矩阵22所占面积变小，则对影像的影响也变小，所以该实施例为优选。该图(c)是表示该图(b)的一个像素矩阵22的扩大图。定义了影像信息的像素信息21配置在像素矩阵22的上面一行的中央部分，在像素矩阵22的外周部分，配置了邻接像素矩阵22的像素与像素信息21之间的中间值的像素，或者对两个像素进行了预先确定的加权并插值的像素。这里的加权是指，为了更准确地解析像素信息21定义的影像信息，在求出中间值时将像素信息21的值增大到预先确定的数倍。如该图(c)所示，加权是将像素信息21的值增大到了两倍，但是如有必要，也可以是3倍、4倍。此外，在第三实施例中也补充了可以加权这一点。在将上述第二至第四的实施例的多视点影像进行mpeg2压缩时，关于研究定义了影像信息的像素信息21的RGB值的变化的实验方法，说明如下。首先，本实验的第一行程就是，准备一个其用作背景的图像全部为黑(Black)、红 (R)、绿(G)、蓝(B)、青(C)、品红(M)、黄(Y)、白(White)的八色的原始影像文件23 (AVI形式)。图23为原始影像文件23的示意图，该原始影像文件23的RGB值如表1所示。表1
权利要求
1.一种影像转换装置，其特征在于，其设置有从影像输出装置将多视点影像作为影像信号接收的接收装置， 将由该接收装置接收的该多视点影像一帧一帧地存储到存储元件的存储装置， 对根据预先设定的转换控制信息将由该存储装置存储到该存储元件中的该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制的转换控制装置， 根据从该转换控制装置得到的指示即时转换该像素配置的转换装置，以及将由该转换装置转换了该像素配置的影像作为影像信号发送到立体影像显示装置的发送装置。
2.根据权利要求1所述的影像转换装置，其特征在于，所述多视点影像是用于生成立体图像的多个中间图像，其中该立体图像是从在第1视点至第N视点的多个视点上拍摄及/或描画的多个视点图像转换而来的，RGB阶梯配置像素区块，将沿斜方向在拐角处使子像素相连并排列成3行的RGB阶梯配置像素单元，在水平方向上从该第1视点至第N视点连接并排列，为了将该RGB阶梯配置像素区块重复配置并生成该立体图像，在与构成该RGB阶梯配置像素单元的子像素的配置位置对应的、该多个视点图像上的对应位置附近，配置了至少一个以上的像素单元，从构成该些像素单元的子像素的RGB值进行插值，求出构成该RGB阶梯配置像素单元的子像素的各个R值、G值、B值，将构成该RGB阶梯配置像素单元的子像素在水平方向上按照R、G、B的顺序并排的RGB 并列配置像素单元，按照在该多个视点的每一个上集中配置的配置规则进行配置，并生成该多个视点的每一个视点的该中间图像，由此，该立体图像的该RGB阶梯配置像素单元与该多个中间图像的该RGB并列配置像素单元的总数，或者分别构成这两者的子像素的总数，是相同数目。
3.根据权利要求2所述的影像转换装置，其特征在于，所述RGB阶梯配置像素单元是，各行的子像素为一列，且由具有R值、G值、B值的3个该子像素构成；所述RGB并列配置像素单元是，在一行上，将该3个子像素按照R、G、B的顺序并排成3列。
4.根据权利要求2所述的影像转换装置，其特征在于，所述RGB阶梯配置像素单元是，各行的子像素为两列，该两列的每一列都是由具有R 值、G值、B值的3个该子像素构成的；所述RGB并列配置像素单元是，在一行上，将在该RGB阶梯配置像素单元的第一列上配置成3行的3个子像素按照R、G、B的顺序并排成3列，在水平方向上与该排列连接，将在该RGB阶梯配置像素单元的第二列上排列成3行的3个子像素按照R、G、B的顺序并排成3 列。
5.根据权利要求2所述的影像转换装置，其特征在于，所述RGB阶梯配置像素单元是，各行的子像素为3列，该3列的每一列都是由具有R值、 G值、B值的3个该子像素构成的，所述RGB并列配置像素单元是，在一行上，将在该RGB阶梯配置像素单元的第一列上配置成3行的3个子像素按照R、G、B的顺序并排成3列，在水平方向上与该排列连接，将在该RGB阶梯配置像素单元的第二列上排列成3行的3个子像素按照R、G、B的顺序并排成3 列，与该排列进一步连接，将在该RGB阶梯配置像素单元的第三列上排列的3个子像素按照 R、G、B的顺序并排。
6.根据权利要求2所述的影像转换装置，其特征在于，通过将所述多个中间图像配置成由作为图像帧至少在纵方向上三等分的第一行至第三行构成的多个瓷砖状，构成所述RGB阶梯配置像素单元的子像素与构成所述RGB并列配置像素单元的子像素，在配置有所述立体图像与该多个中间图像的该图像帧上，纵横方向上都是相同数目。
7.根据权利要求6所述的影像转换装置，其特征在于，在所述多个视点为两个视点的情况下，在所述第一行的瓷砖上配置第1视点的所述中间图像的2/3，在与所述第二行的第1瓷砖上的第1视点的该中间图像的1/3相连接的第2 瓷砖上，配置第2视点的该中间图像的1/3，在所述第三行的瓷砖上配置第2视点的该中间图像的2/3 ；在所述多个视点为3个视点的情况下，在各行的瓷砖上配置各视点的中间图像；在所述多个视点为4 6个视点的情况下，在各行的第一块瓷砖上配置第1 3视点的该中间图像，在与第1 3视点的该中间图像连接的第一行至第三行上所配置的瓷砖上， 配置剩余视点的该中间图像；在所述多个视点为7 9个视点的情况下，在各行的第一块瓷砖上配置第1 3视点的该中间图像，在与第1 3视点的该中间图像连接的第一行至第三行的瓷砖上，配置第4 6视点的该中间图像，在与第4 6视点的该中间图像连接的第一行至第三行上所配置的瓷砖上，配置剩余视点的该中间图像；在所述多个视点为10个以上的视点的情况下，也同样是从第1视点开始，依次在各行的瓷砖上配置该中间图像的一部分或全部。
8.根据权利要求2所述的影像转换装置，其特征在于，将所述多视点影像作为影像信号接收，该多视点影像是根据将所述多个中间图像在帧内分割配置成了瓷砖状的图像形成的一个影像。
9.根据权利要求1所述的影像转换装置，其特征在于，所述发送装置向所述立体影像显示装置发送与所述接收装置从所述影像输出装置接收的影像信号为同一标准的影像信号。
10.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置通过电气连接或无线通信从所述影像输出装置接收影像信号；所述发送装置通过电气连接或无线通信向所述立体影像显示装置发送影像信号。
11.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置将所述多视点影像作为影像信号接收，该多视点影像是根据将形成各视点用影像的图像在帧内分割配置成了瓷砖状的图像形成的一个影像。
12.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置将所述多视点影像作为影像信号接收，该多视点影像是将非可逆性压缩的影像通过所述影像输出装置解压缩后的影像。
13.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置将所述多视点影像作为影像信号接收，该多视点影像是，根据将形成各视点用影像(k视点影像)的图像(kFta = 1 1)在同一时间一帧一帧地按照视点影像顺序(k = 1 η)排列并进一步在时间方向上排列的图像(F，t，、t，= 1 η· 1)，形成的影像。
14.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置将所述多视点影像作为影像信号接收，该多视点影像是，根据将形成各视点用影像(k视点影像)的图像的同一扫描线图像信息(Si、i = 1 j)按照视点影像顺序(k = 1 η)排列并将该扫描线图像信息的全部都配置在一帧的图像上的图像(S，i’、i = 1 η · j)，形成的影像。
15.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置进一步将通过电气连接或无线通信存储到外部存储装置中的转换控制信息作为控制信号接收；所述转换控制装置，在该接收装置接收该控制信号时，代替所述预先设定的转换控制信息，根据该外部存储装置中存储的转换控制信息，对将由所述存储装置存储到所述存储元件中的所述多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制。
16.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置进一步从所述影像输出装置将平面影像作为影像信号接收，除了该影像信号外，还接收控制信号；所述转换控制装置，对基于该控制信号的、关于该接收装置从影像输出装置接收的影像是所述多视点影像还是该平面影像又或者是该多视点影像与该平面影像混杂的影像的辨别，进行控制，只有在辨别该影像是该多视点影像还是该多视点影像与该平面影像混杂的影像时，才对向该多视点影像的立体影像显示用的像素配置转换的指示进行控制； 所述发送装置进一步将该平面影像作为影像信号发送到所述立体影像显示装置。
17.根据权利要求16所述的影像转换装置，其特征在于， 所述影像转换装置进一步设置有影像信息解析装置；所述接收装置，代替所述控制信号及所述多视点影像，将根据预先确定的配置模式嵌入有作为影像信息在所述多视点影像的第一帧或全帧的预先确定的位置上定义的多个像素信息的影像作为影像信号接收；该影像信息解析装置根据该预先确定的配置模式特定该像素信息的嵌入位置，辨别有无用于核对该影像信息的表头，在有表头时解析该影像信息；所述转换控制装置根据该表头的有无，进一步对该影像是多视点影像还是平面影像的辨别进行控制，只有在辨别该影像是否是该多视点影像时，才根据由该影像解析装置解析的该影像信息，对将该多视点影像转换成立体影像显示用的像素配置的指示进行控制；所述发送装置将由该转换装置转换了该像素配置的影像或平面影像作为影像信号，发送到所述立体影像显示装置。
18.根据权利要求17所述的影像转换装置，其特征在于，所述接收装置将所述多视点影像与平面影像作为一个影像混杂的影像作为影像信号来接收；所述影像信息解析装置解析该混杂的影像的全帧的该影像信息，只有在辨别该混杂的影像的帧是否是该多视点影像时，才对向该多视点影像的立体影像显示用的像素配置转换的指示进行控制；所述发送装置进一步将该平面影像作为影像信号发送到所述立体影像显示装置。
19.根据权利要求17所述的影像转换装置，其特征在于，所述转换控制装置根据由所述影像信息解析装置解析的所述影像信息，控制识别至少所述多视点影像的扫描方式、该多视点影像的分辨率、该多视点影像的视点数、以及所述立体影像显示装置的视点数中的一个，代替所述预先设定的转换控制信息，根据该扫描方式、该多视点影像的分辨率、该多视点影像的视点数、以及该立体影像显示装置的视点数，对将该多视点影像转换成立体影像显示用的像素配置的指示进行控制。
20.根据权利要求17所述的影像转换装置，其特征在于，所述接收装置将根据预先确定的配置模式嵌入有多个像素矩阵的影像作为影像信号接收，该像素矩阵将作为同一影像信息定义的像素信息在XY方向上连接并多个配置；所述影像信息解析装置根据该预先确定的配置模式特定该像素矩阵的嵌入位置，解析该像素矩阵的预先确定的位置上的该影像信息。
21.根据权利要求20所述的影像转换装置，其特征在于，所述影像信息解析装置根据中心位置的像素信息或中心位置周边的多个像素信息的平均值来解析影像信息。
22.根据权利要求20所述的影像转换装置，其特征在于，所述接收装置将沿所述多视点影像的上端嵌入有所述像素矩阵的影像作为影像信号接收。
23.根据权利要求20所述的影像转换装置，其特征在于，所述接收装置将根据预先确定的配置模式嵌入有多个所述像素矩阵的影像作为影像信号接收，在该像素矩阵的外周部分，代替所述像素信息，配置了邻接该像素矩阵的像素与该像素信息之间的中间值的像素， 或者对两个像素进行了预先确定的加权并插值的像素。
24.根据权利要求17 23中的任意一项所述的影像转换装置，其特征在于， 所述接收装置将仅在所述像素信息的预先确定的位数的前面的位上定义了影像信息的影像作为影像信号来接收；所述影像信息解析装置仅参照该多个像素信息的该预先确定的位数的前面的位来解析影像信息。
25.根据权利要求1所述的影像转换装置，其特征在于， 所述接收装置从所述立体影像显示装置接收控制信号；所述转换控制装置根据该控制信号，控制识别至少该立体影像显示装置的扫描方式、 该立体影像显示装置的分辨率、该立体影像显示装置的视点数、以及该立体影像显示装置的像素配置方法中的一个，代替所述预先设定的转换控制信息，根据该立体影像显示装置的扫描方式、该立体影像显示装置的分辨率、该立体影像显示装置的视点数、以及该立体影像显示装置的转换方法，对将该多视点影像转换成立体影像显示用的像素配置的指示进行控制。
26.根据权利要求25所述的影像转换装置，其特征在于，所述像素配置方法是通过对一个以上的像素的组合进行重复而形成的， 由构成一个像素的行数、构成该一个像素的子像素数、在该像素的组合内连接的像素数、以及每个该像素的连接位置摄动子像素数构成。
27.根据权利要求1所述的影像转换装置，其特征在于，所述接收装置，通过在监视器前面留有一定空隙地粘贴了视差屏障的所述立体影像显示装置，其中该视差屏障是根据不可视区域和多个配置成从上到下以一定倾斜度使狭缝或孔连续的狭缝状的透射区域形成的，将构成像素的子像素的尺寸、该透射区域的平均倾斜度、与该狭缝或该孔的水平方向的该透射区域的平均宽度相当的子像素数、与相邻的该狭缝或该孔的中心间的平均距离相当的子像素数、以及显示装置的分辨率，作为控制信号接收；所述转换控制装置根据该控制信号，选择转换成可以将多视点影像最有效地实现立体影像显示的像素配置的像素配置转换法，对根据该像素配置转换法转换的指示进行控制。
28.根据权利要求15 27中的任意一项所述的影像转换装置，其特征在于， 所述影像转换装置进一步设置有转换控制信息存储装置；所述接收装置接收进一步定义了索引信息的所述控制信号，或者， 将根据预先确定的配置模式嵌入有进一步定义了索引信息的多个像素信息的影像作为影像信号接收；该转换控制信息存储装置，在所述转换控制装置根据所述控制信号或所述影像信号指示所述转换装置进行所述多视点影像的像素配置的转换时，将转换指示作为新的转换控制信息，并使其与该索引信息相对应存储；该转换控制装置，在与该接收装置接收的该控制信号或该影像信号的该索引信息相对应的转换控制信息存储在该转换控制信息存储装置中时，根据该转换控制信息存储装置中存储的转换控制信息，对将该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制。
29.根据权利要求观所述的影像转换装置，其特征在于，所述接收装置进一步通过外部输入装置接收定义了索引信息的输入信号； 所述转换控制装置，代替所述控制信号或所述影像信号，在与该接收装置接收的该输入信号的该索引信息相对应的转换控制信息存储在所述转换控制信息存储装置中时，根据该转换控制信息存储装置中存储的转换控制信息，对将该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制。
30.一种影像输出装置，其特征在于，其是由拍摄各视点用影像的多个摄像装置，在从该多个摄像装置在第1视点至第N视点的多个视点上所拍摄的多个视点图像生成权利要求2所述的多个中间图像，并将该多个中间图像在帧内分割配置成了瓷砖状的图像上，即时配置并形成一个影像的影像配置装置，以及，对于将构成该一个影像的像素的配置进行转换的所述影像转换装置，将该一个影像作为影像信号向其发送的发送装置构成的。
31.一种影像转换系统，其特征在于，其设置有， 将多视点影像作为影像信号发送的影像输出装置，通过该影像输出装置将该多视点影像作为影像信号接收的接收装置， 将由该接收装置接收的影像一帧一帧地存储到存储元件中的存储装置， 对将该存储装置中存储的影像的像素配置转换成预先确定的立体影像显示用的像素配置指示进行控制的转换控制装置，根据从该转换控制装置得到的指示即时转换该像素配置的转换装置，将由该转换装置转换了该像素配置的影像作为影像信号发送的发送装置，以及接收由该发送装置发送的影像信号，显示立体影像的显示装置。
32.根据权利要求31所述的影像转换系统，其特征在于，所述影像转换系统进一步设置有拍摄各视点用影像的多个拍摄装置，以及在从该多个摄像装置在第1视点至第N视点的多个视点上所拍摄的多个视点图像生成权利要求2所述的多个中间图像，并将该多个中间图像在帧内分割配置成了瓷砖状的图像上，即时配置并形成一个影像，然后发送到所述影像播放装置的影像配置装置；该影像输出装置将该影像配置装置转换的影像作为影像信号发送。
33.根据权利要求31所述的影像转换系统，其特征在于，所述显示装置是在显示器前面留有一定空隙地粘贴了视差屏障的所述立体影像显示装置，其中该视差屏障是根据不可视区域和多个配置成从上到下以一定倾斜度使狭缝或孔连续的狭缝状的透射区域形成的；所述接收装置，将该透射区域的平均倾斜度、与该狭缝或该孔的水平方向的该透射区域的平均宽度相当的子像素数、与相邻的该狭缝或该孔的中心间的平均距离相当的子像素数、构成像素的子像素的尺寸、以及显示装置的分辨率，作为控制信号接收；所述转换控制装置根据该控制信号，选择转换成可以将多视点影像最有效地实现立体影像显示的像素配置的像素配置转换法，对所述转换装置使用该像素配置转换法转换的指示进行控制。
34.一种影像，其特征在于，在多视点影像的第一帧、或该第一帧及最后一帧、或全帧的预先确定的位置上，根据预先确定的配置模式，嵌入有将用于核对影像信息的表头和转换控制信息作为影像信息定义的多个像素信息。
35.根据权利要求34所述的影像，其特征在于，其是将多视点影像与平面影像作为一个影像混杂的影像，最初的影像在该多视点影像中时，在第一帧的预先确定的位置上，在所述影像信息中进一步设置有用于辨别该混杂的影像的辨别信息；最初的影像在该平面影像中时，在第一帧的预先确定的位置上，根据预先确定的配置模式，嵌入有将用于核对影像信息的表头和用于辨别该混杂的影像的辨别信息作为影像信息定义的多个像素信息。
36.根据权利要求34所述的影像，其特征在于，超过预先确定的帧数以上，根据同一配置模式嵌入有作为同一影像信息定义的所述像素信息。
37.一种影像，其特征在于，根据预先确定的配置模式嵌入有多个像素矩阵，该像素矩阵将用于核对影像信息的表头和转换控制信息作为影像信息定义，在XY方向上连续配置了多个同一像素信息。
38.根据权利要求37所述的影像，其特征在于，所述影像根据预先确定的配置模式在所述像素矩阵的外周部分嵌入有多个像素矩阵，该像素矩阵，代替所述像素信息，在邻接该像素矩阵的像素信息与定义所述影像信息的像素信息上，配置了具有以预先确定的加权进行了线性插值的像素信息的像素。
39.根据权利要求34 38中的任意一项所述的影像，其特征在于，嵌入有所述影像信息的所述多视点影像是非可逆性压缩的影像解压缩之后的影像，在所述像素信息中，仅在该非可逆性压缩前后都不变动的预先确定的位数的前面的位上定义有影像信息。
40.根据权利要求34 39中的任意一项所述的影像，其特征在于，所述影像信息至少是，用于辨别是否是将所述多视点影像与平面影像作为一个影像混杂的影像的辨别信息、 该影像的扫描方式的辨别信息、影像的分辨率、以及所述影像的视点数中的一个。
41.一种记录介质，其特征在于，记录了权利要求34 40中的任意一项所述的影像。
42.一种影像转换方法，其特征在于，从影像输出装置将多视点影像作为影像信号接收，将接收的该多视点影像一帧一帧地存储到存储元件，指示根据预先设定的转换控制信息，将该存储元件中存储的该多视点影像的像素配置转换成立体影像显示用的像素配置，根据该指示，即时转换该像素配置，将转换了该像素配置的影像作为影像信号发送到立体影像显示装置。
43.一种影像输出方法，其特征在于，通过多个摄像装置拍摄各视点用影像，从在由该多个摄像装置拍摄的第1视点至第N视点的多个视点上所拍摄的多个视点图像，通过影像配置装置生成权利要求2所述的多个中间图像，在将该多个中间图像在帧内分割配置成瓷砖状的图像上即时配置形成一个影像，对于将构成该一个影像的像素的配置进行转换的影像转换装置，通过发送装置将该一个影像作为影像信号发送。
全文摘要
本发明的目的是在硬件设备上实现影像的立体影像显示用的像素配置转换。本发明的影像转换装置设置有从影像输出装置将多视点影像作为影像信号接收的接收装置，将由该接收装置接收的该多视点影像一帧一帧地存储到存储元件的存储装置，对根据预先设定的转换控制信息将由该存储装置存储到该存储元件中的该多视点影像的像素配置转换成立体影像显示用的像素配置的指示进行控制的转换控制装置，根据从该转换控制装置得到的指示即时转换该像素配置的转换装置，以及将由该转换装置转换了该像素配置的影像作为影像信号发送到立体影像显示装置的发送装置，由此，在硬件设备上实现多视点影像的立体影像显示用的像素配置转换。
文档编号H04N13/04GK102349303SQ20108001128
公开日2012年2月8日 申请日期2010年3月12日 优先权日2009年3月12日
发明者吉田健治 申请人:吉田健治