专利名称：三维影像再现方法和三维影像再现装置的制作方法
技术领域：
本发明涉及三维影像再现方法及三维影像再现装置。
背景技术：
近年，随着民用电视机的高性能化，可显示具有纵深的立体图像的三维电视机正在普及中。与以往的显示二维图像的电视机不同，三维电视机所显示的图像是在前后方具有纵深的立体图像。
发明内容
〔发明所要解决的课题〕
虽然有各种用于显示立体影像的技术，但与以往的显示二维影像的情况相比较，民用三维电视机中采用的方式主要由于处理电路性能不足的原因，有时难以提高影像的帧率。在影像的帧率较低的情况下，会在影像上产生细小的闪烁，即出现了所谓“闪烁(flicker)”的现象，成为视听者感觉不太好的原因。本发明是鉴于上述情况而研发的，其目的在于提供一种降低在三维电视机上可能发生的闪烁的技术。〔用于解决课题的技术手段〕为了解决上述课题，本发明的一种方案是一种三维影像再现方法。该方法当再现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内，当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三维影像的帧率直到超出所述预定帧率范围，来进行再现。本发明的另一方式是一种三维影像再现装置。该装置包括影像属性判定部，当再现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内；帧率变换部，当上述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三维影像的帧率直到超出所述预定帧率范围。此外，将上述构成要素的任意组合、本发明的表现形式在方法、装置、记录介质、计算机程序等之间进行变换的方式，也作为本发明的方案也是有效的。〔发明效果〕通过本发明，能提供一种降低在三维电视机中可能产生的闪烁的技术。
图I是表示三维空间中的物体与其视差图像的关系的图。图2是表示利用视差图像的快门式三维影像显示系统的概观的图。图3是表示快门式眼镜的快门定时和三维电视机中视差图像的显示定时的关系的图。图4是示意性表示三维电视机的电路结构的图。图5是说明三维液晶电视机的图像显示方式的图。图6是说明三维液晶电视机的图像显示的另一方式的图。图7的(a)是表示HDMI标准中的巾贞封装(Frame packing)格式的图。图7的(b)是表示HDMI标准中的并排(side by side)格式的图。图7的(c)是表示HDMI标准中的上下(topand bottom)格式的图。
图8是表不HDMI的二维影像相关的必需的标准的图。图9是说明帧率的变换方式的图。图10是说明帧率的其他变换方式的图。图11是示意性表示实施方式的三维影像显示系统中使用的设备结构的图。图12是示意性表示实施方式的三维影像再现装置的电路结构的图。图13是示意性表示实施方式的三维影像再现装置的功能结构的图。图14是敦促选择有无巾贞率变换的显示例。图15是表示实施方式的三维影像显示的处理步骤的流程图。图16是示意性表示实施方式的三维影像显示系统中使用的设备的另一结构的图。图17是示意性表示实施方式的放大器的电路结构的图。图18是敦促选择三维电视机是否变换帧率的显示例。
具体实施例方式[使用视差图像的三维影像]图I是表示三维空间中物体与其视差图像的关系的图。在三维空间中，被总称为目标200的目标200a、目标200b以及目标200c的这三个目标200由被总称为照相机202的、从左侧对目标200进行拍摄的左眼用照相机202a和从右侧对目标200进行拍摄的右眼用照相机202b进行拍摄。图I中，由左眼用照相机202a拍摄的目标200的影像和由右眼用照相机202b拍摄的目标200的影像分别在被总称为二维用监视器204的监视器204a和监视器204b上显示。左眼用照相机202a和右眼用照相机202b由于从不同位置拍摄目标200，因此投映在监视器204a上的影像和投映在监视器204b上的影像成为目标200的朝向不同的影像。像这样，将从不同视点观察三维空间中目标200时的图像称为“视差图像”。由于人的左右眼离开6cm的程度，因此在从左眼观察的影像和从右眼观察的影像上产生视差。人的大脑是利用左右眼感知到的视差图像来识别物体的纵深。因此，当左眼感知到的视差图像和右眼感知到的视差图像分别投影到各眼时，人就识别为具有纵深的影像。虽然利用视差图像让人们观看具有纵深的影像的三维电视机有各种方式，但是在本实施方式中，针对时分地交替显示左眼用视差图像和右眼用视差图像的快门式三维电视机进行说明。图2是表示利用视差图像的快门式三维影像显示系统300的概观的图。三维影像显示系统300包括投影视差图像的三维电视机206、为观看视差图像而使用的快门式眼镜210、以及获取三维电视机206和快门式眼镜210的同步的眼镜驱动信号发送部208。
三维电视机206时分地交替显示左眼用视差图像和右眼用视差图像。眼镜驱动信号发送部208将三维电视机206的视差图像的显示定时作为红外线的同步信号而发送。快门式眼镜210具备用于接收从眼镜驱动信号发送部208发送来的同步信号的接收部(未图示)，并根据接收到的同步信号而对左右透镜施加快门。快门例如能够通过使用已知的液晶快门技术来实现。具体而言，三维电视机206显示左眼用视差图像时，快门式眼镜210从眼镜驱动信号发送部208接收表示应关闭右眼透镜的快门的信号。快门式眼镜210根据接收到的信号而关闭右眼透镜的快门，由此遮蔽映入右眼的影像。因而，在三维电视机206显示左眼用视差图像的情况下，仅向用户的左眼投影左眼用视差图像。相反，在三维电视机206显示右眼用视差图像的情况下，通过快门式眼镜210关闭左眼透镜的快门，由此仅向右眼投影右眼用视差图像。图3是表示快门式眼镜210的快门定时和三维电视机206中的视差图像的显示定时的关系的图。以预定的间隔t (例如1/120秒的间隔)交替显示被总称为左眼用视差图像212的左眼用视差图像212a、左眼用视差图像212b、以及左眼用视差图像212c，和被总称为·右眼用视差图像214的右眼用视差图像214a、右眼用视差图像214b、右眼用视差图像214c。在显示左眼用视差图像212a时，快门式眼镜210的左眼快门打开，右眼用快门关闭。图3中，将快门式眼镜210的快门为开状态时用“〇”记号表示，将闭状态时用“ X ”记号来表示。如图3所示，通过使三维电视机206的视差图像的显示与快门式眼镜210快门的开闭同步地向用户的左眼投影左眼用视差图像212、向右眼投影右眼用视差图像214，能够向用户显示具有纵深感的三维影像。[三维电视机]图4是示意性表示三维电视机206的电路结构的图。HDMI (High-DefinitionMultimedia Interface :高清晰度多媒体接口)端子216是输入包含影像和声音、数字控制信号的基于HDMI标准的信号的端子。HDMI接收部218接收通过HDMI端子216而接收到的HDMI Rx, HDMI的信号，并分离影像、声音、以及被称为信息帧(Info Frame)的控制信号等各信号的包。天线输入端子220从未图示的天线接收地面数字的电视广播等。数字调谐器222从介由天线输入端子220而从天线取得的广播波的信号中，取出所广播的传输数据。分离电路224从广播的传输数据中分离影像、声音等的流。声音译码器226在声音数据的流不是Linear PCMCPulse Code Modulation,线性脉冲编码调制)，而是例如MPEG2AAC、Dolby Digital (商标)等的情况下，将这些数据解码，变换成Linear PCM。对变换后的Linear PCM信号进行改换排列声音通道等处理。声音信号处理电路228进行音质校正等声音信号处理。为了向后述的扬声器232输出声音，声音放大电路230进行D/A (Digital /Analog)转换,或者根据所设定的音量而放大模拟信号。扬声器232将声音放大电路230输出的模拟声音信号作为声波进行输出。影像译码器234通过对影像数据的流进行解码，来生成构成动图像的各帧的影像数据。影像信号处理电路236进行影像的画质改善、分辨率变换、I / P变换(InterlaceProgressive变换逐行交错变换)等处理。图形生成电路238将三维电视机206的菜单及用于提示各种信息的显示重叠在从影像信号处理电路236输出的影像上。下面，在本说明书中，影像和动图像作为相同意思来使用。另外，帧和图像也以相同意思来使用。屏驱动电路240生成屏驱动信号，该屏驱动信号是用于在三维电视机206的显示屏242上显示从图形生成电路238输出的影像的触发。由于屏驱动电路240具有与显示屏242显示影像的定时(timing)有关的定时信息，因此向后述的背光灯驱动电路244和眼镜驱动信号发送部246输出定时信息。背光灯驱动电路244在背光灯为LED (Light Emitting Diode :发光二极管)背光灯方式的情况下，根据从屏驱动电路240取得的定时信息，控制背光灯的点亮定时。背光灯驱动电路244有时针对显示屏242内的各个区域，以不同的定时或亮度使背光灯点亮。 眼镜驱动信号发送部246根据从屏驱动电路240取得的定时信息，发送用于驱动上述快门式眼镜210的定时信号。此外，快门式眼镜210依照从眼镜驱动信号发送部246接收到的定时信号来开闭快门式眼镜210的左右透镜。非易失性存储器254中保存有用于控制三维电视机206的系统程序等。CPU(Central Processing Unit)250经总线252从非易失性存储器254读入系统程序。CPU250将主存储器256作为工作存储器而执行系统程序，由此整体地控制三维电视机206。CPU250介由遥控器接收机248接收来自用户对三维电视机206的指示，并介由总线252向上述各电路发送控制命令。上述各电路主要根据从CPU250取得的控制命令进行动作。作为三维电视机206的显示屏242,有利用等离子的roPCPlasma Display Panel 等离子显示器)方式和利用液晶的IXD (Liquid Crystal Display :液晶显示器)方式等各种方式。在本实施方式中以LCD方式为中心进行说明。在IXD方式的显示屏242中，一般边逐行扫描边更新影像的显示。例如，从显示屏242最上面的一行开始更新，直到显示屏242最下面的一行，在垂直方向上扫描的同时，更新像素的状态。因此，在逐张地交替更新左右视差图像时，在更新的过程中左右视差图像发生混合。另外，由于液晶的响应需要时间，因此从接收应更新像素的信号起至实际像素更新为止,产生时间差。因此，在IXD方式的显示屏242中，进行两张两张地显示左右视差图像的“二次描绘(2度書t )”，或者进行在左右视差图像之间显示全黑等单一色的帧的“插黑(黑插入)”。图5是说明三维液晶电视机的图像显示方式的图。图5表示上述的“二次描绘”。图5中，用标号258总称应显示的视差图像。用L (Left的首字母)表示左眼用视差图像，用R (Right的首字母)表示右眼用视差图像。另外，用标号262总称在显示屏242上实际显示的视差图像。以下在附图中，用倾斜细实线表示左眼用视差图像，用竖直细实线表示右眼用视差图像。左眼用视差图像258a被二次描绘在显示屏242上。图5中，Lla表示左眼用视差图像258a的第I次描绘，Llb表不第2次描绘。同样地，Rla表不右眼用视差图像258b的第I次描绘，Rlb表示第2次描绘。以下，L2a、L2b、R2a、R2b也同样如此。如前所述，图像的更新是在逐行扫描的同时进行的，因此，在开始描绘Rla的时刻，Llb的图像还留在显示屏242上。图像262b表示此时的显示屏242上的显示图像。另夕卜，如前所述，由于液晶的响应需要时间，因此从接收到应更新像素的信号起至像素实际更新为止，产生了时间差。因此，即使在全部接收到Rla的描绘信号的时刻，显示屏242上还未完全结束Rl的显示。图像262c表示此时的显示屏242上的显示画像。如图像262d所示，在描绘Rlb的过程中液晶的响应时间就已经过，因此在图像262c中尚未描绘完成的图像下部的描绘结束，在显示屏242上全部显示Rl。因此，快门式眼镜210在显示屏242上全部显示Rl的期间，关闭左眼快门而打开右眼快门。图5中是用标号260b表不的期间。同样的理由，在标号260a和标号260b表不的期间，关闭右眼快门而打开左眼快门。另外，在标号260b表示的期间关闭左眼快门而打开右眼快门。在标号260表示的期间以外的期间，快门式眼镜210关闭双眼的快门。如以上那样，“二次描绘”的方式是通过两张两张地显示左右的视差图像而设置在显示屏242上显示左右任一视差图像整体的期间，使该期间与快门式眼镜210开闭的定时同步，由此对人眼投影恰当的视差图像。图6是说明三维液晶电视机的图像显示的另一方式的图。图6表示上述的“插 黑”。如前所述，由于在LCD方式的显示屏242上扫描的同时进行描绘，以及由于液晶的响应时间，会在视差图像258的更新过程中混合前一个视差图像258。因此，在左眼用视差图像258a和右眼用视差图像258b之间插入黑图像。虽然视差图像258和黑图像会混合，但即使两者混合也只是视差图像258的整体亮度下降这种程度，故能确保作为视差图像的构造。图5所示的“二次描绘”方式和图6所示的“插黑”方式的任一方式都是为了显示左右视差图像而分别需要各两次地驱动显示屏242。因此，例如为了显示帧率为n[Hz]的三维影像，如下式所示，需要按4倍的帧率驱动显示屏242。n [Hz] X 2 (二次描绘或插黑)X 2 (左右的视差图像)=4n[Hz][HDMI vl.4a 标准]图7是表不HDMI vl. 4a中与二维影像相关联的一组格式标准的图。图7的(a)表示帧封装(Frame packing)格式的图。帧封装是用于将全尺寸的左眼用视差图像L和右眼用视差图像R作为一帧来传输的格式。具体而言，在左眼用视差图像L的下部夹着空白部262地配置右眼用视差图像R。因此，描绘时使用的水平同步信号264与描绘一张视差图像258的情况相同，但垂直同步信号266成为在两张视差图像258的量的基础上加入空白部262后的长度。图7的(b)表示并排(Side-by-Side)格式的图。并排格式是用于将左眼用视差图像L和右眼用视差图像R分别占据纵向宽度的一半而结合，作为与全尺寸的一张视差图像258相同尺寸来传输的格式。表示格式为并排格式的信号被作为HDMI控制信号的一部分进行传输。图7的(C)是表示上下(Top-and-Bottom)格式的图。上下格式是用于将左眼用视差图像L和右眼用视差图像R分别占据横向宽度的一半而结合，作为与全尺寸的一张视差图像258相同尺寸来传输的格式。表示格式为上下格式的信号被作为HDMI控制信号的一部分进行传输。图8是HDMI vl. 4a标准中与三维影像相关的必需的影像格式的一览。在HDMIvl. 4a标准中,接收设备(sink device) (HDMI接收机、电视机等)被预定义务能够接收巾贞封装格式、并排格式、上下格式的图8中记载的分辨率/帧率的影像格式。另外，除此之外，也可以支持可选择的格式、分辨率、帧率。源设备(HDMI发送机、蓝光播放器、游戏机等)也被允许经由HDMI确认接收设备支持的格式、分辨率、帧率，仅输出所支持的格式、分辨率、帧率。[闪烁和帧率的变换]然而，影像的帧率被包含在一定范围内时，会发生被称为“闪烁”的现象。“闪烁”是指影像的改写频度低到人眼能够识别的程度时，所识别到画面上细微的闪烁的现象。一般，影像的帧率为10 [Hz] 50 [Hz]程度的范围时，人们会说识别到闪烁。如图8所示，电影内容(contents)中三维影像的帧率常使用24[Hz]。因此，按内容的帧率显示影像时，根据用户的不同，有可能会在意“闪烁”。因此，在用三维电视机206显示电影内容中的三维影像时，进行帧率变换地再现三维影像。
例如，如果能对帧插值而生成新的帧，使原来的帧三倍增加，以超出10[Hz] 50[Hz]的范围的72[Hz]的帧率显示三维影像，则能抑制闪烁。如前所述，在用LCD方式的显示屏242显示72[Hz]的三维影像时，就需要以72[Hz] X4=288[Hz]来驱动显示屏242。但是，288 [Hz]是较高的帧率，以288 [Hz]驱动显示屏242多数较困难。因此，将24 [Hz]的帧率变换成60 [Hz]来再现三维影像的情况较多。图9是说明帧率的变换方式的图。图9是说明被称为“2-3变换”的帧率变换方式的图。在“2-3变换”中，以左眼用视差图像L和右眼用视差图像R的组为单位，在将某组连续2次显示后，将接下来的组连续3次进行显示。图9中，左眼用视差图像LI和右眼用视差图像Rl分别各显示两次L1-UL1-2、以及R1-UR1-2。而左眼用视差图像L2和右眼用视差图像R2分别各显示三次L2-l、L2-2、L2-3以及R2-1、R2_2、R2_3。图9中，用虚线箭头表示两次显示的组，用实线箭头表示三次显示的组。这样，通过将帧的显示次数两次、三次这样一边切换一边显示，将24[Hz]的三维影像实质上变换成2. 5倍的60 [Hz]的帧率。图10是说明帧率变换的另一方式的图。图10是说明使用帧插值技术将2帧变换成5帧的方式的图。如图10所示，使用左眼用视差图像LI和左眼用视差图像L2的2帧，通过运动预测等方法生成LI、Lla、Lib、Lie、Lld的5帧。同样地，使用右眼用视差图像Rl和右眼用视差图像R2的2帧，生成Rl、Rla, Rib、Rlc、Rld的5帧。图9中，表示了位于箭头起点的帧被用于箭头所指的帧的插值的情况。例如，Lla是基于LI和L2而生成的。另外，在Lld的生成中使用L3，但作为整体来看，是由2帧生成5帧的。由此，24[Hz]的三维影像被变换成60 [Hz]的帧率。[三维影像再现装置]图11是示意性地表示实施方式的三维影像显示系统300中所使用的设备结构的图。三维影像显示系统300中所使用的设备包括三维影像再现装置100和三维电视机206。三维影像再现装置100包括后述的HDMI发送部286(HDMI Tx)，介由HDMI电缆268与三维电视机206的HDMI接收部218 (HDMI Tx)进行通信。图12是示意性地表示实施方式的三维影像再现装置100的电路结构的图。BD / DVD 驱动器 270 (Blu-ray Disc (商标):蓝光盘；Digital Versatile Disc 数字通用光盘)从光学介质读取数据。解码电路272解读AACS(Advanced Access ContentSystem :高级内容访问系统)和CSS (Content Scramble System :内容扰乱系统)等密码，将数据变换成没有加密的状态的明文。
分离电路274从自光学介质读出的数据(多路复用后的声音或影像等数据)中，取出 MPEG(Moving Picture Experts Group :运动图像专家组)、AVC(Advanced Video Coding 高级影像编码)、MVC (Multi-View Coding :多视点影像编码)等影像,Linear PCM (线性脉冲编码调制)、Dolby Digital (杜比数字技术)、DTS (Digital Theater System :数字化影院系统)(商标)等声音，以及这之外的字幕等的流。在声音数据的流不是Linear PCM而是例如Dolby Digital (商标)、DTS (商标)的情况下，声音译码器276对这些进行解码，变换成Linear PCM。变换后的Linear PCM信号进行改换排列声音通道等处理。声音信号处理电路228进行音质校正等声音信号处理。声首彳目号处理电路278进行主声、副声、以及按键声等互动首频的首频混合、混首(down-mix)、采样率的变换等声音信号处理。影像译码器280对MPEG、AVC、MVC、VC-I等的影像流进行译码，生成影像各帧的图像。影像信号处理电路282对从影像译码器280取得的帧进行画质校正、图像尺寸及分 辨率的变换、色彩空间的变换、主影像与副影像的合成等。另外，还进行OSD (On ScreenDisplay :屏幕视控系统)影像的重合。影像信号处理电路282还包括3D影像生成部284，在输出三维影像时，3D影像生成部284将从影像解码器280取得的图像数据变换成三维的输出格式。HDMI发送部286 (HDMI Tx)将声音信号处理电路278和影像信号处理电路282生成的信号作为HDMI的发送送号，经由HDMI端子288进行发送。非易失性存储器290中保存有用于控制三维影像再现装置100的系统程序等。CPU292经由总线294从非易失性存储器290读入系统程序。CPU292将主存储器296作为工作存储器而执行系统程序，由此统括地控制三维影像再现装置100。例如，驱动器I / F(Interface :接口)198经由总线294从CPU292取得表示应控制BD / DVD驱动器270的指示，控制BD / DVD驱动器270。CPU292介由遥控器接收部298接收来自用户的针对三维影像再现装置100的指示，并经由总线294向上述各电路发出控制命令。上述各电路根据从CPU292取得的控制命令进行动作。由CPU292等进行包含HDMI发送部286应发送的影像的格式和控制信号等的包内容、输出定时、分辨率切换等的处理。图13是示意性表示实施方式的三维影像再现装置100的功能结构的图。三维影像再现装置100包括接收部10、影像再现部12、影像变换部14、影像输出部16、以及是否变换决定部18。接收部10接收来自用户的针对三维影像再现装置100的指示。接收部10主要由图12中的遥控器接收部298和CPU292来实现。影像再现部12再现保存在Blu-ray Disc(商标)等中的影像。影像再现部12主要由图12中的BD / DVD驱动器270、解码电路272、分离电路274、以及影像译码器280来实现。是否变换决定部18取得影像再现部12要再现的影像的属性，决定是否应变换该影像的帧率。为此，是否变换决定部18包括影像属性判定部26和输出条件确认部28。在影像再现部12要再现的影像是包含从不同视点观察三维空间的目标时的左眼用视差图像和右眼用视差图像的三维影像的情况下，影像属性判定部26判定该三维影像的帧率是否在可能发生闪烁的预定帧率范围内。预定帧率范围例如是从10[Hz]到50[Hz]的范围。当影像属性判定部26判定为影像再现部12要再现的影像在可能发生闪烁的预定帧率范围内时，输出条件确认部28向后述的影像变换部14输出表示应提高该影像的帧率的指示。是否变换决定部18通过由CPU250读出并执行保存在图12的非易失性存储器254中的用于决定是否变换的程序来实现。影像变换部14根据来自输出条件确认部28的指示，进行影像再现部12要再现的影像的分辨率变换和帧率变换等影像信号处理。因此，影像变换部14包括分辨率变换部
20、帧率变换部22、以及变换控制部24。影像变换部14主要由图12中的影像信号处理电路282来实现。
变换控制部24从输出条件确认部28取得针对影像再现部12要再现的影像是否进行影像信号处理的指示。当从变换控制部24取得表示应变换影像再现部12要再现的影像分辨率的指示时，分辨率变换部20变换该影像的分辨率。当影像再现部12要再现的影像帧率在可能发生闪烁的预定帧率范围内时，帧率变换部22提高该影像的帧率直到超出了预定帧率范围。具体而言，将影像的帧率变换到60[Hz]或其之上。帧率的变换例如通过使用前述的2-3变换或插值技术来实现。如前所述，帧率越高越不容易出现闪烁。因此，帧率变换部22提高影像再现部12要再现的影像的巾贞率。然而，产生HDMI传输中的TMDS (TransistionMinimizedDifferential Signaling :转换最小差分信号)时钟的 IC (Integrated Circuit :集成电路)多数是以按60[Hz]传输有效扫描线为1080的二维影像为前提设计的。因此，虽然可以进行图8所示的影像信号的传输，但有时难以按60[Hz]输入输出有效扫描线为1080条的二维影像。因此，变换控制部24判断是否会因帧率变换部22提高影像再现部12要再现的三维影像的帧率，而使得处理三维影像的电路的处理能力不足。当处理三维影像的电路处理能力不足时，向分辨率变换部20发出应降低三维影像的分辨率内容直到在该电路的处理能力范围内的指示。影像输出部16将从影像变换部14取得的影像输出到三维电视机206等显示设备。影像输出部16由图12中的HDMI发送部286和HDMI端子288来实现。根据用户的不同，有时即使发生闪烁也希望以高分辨率来视听三维影像。因此，输出条件确认部28也可以介由影像输出部16向显示设备输出敦促选择有无帧率变换的显示，并接受来自用户的选择。图14是敦促选择有无帧率变换的显示例。可以通过将图14所示的显示作为OSD输出到显示设备，来接受用户的选择。输出条件确认部28将所取得的来自用户的指示输出给变换控制部24。图13表示了用于实现实施方式I的三维影像再现装置100的功能结构，而省略了其他的结构。图13中，作为进行各种处理的功能块而记载的各要素在硬件上能用CPU、主存储器、其他LSI来构成，软件上由被载入到主存储器中的程序等来实现。因此，本领域技术人员应当理解这些功能块能够仅由硬件、仅由软件、或者通过它们的组合以各种形式来实现，并非限定于某一种。图15是表示实施方式的三维影像显示的处理步骤的流程图，是实施方式的三维影像再现装置100中的影像显示的处理步骤的流程图。在以下的流程图中，通过表示步骤的S (St印的首字母)和数字的组合来表示各部的处理步骤。另外，在由S和数字的组合来表示的处理中执行某个判断处理，当其判断结果为肯定时，附加Y (Yes的首字母)，例如表示为(S18的Y)，相反，在其判断结果为否定的情况下，附加N(No的首字母)，例如表示为(S18的N)。本流程图中的处理在影像再现部12再现立体影像时开始。影像再现部12再现蓝光盘(Blu-ray Disk商标)等中存储的三维影像(S10)。影像属性判定部26从影像再现部12取得影像再现部12要再现的三维影像的帧率和分辨率(S12)。输出条件确认部28根据从影像属性判定部26取得的帧率和分辨率，判定是否应变换影像的帧率(S14)。输出条件确认部28将判定结果提示给用户，并接受来自用户的选择(S 16)。当需要进行影像变换时(S18的Y)，分辨率变换部20降低影像的分辨率，帧率变换部22通过提高分辨率变换部20输出的影像的帧率来对影像进行变换(S20)。当不需要进行影像变换时(S18的N)，分辨率变换部20和帧率变换部22不进行特别的处理。影像输出部16将从影像变换部14取得的影像输出到显示设备(S22)。影像输出部16输出影像时， 本流程中的处理结束。上述结构的动作如下。在实施方式的三维影像再现装置100中，用户事先在系统设定中选择是否进行影像帧率等的变换。另外，还可以在影像再现过程中的OSD中进行选择。在想要视听有效扫描线为1080条且帧率为24[Hz]的三维影像时，是否变换决定部18取得在系统设定中设定的信息。在选择了表示要进行变换时，影像变换部14提高影像的帧率。如上所述，根据实施方式，通过提高有可能识别为发生闪烁的影像的帧率，能抑制闪烁的发生。另外，在为提高帧率而需要降低分辨率的情况下，向用户提示该意思，从而能实现符合用户喜好的影像变换。以上基于实施方式说明了本发明。本领域技术人员应当理解该实施方式仅是例示，其各构成要素和处理过程可以有各种变形例，并且这些变形例也包含在本发明的范围内。[实施方式的变形例]图16是示意性表示实施方式的三维影像显示系统300中所使用的设备的另一结构的图。本例的三维影像显示系统300中使用的设备包括三维影像再现装置100、放大器196、以及三维电视机206。三维影像再现装置100包括HDMI发送部286 (HDMI Tx)，介由HDMI电缆268a与放大器196进行通信。另外，三维电视机206也介由HDMI电缆268b与放大器196进行通信。在图11所示的例子中，从三维影像再现装置100输出的影像和声音等的信号直接被输入到三维电视机206，而在本例中，从三维影像再现装置100输出的影像和声音等的信号在被输入三维电视机206之前，在放大器196中进行信号处理。比起在三维影像再现装置100或三维电视机206内进行处理，具有能进行更高度的声音信号处理这样的效果。图17是示意性地表示实施方式的放大器196的电路结构的图。HDMI接收部168 (HDMI Rx)从介由HDMI输入端子166取得的HDMI信号中分离出影像、声音、控制信号等各信号的包。在声音数据的流不是Linear PCM而是例如Dolby Digital (商标)、DTS (商标)等的情况下，声音译码器170将它们解码，变换成Linear PCM。变换后的Linear PCM信号进行改换排列声音通道等的处理。声音信号处理电路228进行音质校正等声音信号处理。声音信号处理电路172进行主声、副声、以及按键声等互动音频的音频混合、混音(down-mix)、采样率的变换等音场校正、音质改善等声音信号处理。声音放大电路174为了向扬声器176输出声音而进行D / A转换,或者根据设定的音量而放大模拟信号。另外，有时是在三维电视机206等接收设备侧输出声音，而非在放大器196再现声音。此时，HDMI接收部168将所取得的声音数据和声音控制信号等声音相关的包直接传输到三维电视机206等的接收设备，而并不输出到上述的声音译码器170、声音信号处理电路172、以及声音放大电路174。
影像信号处理电路178进行HDMI接收部168取得的影像数据的画质改善、分辨率变换、三维影像用的各种格式间的变换等处理。图形生成电路180将放大器196的菜单和用于提示各种信息的显示重叠在从影像信号处理电路178输出的影像上。HDMI发送部182 (HDMI Tx)将图形生成电路180生成的信号作为HDMI的发送信号而介由HDMI端子184进行发送。另外，在三维电视机206等接收设备侧输出声音的情况下，将HDMI接收部168取得的声音数据和声音控制信号等与声音有关的包介由HDMI端子184进行发送。非易失性存储器186保存用于控制放大器196的系统程序等。CPU188经由总线190从非易失性存储器186读入系统程序。CPU188通过将主存储器192作为工作存储器执行系统程序，来统括地控制放大器196。例如，通过CPU188执行从非易失性存储器186读出的控制信号确认用程序，来确认从三维影像再现装置100传送来的控制信号的内容，并根据需要，在变更其内容的基础上，向三维电视机206输出。CPU188经由遥控接收器194接收来自用户的针对放大器196的指示，并通过总线190将控制命令发送给上述各电路。上述各电路根据从CPU188取得的控制命令进行动作。包含HDMI发送部182应发送的影像的格式和控制信号等的包内容、输出定时、分辨率切换等的处理由CPU188等执行。在上述说明中，说明了在三维影像再现装置100和放大器196中进行帧率变换等影像信号处理的情况。但在三维电视机206能够执行同样的影像信号处理的情况下，也可以是，三维影像再现装置100和放大器196不进行影像信号处理，而将影像发送到三维电视机206。输出条件确认部28从三维电视机206取得EDID (Extended DisplayIdentification Data :扩展显示标识数据)并解析其内容。其结果,在设定了表示不需要影像信号处理的标志的情况下，三维影像再现装置100和放大器196能不执行影像信号处理地实现。由于能执行适合三维电视机206的影像信号处理，因此在能以更优的画质视听影像这一点上是有利的。或者，在从三维电视机206取得的EDID中被设定有表示不需要影像信号处理的标志时，也可以将该意思提示给用户，让其选择在三维影像再现装置100、放大器196、三维电视机206的哪一个装置中进行影像信号处理。图18是敦促选择三维电视机206是否进行帧率变换的显示例。输出条件确认部28能通过将图18所示的OSD显示在三维电视机206上并由用户选择来实现。当户选择了在放大器196中进行影像信号处理时，可以认为从三维电视机206输入到放大器196中的控制信号中设立了表示应三维电视机206中进行影像信号处理的标志。在这种情况下,通过放大器196中的CPU188执行专用的程序，从输入到放大器196中的控制信号中消除表示应在三维电视机206中进行影像信号处理的标志。〔标号说明〕10 :接收部；12 :影像再现部；14 :影像变换部；16 :影像输出部；18 :是否变换决定部；20 :分辨率变换部；22 :帧率变换部；24 :变换控制部；26 :影像属性判定部；28 :输出条件确认部；100 :三维影像再现装置；206 :三维电视机；208 :眼镜驱动信号发送部；210 :快门式眼镜；300 :三维影像显示系统。〔工业可利用性〕本发明能利用于三维影像再现方法和三维影像再现装置。·
权利要求
1.一种三维影像再现方法，其特征在于 当再现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内，当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三维影像的帧率直到超出所述预定帧率范围，来进行再现。
2.根据权利要求I所述的三维影像再现方法，其特征在于 当因提高所述三维影像的帧率，处理所述三维影像的电路的处理能力不足时，在提高所述三维影像的帧率的同时降低所述三维影像的分辨率，直至达到所述电路的处理能力的范围。
3.根据权利要求I或2所述的三维影像再现方法，其特征在于 当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，向用户可选择地提示是否提高帧率，当用户选择应提高帧率时，提高所述三维影像的帧率地进行再现。
4.一种三维影像再现装置，其特征在于，包括 影像属性判定部，当再现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内；以及 帧率变换部，当上述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三维影像的帧率直到超出所述预定帧率范围。
5.根据权利要求4所述的三维影像再现装置，其特征在于，还包括 输出条件确认部，当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，从显示所述三维影像的显示设备取得包含是否提高帧率的指示的信号； 当所述输出条件确认部从显示所述三维影像的显示设备取得应提高帧率的指示时，所述帧率变换部提高所述三维影像的帧率。
全文摘要
当再现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的三维影像时，影像属性判定部(26)判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内。当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，帧率变换部(22)提高所述三维影像的帧率直到超出所述预定帧率范围。
文档编号H04N13/04GK102918859SQ201080066278
公开日2013年2月6日 申请日期2010年11月1日 优先权日2010年4月20日
发明者武中康一 申请人:索尼电脑娱乐公司