立体影像处理装置以及立体影像处理方法

立体影像处理装置以及立体影像处理方法
【专利摘要】立体影像处理装置（1）具备：切换操作检测部（130），检测切换操作，该切换操作是指用户进行的三维影像的频道的选择操作或者用于三维影像的快进再现、后退再现、跳过或段首定位的操作；频度判定部（140），判定切换操作检测部（130）的切换操作的每单位时间的检出频度；以及影像处理部（150），在频度判定部（140）判定出的每单位时间的检出频度在规定频度以上的情况下，进行用于使三维影像的切换前后的进深的差减少的处理。
【专利说明】立体影像处理装置以及立体影像处理方法
【技术领域】
[0001]本发明涉及输出三维影像的立体影像处理装置。
【背景技术】
[0002]在视听三维影像时，眼追踪三维影像的被摄体的进深(cbpth)变化而动作。
[0003]在专利文献I中，记载了检测三维影像内的场景变换(scene change)、在场景变换时使进深平滑过渡的方法。
[0004]在专利文献2中，记载了在将多个影像内容显示于多画面的情况下、用户指定的影像内容以三维显示而用户未指定的影像内容以二维显示的方法。
[0005]现有技术文献
[0006]专利文献
[0007]专利文献1:日本特开2010-258723号公报
[0008]专利文献2:日本特开2011-249859号公报
发明概要
[0009]发明要解决的课题
[0010]但是，在专利文献I所述的方法中，在用户的操作对三维影像引起场景变换(例如快进、后退、节目切换)时，无法使进深平滑过渡。
[0011]另外,基于用户操作的跳过(skip)再现的反复或频道切换(zapping)动作导致的以高频度反复进行场景变换会对视听三维影像的用户的视觉系统造成较大负担。
[0012]关于专利文献2的方法，在逐次切换多画面中的选择画面时，会逐次显示不同进深的三维影像，会与频道切换同样地对用户的视觉系统造成较大负担。
[0013]这样，在现有的方法中，存在的问题是，在由于用户操作而引起场景变换的情况下，视听三维影像的用户的眼负担增加，眼会疲劳。
[0014]
【发明内容】

[0015]本发明是为了解决上述课题而做出的，其目的在于提供一种防止由于用户操作引起场景变换时的用户的眼疲劳的立体影像处理装置。
[0016]用于解决课题的手段
[0017]为了达成上述目的，本发明一方式的立体影像处理装置，具备:切换操作检测部，检测切换操作，该切换操作是指用户进行的三维影像的频道的选择操作或者用于三维影像的快进再现、后退再现、跳过或段首定位的操作；频度判定部，判定上述切换操作检测部对上述切换操作的每单位时间的检出频度；以及处理部，在上述频度判定部判定出的上述每单位时间的检出频度在规定频度以上的情况下，进行用于使三维影像的切换前后的进深的差减少的处理。
[0018]并且，这些全体的或具体的方式可以用系统、方法、集成电路、计算机程序或者记录介质来实现，也可以用系统、方法、集成电路、计算机程序以及记录介质的任意组合来实现。
[0019]发明效果
[0020]根据本发明的立体影像处理装置，能够防止由于用户操作引起场景变换时的用户的眼疲劳。
【专利附图】

【附图说明】
[0021]图1为表示本发明实施方式I的立体影像显示装置的构成的一例的框图。
[0022]图2为表示本发明实施方式I的立体影像处理装置的详细构成的一例的框图。
[0023]图3A为表示频道变更存储部存储的数据的构成的一例的图。
[0024]图3B是对时间间隔进行说明的示意图。
[0025]图4为表示本发明实施方式I的立体影像处理装置的动作的一例的流程图。
[0026]图5为表示作为三维显示的方式而采用裸眼式的显示部的构成的一例的图。
[0027]图6为表示作为三维显示的方式而采用被动快门方式的显示部的构成的一例的图。
[0028]图7为表示作为三维显示的方式而采用主动快门方式的显示部的构成的一例的图。
[0029]图8为表示本发明实施方式I的变形例I的立体影像处理装置的构成的框图。
[0030]图9为表示立体影像处理装置的动作的流程图。
[0031]图10为表示本发明实施方式I的变形例2的立体影像显示装置的构成的一例的框图。
[0032]图1lA为表示影像信息积蓄部积蓄的信息的一例的图。
[0033]图1lB为表示进深信息积蓄部积蓄的信息的一例的图。
[0034]图12为表示本发明实施方式I的变形例2的立体影像处理装置的动作的一部分的流程图。
[0035]图13A为表示画面的分割例的图。
[0036]图13B为表示进深信息积蓄部积蓄的信息的一例的图。
[0037]图14为表示画面的分割例的图。
[0038]图15A为表示进深信息积蓄部积蓄的信息的一例的图。
[0039]图15B为表示对象区域的一例的图。
[0040]图15C为表示对象区域的一例的图。
[0041]图16为表示频道切换时的视线的移动范围的一例的图。
[0042]图17为表示本发明实施方式2的立体影像显示装置的构成的一例的框图。
[0043]图18为表示本发明实施方式2的立体影像处理装置的动作的一部分的流程图。
【具体实施方式】
[0044]本发明一方式的立体影像处理装置，具备:切换操作检测部，检测切换操作，该切换操作是指用户进行的三维影像的频道的选择操作或者用于三维影像的快进再现、后退再现、跳过或段首定位的操作；频度判定部，判定上述切换操作检测部对上述切换操作的每单位时间的检出频度；以及处理部，在上述频度判定部判定出的上述每单位时间的检出频度在规定频度以上的情况下，进行用于使三维影像的切换前后的进深的差减少的处理。
[0045]根据该构成，在伴随用户的切换操作而频繁地切换三维影像的情况下，能够使三维影像的进深差减少。因此，即使在频繁地切换了三维影像的情况下，也能够防止眼对进深变化的过度追踪。因此，能够防止由于用户操作引起三维影像切换(场景变换)的情况下的用户的眼疲劳。
[0046]例如可以是，上述处理部，通过对上述三维影像的影像信息进行处理，使上述进深的差减少。
[0047]具体而言，上述处理部，通过对上述三维影像的影像信息进行将左眼用影像与右眼用影像之间的视差缩小的处理，使上述进深的差减少。
[0048]并且，可以是，上述处理部，将上述三维影像所含的左眼用影像及右眼用影像中的某一方的影像对上述用户进行提示。
[0049]并且，可以是，上述处理部具备快门调整部，该快门调整部，在提示上述三维影像所含的右眼用影像时，使上述用户佩戴的三维影像用观看器的右眼侧的快门为开状态，并且使上述三维影像用观看器的左眼侧的快门为闭状态，在提示上述三维影像所含的左眼用影像时，使上述右眼侧的快门为闭状态，并且使上述左眼侧的快门为开状态；上述快门调整部，进一步在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，(i)在提示上述右眼用影像时使上述右眼侧的快门及上述左眼侧的快门为开状态，在提示上述左眼用影像时使上述三维影像用观看器的上述右眼侧的快门及上述左眼侧的快门为闭状态，或者，(ii)在提示上述左眼用影像时使上述三维影像用观看器的上述右眼侧的快门及上述左眼侧的快门为开状态，在提示上述右眼用影像时使上述三维影像用观看器的上述右眼侧的快门及上述左眼侧的快门为闭状态。
[0050]并且，可以是，上述立体影像处理装置还具备积蓄三维影像的进深信息的进深信息积蓄部；上述处理部，包含:进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的上述进深信息，判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上；以及进深调整部，在上述进深调整判定部判定为上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
[0051]根据该构成，能够仅在进深差在规定差以上的情况下进行使进深差减少的处理。因此，在场景变换前后的进深差较少那样不需要使进深差减少的情况下，能够防止不必要地进行使进深差减少的处理。并且，进深调整部在实施方式中具体化为二维化处理部。
[0052]并且，可以是，上述进深信息积蓄部，对将三维影像的显示画面在空间上分割后的多个显示区域的各个，积蓄进深信息；上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的每个显示区域的上述进深信息，按每个显示区域来判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上；上述进深调整部，在上述进深调整判定部判定为在某个显示区域中上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
[0053]可以认为在场景变换的前后用户持续观看画面的大致相同的位置。因此，通过按每个显示区域判断进深差，无论持续观看哪个位置都能够判断在用户持续观看的位置进深是否变化。因此，能够仅在必要时进行使进深差减少的处理。
[0054]并且，可以是，上述多个显示区域是通过以使三维影像的显示画面的越靠中央部越比周边部更细小的方式将上述显示画面分割而得到的。
[0055]可以认为与画面的周边部相比用户更多地观看中央部。因此，通过对中央部进行更细小的分割，能够更高精度地判断在用户持续观看的位置进深是否变化。
[0056]并且，可以是，上述进深信息积蓄部，积蓄三维影像的显示画面的下部的显示区域的进深信息；上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的上述下部的显示区域的上述进深信息，判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上；上述进深调整部，在上述进深调整判定部判定为在上述下部的显示区域中上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
[0057]有时用户一边确认遥控器的按钮位置一边切换频道。在这种情况下，可以认为用户的视线往返于遥控器与显示画面的下半部附近。因此，根据该构成，能够判断在显示画面的下半部附近进深是否变化。因此，能够仅在必要时进行使进深差减少的处理。
[0058]并且，可以是，上述进深信息积蓄部，按三维影像所含的每个对象来积蓄进深信息；上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的每个对象的上述进深信息，在对象间判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上；上述进深调整部，在上述进深调整判定部判定为在某对象间上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
[0059]通常，由于用户用眼追踪三维影像的对象，因此可以认为在场景变换的前后眼也追踪对象。因此，通过判断在场景变换的前后是否在对象间发生进深的变化，能够正确判断场景变换是否对用户的视觉系统造成负担。
[0060]并且，可以是，上述处理部还包含频道选择预测部，该频道选择预测部，根据上述切换操作检测部检测出的三维影像的频道的选择操作的履历，预测将来选择的频道；上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，判定当前选择的频道的三维影像与上述频道选择预测部预测出的上述将来选择的频道的三维影像之间的进深的差是否在上述规定差以上。
[0061]根据该构成，在将来可能选择的频道的三维影像与当前选择的频道的三维影像之间的进深差较大的情况下，能够预先进行使进深差减少的处理。因此，在由于用户选择预测的频道而引起场景变换的情况下，能够减轻对用户的视觉系统造成的负担。
[0062]具体而言，可以是，上述频道选择预测部，在根据上述切换操作检测部检测出的三维影像的频道的选择操作的履历、能够判断为频道按升序被选择的情况下，将比当前选择的频道大的下一个编号的频道预测为将来选择的频道。
[0063]由此，在以升序选择频道的情况下，能够预测将来选择的频道。
[0064]并且，可以是，上述频道选择预测部，在根据上述切换操作检测部检测出的三维影像的频道的选择操作的履历、能够判断为频道按降序被选择的情况下，将比当前选择的频道小的下一个编号的频道预测为将来选择的频道。
[0065]由此，在以降序选择频道的情况下，能够预测将来选择的频道。[0066]并且，可以是，上述切换操作检测部检测的三维影像的频道的选择操作，是用于在同一显示画面的同一显示区域上使三维影像在时间上切换显示的操作。
[0067]根据该构成，能够减轻在用户观看的同一显示画面的同一显示区域上发生场景变换时对用户的视觉系统带来的负担。
[0068]并且，可以是，上述立体影像处理装置还具备向上述用户输出信息的输出部；上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，从上述输出部向上述用户输出警告。
[0069]并且，可以是，上述立体影像处理装置还具备向上述用户输出信息的输出部、以及接受上述用户的操作输入的操作接收部；上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，对用户输出用于询问是否进行用于使进深的差减少的处理的信息。
[0070]并且，可以是，上述立体影像处理装置还具备向与进行了上述切换操作的第I用户不同的第2用户输出信息的输出部；上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，向上述第2用户输出警告。
[0071]并且，可以是，上述立体影像处理装置还具备接受上述第2用户的操作输入的操作接收部；上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，向上述第2用户输出警告，或者向上述第2用户输出询问是否进行用于使进深的差减少的处理的信息；上述操作接收部接受上述第2用户的操作输入；上述处理部，按照上述操作接收部接受的上述第2用户的操作输入，进行用于使进深的差减少的处理。
[0072]并且，这些全体的或具体的方式，可以用系统、方法、集成电路、计算机程序或记录介质来实现，也可以用系统、方法、集成电路、计算机程序或记录介质的任意组合来实现。
[0073]以下，对本发明一方式的立体影像处理装置，参照附图进行具体说明。
[0074](实施方式I)
[0075]在本实施方式中，说明一种立体影像处理装置，其检测用户切换2个以上的三维影像(以下也简称为“影像”)的操作，在切换频度高的情况下，进行使切换前后的影像的进深差减少的图像处理。并且，用户切换2个以上的三维影像的操作，在本实施方式中是指频道(channel)选择操作。
[0076]图1表示实施方式I的立体影像显示装置的构成。
[0077]立体影像显示装置10具备:影像信息积蓄部110、操作输入部120、立体影像处理装置1、显示部160。
[0078]影像信息积蓄部110是积蓄在画面上显示的多个三维影像信息(以下简称为“三维影像”)的存储装置。
[0079]操作输入部120是用于输入用户的操作的设备，例如是控制器或遥控器。操作输入部120通过有线或无线而与立体影像处理装置I连接。
[0080]立体影像处理装置1，按照用户使用操作输入部120输入的操作，从影像信息积蓄部110取得用户选择的频道的三维影像，将取得的三维影像向显示部160输出。
[0081]显示部160将从立体影像处理装置I输出的三维影像在画面(显示器)上显示。
[0082]立体影像处理装置I包含:操作接收部121、切换操作检测部130、频度判定部140、影像处理部150 (构成处理部)、输出部155。
[0083]操作接收部121从操作输入部120接收视听三维影像的用户输入的操作信息。
[0084]切换操作检测部130，基于操作接收部121从操作输入部120接收到的操作信息，检测用户切换影像的操作(以下称为“切换操作”)。并且，切换操作检测部130检测的切换操作，是用于在同一显示画面的同一显示区域上使三维影像在时间上切换并显示的操作。
[0085]频度判定部140判定每单位时间的影像切换操作的频度是否在规定频度以上。
[0086]影像处理部150基于频度判定部140的判定结果，对影像信息积蓄部110中积蓄的三维影像进行进深调整处理。
[0087]输出部155将通过影像处理部150实施了进深调整处理后的影像向显示部160输出。
[0088]<基于频道切换操作的影像处理>
[0089]图2表示实施方式I中的立体影像处理装置I的详细构成。
[0090]本实施方式中的三维影像的切换操作，是对在同一画面的同一区域上显示的三维影像的频道进行依次变更的频道切换操作。
[0091]立体影像处理装置I还包含影像取得部180。切换操作检测部130包含频道变更检测部131。频度判定部140包含计时部141、频道变更存储部142以及频道切换判定部144。影像处理部150包含二维化处理部151、计时部157以及三维化判定部158。
[0092]频道变更检测部131，基于用户输入的切换操作，检测频道变更操作。所检测的频道变更操作，例如表示进行了频道变更操作和操作结果的频道。
[0093]计时部141和计时部157计测时间。
[0094]频道变更存储部142，存储在检测到由频道变更检测部131检测到的频道变更信息的时刻的、距最近的频道变更的时间间隔。图3A为表示频道变更存储部142存储的数据的构成的一例的图。图3B为说明时间间隔的示意图。在图3B的例中示出了，从频道变更O到频道变更4进行了 5次频道变更的情况。频道变更I的最近的频道变更为频道变更O。从进行频道变更O的时刻到进行频道变更I的时刻的时间间隔例如是827秒。频道变更2的最近的频道变更是频道变更1，频道变更存储部142存储从频道变更I的时刻到频道变更2的时刻的时间间隔2秒。同样地，频道变更存储部142存储频道变更3、频道变更4的时刻的距最近的频道变更的时间间隔。在频道变更检测部131每次检测到频道变更时，计时部141将时间计测开始并计测时间间隔。在本实施方式中，假设频道变更存储部142存储的数据数到3为止。
[0095]频道切换判定部144根据每单位时间的频道变更的次数来判定用户的切换操作是否为频道切换。
[0096]影像取得部180，将根据由频道变更检测部131检测到的频道变更操作而被指定的频道的三维影像信息从外部(广播、再现装置等)取得并在影像信息积蓄部110中积蓄。
[0097]二维化处理部151，在通过频道切换判定部144判定为用户的切换操作是频道切换操作的情况下，进行将影像取得部180取得的三维影像信息变换为二维影像信息的二维化处理。
[0098]三维化判定部158基于二维化处理开始后的经过时间，进行二维化处理的停止的判定。[0099]输出部155将通过二维化处理部151进行了二维化处理的影像信息输出。
[0100]另外，输出部155在通过频道切换判定部144判定为用户的切换操作不是频道切换操作的情况下，将影像信息积蓄部110中积蓄的三维影像输出。
[0101]显示部160将从输出部155取得的影像信息在画面上显示。
[0102]并且，虽然在本实施方式中频道变更存储部142存储时间间隔，但是也可以存储检测出频道变更操作的时刻，频道切换判定部144根据在频道变更存储部142中存储的时刻来计算时间间隔。
[0103]图4为表示立体影像处理装置I的动作的流程图。根据图4对立体影像处理装置I的处理顺序进行说明。
[0104]包含立体影像处理装置I的立体影像显示装置10的电源接通后，立体影像处理装置I开始动作(S1010)。
[0105]操作接收部121从操作输入部120接收视听三维影像的用户对操作输入部120输入的操作信息(S1030)。
[0106]频道变更检测部131判定在步骤S1030中操作接收部121接收到的操作信息是否表示频道变更操作(S1040 )。
[0107]在步骤S1030中操作接收部121接收到的操作信息表示频道变更操作时(S1040中的“是”)，影像取得部180根据接收到的频道变更操作，将频道变更操作所指定的频道的影像从外部取得并在影像信息积蓄部110中积蓄(S1050)。
[0108]在步骤S1030中操作接收部121接收到的操作信息不表示频道变更操作时(S1040中的“否”)，返回步骤S1030。
[0109]计时部141判断从在频道变更存储部142中存储的最近的频道变更操作起是否经过了第I规定时间以上、例如5秒以上(S1060)。
[0110]在计时部141判断为从最近的频道变更操作起没有经过第I规定时间以上的情况下(S1060中的“否”)，频道变更存储部142存储与最近的频道变更操作之间的时间间隔(S1070)。例如，如图3B所示那样，将与从频道变更2到频道变更4的频道变更操作相对应的时间间隔存储在频道变更存储部142中。在本实施方式中，频道变更存储部142存储的数据数到3为止。因此，在频道变更存储部142已存储有3个数据的情况下，删除最早的数据而存储该时间间隔。在频道变更存储部142存储的数据小于3的情况下，向存储的数据添加存储该时间间隔。
[0111]在计时部141判断为从最近的频道变更操作起经过了第I规定时间以上的情况下(S1060中的“是”)，频道变更存储部142将存储的频道变更操作的全部数据删除(S1080)。
[0112]在步骤S1070后，频道切换判定部144判断在频道变更存储部142中是否存储了规定数以上例如3个以上的频道变更操作的时间间隔(S1090)。
[0113]在存储有规定数以上的频道变更操作的时间间隔的情况下(S1090中的“是”)，频道切换判定部144根据频道变更存储部142中存储的频道变更操作的时间间隔，计算每单位时间的频道变更操作的频度(SI 100)。在本实施方式中，例如通过频道变更操作的时间间隔的平均来求出每单位时间的频道变更操作的频度。
[0114]在没有存储规定数以上的频道变更操作的时间间隔的情况下(S1090中的“否”)，进入步骤S1120。[0115]频道切换判定部144判断在步骤SllOO中计算出的频道变更操作的频度是否在规定频度以上。这里，作为该判断，频道切换判定部144判断是否每第2规定时间(例如3秒)存在I次以上的频道变更操作(S1110)。
[0116]在步骤SlllO中判断为频道变更操作的频度在规定频度以上的情况下(步骤SlllO中的“是”)，二维化处理部151进行将三维影像变换为二维影像的二维化处理。即，二维化处理部151选择三维影像的右眼用或左眼用的某一方的影像。
[0117]输出部155将选择的影像输出。
[0118]显示部160显示在影像信息积蓄部110中积蓄的影像以使得用户的双眼能够看到选择的影像(S1130)。
[0119]并且，关于显示部160的动作，按三维影像的每个显示方式在后面进行叙述。
[0120]在步骤SlllO中判断为频道变更操作的频度小于规定频度的情况下(步骤SlllO中的“否”)，进入步骤S1120。
[0121]在步骤S1120中，二维化处理部151不进行二维化处理，输出部155将影像信息积蓄部110中积蓄的三维影像的左眼用影像及右眼用影像输出。显示部160显示三维影像以使得用户能够用对应的眼看到与左右眼对应的影像(S1120)。
[0122]三维化判定部158，参照由计时部157计时的从步骤SI 130执行时起的二维化处理的持续时间，判定是否停止二维化处理(步骤S1140)。计时部157每当步骤S1130被执行时从O开始计时。即，计时部157每当频道变更操作被进行时从O开始计时。因此，在用户每单位时间以规定频度以上连续进行频道变更的情况下，持续进行二维化处理。并且，在用户降低每单位时间的频道变更的频度、即停止频道切换时，停止二维化处理而进行三维显示。
[0123]在步骤SI 140中，在二维化处理的持续时间在第3规定时间(例如5秒)以内的情况下(步骤S1140中的“是”)，进入步骤S1030。即持续进行二维化处理部151的二维化处理。
[0124]在步骤SI 140中，在二维化处理的持续时间超过第3规定时间(例如5秒)的情况下(步骤S1140中的“否”)，二维化处理部151停止二维化处理，进入步骤S1120。
[0125]在步骤S1120的执行后返回步骤S1030。
[0126]图5示出作为三维显示的方式采用裸眼式的显示部160的构成的一例。
[0127]在裸眼式中，使用在显示器表面设置的屏障(barrier)或特殊的透镜将光的方向调整为水平方向，从而对于视听显示器的用户，使右眼看到右眼用影像、左眼看到左眼用影像。
[0128]显示部160具有影像控制部161和影像显示部162。
[0129]显示部160是裸眼式的显示方式，在图5那样的构成的情况下，在步骤S1130中，二维化处理部151首先选择右眼用或左眼用某一方的影像。
[0130]接着，二维化处理部151使在影像信息积蓄部110中积蓄的三维影像的左右影像相同。例如，在选择了右眼用影像的情况下，二维化处理部151将在影像信息积蓄部110中积蓄的三维影像的左眼用影像替换为右眼用影像，使左眼用影像与右眼用影像完全相同。
[0131]二维化处理部151在进行了上述二维化处理后，将完全相同的右眼用影像与左眼用影像向显示部160的影像控制部161输出。
[0132]影像控制部161与三维显示时同样地生成控制信号，该控制信号用于将右眼用图像分割为狭缝(slit)并在右眼用显示位置上显示，将左眼用图像分割为狭缝并在左眼用显示位置上显示。
[0133]影像显示部162按照从影像控制部161输出的控制信号，显示被二维化处理部151处理并从输出部155输出的影像。即，对用户的左右眼显示同一影像，用户能够视听二维影像。
[0134]图6示出作为三维显示的方式采用被动快门(passive shutter)方式的显示部160的构成的一例。
[0135]在被动快门方式中，将显示器分割为右眼用部分和左眼用部分，在其各自的表面设有右眼用和左眼用的角度或方向不同的偏光滤光片。并且，使右眼和左眼通过具备与显示器的偏光滤光片的角度或方向对应的偏光快门的专用眼镜视听影像，从而能够实现三维显不O
[0136]显示部160包含影像控制部261、影像显示部262、和三维专用眼镜30 (构成三维观看器)，三维专用眼镜30包含快门263。
[0137]在步骤S1130中，二维化处理部151选择右眼用或左眼用某一方的影像。将影像信息积蓄部110中积蓄的三维影像的右眼用影像及左眼用影像中的未选择的影像替换为选择的影像，使右眼用影像与左眼用影像为同一影像。
[0138]二维化处理部151将左右影像变得相同的影像向影像控制部261输出。影像控制部261与三维显示时同样地生成将左右影像分割显示在各影像的显示区域上的控制信号。
[0139]影像显示部262按照从影像控制部261输出的控制信号，显示由二维化处理部151处理后的影像。
[0140]用户通过佩戴的三维专用眼镜30的快门263，视听在影像显示部262上显示的影像。即，对用户的左右眼显示同一影像，用户能够视听二维影像。
[0141]图7示出作为三维显示的方式采用主动快门(active shutter)方式的显示部160的构成的一例。
[0142]在主动快门方式中，在显示器上交替显示右眼用影像和左眼用影像，与显示定时配合地使专用眼镜的快门左右交替地开闭。由此，在显示右眼用影像的定时打开右眼的快门，用户用右眼看显示器。并且，在显示左眼用影像的定时打开左眼的快门，用户用左眼看显示器。
[0143]通过使左右影像的切换足够快，用户能够将左右影像融合而进行立体观看。
[0144]如图7所示，显示部160具备影像控制部361、影像显示部362、发送部363和三维专用眼镜30A。影像控制部361控制左右影像的显示定时与左右快门的开闭定时。影像显示部362按照影像控制部361的控制，显示左右影像。发送部363将影像控制部361的控制信号(同步信号)向三维专用眼镜30A发送。
[0145]三维专用眼镜30A包含接收部364、快门控制部365和快门366。接收部364接收从发送部363发送的控制信号。快门控制部365基于接收部364接收到的控制信号，控制快门366的开闭定时。
[0146]在这样的构成的情况下，在步骤S1130中显示二维化后的影像的方法有2种。
[0147]第I方法中，与裸眼式或被动快门方式同样地，二维化处理部151进行将影像信息积蓄部110中积蓄的三维影像替换为左右相同的影像的处理，将左右相同的影像与进行三维显示时同样地进行显示。
[0148]第2方法中，二维化处理部151仅选择显示左右哪个影像，影像控制部361以使得用双眼看所选择的一方的影像的方式，变更快门366的开闭定时。
[0149]在第I方法中，在步骤S1130中，二维化处理部151选择右眼用影像及左眼用影像的某一方的影像，将在影像信息积蓄部110中积蓄的三维影像的右眼用影像及左眼用影像中未选择的影像替换为选择的影像，从而使右眼用影像与左眼用影像为同一影像。
[0150]二维化处理部151将变得相同的右眼用影像及左眼用影像向影像控制部361输出。影像控制部361与三维显示时同样地，生成将左右影像交替显示的控制信号，进而与显示同步地生成将左右的快门366切换的同步信号。
[0151]影像显示部362按照从影像控制部361输出的控制信号，显示由二维化处理部151处理后的影像。
[0152]同时，发送部363将影像控制部361生成的同步信号向三维专用眼镜30A发送，三维专用眼镜30A的接收部364接收该同步信号。
[0153]快门控制部365按照接收部364接收到的同步信号，控制快门366的开闭。
[0154]由于通过二维化处理部151使左右影像相同，因此用户用右眼和左眼依次看到相同影像，从而视听二维影像。
[0155]在第2方法中，在步骤S1130中，二维化处理部151选择右眼用影像及左眼用影像的某一方的影像。
[0156]这里，假设二维化处理部151例如选择右眼用影像。二维化处理部151将选择结果向影像控制部361输出。
[0157]影像控制部361与三维显示时同样地，生成将左右影像交替显示的控制信号，进而与显示同步地生成将左右的快门切换的同步信号，以使得右眼与左眼双方的快门在显示右眼用影像的定时打开，在显示左眼用影像的定时关闭。
[0158]影像显示部362与三维显示时同样地交替显示左右影像，发送部363将影像控制部361生成的同步信号向接收部364发送。
[0159]接收部364将接收到的同步信号向快门控制部365输出，快门控制部365基于同步信号将快门同步开闭。由此仅在显示右眼用图像时用户佩戴的三维专用眼镜30A的快门都被开放，用户仅视听右眼用图像。
[0160]这样，通过在对多个三维影像进行频道切换时变换为二维进行显示，从而不会由于由用户的切换操作引起的频繁场景变换而显示进深变化频繁发生的容易疲劳的影像，能够防止由用户的切换操作引起的用户疲劳。
[0161]S卩，在伴随用户的切换操作而频繁地切换三维影像时，能够使三维影像的进深差减少。因此，即使在频繁地切换三维影像的情况下，也能防止眼对进深变化的过度追踪。因此，能够防止由用户操作引起三维影像的切换(场景变换)时的用户的眼疲劳。
[0162](实施方式I的变形例I)
[0163]在实施方式I中，若每单位时间不进行至少4次的频道变更操作，则不进行三维影像的进深调整处理(二维影像化处理)，但是在本变形例中，对即使在仅进行2次频道变更操作的情况下也能够进行进深调整处理的立体影像处理装置进行说明。
[0164]图8是表示在仅有2次频道变更操作的情况下也进行进深调整处理的、实施方式I的变形例I的立体影像处理装置的构成的框图。
[0165]本变形例的立体影像处理装置1A，在实施方式I的立体影像处理装置I的构成中，作为频度判定部140的替代而具备频度判定部140A。频度判定部140A从频度判定部140的构成中将频道变更存储部142去除，并且作为频道切换判定部144的替代而具备频道切换判定部144A。
[0166]频道切换判定部144A，若从最近的频道变更操作起没有经过第I规定时间以上、例如5秒以上，则判定为用户的频道变更操作是频道切换。
[0167]图9为表示立体影像处理装置IA的动作的流程图。
[0168]该流程图是从图4所示的实施方式I的立体影像处理装置I的流程图中将步骤S1070?步骤SlllO去除而得到的。以下，对与实施方式I不同的部分进行说明。
[0169]频道切换判定部144A判断计时部141所计时的从最近的频道变更操作起到当前检测到的频道变更操作为止的时间间隔是否经过了第I规定时间以上、例如5秒以上(Sioeo)0如果上述时间间隔小于5秒，则频道切换判定部144A判断为频道变更操作是频道切换。
[0170]在从最近的频道变更操作起的时间间隔小于第I规定时间的情况下，即在判断为频道变更操作是频道切换的情况下(S1060中的“否”)，二维化处理部151进行将三维影像变换为二维影像的处理，输出部155输出二维化后的影像。显示部160显示从输出部155输出的影像(SI 130)。
[0171]在从最近的频道变更操作起的时间间隔在第I规定时间以上的情况下，即在判断为频道变更操作不是频道切换的情况下(S1060中的“是”)，进入步骤S1120。在步骤S1120中，二维化处理部151不进行二维化的处理，输出部155将在影像信息积蓄部110中积蓄的三维影像输出，显示部160显示三维影像(SI 120)。
[0172]这样，在本变形例中，不计算每单位时间的频道变更操作的频度，在从紧前(紧挨着且位于之前)的频道变更操作起在规定时间以内进行了频道变更操作的全部情况下进行进深调整处理。由此，能够更快地应对频道切换，更快地消除场景变换对用户的视觉系统造成的负担。
[0173](实施方式I的变形例2)
[0174]在实施方式I中，在进行了频道切换的情况下，不考虑在频道的切换前后的影像的进深差而进行三维影像的二维化，在本变形例中，仅在进深差大的情况下进行三维影像的二维化。
[0175]图10是表示本变形例的立体影像显示装置的构成的图。
[0176]立体影像显示装置IOB具备立体影像处理装置1B、影像取得部180、影像信息积蓄部110、进深信息积蓄部190和显示部160。
[0177]立体影像处理装置IB具有如下构成:在图1及图2所示的立体影像处理装置I的构成中，作为切换操作检测部130及影像处理部150的替代，分别具备切换操作检测部130B及影像处理部150B。
[0178]切换操作检测部130B具备频道变更检测部131和变更履历存储部132。影像处理部150B具备频道选择预测部152、进深调整判定部154、二维化处理部151、计时部157和三维化判定部158。对与图1及图2共通的部分标记同一符号而适当地省略说明。[0179]变更履历存储部132存储频道变更检测部131检测的频道变更操作所指定的频道。
[0180]频道选择预测部152预测用户下一个选择的频道。
[0181]进深调整判定部154根据当前显示的三维影像的进深和预测出的频道的三维影像的进深，判定是否需要进行进深调整。
[0182]另外，影像处理部150B也可以包含用二维化以外的方法减小进深变化的进深调整部。
[0183]以下对进深信息积蓄部190进行说明。
[0184]图1lA及图1lB示出影像信息积蓄部110及进深信息积蓄部190各自积蓄的信息的一例。
[0185]影像信息积蓄部110按每个频道而保存有时刻、帧、以及每帧的右眼用图像和左眼用图像的数据。右眼用图像及左眼用图像是构成右眼用影像及左眼用影像的图像。
[0186]进深信息积蓄部190按每个时刻(帧)而保存有能够显示的频道、和以该频道显示的图像的进深信息。进深信息积蓄部190保存有成为图像中的中心的对象的进深位置即焦点位置的信息作为进深信息。这里，焦点位置将用户的标准视听位置(例如从画面平面离开画面的纵长度的3倍距离的位置)设为0，以cm示出朝向画面平面的进深方向的轴上距离。作为进深信息，除了焦点距离以外，也可以使用图像中的平均进深或画面中心点的进深等的距离信息。并且，作为进深信息，也可以使用视差、即左右图像的对应点间的距离等信息。并且，作为进深信息，也可以使用标准视听位置上的用户模型(假定具有标准瞳孔间距离的用户)的会聚角等用户眼球运动的信息。并且，进深信息积蓄部190中积蓄的进深信息也可以预先从广播波取得。并且，也可以将在蓝光光盘(Blu-ray Disc (注册商标))等记录介质中与三维影像一起记录的进深信息积蓄到进深信息积蓄部190中。
[0187]图12为表示本变形例的立体影像处理装置IB的动作的一部分的流程图。
[0188]从步骤S1010到步骤S1040、从步骤SI 120到步骤SI 140与实施方式I的图4相同而省略说明。
[0189]以下按照图4和图12对立体影像处理装置IB的动作进行说明。
[0190]在步骤S1040中所输入的切换操作是频道变更操作的情况下(S1040中的“是”)，变更履历存储部132存储通过频道变更操作而指定的频道(步骤S2000)。
[0191]在步骤S1040中所输入的切换操作不是频道变更的情况下(S1040中的“否”)，返回步骤S1030。
[0192]在步骤S2000之后，计时部141根据在频道变更存储部142中存储的最近的频道变更操作，判断是否经过了第I规定时间以上(S1060)。
[0193]在计时部141根据最近的频道变更操作判断为没有经过第I规定时间以上的情况下(S1060中的“否”)，频道变更存储部142存储与最近的频道变更操作之间的时间间隔(S1070)。
[0194]在计时部141根据最近的频道变更操作判断为经过了第I规定时间以上的情况下(S1060中的“是”)，频道变更存储部142将存储的频道变更操作的全部的数据删除(S1080)。
[0195]在步骤S1070之后，频道切换判定部144判断在频道变更存储部142中是否存储有规定数以上、例如3个以上的频道变更操作的时间间隔(S1090)。
[0196]在存储有规定数以上的频道变更操作的时间间隔的情况下(S1090中的“是”)，频道切换判定部144根据在频道变更存储部142中存储的频道变更操作的时间间隔，计算每单位时间的频道变更操作的频度(SI 100 )。
[0197]在没有存储规定数以上的频道变更操作的时间间隔的情况下(S1090中的“否”)，进入步骤S1120。
[0198]频道切换判定部144判断在步骤SllOO中计算出的频道变更操作的频度是否在规定频度以上。这里，作为该判断，频道切换判定部144判断每第2规定时间(例如3秒)是否存在I次以上的频道变更操作(S1110)。
[0199]在步骤SlllO中判断为频道变更操作的频度在规定频度以上的情况下(步骤SlllO中的“是”)，频道选择预测部152根据在频道变更存储部142中存储的频道变更履历，预测下一个选择的频道(S2010 )。
[0200]即，频道选择预测部152判断频道是以升序变更还是以降序变更，在频道以升序变更的情况下，将 比该频道大的下一个编号的频道预测为下一个选择的频道，在频道以降序变更的情况下，将比该频道小的下一个编号的频道预测为下一个选择的频道。另外，也可以是，在按压了遥控器的用于降序变更频道的按钮、或用于升序变更频道的按钮的情况下，判断为频道降序变更或升序变更，由此预测下一个选择的频道。
[0201]在频道变更履历既不是按照升序也不是按照降序分类的情况下，频道选择预测部152将比该频道大的下一个编号的频道和比该频道小的下一个编号的频道双方预测为下一个选择的频道。
[0202]进深调整判定部154从进深信息积蓄部190中积蓄的数据，取得当前显示的频道的进深信息即第I进深信息、通过在变更履历存储部132中存储的该频道变更操作所指示的频道的进深信息即第2进深信息、以及在步骤S2010中预测出的频道的进深信息即第3进深信息。进深调整判定部154计算表示第I进深信息与第2进深信息之差的进深指标，计算表示第2进深信息与第3进深信息之差的进深指标(S2020)。
[0203]例如，表示第I进深信息与第2进深信息之差的第I进深指标通过以下的式I计算，表示第2进深信息与第3进深信息之差的第2进深指标通过以下的式2计算。
[0204]I L1-L2 I /L1XL2…(式 I)
[0205]I L2-L3 I /L2XL3 …(式 2)
[0206]其中，LI为第I进深信息，L2为第2进深信息，L3为第3进深信息。
[0207]进深调整判定部154判定计算出的第I进深指标及第2进深指标的某一个是否在规定值、例如0.01以上(S2030)。
[0208]在某一个进深指标在0.01以上的情况下(S2030中的“是”)，进深调整判定部154决定将影像进行二维显示，二维化处理部151选择三维影像的右眼用影像及左眼用影像的某一方的影像，控制显示部160而显示在影像信息积蓄部110中积蓄的影像，以使得用户的双眼能够看到选择的影像(S1130)。
[0209]在步骤S2030中，在哪个指标都小于0.01的情况下(S2030中的“否”)，二维化处理部151不进行二维化的处理，显示部160将在影像信息积蓄部110中积蓄的影像进行三维显示(S1120)。[0210]这样，立体影像处理装置1B，在对多个三维影像进行了频道切换时，对每个频道的进深进行比较，在频道变更引起的进深变化大的情况下，将三维影像变换为二维进行显示。由此，在频道切换时相同进深的影像连续的情况下，能够持续进行三维显示而使用户更易于理解地看到各节目的状态。另一方面，在由于频道切换引起的频繁的场景变换而频繁地发生进深的剧烈变化的情况下，通过调整进深能够防止由于用户的切换操作引起的用户疲劳。
[0211]即，根据该构成，在将来可能选择的频道的三维影像与当前选择的频道的三维影像之间的进深差大的情况下，能够预先进行使进深差减少的处理。因此，在用户选择所预测出的频道而引起了场景变换的情况下，能够减轻对用户的视觉系统带来的负担。
[0212]另外，在图10的影像处理部150中也可以没有频道选择预测部152。此时，进深调整判定部154对可选择的频道或再现影像内容的候选的全部，进行当前显示的影像的进深信息、与各频道或影像内容等的影像的进深之间的比较。进深调整判定部154例如在规定的视差以上的进深差仅有I个的情况下也判定为进行进深调整处理。
[0213]并且，进深调整判定部154对将进深进行比较的多个频道，比较如图1lB所示那样在进深信息积蓄部190中积蓄的、在相同时刻的各频道的进深，但是也可以与显示各频道的时间的偏移相匹配地，取得按每个频道显示的时间的进深信息并进行比较。
[0214]并且，在实施方式I和实施方式I的变形例I及变形例2中，影像处理部150使用将三维影像变换为二维影像的方法作为进深的调整方法，但只要是减小进深差的处理则也可以是除此以外的方法。
[0215]作为通过影像处理来减小进深差的方法的一例，有调节右眼用影像与左眼用影像之间的视差的方法。关于视差的调节方法，有如下方法:对于三维影像的切换前的影像及切换后的影像的各个，减小右眼用影像与左眼用影像之间的视差，从而使切换前的影像及切换后的影像接近二维影像地进行显示。并且，也可以在影像显示中进行两个影像的进深调整以使得最近前的对象的进深位置一致。
[0216]并且，也可以进行进深调整以使得平均进深相等。
[0217]并且，也可以进行进深调整以使得画面中心的进深相等。
[0218]并且，也可以进行将两个影像中进深幅度大者的进深幅度缩小而使进深位置一致的调整。
[0219](实施方式I的变形例3)
[0220]在实施方式I的变形例2中，进深调整判定部154基于进深信息积蓄部190中积蓄的进深信息，判定进深指标是否在0.01以上，从而判定是否实施二维化处理。
[0221]在本变形例中，进一步地，进深信息积蓄部190在各帧中积蓄每个区域的进深信息。进深调整判定部154按每个区域比较进深信息。
[0222]通常，在瞬时进行频道切换的情况下，用户的视点不会大幅移动，观看画面上的相同位置的可能性高。因此，用户在切换后的影像中，也需要在画面上的同一区域中比较进深信息。
[0223]在本变形例中，如图13A所示那样将画面分割为16个的格子状，进深信息积蓄部190如图13B所示那样，按每个分割区域积蓄进深信息。
[0224]进深调整判定部154按每同一区域在频道间比较进深信息。具体而言，进深调整判定部154按每个区域在频道间判断进深的最大值的差是否在规定的值以上。当在任意的区域中最大值的差比规定的值大时，在视听者(用户)的视觉中有可能产生不适感，因此由二维化处理部151实施二维处理。
[0225]可以认为，在场景变换的前后，用户持续观看画面的大致相同的位置。因此，通过按每个显示区域判断进深差，无论持续观看哪个位置都能够判断在用户持续观看的位置进深是否变化。因此，能够仅在必要的情况下进行使进深差减少的处理。
[0226]另外，图13A的分割区域设为在各区域上为相同面积大小。但是，与画面的周边部相比，用户对画面的中央部更注目于小的范围。因此，如图14所示，关于画面的中央部分的进深信息，可以使分割区域的数量比画面的周边部增加。由此，用户能够对经常视听的区域详细地优先地比较进深信息。即，通过对中央部进行更细小的分割，能够更高精度地判断在用户持续观看的位置进深是否变化。
[0227]另外，在本变形例中，将画面分割为区域，在同一区域之间进行进深信息的比较，但是当影像中存在人、脸、车、窗那样的用户容易注目的对象时，可以比较对象所占区域的进深信息。例如，进深信息积蓄部190可以如图15A所示那样积蓄每个对象的进深信息。进深调整判定部154也可以如图15B所示那样，对包含当前显示的频道的画面上显示的对象在内的区域即对象区域A、和包含进行变更的频道的画面上显示的对象在内的区域即对象区域B的每个对象的进深信息进行提取，对进深信息进行比较。或者，进深调整判定部154也可以分别确定对象区域A、对象区域B，从如图13B所示那样分割后的每个区域的进深信息，取得对象区域的进深信息，对进深进行比较。由此，通过对用户注目的对象的进深进行调整，能够减轻场景变换对用户的视觉系统造成的负担。
[0228]S卩，通常，用户的眼追踪三维影像的对象，因此可以认为在场景变换的前后眼都追踪对象。因此，通过判断在场景变换的前后在对象间是否产生进深变化，能够正确地判断场景变换是否对用户的视觉系统造成负担。
[0229]另外，在本变形例中，在对进深信息进行比较的情况下，按每个区域进行比较。但是，当一边选择频道一边实施频道切换时，如图16所示，用户确认手边持有的遥控器的按钮位置后切换频道的情况较多。因此，此时，对画面的下方部分到中央部分比较进深信息是重要的。特别是，用遥控器切换频道时，当不进行使频道编号的数字上升或下降的操作、而是直接输入频道的数字时，用户的视线在暂时向遥控器移动后向显示画面移动。该情况下，用户的视线从显示画面的下方朝向上方移动的情况较多。因此，可以如本变形例所示那样，在按每个区域积蓄进深信息的情况下，指定进行比较的区域，在该区域中，进行与被选择的频道的三维信息之间的比较。
[0230]这样，也存在用户一边确认遥控器的按钮位置一边切换频道的情况。在这样的情况下，可以认为用户的视线往返于遥控器与显示画面的下半部附近。因此，根据该构成，能够判断在显示画面的下半部附近进深是否变化。因此，能够仅在必要时进行使进深差减少的处理。
[0231](实施方式2)
[0232]在本实施方式中，说明这样一种立体影像处理装置，S卩:在同一三维影像内，检测包含影像的跳过操作、快进操作、后退操作以及向任意时间位置的段首定位操作在内的用户操作，在伴随用户操作的影像切换频度高的情况下，进行使影像切换前后的影像的进深差减少的图像处理。
[0233]图17为表示实施方式2的立体影像显示装置20的构成的图。
[0234]立体影像显示装置20具备影像信息积蓄部110、操作输入部120、立体影像处理装置2和显示部160。
[0235]立体影像处理装置2，在图1及图2所示的立体影像处理装置I的构成中，作为切换操作检测部130及频度判定部140的替代，使用切换操作检测部230及频度判定部240。对与图1及图2同样的部分标记同一符号而适当地省略说明。
[0236]切换操作检测部230包含跳过检测部231、快进检测部232和后退检测部233中的至少一个检测部。并且，切换操作检测部230检测的切换操作，是用于在同一显示画面的同一显示区域上将三维影像在时间上切换显示的操作。
[0237]跳过检测部231检测使I个影像的视听时间位置移动规定的时间间隔来显示影像的跳过操作。所谓跳过操作是指例如为了跳过CM (Commercial Message:广告)而使视听时间位置跳至30秒后来显示影像的操作。
[0238]快进检测部232检测使I个影像快进、使视听时间位置移动任意的时间间隔来显示图像的快进操作。
[0239]后退检测部233检测使I个影像后退、使视听时间位置移动任意的时间间隔来显示影像的后退操作。
[0240]在本实施方式2中，跳过操作、快进操作、后退操作、段首定位操作总称为跳跃操作。
[0241]频度判定部240包含计时部141、跳跃操作存储部242和判定部244。
[0242]计时部141计测时间。
[0243]跳跃操作存储部242积蓄跳跃操作间的时间间隔。
[0244]判定部244根据每单位时间的跳跃操作的频度，判定用户的跳跃操作引起的场景变换的频度是否超过规定值。
[0245]图18为表示实施方式2的立体影像处理装置2的动作的一部分的流程图。
[0246]从步骤S1010到步骤S1030与实施方式I的图4共通因而省略说明。
[0247]在步骤S1030之后，在步骤S3040中，切换操作检测部230判断是否进行了相当于跳跃操作的切换操作的输入(S3040 )。
[0248]跳跃操作的输入的判断由跳过检测部231、快进检测部232、后退检测部233进行。即，跳过检测部231检测使影像的视听时间位置移动规定的时间间隔来进行显示的跳过操作的输入。并且，快进检测部232检测在刚刚使影像快进之后进行显示的操作的输入。并且，后退检测部233检测在刚刚使影像后退之后进行显示的操作的输入。
[0249]这样，在跳过、刚刚快进之后的显示、刚刚后退之后的显示中的任意的跳跃操作被检测到的情况下(S3040中的“是”)，进入步骤S3050。
[0250]在步骤S3040中，在没有检测出跳跃操作的情况下(S3040中的“否”)，返回步骤S1030。
[0251]计时部141判断从跳跃操作存储部242所存储的最近的跳跃操作起是否经过了第I规定时间以上、例如5秒以上(S3050)。
[0252]在计时部141判断为从最近的跳跃操作起没有经过第I规定时间以上的情况下(步骤S3050中的“否”)，跳跃操作存储部242存储该跳跃操作和进行跳跃操作的时刻(S3060)。
[0253]在计时部141判断为从最近的跳跃操作起经过了第I规定时间以上的情况下(步骤S3050中的“是”)，跳跃操作存储部242删除所存储的全部的与跳跃操作有关的数据，存储该跳跃操作和从计时部141取得的进行跳跃操作的时刻(S3070)。
[0254]在步骤S3060之后，判定部244确认在跳跃操作存储部242中是否存储有规定数以上、例如3个以上的跳跃操作的数据(S3080)。
[0255]在存储有规定数以上的跳跃操作的数据的情况下(S3080中的“是”)，判定部244计算在跳跃操作存储部242中存储的跳跃操作的每单位时间的频度(S3090)。每单位时间的频度例如通过求出所存储的跳跃操作中时刻最早者和时刻最晚者之间的时间间隔、并将该时间间隔除以所存储的跳跃操作的次数而计算。
[0256]在没有存储规定数以上的跳跃操作的数据的情况下(S3080中的“否”)，进入步骤S1120。
[0257]进而，判定部244判断在步骤S3090中计算出的跳跃操作的频度是否在规定频度以上。这里，作为该判断，判定部244判断每第2规定时间(例如3秒)是否有I次以上的跳跃操作(S3100)。
[0258]在步骤S3100中判断为跳跃操作的频度在规定频度以上的情况下(步骤S3100中的“是”)，影像处理部150进行对三维影像的进深进行调整、将连续显示的影像的进深平滑化显示的处理(S3130)。
[0259]进深的调整处理例如是以影像中的最近前的对象的进深为基准、将两个影像的进深差调整在视差角0.8度以内的处理。
[0260]在步骤S3100中判断为跳跃操作的频度小于规定频度的情况下(步骤S3100中的“否”)，进入步骤SI 120。在步骤SI 120中，影像处理部150不进行进深调整处理，显示部160将在影像信息积蓄部110中积蓄的影像以三维进行显示(S1120)。
[0261]影像处理部150参照从步骤S3130执行时起的进深调整处理的持续时间，判定是否停止进深调整处理(步骤S3140)。步骤S3140的动作与实施方式I的图4的步骤S1140是同样的。在用户以规定频度以上连续进行跳跃操作的情况下继续进行进深调整处理，当用户停止跳跃操作时停止进深调整处理。
[0262]在步骤S3140中进深调整处理的持续时间在第3规定时间(例如5秒)以内的情况下(步骤S3140中的“是”)，进入步骤S1030。
[0263]在步骤S3140中进深调整处理的持续时间超过第3规定时间(例如5秒)的情况下(步骤S3140中的“否”)，影像处理部150停止进深调整处理，进入步骤S1120。
[0264]根据该构成，在伴随用户的跳跃操作而频繁地切换三维影像的情况下，能够使三维影像的进深差减少。因此，即使在频繁地切换三维影像的情况下，也能够防止眼对进深变化的过度追踪。因此，能够防止由于用户操作引起三维影像的切换(场景变换)时的用户的眼疲劳。
[0265]另外，在实施方式2中，跳跃操作在每单位时间进行了规定频度以上的情况下进行进深的调整处理，但是也可以与实施方式I的变形例2同样地，对连续显示的影像的进深信息进行比较，在进深差在规定差以上的情况下进行进深的调整处理。[0266]并且，实施方式2的切换操作检测部230可以具备段首定位操作检测部。段首定位操作检测部检测段首定位操作，段首定位操作向影像的开头或影像中所含的场景的切换位置移动来显示图像。
[0267]另外，作为影像的切换操作，在实施方式I及实施方式I的变形例I?3中检测将频道变更的频道切换，在实施方式2中检测将影像内的时间位置移动的跳跃操作，但也可以是，检测频道切换和跳跃操作双方，无论是哪个操作，都在操作连续进行、每单位时间的操作频度在规定频度以上的情况下进行进深调整处理。
[0268]另外，在按压了遥控器的快进按钮或后退按钮的情况下，在进行快进再现或后退再现时，在仅按压了一次快进按钮或后退按钮的时刻，也可以进行进深调整处理。
[0269]另外，在上述各实施方式中，各构成要素可以由专用的硬件构成，或者可以通过执行适于各构成要素的软件程序来实现。各构成要素也可以通过由CPU或处理器等程序执行部将硬盘或半导体存储器等记录介质中记录的软件程序读出并执行而实现。这里，实现上述各实施方式的立体影像处理装置等的软件是使计算机执行立体影像处理方法的程序。该立体影像处理方法包括以下步骤:切换操作检测步骤，检测切换操作，切换操作是指用户进行的三维影像的频道的选择操作或者用于三维影像的快进再现、后退再现、跳过、或段首定位的操作；频度判定步骤，判定上述切换操作检测步骤中的上述切换操作的每单位时间的检出频度；以及影像处理步骤，在上述频度判定步骤中判定的上述每单位时间的检出频度在规定频度以上的情况下，进行用于使三维影像的切换前后的进深差减少的处理。
[0270]另外，在上述各实施方式中，立体影像处理装置在连续进行作为频道切换或跳跃操作的切换操作、每单位时间的操作频度在规定频度以上的情况下进行进深调整处理，但是也可以具有输出对用户的警告的输出部，在每单位时间的切换操作在规定频度以上的情况下，输出部向用户输出警告。输出部可以是提示影像的显示部或进行伴随影像的音频输出的音频输出部。
[0271 ] 此外，可以在每单位时间的切换操作在规定频度以上的情况下对用户询问是否进行用于使进深差减少的处理。此时，操作接收部121从操作输入部120接收用户对询问输入的操作信息。
[0272]通过警告或询问的提示，能够在进行进深调整之前向用户通知进行进深调整，用户不会对影像的变化感到困惑。
[0273]另外，在上述各实施方式中，立体影像处理装置在连续进行切换操作、每单位时间的操作频度在规定频度以上的情况下进行进深调整处理，但也可以是，立体影像处理装置具备向与进行了切换操作的第I用户不同的第2用户输出信息的第2输出部，在每单位时间的切换操作在规定频度以上的情况下，第2输出部对第2用户输出警告。例如可以是，第2输出部向第2用户的移动终端发送邮件从而输出警告。
[0274]进而，也可以是，立体影像处理装置具备接收与进行了切换操作的第I用户不同的第2用户进行的操作输入的第2操作接收部，在第I用户每单位时间进行了规定频度以上的切换操作的情况下，第2输出部向第2用户输出警告或输出询问是否进行用于使进深差减少的处理的信息，按照第2操作接收部接收的第2用户的操作输入，立体影像处理装置进行用于使进深差减少的处理。例如可以是，第2用户对移动终端进行操作输入，移动终端向立体影像处理装置发送操作输入，第2操作接收部接收该操作输入。[0275]按照对第2用户的警告或询问提示和第2用户的操作输入，立体影像处理装置进行动作，由此第2用户能够针对对于第I用户的眼而言负担高的操作，进行将对第I用户的眼的负担降低的措施。例如，在第I用户为幼儿的情况下，保护者等大人是第2用户，能够降低对幼儿的眼的负担。
[0276]以上对于本发明的一个或多个方式的立体影像处理装置，基于实施方式进行了说明，但本发明不限于该实施方式。在不脱离本发明主旨的范围内，对本实施方式实施本领域技术人员想到的各种变形而得到的方案、或将不同实施方式的构成要素组合而构建的方案也包含在本发明的一个或多个方式的范围内。
[0277]工业实用性
[0278]本发明的立体影像处理装置可以广泛用于用户能进行场景变换等操作的、视听三维影像的图像显示系统。例如能够用于电视、计算机、或者游戏设备等。并且，不仅是用于视听影像内容的设备，还能够用于图像诊断装置、内视镜等医疗设备、手术或交通工具等的模拟设备或者教育训练用系统等。
[0279]符号说明
[0280]1、1A、1B、2:立体影像处理装置
[0281]10、10B、20:立体影像显示装置
[0282]30、30A:三维专用眼镜
[0283]110:影像信息积蓄部
[0284]120:操作输入部
[0285]121:操作接收部
[0286]130、130B、230:切换操作检测部
[0287]131:频道变更检测部
[0288]132:变更履历存储部
[0289]140、140A、240:频度判定部
[0290]141、157:计时部
[0291]142:频道变更存储部
[0292]144、144A:频道切换判定部
[0293]150、150B:影像处理部
[0294]151: 二维化处理部
[0295]152:频道选择预测部
[0296]154:进深调整判定部
[0297]155:输出部
[0298]158:三维化判定部
[0299]160:显示部
[0300]161、261、361:影像控制部
[0301]162、262、362:影像显示部
[0302]180:影像取得部
[0303]190:进深信息积蓄部
[0304]231:跳过检测部[0305]232:快进检测部
[0306]233:后退检测部
[0307]242:跳跃操作存储部
[0308]244:判定部
[0309]263、366:快门
[0310]363:发送部
[0311]364:接收部
[0312]365:快门控制部
【权利要求】
1.一种立体影像处理装置，具备: 切换操作检测部，检测切换操作，该切换操作是指用户进行的三维影像的频道的选择操作或者用于三维影像的快进再现、后退再现、跳过或段首定位的操作； 频度判定部，判定上述切换操作检测部对上述切换操作的每单位时间的检出频度；以及 处理部，在上述频度判定部判定出的上述每单位时间的检出频度在规定频度以上的情况下，进行用于使三维影像的切换前后的进深的差减少的处理。
2.如权利要求1所述的立体影像处理装置， 上述处理部，通过对上述三维影像的影像信息进行处理，使上述进深的差减少。
3.如权利要求2所述的立体影像处理装置， 上述处理部，通过对上述三维影像的影像信息进行将左眼用影像与右眼用影像之间的视差缩小的处理，使上述进深的差减少。
4.如权利要求1所述的立体影像处理装置， 上述处理部，将上述三维影像所含的左眼用影像及右眼用影像中的某一方的影像对上述用户进行提示。
5.如权利要求1所述的立体影像处理装置， 上述处理部具备快门调整部，该快门调整部，在提示上述三维影像所含的右眼用影像时，使上述用户佩戴的三维影像用观看器的右眼侧的快门为开状态，并且使上述三维影像用观看器的左眼侧的快门为闭状态，在提示上述三维影像所含的左眼用影像时，使上述右眼侧的快门为闭状态，并且使上述左眼侧的快门为开状态， 上述快门调整部，进一步在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，(i)在提示上述右眼用影像时使上述右眼侧的快门及上述左眼侧的快门为开状态，在提示上述左眼用影像时使上述三维影像用观看器的上述右眼侧的快门及上述左眼侧的快门为闭状态，或者，(ii)在提示上述左眼用影像时使上述三维影像用观看器的上述右眼侧的快门及上述左眼侧的快门为开状态，在提示上述右眼用影像时使上述三维影像用观看器的上述右眼侧的快门及上述左眼侧的快门为闭状态。
6.如权利要求1所述的立体影像处理装置， 该立体影像处理装置还具备积蓄三维影像的进深信息的进深信息积蓄部， 上述处理部，包含: 进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的上述进深信息，判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上；以及 进深调整部，在上述进深调整判定部判定为上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
7.如权利要求6所述的立体影像处理装置， 上述进深信息积蓄部，对将三维影像的显示画面在空间上分割后的多个显示区域的各个，积蓄进深信息， 上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的每个显示区域的上述进深信息，按每个显示区域来判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上， 上述进深调整部，在上述进深调整判定部判定为在某个显示区域中上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
8.如权利要求7所述的立体影像处理装置， 上述多个显示区域是通过以使三维影像的显示画面的越靠中央部越比周边部更细小的方式将上述显示画面分割而得到的。
9.如权利要求6所述的立体影像处理装置， 上述进深信息积蓄部，积蓄三维影像的显示画面的下部的显示区域的进深信息， 上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，参照在上述进深信息积蓄部中积蓄的上述下部的显示区域的上述进深信息，判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上， 上述进深调整部，在上述进深调整判定部判定为在上述下部的显示区域中上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
10.如权利要求6所述的立体影像处理装置， 上述进深信息积蓄部，按三维影像所含的每个对象来积蓄进深信息， 上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情 况下，参照在上述进深信息积蓄部中积蓄的每个对象的上述进深信息，在对象间判定在伴随上述切换操作的三维影像的切换前后，三维影像的进深的差是否在规定差以上， 上述进深调整部，在上述进深调整判定部判定为在某对象间上述进深的差在上述规定差以上的情况下，进行用于使上述进深的差减少的处理。
11.如权利要求6~10中的任一项所述的立体影像处理装置， 上述处理部还包含频道选择预测部，该频道选择预测部，根据上述切换操作检测部检测出的三维影像的频道的选择操作的履历，预测将来选择的频道， 上述进深调整判定部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，判定当前选择的频道的三维影像与上述频道选择预测部预测出的上述将来选择的频道的三维影像之间的进深的差是否在上述规定差以上。
12.如权利要求11所述的立体影像处理装置， 上述频道选择预测部，在根据上述切换操作检测部检测出的三维影像的频道的选择操作的履历、能够判断为频道按升序被选择的情况下，将比当前选择的频道大的下一个编号的频道预测为将来选择的频道。
13.如权利要求11或12所述的立体影像处理装置， 上述频道选择预测部，在根据上述切换操作检测部检测出的三维影像的频道的选择操作的履历、能够判断为频道按降序被选择的情况下，将比当前选择的频道小的下一个编号的频道预测为将来选择的频道。
14.如权利要求1~13中的任一项所述的立体影像处理装置， 上述切换操作检测部检测的三维影像的频道的选择操作，是用于在同一显示画面的同一显示区域上使三维影像在时间上切换显示的操作。
15.如权利要求1所述的立体影像处理装置， 该立体影像处理装置还具备向上述用户输出信息的输出部， 上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，从上述输出部向上述用户输出警告。
16.如权利要求1所述的立体影像处理装置: 该立体影像处理装置还具备: 向上述用户输出信息的输出部；以及 接受上述用户的操作输入的操作接收部， 上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，对用户输出用于询问是否进行用于使进深的差减少的处理的信息。
17.如权利要求1所述的立体影像处理装置， 该立体影像处理装置还具备向与进行了上述切换操作的第I用户不同的第2用户输出信息的输出部， 上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，向上述第2用户输出警告。
18.如权利要求17所述的立体影像处理装置， 该立体影像处理装置还具备接受上述第2用户的操作输入的操作接收部， 上述输出部，在上述频度判定部判定出的上述每单位时间的检出频度在上述规定频度以上的情况下，向上述第2用户输出警告，或者向上述第2用户输出询问是否进行用于使进深的差减少的处理的信息， 上述操作接收部接受上述第2用户的操作输入， 上述处理部，按照上述操作接收部接受的上述第2用户的操作输入，进行用于使进深的差减少的处理。
19.一种立体影像处理方法，包含以下步骤: 切换操作检测步骤，检测切换操作，该切换操作是指用户进行的三维影像的频道的选择操作或者用于三维影像的快进再现、后退再现、跳过或段首定位的操作； 频度判定步骤，判定上述切换操作检测步骤中对上述切换操作的每单位时间的检出频度；以及 处理步骤，在上述频度判定步骤判定出的上述每单位时间的检出频度在规定频度以上的情况下，进行用于使三维影像的切换前后的进深的差减少的处理。
20.—种程序，用于使计算机执行权利要求19所述的立体影像处理方法。
【文档编号】H04N13/04GK103548348SQ201380001416
【公开日】2014年1月29日 申请日期:2013年3月5日 优先权日:2012年3月26日
【发明者】加藤弓子, 井上刚, 小泽顺 申请人:松下电器产业株式会社