立体视觉图像处理装置、立体视觉图像提供方法及图像显示方法

文档序号:7606216阅读:157来源:国知局

专利名称::立体视觉图像处理装置、立体视觉图像提供方法及图像显示方法
技术领域
:本发明涉及能够生成立体视觉用的立体视觉图像的立体视觉图像处理装置、立体视觉图像提供方法及图像显示方法。
背景技术
:以往以来,已知存在一种立体视觉图像处理装置,它是拍摄利用左右眼的视差的两幅静止图像等并将它们进行显示,使得能够分别用左右眼来观察,通过这样能得到立体图像。将从左眼的视点得到的左视点图像(L图像)及从右眼的视点得到的右视点图像(R图像)合成的立体图像(立体视觉图像)在显示器等显示装置上显示,从而能够观看立体图像。但是,不能指定想要从一个或两个或两个以上的多个视点图像合成为立体视觉图像来显示的显示显示装置的种类或显示尺寸等。因而,在显示立体图像时,要根据显示装置的种类或显示尺寸,放大或缩小立体视觉图像,从而各视点图像相互的视差放大或缩小,不能得到适当的立体视觉图像。本发明正是鉴于上述的问题而提出的,本发明的目的在于提供能够将指定想要显示立体视觉图像的显示装置作为附属信息进行管理的、新型而且改进了的立体视觉图像处理装置、立体视觉图像提供方法及图像显示方法。
发明内容为了解决上述问题,根据本发明的第1观点,是提供将至少相互具有视差的多个视点图像进行合成而生成立体视觉图像的立体视觉图像处理装置。上述立体视觉图像处理装置,将与想要合成及显示立体视觉图像的假想显示装置相关的假想显示信息,与视点不同的多个视点图像一起进行管理。根据本发明,利用立体视觉图像处理装置,对相互有视差、视点不同的多个视点图像与关于假想想要合成及显示立体视觉图像的假想显示装置的假想显示信息一起进行管理。利用这样的构成,能够提高选择假想想要显示立体视觉图像的显示装置的效率。假想显示信息也可以包含关于假想显示装置的种类及/或显示尺寸的信息而构成。利用这样的构成,能够使假想显示装置的分类更详细。再有,假想显示信息中也可包含关于假想显示装置的种类及/或显示尺寸的信息、以及用按照假想的显示大小来显示立体视觉图像用的假想显示大小信息而构成。利用这样的构成,在指定假想显示显示装置之后,能够指定在该假想显示装置上想要显示的立体视觉图像的显示大小。或者,假想显示信息也可以包含用按照假想的显示大小来显示立体视觉图像用的假想显示大小信息而构成。利用这样的构成,能够指定在假想显示装置上想要显示的立体视觉图像的显示大小。立体视觉图像的显示大小也可以至少根据假想显示信息进行控制而构成。利用这样的构成,能够根据假想显示信息,放大或缩小立体视觉图像,在假想显示装置上显示。另外,也可以不是假想显示装置,而是显示装置。假想显示信息也可以是假想显示大小信息而构成。在改变立体视觉图像的显示大小时,也可以显示通知关于显示大小改变的画面而构成。在显示立体视觉图像时,也可以至少根据该立体视觉图像的显示大小/或假想显示信息来判断是否显示警告画面而构成。利用这样的构成,在实际上显示立体视觉图像的显示装置不是按照假想的假想显示装置时,能够在显示器上显示警告画面。也可以根据立体视觉图像显示的显示时间来判断是否显示警告画面而构成。利用这样的构成,若立体视觉图像显示所经过的时间达到规定时间,则由于能够显示警告画面,因此能够减轻因长时间的收视而引起的视神经疲劳,另外能够力图减轻立体视觉图像的显示处理负荷或显示功率负荷。也可以根据随着立体视觉图像显示所经过的显示时间而累积的该立体视觉图像的立体强度累积值来判断是否显示警告画面而构成。利用这样的构成,在引起视神经疲劳的时刻,能够的确进行警告。也可以根据假想显示信息中包含的假想显示大小信息来判断是否显示警告画面而构成。利用这样的构成,由于防止以假想以外的状态显示立体视觉图像的误显示,因此防止立体强度强的立体视觉图像进行误显示。也可以利用立体视觉图像的显示大小的放大及/或缩小来显示警告画面而构成。利用这样的构成,通过显示装置的显示尺寸的限制,能够容易识别或注意到立体视觉图像的视差变动及立体强度变动。或者,也可以利用假想显示信息中包含的假想显示大小信息、以及立体视觉图像的显示大小的放大及/或缩小来显示警告画面而构成。利用这样的构成,由于指定假想显示大小,因此能够容易识别或注意到立体视觉图像的视差变动及立体强度变动。在立体视觉图像的显示大小缩小时,警告画面也可以是忠告画面而构成。另外警告画面也可以是警告要加强立体视觉图像的强度的画面而构成。也可以根据立体视觉图像的立体强度及/或立体视觉图像的显示时间来判断是否显示警告画面而构成,也可以根据立体强度的累积值来判断是否显示警告画面而构成。上述立体视觉图像也可以是由相互具有视差的右视点图像与左视点图像合成而构成。也可以将右视点图像与左视点图像作为一个结合图像进行管理、将假想显示信息作为结合图像的标记信息进行管理而构成。利用这样的构成,能够将右视点图像与左视点图像与假想显示信息一体化,对结合图像高效进行管理。上述假想显示信息也可以包含关于假想显示装置的种类及/或显示尺寸的信息而构成,假想显示信息中也可以包含用按照假想的显示大小来显示立体视觉图像用的假想显示大小信息而构成。上述假想显示信息中也可以包含按照假想的显示大小来显示立体视觉图像用的假想显示大小信息而构成。在显示画面上显示立体视觉图像的该立体视觉图像的显示大小也可以至少根据上述假想显示信息进行控制而构成。假想显示信息也可以是假想显示大小信息而构成,在改变立体视觉图像的显示大小时,也可以显示通知关于显示大小的改变用的画面而构成。在显示立体视觉图像时,也可以至少根据该立体视觉图像的显示大小及/或假想显示信息来判断是否显示警告画面而构成。也可以根据立体视觉图像显示的显示时间来判断是否显示警告画面而构成。也可以根据随着立体视觉图像显示所经过的显示时间而累积的该立体视觉图像的立体强度累积值来判断是否显示警告画面而构成。也可以根据假想显示信息中包含的假想显示大小信息来判断是否显示警告画面而构成。也可以利用立体视觉图像的显示大小的放大及/或缩小来显示警告画面而构成。也可以根据立体视觉图像的立体强度及/或立体视觉图像的显示时间来判断是否显示警告画面而构成,也可以根据立体强度的累积值来判断是否显示警告画面而构成。为了解决上述问题,根据本发明的其它的观点,立体视觉图像提供方法是利用相互具有视差的多个视点图像的合成而提供生成的立体视觉图像数据的立体视觉图像提供方法,该方法将与视点不同的多个视点图像数据一起进行管理的、关于想要显示立体视觉图像的假想显示装置的附属信息与该视点图像数据一起提供。根据本发明,通过管理相互具有视差、视点不同的多个视点图像所附属的附属信息,能够高效地提供及检索对于显示装置显示立体视觉图像是适当的视点图像。附属信息也可以是假想显示信息而构成,上述假想显示信息也可以包含关于假想显示装置的种类及/或显示尺寸的信息而构成。再有,假想显示信息中也可以包含关于假想显示装置的种类及/或显示尺寸的信息、以及用按照假想的显示大小来显示立体视觉图像用的假想显示大小信息而构成。或者,假想显示信息中也可以包含用按照假想的显示大小来显示立体视觉图像用的假想显示大小信息而构成。在显示画面上显示立体视觉图像的该立体视觉图像的显示大小也可以至少根据上述假想显示信息进行控制而构成。假想显示信息也可以是假想显示大小信息而构成,上述立体视觉图像可以由相互具有视差的右视点图像及左视点图像合成而构成。也可以将右视点图像与左视点图像作为一个结合图像进行管理、将假想显示信息作为结合图像的标记信息进行控制而构成。为了解决上述问题,根据本发明的另外其它的观点,立体视觉图像处理装置是提供将相互具有视差的右视点图像及左视点图像进行合成而生成立体视觉图像的立体视觉图像处理装置,右视点图像及左视点图像分别与关于想要合成及显示立体视觉图像的假想显示装置的假想显示信息一起进行管理。根据本发明,通过立体视觉图像处理装置,将右视点图像及左视点装置与关于假想想要合成及显示立体视觉图像的假想显示装置的假想显示信息一起进行管理。利用这样的构成,能够力图高效地选择想要合成有显示立体视觉图像的显示装置。也可以将视点图像与左视点图像作为一个结合图像进行管理、将假想显示信息作为结合图像的标记信息进行管理而构成。利用这样的构成,能够将右视点图像与左视点图像与假想显示信息一体化,对结合图像高效进行管理。假想显示信息也可以包含关于假想显示装置的种类及显示尺寸的信息而构成。为了解决上述问题,根据本发明的又一其它的观点,图像显示方法是提供将至少相互具有视差的多个视点图像进行合成而合成为立体视觉图像进行显示的图像显示方法。上述图像显示方法,在两个或两个以上的显示器之间显示实质上同一显示大小的立体视觉图像。在改变立体视觉图像的显示大小时,也可以通知关于显示大小改变而构成,也可以利用立体视觉图像的显示大小的放大及/或缩小来显示警告而构成。图1所示为本实施形态有关的安装光学适配器的拍摄装置简要构成说明图。图2所示为图1的光学适配器的构成例说明图。图3所示为本实施形态有关的利用安装光学适配器的拍摄装置拍摄的视差图像说明图。图4所示为本实施形态有关的利用投影机的立体视觉图像显示的简要构成说明图。图5所示为本实施形态有关的计算机装置简要构成说明图。图6为说明本实施形态有关的将L图像与R图像合成而生成立体视觉图像的处理用的说明图。图7所示为本实施形态的立体视觉图像的说明图。图8为说明本实施形态有关的立体观看立体视觉图像的概要用的说明图。图9所示为本实施形态有关的图像处理装置的简要构成方框图。图10所示为本实施形态有关的立体视觉图像文件的数据结构简要说明图。图11A所示为实施形态有关的结合图像数据的简要构成说明图。图11B所示为实施形态有关的结合图像数据的简要构成说明图。图12所示为本实施形态有关的关于图像控制信息的标记的简要构成说明图。图13所示为本实施形态有关的关于图像控制信息的标记的简要构成说明图。图14所示为本实施形态有关的“AssumedDisplay”的标记字段中设定的数值的简要说明图。图15所示为本实施形态有关的利用假想显示器信息的立体视觉图像显示处理的简要流程图。图16A所示为本实施形态有关的显示画面例的简要构成说明图。)图16B所示为本实施形态有关的显示画面例的简要构成说明图。图17所示为本实施形态有关的警告画面例的简要构成说明图。图18所示为本实施形态有关的立体视觉图像的累积立体强度变化的简经变化图。图19所示为本实施形态有关的利用警告等级进行的警告画面显示处理的简要流程图。图20所示为本实施形态有关的利用警告等级显示的立体视觉图像及警告画面的简要说明图。图21所示为本实施形态有关的利用警告等级显示的立体视觉图像及警告画面的简要说明图。图22A所示为本实施形态有关的利用警告等级显示的立体视觉图像的画面的简要说明图。图22B所示为本实施形态有关的利用警告等级显示的警告画面的简要说明图。具体实施例方式以下,参照附图详细说明本发明的合适的实施形态。另外,在以下的说明及附图中,对于具有实质上同一功能及构成的构成要素附加同一标号,并省略重复说明。存在许多利用人等的左右两眼分别取得的视网膜图像的空间偏移(双眼视差)来立体观看二维图像的方法(以下称为立体视觉方法)。作为立体视觉的方法,已知有利用特殊眼镜的立体影片方式、彩色立体影片方式、偏光滤光片方式、分时立体电视方式等,还已知有不利用特殊眼镜的双凸透镜方式等。为了实现上述各种各样立体视觉的方法,必须取得左眼用的左视点图像(L图像)及右眼用的右视点图像(R图像)。为了取得L图像及R图像,最容易的方法是将照相机的位置仅移动人的两眼的间隔,对同一被摄物体拍摄两次。另外,作为利用一次拍摄取得L图像及R图像的方法,已知有例如图1及图2所示的方法,它是将由反射镜等构成的光学适配器装在拍摄装置100的镜头103的外侧的方法。另外,上述拍摄装置100例如有数码相机等例子。另外,如图3所示,作为将由各视点图像合成的立体图像(立体视觉图像、3D图像)合成及显示的方法,例如有图4所示的偏光滤光片方式。如图4所示,偏光滤光片方法由投影R图像用的右眼用投影机141、投影L图像用的左眼用投影机142、将L图像及R图像的光反射的屏幕143及偏光眼镜144构成。另外,3D(three-Dimensional,三维)图像是能够立体观看的立体视觉图像。右眼用投影机141具有垂直方向的偏光滤光片。左眼用投影机142具有水平方向的偏光滤光片。因而,从右眼用摄影机141射出的R图像的光是射出图4所示的水平方向箭头的光。从左眼用摄影机142射出的L图像的光是射出图4所示的垂直方向箭头的光。接着,在屏幕143上利用垂直方向的直线偏振光投影的L图像与利用水平方向的直线偏振光投影的R图像重合,从而生成立体视觉图像。然而,使用左侧配置水平方向的直线偏光滤光片、右侧配置垂直方向的直线偏光滤光片的偏光眼镜144,由屏蔽143反射的上述立体视觉图像中,从右眼用摄影机141投影的R图像只通过右侧的直线偏光滤光片,而从左眼用摄影机142射出的L图像只通过左侧的直线偏光滤光片。因而,若从偏光眼镜144来看上述屏幕143上的立体视觉图像,则例如建筑物等好像凸出来那样,能够立体视觉图像。除了图4所示在屏幕143上生成立体视觉图像的情况以外,例如还可以利用个人计算机(PersonalComputer,PC)或计算机装置生成及显示立体视觉图像。下面参照图5~图8说明本实施形态有关的利用计算机装置生成立体视觉图像的情况。如上所述,利用图2所示的反射镜121及反射镜122进行反射,从而生成在左视点及右视点相互具有视差的视差图像。上述视差图像如图2所示由L图像及R图像构成,但不限定于这样的例子。下面,参照图5说明本实施形态有关的适用于立体视觉图像处理装置的计算机装置。图5所示为本实施形态有关的计算机装置的简要构成说明图。计算机装置150是至少具有中央运算处理单元(CPU)及存储单元的信息处理装置,是一般的计算机装置,但也包含便携式终端、PDA(PersonalDigitalAssistant,个人数字助理)、笔记本型个人或计算机或台式个人计算机等信息处理装置。如图5所示,计算机装置150还具有生成立体视觉图像的计算机装置150、观看显示的立体视觉图像时用户使用的偏光眼镜171、显示立体视觉图像的立体视觉显示单元140以及配置在上述立体视觉显示单元140的显示面外侧的行偏光板172。偏光眼镜171利用装在计算机装置150上的支持棒170支持,使其位于计算机装置150的键盘附近上方空间。然后,生成的L图像及R图像如图6所示,按照下式(1)将L图像与R图像合成,生成图7所示的立体视觉图像。即,根据右视点图像及左视像构成的视差图像,生成立体视觉图像。另外,偶数行及奇数行是在计算机装置150具有的立体视觉显示单元140等构成的水平方向的列。例如,在显示单元是UXGA(UltraeXtendedGraphicsArray,超级扩展图像阵列)时,水平方向的行中,若设最上端为0行,则0行是偶数行,(接下来的1行是奇数行,…,一直连续到最下端的行(1599行)。偶数行1×(L图像的像素)+0×(R图像的像素)=(立体视觉图像的像素)奇数行0×(L图像的像素)+1×(R图像的像素)=立体视觉图像的像素)…式(1)如图7所示,从0行起依次每隔水平方行的一行将L图像与R图像合成,通过这样生成L图像与R图像每隔一行交替合成的立体视觉图像。生成的立体视觉图像例如在计算机具有的立体视觉显示单元140等上显示。如图8所示,用户通过偏光眼镜171来看立体视觉显示单元140上显示的立体视觉图像。另外,立体视觉显示单元140上预先具有行偏光板172。上述行偏光板172具有多个水平方向的行。行偏光板172的多个行中,从最上端起依次在偶数行具有垂直方向的偏光板,在奇数行具有水平方向的偏光板。另外,在偏光眼镜171的右侧具有水平方向的偏光滤光片,在左侧具有垂直方向的偏光滤光片。因而,通过行偏光板172的L图像的光或R图像的光中,偏光眼镜171的左侧只有偶数行形成的L图像的光通过,右侧只有奇数行形成的R图像的光通过。即,用户能够立体观看立体视觉图像。(立体视觉图像处理装置)这里参照图9说明本实施形态有关的立体视觉图像处理装置。图9所示为本实施形态有关的立体视觉图像处理装置的简要构成方框图。另外,图9所示的本实施形态有关的立体视觉显示单元140是显示立体视觉图像的装置,例如相当于显示装置或假想显示装置等。如图9所示,生成能够立体观看的立体视觉图像的立体视觉图像处理装置具有摄像单元101、图像编码单元132、图像控制信息生成单元133、数据多路复用单元134记录媒体135、数据分离单元136、图像解码单元137、图像分离单元138、图像变换单元139、以及立体视觉显示单元140中的至少一个部分。摄像单元101由拍摄物体的摄像元件(CCD)130-1及摄像元件130-2、以及合成单元131构成。另外,也可以将摄像元件1301-1及摄像元件130-2形成一体,由一个摄像元件130构成来实现。上述的情况下,可以具有光学适配器105等。利用摄像元件130-1摄像的从左眼的视点的图像(L图像或左视点图像)与利用摄像元件1302-2拍摄的从右眼的视点的图像(R图像或右视点图像)送往合成单元131。另外,图9所示的立体视觉图像处理装置是举出双视点的情况为例进行说明的,但不限定于这样的例子,在多视点的情况下也可以实施。合成单元131根据送来的各视点图像(L图像及R图像),生成视差图像。例如使各视点图像相邻来进行合成。另外,图9所示的视差图像是L图像与R图像左右相邻而形成,但不限定于这样的例子。上述视差图像利用图像编码单元132进行编码。上述编码例如有JPEG(JointPhotographicExpertsGroup,联合图片专家组)形式等。图像控制信息生成单元133生成从上述视差图像变换为立体视觉图像等用的标记信息(以下称为图像控制信息)。图像控制信息包含摄像单元101在拍摄时的曝光、日期时间、有闪光灯等拍摄信息、或立体视觉显示单元140中生成适当的立体视觉图像用的信息等。例如,有使视差图像中的视点图像旋转用的旋转角等。数据多路复用单元134将图像编码单元132送来的视差与图像控制信息生成单元133送来的图像控制信息进行多路复用处理。多路复用的视差及图像控制信息记录在记录媒体135中。记录媒体135是能够存储数据的器件,例如有HDD装置(硬盘驱动器)、CD-RW(ReWritable,可重写)、DVD-RAM(RandomAccessMemory,随机存储器)、EEPROM(ElectricallyErasableProgrammableReadOnlyMemory,电可擦除可编程只读存储器)、或记忆棒(注册商标)等。数据分离单元136分别取得记录媒体135中记录的视差图像及图像控制信息。数据分离单元136将取得的视差图像送往图像解码单元137,将图像控制信息送往图像分离单元138。另外,视差图像数据及图像控制信息记录在记录媒体135的规定场所(文件夹等)。另外,本实施形态有关的数据分离单元136是举出从记录媒体135取得视差图像及图像控制信息的情况为例进行说明的,但不限定于这样的例子,在通过网络取得的情况下也可以实施。图像解码单元137将预先编码的视差图像数据进行解码,送往图像分离单元138。图像分离单元138根据从数据分离单元136送来的图像控制信息,取得图像控制信息中指定的视差图像,分离成各视点的图像(L图像及R图像)。图像变换单元139通过将从图像分离单元138送来的L图像与R图像重合,变换为立体视觉图像。立体视觉显示单元140显示利用图像变换单元139变换的立体视觉图像。立体视觉显示单元140例如有后面将说明的计算机装置具有的显示器等显示单元、或进行投影在屏幕上显示的投影机装置等。另外,本实施形态有关的立体视觉显示单元140不限于表示立体视觉图像的情况,例如在显示2D的静止图像及运动图像等、甚至于输出声音等情况也能够实施。(拍摄装置100)图1所示拍摄装置100具有图9所示的摄像单元101、图像编码单元132、图像控制信息生成单元133、或数据多路复用单元134中的至少一个部分。(计算机装置150)图5所示的计算机装置150具有构成图9所示的立体视觉图像处理装置的数据分离单元136、图像解码单元137、图像分离单元138、图像变换单元139、以及立体视觉单元140。另外,也有的情况下,计算机装置150还具有图像编码单元132、图像控制信息生成单元133数据多路复用单元134、以及记录媒体135。计算机装置150取入利用图1所示的装有光学适配器105的拍摄装置100拍摄的视差图像数据。或者,计算机装置150取入在没有安装光学适配器105的状态下拍摄的图像数据等。另外,本实施形态有关的拍摄装置例如有数码照相机、数码摄像机等。再有,计算机装置150根据取入的视差图像数据或连续拍摄的两幅图像数据生成立体视觉图像数据。生成的立体视觉图像数据作为立体视觉图像在立体视觉显示单元140上显示。另外,以拍摄装置100取入到计算机装置150的视差图像等的图像数据中,赋予由图像控制信息生成单元133生成的图像控制信息。另外,在例如取入的图像数据中没有赋予图像控制信息时等情况下,也可以利用计算机装置150具有的图像控制信息生成单元133赋予或者编辑图像控制信息等。(立体视觉图像用文件)下面参照图10说明本实施形态有关的立体视觉图像用文件。图10所示为本实施形态有关的立体视觉图像用文件的数据结构简要说明图。如图10所示,立体视觉图像用文件例如是文件名为“文件1.jpg”等、扩展名“.jpg”的JPEG形式的压缩数据文件。另外,立体视觉图像用文件例如可以是上述说明的右视点图像及左视点图像构成的视差图像数据等。立体视觉图像用文件按照DCF(DesignruleforCameraFileSystem,拍摄文件系统设计规则)标准进行记录,对它插入应用标记段(APP1)。APP1紧跟在表示立体视觉图像用文件开始的SOI(StartOfImage,图像开始)标记之后配置。再紧跟在APP1之后,配置结合图像数据,最后配置表示立体视觉图像用文件结束的EOI(EndOfImage,图像结束)。另外,关于结合图像,将在后面说明。在上述APP1区域中,如图10所示,由Exif(Exchangeableimagefileformat,可换图像文件格式)的识别信息、以及附属信息本体(Tiffheader,IFD0,IFD1)构成。包含全部这些在内的APP1的大小按照JPEG的标准,不能超过64kByte。附属信息采用包含FileHeader(TiffHeader)的Tiff的结构,最大能够记录两个IFD(IFD0(0thIFD),IFD1(1stIFD))。另外,IFD是“ImageFileDirectory,图像文件目标”的缩略语。IFD0记录关于压缩的图像(主图像)或立体视觉图像(3D图像)等的附属信息。如图10所示,在IFD0区域中配置内有ExifIFD的指针的Exif指针单元、内有GPSIFD的指针的GPS指针单元、以及内有3DIFD的指针的3D指针单元。、再有,在IFD0区域中,在各指针单元的后面配置ExifIFD、ExifIFDValue、GPSIFD、GPSIFDValue、3DIFD、以及3DIFDValue。在ExifIFD及ExifIFDValue中,记录有图像数据的特性、结构、用户信息、拍摄条件、日期或时间等有关的标记或标记值。例如有用户注释用的标记“UserComment”标记、表示曝光时间用的标记“ExposureTime”、以及表示有无闪光灯用的标记“Flash”标记等。GPSIFD及GPSIFDValue是记录GPS(GlobalPositioningSystem,全球定位系统)有关的标记或标记值的区域。例如有表示纬度的标记“GPSLatirude”。以及表示高度的标记“GPSAltitude”等。在上述3DIFD及3DIFDValue中,记录有控制变换为3D图像即立体视觉图像用的处理等的图像控制信息有关的标记或标记值(Value)。另外,关于图像控制信息将在后面详细叙述。另外,本实施形态有关的立体视觉图像用文件的数据结构不限定于这样的例子,在是其它数据结构的情况下也可以实施。例如,在立体视觉图像用文件的数据结构是由JPEG数据构成时,也可以是各JPEG数据中包含JPEG首部及压缩图像数据及EOI(EndOfImage)的情况。在上述JPEG首部中,存在SOI(StartOfImage)及色管理信息等附属信息。另外,视点图像数据的视点编号等视点信息例如也可以存在于各JPEG首部中。视点不同的多个视点图像可以设定文件及接着它后面的多个JPEG数据及表示其整个结束的文件结束信息。在不存在对于整个的首部时(结合图像的情况),视点信息存入JPEG首部内(应用标记/IFD)。(图像信息)在本实施形态有关的立体视觉图像用文件中,由利用拍摄或记录等生成的成为主图像的视点图像数据、以及图像控制信息构成。另外,关于视点图像数据及图像控制信息,是按照DCF标准规定的。(图像格式)下面参照图11A及图11B说明本实施形态有关的结合图像数。图11A及图11B所示为本实施形态有关的结构图像数据的简要构成说明图。如图11A及图11B所示,本实施形态有关的结合图像数据是由左眼用的视点图像(L图像)及右眼用的视点图像(R图像)构成的视差图像的一个例子。另外,L图像及R图像是在各视点拍摄的视点图像。由静止图像的上述视点图像合成为3D的立体视觉图像。上述结合图像数据是在一个图像中由L图像数据及R图像数据形成一体而构成的图像数据。因而,结合图像中的L图像及R图像是处于结合的状态。图11A所示的结合图像350是沿水平方向的左右将L图像与R图像相邻排列而构成。另外,图11B所示的结合图像350是沿垂直方向的上下将L图像与R图像结合成一体。另外,本实施形态有关的结合图像是举出双视点的情况为例进行说明的,但不限定于这样的例子,在将从多个视点拍摄的图像结合成一幅结合图像进行记录的情况下也可以实施。(图像控制信息)为了记录本实施形态有关的立体视觉图像数据,如上所述,必须将作为标记的图像控制信息记录在例如硬盘驱动器、存储器、CD-ROM等记录媒体中。下面说明本实施形态有关的图像控制信息有关的标记。参照图12及图13说明本实施形态有关的3D图像控制信息有关的标记。图12及图13所示为本实施形态有关的图像控制信息有关的标记的简要构成说明图。另外,图12及图13所示的“必须/选择”标的符号表示◎必须、△选择(可省略)。如图12所示,本实施形态有关的图像控制信息是标记信息,首先从“3DPictureManagementTag”开始。“3DPictureManagementTag”是由4字节构成的标记,是在记录/重放侧对于3D图像数据部必须的标记。另外,重放是指从结合图像的图像数据变换为3D图像数据并在显示器上等进行显示。接着,“3DPictureManagementSize”是由4字节构成的、在记录/重放侧都必须的标记。“3DpictureManagementVersion”是由4字节构成的、在记录/重放侧都必须的标记。“PictureStructure”是由1个字节构成的、在记录/重放侧都必须的标记。“PictureSpecificData”是3D图像数据中的视差图像固有数据有关的标记的集合,对于至少一个或一个以上的标记在记录/重放侧都是必须的。如图13所示,“PictureStructure”有关的标记的“AssumedDisplay”是4字节的标记,在记录侧是必须的,而在重放侧是选择的标记。另外,“AssumedDisplay”是在能够显示3D图像(立体视觉图像)的立体视觉显示单元140上显示适当大小的立体视觉图像用的标记。因而,在“AssumedDisplay”的标记字段中,设定立体视觉显示单元140的种类及大小。立体视觉显示单元140的大小在本实施形态中利用英寸(inch)表示,但不限定于这样的例子。(假想显示器信息)另外,除了指定切出区域或有效区域以外,在视点图像数据中用上述的“AssumedDisplay”的标记设定显示立体视觉图像时假想的立体视觉显示单元140的种类及显示器的大小(尺寸)等。在显示立体视觉图像时,例如若将从1英寸左右大小的小的便携式终端用的视差图像变换的立体视觉图像用50英寸等大小的大的电视机等不是点对应显示,而是马上就放大显示,则由于与显示器的大小相对应,视差也放大,用户收视立体感非常强的立体视觉图像,因此视神经疲劳。再有,若放大的视差超过人的左右眼的宽度(眼间距离)即“65mm”,则无限远方的立体视觉图像被破坏,不能立体观看。因而,在设定假想显示器信息的“AssumedDisplay”的标记的字段中,设定假设想要显示立体视觉图像的显示装置(假想显示装置)有关的假想显示器信息。另外,点对应显示是将构成图像的多个点(像素)与显示画面上的多个点(像素)一一对应进行显示。作为与上述点对应显示相同的显示概念,其它还可以举出有100%显示、像素对应显示等例子。另外,假想显示器信息例如可以举出有假想显示信息等。若设定假想显示器信息,则在立体视觉显示单元140的画面上显示立体视觉图像时,与各视点图像一起检查各视点图像所附属的假想显示器信息。即,立体视觉显示单元140根据在此之后想要显示的立体视觉图像的假想显示大小、及实际的立体显示单元140上显示的显示大小,检查在立体视觉显示单元140上是否也可以显示。另外,上述假想显示大小是在显示器上显示立体视觉图像数据时为了用按照假想的大小显示而预先指定立体视觉图像大小用的显示大小。另外,在假想显示大小中采用英寸等的单元。另外,假想显示大小设定在上述假想显示器信息中包含的假想显示大小信息中。另外,在各视点图像数据首部中,包含视点图像的纵向(垂直方向)及横向(水平方向)的像素数等信息。立体视觉图像的纵×横的像素数可以根据上述视点图像数据的首部求出。另外,立体视觉图像的显示大小有关的信息可以例如有根据各视点图像的首部中包含的视点显示大小信息来求出的情况等。上述显示大小信息中包含立体视觉图像的纵向(垂直方向)及横向(水平方向)的像系数、每1英寸的像素数(像素/英寸)等信息。另外,显示大小是实际上在立体视觉显示单元140的显示器上显示的立体视觉图像的大小。设定立体视觉图像或假想显示装置有关的假想显示器信息可以防止以假想以外的状态下在立体视觉显示单元140上显示立体视觉图像。另外,上述假想显示器信息若是立体视觉图像或假想显示装置有关的信息,则不限定于这样的例子。在上述假想显示器信息中包含假想想要显示立体视觉图像的显示装置(假想显示装置)的立体视觉显示单元140的种类(假想显示器种类信息)或显示尺寸(假想显示器大小信息)等。对于上述假想显示器大小信息或假想显示器种类信息的至少一方设定数值。再有,假想显示器信息中包含表示假想的立体视觉图像显示大小的假想显示大小信息。另外,在根据上述假想显示大小信息在立体视觉显示单元140上显示立体视觉图像时,控制立体视觉图像的显示大小。例如在立体视觉显示单元140的分辨率相同、而立体视觉显示单元140的大小是1英寸及2英寸的两种显示器时,若假设在1英寸的立体视觉显示单元140上显示的立体视觉图像的大小为假想显示大小,则控制显示大小,使得在2英寸的显示器上也显示上述假想显示大小的立体视觉图像。另外,通常在1英寸的立体视觉显示单元140上显示的立体视觉图像,对于2英寸的立体视觉显示单元140,则以4倍的大小显示。“AssumedDisplay”的标记的字段由4字节构成。如图14所示,在“AssumedDisplay”的字段中存储假想显示器信息。上述假想显示器信息从作为假想显示装置的六种立体视觉显示单元140中进行选择。另外,不限定于这样的例子,作为新的假想显示装置,可以追加立体视觉显示单元140的种类。另外,在上述字段中的最低位的第1字节中,设定表示假想显示装置的种类(假想显示器种类信息)的值。因而,如图14所示,在假想显示器种类信息中设定“0”~“5”中的某一个数值。另外,“5”的HMD是头戴显示器的缩略语。“0”的“便携式终端”也包含手机。在本实施形态有关的假想显示器种类信息中不限于“0”~“5”的数值,例如也可以是字符、记号等情况。在上述假想显示器种类信息中即使设定表示假想显示装置的种类的数值,想要显示立体视觉图像的假想显示装置的种类也确定。然后,第2字节至第4字节设定表示立体视觉显示单元140的显示器大小(假想显示器大小信息)的数值。单位是英寸。另外,上述假想显示装置的种类如图14所示,也可以根据假想显示器大小信息中设定的值来确定。如图14所示,例如第2字节至第4字节设定的显示器小的范围是1英寸~4英寸时,则第1字节中唯一确定为“0”(便携式终端)。另外,在大小不定时,例如用16进制表示设定为“0xFFFFFF”等数值。再有,在本实施形态有关的图像控制信息中,还包含表示立体视觉图像的立体强度的标记(立体强度标记)。另外,立体强度表示立体视觉图像显示的立体感强度,表示文体强度的等级值越大,则显示立体感越强的立体视角图像。上述立体强度等级值、例如根据立体视觉图像具有的视差量等,用0~3的范围表示,等级值为0时,立体感最弱。另外,等级值为3时,立体感最强。另外,本实施形态有关的立体强度的等级值是举出0~3的情况为例进行说明,但不限定于这样的例子,在等级值是任何范围的情况下也可以实施。上述立体强度标记中设定表示通过累积立体强度等级值求得的累积立体强度的阈值的累积立体强度阈值。累积立体强度阈值中设定对于收视立体视觉图像的用户的眼睛不承受该阈值以上负担的累积值。另外,在本实施形态有关的图像控制信息中还包含表示立体视觉图像的立体强度的警告等级的标记(警告等级标记)。另外,警告等级根据立体强度的等级值来决定。上述警告等级的等级值用0~2的范围表示,等级值为0时,表示警告的严重程度为最低的警告。等级值为2时,表示严重程度为最高的警告。另外,上述警告等级的等级值是根据立体强度的等级值来决定,例如立体强度的等级值为“0”或“1”时,警告等级的等级值为“0”,立体强度的等级值为“2”时,警告等级的等级值为“1”,再有立体强度的等级值为“3”时,警告等级的等级值为“2”等,但不限定于这样的例子。下面,参照图15说明本实施形态有关的利用假想显示器信息的立体视觉图像显示处理。图15所示为本实施形态有关的利用假想显示器信息的立体视觉图像显示处理的简要流程图。首先,如图15所示,若利用拍摄装置100拍摄被摄物体,则拍摄单元101的合成单元131将摄像元件130送来的视点图像数据(L图像数据与R图像数据)进行结合,生成结合图像数据(S1701)。再有,拍摄装置100在生成上述视点图像数据的同时,生成作为附属于该视点图像数据的信息的图像控制信息。另外,上述结合图像数据与图像控制信息是为了生成立体视觉图像数据所必需的一组数据。然后,结合图像数据与图像控制信息利用数据多路复用单元134进行多路复用处理,记录在记录媒体135中(S1702)。另外,结合图像数据与图像控制信息记录在同一文件夹内,但不限定于这样的例子,结合图像数据与图像控制信息也可以记录在各不同的文件夹内。另外,上述记录媒体135可以存在于拍摄装置100内,也可以存在于计算机装置150内。通过在记录媒体135中记录结合图像数据与图像控制信息(S1702),包含拍摄装置100及计算机装置150的立体视觉图像处理装置能够管理上述结合图像数据及附属的图像控制信息,用户根据上述结合图像数据及附属的图像控制信息,能够观看合成的立体视觉图像。计算机装置150若从记录媒体135读入指定的结合图像数据及图像控制信息,则数据分离单元136分离为结合图像数据及图像控制信息,分别送往图像解码单元137及图像分离单元138。将解码后的结合图像数据及图像控制信息送往图像分离单元138,若利用图像变换单元139变换为立体视觉图像数据,则如图16A所示,在计算机装置150的立体视觉显示单元140上显示画面330与立体视觉图像332一起显示。另外,显示画面330与图16B的显示画面333相比要小,例如是利用便携式终端等的计算机装置150显示的显示画面。若利用鼠标等按下图16A及图16B所示的设定假想显示大小用的“大小”按钮,则显示设定假想显示器信息的设定画面(未图示)。另外,根据需要,进行切出等编辑处理,使得显示画面330的主区域331中显示的立体视觉图像332与假想显示大小相对应。另外,除了根据上述设定画面来设定假想显示大小的处理以外,例如还可以举出有根据拍摄装置100的规格进行设定的情况、预先唯一设定假想显示大小的情况、或者利用对应点匹配进行设定的情况等。以下说明上述的设定处理。在根据上述拍摄装置100的规格来设定假想显示大小时,首先求出拍摄装置100的无限远的视差最(x)。无限远的视差量(x)可利用下式(2)求出。视差量(x)=水平像素数(h)×辐辏角(i)/视角(w)…式(2)上述辐辏角例如是连接焦点与两台拍摄装置100时形成的角度。在拍摄装置100互相平行时,辐辏角为0度,进深的视差量为0。另外,本实施形态有关的拍摄装置100的无限远的视差量(x)不限定于两台拍摄装置的情况,例如也可以是安装四片反射镜式适配器的适配器的一台拍摄装置的情况等。对于求出的视差量(x)确认是否超过眼间距离即65mm,在超过65mm时,则调整视差量,使得不超过65mm,根据调整后的视差量,设定假想显示大小。然后,在预先决定立体视觉图像的显示大小、并根据上述显示大小来设计拍摄装置100时,唯一确定假想显示大小。因而,不需要从用户一侧来设定假想显示大小的处理。再有,在通过对于各视点图像中包含的对应点进行匹配来设定假想显示大小时,首先为了设定假想显示大小,选择对象的视点图像,抽取上述各视点图像中包含的对应点。关于上述对应点的抽取,可以是由用户进行抽取、或由装置自动抽取的任何一种情况。另外,抽取的对应点例如是各视点图像中每个图像的三个地方等,但不限定于这样的例子。另外,对应点是作为同一被摄物体在各视点图像中对应一致的点。例如在双视点的情况下,是作为同一被摄物体在左视点图像与右视点图像中的对应一致的点。另外,通常对应点几乎对于各视点图像内的全部的点都存在,但不一定限于全部的视点图像上存在对应点。因而,有的情况下发生部分不存在对应点的区域。另外,所谓本实施形态有关的对应点,也可以表示视点图像内的某一区域存在的对应点的集合体。关于上述对应点的集合所占区域的大小及形状等,若能够与各视点图像中拍摄的被摄物体相对应,则不限定于这样的例子,也可以是任意的大小及形状等区域。例如,在多个视点图像中拍摄同一被摄物体的杯子时,若对于杯子开口部分的边缘(或边缘的任意点)来考虑对应点,则一个视点图像中拍摄的上述开口部分的边缘在图像内存在的对应点所占的区域、与另一个视点图像中拍摄的上述开口部分的边缘在图像内存在的对应点所占的区域的大小及形状等几乎达到相同程序的一致。另外,在抽取对应点时,通过提高各视点图像的对比度、或将各视点图像二值化,能够有效地抽取适当的对应点。另外,图像的二值化是例如对于视点图像的各像素的辉度(亮度)设置一个或两个或两个以上的阈值,或小于等于阈值设为“0”(黑),若大于阈值设为“1”(白)等。求抽取出对应点,则将每个视点的该对应点相互之间连接,求出对应点间的距离。再通过对求出的对应点间的距离分别取得各自的差分,求出视差量。例如在双视点的情况下,在左视点图像及右视点图像中各在三个地方抽取对应点,将左视点图像及右视点图像中该地应相互之间连接,求出三个对应点间的距离(A,B,C)。然后,根据求出的三个对应点间的距离,取得相互的差分(A-B,A-C,B-C)的绝对值,从而求得各自的视差量。另外,对应点的抽取是在视点图像中对于进深的某一远方周边部分进行的,但不限定于这样的例子。然后,从求出的视差量中选择最大的视差量,确认该最大视差量是否超过眼间距离的65mm。在最大视差量没有超过65mm时,根据上述最大视差量,自动求出假想显示大小。另外,在最大视差量超过65mm时,调整各视点图像的显示大小,使得最大视差量小于65mm,并根据调整后的最大视差量,求出假想显示大小。这里,若在上述设定画面上设定显示器的种类及大小、以及表示想要显示的立体视觉图像的显示大小的假想显示大小,则图像分离单元138在对结合图像数据的图像控制信息的“AssumedDisplay”的字段中设定由显示器的种类、显示器的大小、以及假想显示大小构成的假想显示器信息(S1703)。上述显示器的种类例如是图14所示的“0”(便携式终端),大小是“1英寸”等。另外,关于本实施形态有关的假想显示器信息的设定,如上所述那样,除了通过设定画面的情况以外,例如还可以有拍摄装置的规格的情况、唯一决定的情况、以及对应点匹配的情况等。若设定了上述图像控制信息中包含的假想显示器信息或假想显示大小信息等(S1703),则将上述结合图像数据及图像控制信息通过网络向其它的计算机装置150、便携式终端(未图示)、手机(未图示)等发送(S1704)。通过上述发送处理(S1704),对其它的计算机装置等能够以按照假想的显示器装置或以按照假想的大小来显示立体视觉图像。另外,本实施形态有关的结合图像数据及图像控制信息不限定于通过网络提供,例如也可以通过CD-ROM等记录媒体提供结合图像数据及图像控制信息。设定了假想显示器信息的图像控制信息及结合图像数据记录在记录媒体135中。因而,例如个人计算机(PC)等别的计算机装置150可以读取上述图像控制信息及结合图像数据。然后,计算机装置150若读了记录媒体135中记录的结合图像数据及图像控制信息,则根据构成结合图像数据的各视点图像合成立体视觉图像,在立体视觉显示单元140上进行显示之前,检查图像控制信息中包含的假想显示器信息(S1705)。上述假想显示器信息的检查(S1705)确认是否是能够适当显示立体视觉图像的、按照假想的立体视觉显示单元140。例如,将假想显示器信息中包含的假想显示器大小信息或假想显示器种类信息的至少一方与立体视觉显示单元140的显示大小(显示大小)进行比较,判断是否是假想显示装置。若是假想的产立体视觉显示单元140,则根据视差合成为立体视觉图像,显示立体视觉图像(S1706)。另外,本实施形态有关的假想显示器信息的检查(S1705)不限定于这样的例子,例如在根据立体视觉显示单元140及立体视觉图像的双方的像素数来检查假想显示性信息的正确性的情况下也可以实施。关于上述根据像素数对假想显示器信息的检查,首先计算机装置150根据立体视觉显示单元140的水平像素数(像素)及显示器大小(英寸),如式(3)所示,求出每1英寸的水平像素数。另外,除了水平像素数以外,也可以是垂直像素数、或一个显示画面的全部像素数等情况。水平像素数(h)×放大缩小倍率(x)/显示器大小(m)…式(3)然后,计算机装置150根据立体视觉图像的水平像素数及假想显示器信息中设定的假想显示大小,如式(4)所示,求出立体视觉图像的每1英寸的水平像素数。另外,在没有设定上述假想显示大小时,进行表示不能显示立体视觉图像的意思的警告显示等。另外,与立体视觉显示单元140的情况相同,也可以是垂直像素数据或显示画面的全部像素数等的情况。水平像素数(h)×放大缩小倍率(x)/假想显示大小(s)…式(4)若分别求出立体视觉显示单元140及立体视觉图像的每1英寸的水平像素数,则将双方进行比较,判断在立体视觉显示单元140上能否显示该立体视觉图像。例如,在立体视觉显示单元140的水平像素数是1024(像素)、显示器大小是15英寸时,而立体视觉图像的水平像素数是160(像素)、假想显示大小是2英寸时,在不进行放大/缩小显示的点对应显示(x=1)中,立体视觉显示单元140的每1英寸的水平像素数据上述式(3)为68(像素)。然后,立体视觉图像的每1英寸的水平像素数根据式(4)为80(像素)。比较上述立体视觉显示单元140一方的68(像素)与立体视觉图像一方的80(像素),由于实质上是等倍数,因此判断为能够显示立体视觉图像(S1705)。这里,假设由于立体视觉图像小于立体视觉显示单元140的显示大小等的理由,有的情况下不是点对应显示,而且必须在立体视觉显示单元140上将立体视觉图像进行放大/缩小显示。例如,在立体视觉显示单元140的水平像素数是1024(像素)、显示器大小是15英寸时,而立体视觉图像的水平像素数是160(像素)、假想显示大小是2英寸时,在放大/缩小显示是3倍(x=3)中,立体视觉显示单元140的每1英寸的水平像素数据式(3)为68(像素),而立体视觉图像的每1英寸的水平像素数据为240(像素)。上述立体视觉显示单元140的每1英寸的水平像素数(68像素)与立体视觉图像的每1英寸的水平像素数(240)的比较结果,在利用点对应显示的显示中,图像大幅度放大,同时视差也放大,由于有可能超过破坏立体视觉图像的眼间距离(65mm),因此在立体视觉显示单元140上显示警告画面。警告画面将在后面叙述,它通过显示立体视觉图像,显示表示所显示的立体视觉图像是难以立体观看的意思的消息,尽管如此,通过用户选择“Yes”按钮或“No”按钮,可以决定是否显示该立体视觉图像。另外,在比较的结果,例如立体视觉图像的每1英寸的像素数是立体视觉显示单元140的每1英寸的像素数的“2”~“3”倍左右的范围内时,判断为能够显示立体视觉图像,但不限定于这样的例子,在设定其它的适当范围内的情况下也可以实施。另外,在例如立体视觉显示单元140的水平像素数是1024(像素)、显示器大小是15英寸时,而立体视觉图像的水平像素是1280(像素)、假想显示大小是100英寸时,在点对应显示(x=1)中,立体视觉显示单元140的每1英寸的水平像素数据根据上述式(3)为68(像素)。然后,立体视觉图像的每1英寸的水平像素数根据上述式(4)为约13(像素)。比较上述立体视觉显示单元140一方的68(像素)与立体视觉图像一方的13(像素),在点对应显示中,由于立体视觉图像的显示大小过小,因此视差也小,判断为难以作为立体视觉图像进行显示(S1705)。再有,显示表示作为立体视觉图像难以显示有立体感的意思的警告画面。警告画面将在后面叙述,即使显示立体视觉图像,也显示表示由于几乎没有视差而不能显示有立体感的图像的意思的消息,尽管如此,通过用户选择“Yes”按钮或“No”按钮,可以决定是否显示该立体视觉图像。另外,在比较的结果、立体视觉图像的每1英寸的像素数是立体视觉显示单元140的每1英寸的像素数的例如1/3~1/2左右的范围内时,判断为能够显示立体视觉图像,但不限定于这样的例子,在设定其它的适当范围内的情况下也可以实施。在上述例子中,由于立体视觉显示单元140的显示器大小是15英寸,假想显示大小是100英寸,因此照原样在上述立体视觉显示单元140上不能显示按照假想的显示大小的立体视觉图像。因而,例如在显示的警告画面上选择显示立体视觉图像的“Yes”按钮时等情况下,为了用上述立体视觉显示单元140的显示器大小15英寸最适当的显示立体视觉图像,像以下那样进行处理。在立体视觉显示单元140的水平像素数是1024(像素)、显示器大小是15英寸时,而立体视觉图像的水平像素是1280(像素)、假想显示大小是100英寸时,立体视觉显示单元140的每1英寸的水平像素数根据式(3)为68(像素)。由于立体视觉显示单元140的每1英寸的水平像素数据68(像素),因此若设放大/缩小显示为5倍,则上述立体视觉图像的每1英寸的水平像素数成为65(像素),几乎相等。上述立体视觉显示单元140的每1英寸的水平像素数(68像素)与立体视觉图像的每1英寸的水平像素数(65像素)的比较结果,立体视觉图像的每1英寸的水平像素与利用点对应显示时相比,其值增加,判断为实质上相等,判断为具有地于立体显示是适当的视差(S1705)。因而,在立体视觉显示单元140上能够显示调整为适当的显示大小的立体视觉图像。另外,在本实施形态中,是举出将视差小的立体视觉图像放大显示时为例进行说明的,但不限定于这样的例子,也可以是将立体显示困难的立体视觉图像照原样进行点对应显示等情况。然后,在假想显示器信息的确认处理(S1705)后,在立体视觉显示单元140上显示立体视觉图像(S1706)。下面,说明在立体视觉显示单元140上显示立体视觉图像的显示处理。在图14所示的显示的种类是“0”(便携式终端)~“4”(Projector)中,例如在将显示立体视觉图像的显示器的大小由2英寸放大至20英寸的情况等显示器的大小由小变大进行显示的情况下,不按照显示器的大小,显示假想显示大小设定的显示大小的立体视觉图像。在包含上述假想显示器信息的图像控制信息及结合图像数据例如利用PC等显示器的大小(20英寸等)较大的计算机装置150读取时,显示图16B所示的显示画面333。在图16B所示的显示画面333中,显示立体视觉图像335。上述立体视觉图像335以与图16A所示的立体视觉图像332实质上同一大小显示。上述立体视觉图像335之所以没有根据显示画面333的显示器的大小放大进行显示,是由于与图像控制信息中设定的显示器的大小相比,因显示画面333较大,故按照上述说明那样,利用图像变换单元139等,根据像素数及假想显示大小,进行点对应显示,或者缩小大小,变换为立体视觉图像335。因而,通过视差不超过眼间距离即65毫米,预先显示视差小的立体图像,就可不对眼睛增加负担。另外,不限于本实施形态有关的立体视觉图像335与立体视觉图像332实质上相同的情况,例如在以比立体视觉图像332略大的大小进行显示时也可以实施。另外,在将图16B所示的立体视觉图像335放大显示时,利用鼠标等按下“放大”按钮。若利用鼠标等按下“放大”按钮,则显示画面333如图17所示,切换为警告画面310,显示获得消息。如图17所示,在警告画面310上显示“有可能立体视觉困难”等警告消息。若按下“是”按钮,则在显示画面333上显示放大的立体视觉图像335。若按下“不是”按钮,则不进行放大处理,返回原来的显示画面333。之所以显示上述画面310,是由于因立体视觉图像的放大而视差增大,故难以立体观看。另外,由于因视差放大,而促使视神经疲劳。另外,在图16B所示的主区域334的整个区域显示立体视觉图像335、而在图16A所示的显示画面330的主区域331显示上述整个区域的立体视觉图像335时,与上述说明相反,为了将整个立体视觉图像335收扰在图16A所示的主区域331内,通过按下“缩小”按钮等进行缩小,在显示画面330上显示立体视觉图像335。另外,通过按下“缩小”按钮,由于视差小,因此也可以显示表示所显示的立体视觉图像没有立体感的意思的警告画面。通过按下本实施形态有关的“放大”或“缩小”按钮,立体视觉图像335的显示大小变化,也可以在每次显示大小变化时,根据变化后的立体视觉图像335的视差,求出立体强度,更新图像控制信息的标记中包含的立体强度标记等数值。例如,在原始的立体视觉图像335的立体强度为“1”时,立体视觉图像335在放大显示时作为“2”进行处理。另外,也可以每次按下“放大”按钮或“缩小”按钮的按钮时,更新图像控制信息的标记中包含的立体强度标记等数值。例如,也可以有的情况是若按下“放大”按钮,则对立体强度标记的值加“1”,若按下“缩小”按钮,则从立体强度标记的值中减去“1”等。下面参照图18说明本实施形态有关的立体视觉图像的连续显示限制。图18所示为本实施形态有关的立体视觉图像的累积立体强度变化的简要变化图。如图18所示,累积立体强度的变化图是由纵轴为累积立体强度、横轴为时间(t)形成的变化图。从上述累积立体强度的变化图可知,通过连续显示立体视觉图像,而使累积的立体强度变化的形态。另外,累积立体强度的阈值是图18所示的累积立体强度阈值L。累积立体强度超过上述累积立体强度阈值L,成为从3D(三维)的立体视觉图像切换为2D(二维)的图像的一个标准。图18所示的t1表示在立体视觉显示单元140上显示立体视觉图像的显示开始时刻。即,是用户收视立体视觉显示单元140显示的立体视觉图像的开始时刻。若开始显示立体视觉图像,则例如每隔1秒等、每隔规定时间,利用图像变换单元139等进行确认是否正在显示立体视觉图像,在显示立体视觉图像时,将上述立体视觉图像的立体强度等级值与累积立体强度相加。另外,显示开始时刻的累积立体强度是“0”。如图18所示,从t1至t2,由于每隔规定时间将上述立体强度的等级值与累积方体强度相加,因此如图18所示,累积立体强度随着时间的经过呈阶梯状相加。另外,在立体强度的等级值是一定时,与累积立体强度相加的增量值也一定。接着,在t2时刻,由于立体视觉图像的立体强度的等级值变化,因此与累积立体强度相加的增量值增大。即,用户收视到立体感更强的立体视觉图像。t2以后,将变化后的立体强度的等级值每隔规定时间与累积立体强度相加。然后,若与上述累积立体强度相加的累积值达到累积立体强度阈值L(t3),则开始立体视觉图像的连续显示限制。这是由因累积收视立体视觉图像,对用户的眼睛造成负担。另外,累积立体强度阈值L可以根据例如立体视觉显示单元140的种类及显示尺寸、或立体视觉图像的显示大小等进行改变。若开始上述立体视觉图像的连续显示限制,则在立体视觉显示单元140上显示表示“若继续收视立体视觉图像,将对人体有影响”的意思的警告画面。上述警告画面上除了上述消息以外,还显示切换为2D图像用的“2D”按钮。上述“2D”按钮若利用鼠标等输入单元(未图示)按下,则立体视觉显示单元140上显示的立体视觉图像切换为2D图像。另外,在按下上述“2D”按钮之前,继续每隔规定时间将立体强度的等级值与累积立体强度相加,照原样显示立体视觉图像。若按下“2D”按钮(t4),则从立体视觉图像切换为2D图像,累积立体强度的值也初始化为“0”。另外,在关闭立体视觉显示单元140的显示画面、处于什么也不显示的状态的情况下,将累积立体强度也初始化。另外,上述2D图像若是二维图像,则没有限定,例如可以举出有立体视觉图像合成前的各视点图像、或预先决定的规定图像等。另外,也有的情况下不显示上述2D图像,在规定时间内为了有助于减少功耗而停止显示处理。在从立体视觉图像切换为2D图像后,2D图像的显示状态若经过例如1分钟等规定时间,则在立体显示单元140上显示“能够显示3D的立体视觉图像”等消息,同时显示从2D图像切换为立体视觉图像用的“3D”按钮。若利用鼠标等输入单元按下上述“3D”按钮,则立体视觉图像的显示开始(t5),从2D图像切换为立体视觉图像,再次在立体视觉显示单元140上显示立体视觉图像。另外,t5以后,再次每隔规定时间将立体强度的等级值与累积立体强度相加。另外,本实施形态有关的累积立体强度是举出每隔规定时间加上立体强度的等级值的情况为例进行说明的,但不限定于这样的例子。例如,也可以在立体视觉图像的显示期间,累积立体强度不是阶梯状,而是像比例直线那样,始终保持一定的增量的情况等。下面参照图19说明利用警告等级进行的警告画面显示处理。图19所示为本实施形态有关的利用警告等级进行警告画面显示处理的简要流程图。如图19所示,有的情况下与利用上述说明的图18所示的累积立体强度显示的警告画面不同,另外,利用警告等级显示警告画面。首先,在立体视觉显示单元140上显示立体视觉图像时,根据立体强度的等级值,确认警告等级(S1901)。在上述警告等级是“0”时(S1902),即使立体显示也没有问题,在立体视觉显示单元140上显示立体视觉图像(S1907)。另外,在上述警告等级不是“0”时(S1902),接着确认警告等级是否是“1”。在上述警告等级是“1”时(S1903),在立体视觉显示单元140上显示将显示大小缩小的立体视觉图像及警告画面(S1904)。如图20所示,立体视觉显示单元140上至少由显示立体感比假想显示大小的立体视觉图像要弱的立体视觉图像的区域2001、以及显示表示立体感强的意思的警告消息的区域2002所构成。另外,图20所示为本实施形态有关的利用警告等级显示的立体视觉图像及警告画面的简要说明图。如上所述,由于警告等级是“1”,因此根据引起用户的神经疲劳等的理由,在区域2001中显示将视差缩小的立体视觉图像。再在区域2002中显示警告消息、以及“YES”按钮和“NO”按钮。如图20所示,在用户确认上述警告消息后,与上述警告等级无关,按照通常那样在立体视觉显示单元140上显示立体视觉图像时,若利用鼠标等输入单元按下“YES”按钮,则判断为是通常显示(S1906),立体视觉图像照原样在立体视觉显示单元140上显示(S1907)。另外,若与上相反,在用户确认上述警告消息后,根据上述警告等级,在立体视觉显示单元140上不照原样显示立体视觉图像时(S1906),不显示该立体视觉图像(S1908)。然后,如图19所示,在警告等级不是1时(S1903),在立体视觉显示单元140上显示立体视觉图像的显示大小更进一步缩小的立体视觉图像及警告画面(S1905)。如图21所示,立体视觉显示单元140上至少由显示比图20所示的立体视觉图像更缩小视差、立体感非常弱的立体视觉图像的区域2003、以及显示表示立体感非常强的意思的警告消息的区域2004所构成。另外,图21所示为本实施形态有关的利用警告等级显示的立体视觉图像及警告画面的简要说明图。如上所述,由于警告等级大于“1”,因此根据导致用户的视神经疲劳的可能性极高等的理由,在区域2003中显示将显示大小变成非常小的立体视觉图像。再在区域2004中显示警告消息、以及“YES”按钮和“No”按钮。如图21所示,在用户确认上述警告消息后,与上述警告等级无关,按照通常那样在立体视觉显示单元140上显示立体视觉图像时,若利用鼠标等输入单元按下“YES”按钮,则判断为是通常显示(S1906),立体视觉图像照原样在立体视觉显示单元140上显示(S1907)。另外,与上相反,在用户确认上述警告消息后,在立体视觉显示单元140上不显示立体视觉图像时(S1906),不显示该立体视觉图像(1908)。另外,本实施形态有关的立体视觉图像在警告画面显示后,在立体视觉显示单元140上不显示立体视觉图像时,是举出关闭该立体视觉图像的图像文件的情况为例进行说明的,但不限定于这样的例子,例如也可以是通过适当缩小立体视觉图像的视差来进行显示等情况。另外,本实施形态有关的警告画面是举出与立体视觉图像的显示一起在一个画面内显示的情况为例进行说明的,但不限定于这样的例子,例如也可以如图22A所示,在立体视觉显示单元140只显示假想显示大小的立体视觉图像,关于警告画面则如图22B所示,与显示上述立体视觉图像的画面分开,另外显示等。通过按下图22B所示的“YES”按钮,判断为是通常显示(S1906),立体视觉图像照原样在立体视觉显示单元140上显示(S1907)。另外,与上相反,在用户确认上述消息后,不按照通常在立体视觉显示单元上显示立体视觉图像时(S1906),不显示该立体视觉图像的图像文件(S1908)。另外,图22A及图22B所示为本实施形态有关的利用警告等级显示的立体视觉图像及警告画面的简要说明图。本实施形态有关的利用警告等级显示的警告画面在利用累积立体强度的警告画面先显示时或利用立体视觉图像的放大/缩小的警告画面先显示时,不是连续显示,而是例如隔开1分钟等的间隔进行显示。另外,本实施形态有关的利用警告等级显示的警告画面、本实施形态有关的利用累积立体强度的警告画面、或者本实施形态有关的利用立体视觉图像的视差放大等的警告画面中,显示的警告画面对于显示的一个立体视觉图像只限制为一次,但不限定于这样的例子。再有,本实施形态有关的利用警告等级显示的警告画面,在每次检查警告等级时每次都显示的情况下,或者仅显示第一次的情况下,或者警告等级相当于“1”或“2”的立体视觉图像例如若显示20次等规定次数则显示警告画面的情况下,也可以实施。通过使各视点图像等内容所附属的图像控制信息中包含假想显示器信息,在预想假想想要显示的立体视觉显示单元140之后,能够制作内容,还能够对于适合用立体视觉显示单元140显示的内容,根据附属的假想显示器信息,通过将假想显示器大小信息与假想显示大小等的相关关系列表显示等,能够有效地检索所希望的内容。以上参照了本发明的合适的实施形态,但本发明不限定于这样的例子。若是业内人士,则可明白在专利要求范围所述的技术思想范畴内能够设想各种变更例或修正例,对于这些也知道当然属于本发明的技术范围。在上述实施形态中,是举出双视点图像的情况为例进行说明的,但本发明不限定于这样的例子。例如,即使是三个或三个以上的多视点图像的情况,也能够实施。如上所述,根据本发明,能够指定假想想要合成为立体视觉图像并显示的显示装置的种类及显示尺寸、以及立体视觉图像的显示大小等,能够将上述指定的信息作为附属信息与视点图像一起进行管理。另外,在显示立体视觉图像时,在与假想的显示装置不同的种类或显示尺寸的情况下,进行警告,或者放大或缩小立体视觉图像,能够得到各视点图像的相互视差量以适当的范围表现的自然的立体视觉图像。工业上的实用性本发明能够适用于可生成立体视觉用的立体视觉图像的立体视觉图像处理装置、立体视觉图像提供方法及图像显示方法等。权利要求1.一种立体视觉图像处理装置,其特征在于,是将至少相互具有视差的多个视点图像进行合成而生成立体视觉图像的立体视觉图像处理装置,所述视点不同的多个视点图像,与关于想要合成及显示立体视觉图像的假想显示装置相关的假想显示信息一起进行管理。2.如权利要求1所述的立体视觉图像处理装置,其特征在于,所述假想显示信息包含关于所述假想显示装置的种类及/或显示尺寸的信息。3.如权利要求2所述的立体视觉图像处理装置,其特征在于,所述假想显示信息包含用按照假想的显示大小来显示所述立体视觉图像的假想显示大小信息。4.如权利要求1所述的立体视觉图像处理装置,其特征在于,所述假想显示信息包含用按照假想的显示大小来显示所述立体视觉图像的假想显示大小信息。5.如权利要求1所述的立体视觉图像处理装置,其特征在于,所述立体视觉图像的显示大小,至少根据所述假想显示信息进行控制。6.如权利要求5所述的立体视觉图像处理装置,其特征在于,所述假想显示信息是所述假想显示大小信息。7.如权利要求1所述的立体视觉图像处理装置,其特征在于,在改变所述立体视觉图像的显示大小时,显示通知关于显示大小改变用的画面。8.如权利要求1所述的立体视觉图像处理装置,其特征在于,在显示所述立体视觉图像时,至少根据该立体视觉图像的显示大小及/或所述假想显示信息,判断是否显示警告画面。9.如权利要求8所述的立体视觉图像处理装置,其特征在于,根据所述立体视觉图像显示的显示时间,判断是否显示所述警告画面。10.如权利要求9所述的立体视觉图像处理装置,其特征在于,根据随着所述立体视觉图像显示所经过的显示时间而累积的该立体视觉图像的立体强度的累积值,判断是否显示所述警告画面。11.如权利要求8所述的立体视觉图像处理装置,其特征在于,根据所述假想显示信息中包含的假想显示大小信息,判断是否显示所述警告画面。12.如权利要求8所述的立体视觉图像处理装置,其特征在于,利用所述立体视觉图像的显示大小的放大及/或缩小,显示所述警告画面。13.如权利要求11所述的立体视觉图像处理装置,其特征在于,利用所述立体视觉图像的显示大小的放大及/或缩小,显示所述警告画面。14.如权利要求11所述的立体视觉图像处理装置,其特征在于,所述警告画面根据所述立体视觉图像的立体强度及/或所述立体视觉图像的显示时间,判断是否显示。15.如权利要求11所述的立体视觉图像处理装置,其特征在于,所述警告画面根据所述立体强度的累积值,判断是否显示。16.如权利要求1所述的立体视觉图像处理装置,其特征在于,所述立体视觉图像由相互具有视差的右视点图像与左视点图像合成。17.如权利要求16所述的立体视觉图像处理装置,其特征在于,将所述右视点图像与左视点图像作为一个结合图像进行管理,将所述假想显示信息作为所述结合图像的标记信息进行管理。18.一种立体视觉图像提供方法,其特征在于,是利用相互具有视差的多个视点图像的合成而提供生成的立体视觉图像数据的立体视觉图像提供方法,将与视点不同的所述多个视点图像数据一起进行管理的、与想要显示所述立体视觉图像的假想显示装置相关的附属信息,与该视点图像数据一起提供。19.如权利要求18所述的立体视觉图像提供方法,其特征在于,所述附属信息是假想显示信息。20.如权利要求19所述的立体视觉图像提供方法,其特征在于,所述假想显示信息包含关于所述假想显示装置的种类及/或显示尺寸的信息。21.如权利要求20所述的立体视觉图像提供方法,其特征在于,所述假想显示信息包含用按照假想的显示大小来显示所述立体视觉图像用的假想显示大小信息。22.如权利要求19所述的立体视觉图像提供方法,其特征在于,所述假想显示信息包含用按照假想的显示大小来显示所述立体视觉图像用的假想显示大小信息。23.如权利要求19所述的立体视觉图像提供方法,其特征在于,在显示画面上显示所述立体视觉图像的该立体视觉图像的显示大小,至少根据所述假想显示信息进行控制。24.如权利要求23所述的立体视觉图像提供方法,其特征在于,所述假想显示信息是所述假想显示大小信息。25.如权利要求18所述的立体视觉图像提供方法,其特征在于,所述立体视觉图像由互相具有视差的右视点图像与左视点图像合成。26.如权利要求25所述的立体视觉图像提供方法,其特征在于,将所述右视点图像与左视点图像作为一个结合图像进行管理,将所述假想显示信息作为所述结合图像的标记信息进行管理。27.一种图像显示方法,其特征在于,是将至少相互具有视差的多个视点图像进行合成而合成为立体视觉图像并显示的图像显示方法,在两个或两个以上的显示器之间,显示实质上同一显示大小的立体视觉图像。28如权利要求27所述的图像显示方法,其特征在于,在改变所述立体视觉图像的显示大小时,通知关于显示大小的变化。29.如权利要求27所述的图像显示方法,其特征在于,利用所述立体视觉图像的显示大小的放大及/或缩小,显示所述警告画面。全文摘要本发明提供能够将指定想要显示立体视觉图像的显示装置作为附属信息(假想显示信息)进行管理的立体视觉图像处理装置、立体视觉图像提供方法及图像显示方法。假想显示信息包含假设想要显示前述立体视觉图像的显示装置的显示装置种类及显示大小。通过这样,指定想要合成为立体视觉图像并显示的显示装置的种类或显示尺寸等,在显示立体视觉图像时,根据显示装置的种类或显示尺寸,放大或缩小立体图像,从而能够得到合适的立体视觉图像。文档编号H04N13/02GK1788497SQ200480013100公开日2006年6月14日申请日期2004年4月16日优先权日2003年4月17日发明者佐藤晶司,关泽英彦,野村敏男,塩井正宏,滨岸五郎,增谷健申请人:索尼株式会社,夏普株式会社,三洋电机株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1