有2个以上像场。另外，I个像场为I个画面，也可称为I个图像框。
[0081]图1为本实施例的图像处理装置I的方块图。图像处理装置I具备:储存部10、图像受理部11、图像分析部12、数字处理部13、物理特性信息取得部14、物理性特性处理部15、I个或2个以上输出部16、输出图像信息取得部17、输出参数取得部18、及用户信息取得部19。
[0082]数字处理部13具备:例如，约束条件储存装置131、视野范围信息储存装置132、及数字处理装置133。
[0083]物理性特性处理部15具备:例如，物理性特性约束条件储存装置151、及物理性特性处理装置152。
[0084]输出部16具备:例如，输出约束条件储存装置161、及输出装置162。
[0085]在此，图像处理装置I具有的输出部16以执行例如投影机、有机EL(有机电激发光)等的光输出的装置较为合适。但，输出部16也可为液晶、阴极射线管等输出装置。亦即，并不拘图像处理装置I具有的显示器种类。
[0086]储存部10得储存I个或2个以上查找表(以下，权称为“LUT”)。储存部10也可储存两组以上识别LUT种类的种类识别符及与种类识别符对应的LUT的组对。此外，LUT数据的构造并不限于表格构造。亦即，LUT的数据构造为不拘形式。又，所谓LUT的种类，也可为LUT本身，应无庸赘言。
[0087]在此，LUT具有I个或2个以上对应信息。对应信息为供取得I个或2个以上图像(图像受理部11所受理的图像)的全部或一部分和有关与该图像相同对象的图像的处理图像(数字处理部13所输出的图像)的全部或一部分对应信息。而且，对应信息包含供取得物理特性信息的信息。此外，所谓对象，可为图像内的一部分对象，也可为整体图像显示的景色、场面等。而且，所谓对象是指人、山、川、风中摇曳的树木、汽车等有体物。再者，物理特性信息可为显示物理性特性的信息，也可为供使失去的物理性特性再重现的信息。物理特性信息为例如，光量、视角、放大倍率、2个以上输出部16的光输出控制信息、用户反应信息。所称光输出控制信息，是指光输出时的光量、视角、输出的图像的范围等信息。所称用户反应信息，是指例如观看对象时人的眼睛动作、瞳孔状态、脸部动作等。而且，此处所谓的物理性特性，只要是对象的大小、明亮度、动作、颜色等对象所显现的物理性特性，可为任一种。又，所称供取得物理特性信息的信息，可为物理特性信息本身，例如，图像输出时的光量、显示图像输出时的视角的信息、用以计算光量的计算式、用以计算视角的计算式等。在此，物理特性信息是指例如图像输出时有关光量的信息。此外，物理特性信息是指例如图像输出时有关视角的信息。
[0088]在此，对应信息或LUT会因输出装置的种类而变化，应无庸赘言。例如，在投影机与有机EL而言，由于发光原理、像素形状等不相同，以使供物理性特性再重现的图像的输出内容就会有不同。
[0089]此外，LUT具有的对应信息为一个时，这种对应信息是指例如转换图像的计算式，或加到转换图像计算式的I个以上参数群。对应信息也可为例如计算时空区块像素值的中央值的计算式。
[0090]再者，对应信息是指例如具有第一图像相关信息、第二图像相关信息及物理特性信息的信息。第一图像相关信息为关于I个或2个以上图像的全部或一部分的信息。第二图像相关信息为关于I个或2个以上处理图像的全部或一部分的信息。第一图像相关信息为例如从I个以上图像的全部或一部分抽出的I个以上特征量。又，第二图像相关信息为例如I个以上处理图像的全部或一部分。而且，第二图像相关信息为例如产生I个以上处理图像的全部或一部分的计算式。此外，第二图像相关信息为例如加到产生I个以上处理图像的全部或一部分的计算式的参数群对。在此情形中，计算式为例如数字处理部13所保存。又，从图像抽出的I个以上特征量中，有例如I个以上图像的一部分的特征量的邻近特征量、与I个以上图像整体的特征量的整体特征量。邻近特征量中有例如像素值、活动性、时空关连性、动作向量、频率分布等。再者，所谓活动性，是指例如多个像素的最大值及最小值、动态范围(DR)、多个像素间的差分值等。多个像素间的差分值可为空间内的多个像素间的差分值，也可为时间方向的多个像素间的差分值，亦可为空间内及时间方向的多个像素间的差分值。此外，整体特征量有例如图像整体的像素值分布、图像整体的动作向量分布、I个或2个以上图像整体的时空关连性、图像整体的噪声量、图像格式、关于图像整体编辑的信息(是否为PinP、是否为PoutP、自动反射式幻灯机的有无等)、关于I个以上图像的内容的内容信息、模样检测结果(脸部等)等。在此，所称内容信息，是指例如电子节目表(EPG)具有的节目类型、标题、演出者姓名等。此外，也将I个以上特征量权称为特征量向量。
[0091]再者，上述I个以上图像的全部或一部分及I个以上处理图像的全部或一部分可为输出的一个画面图像、也可为一个画面的一部分区块的图像、也可为一个像素、也可为时间上相连续的多个画面、亦可为时间上相连续的多个画面的空间上的一部分(后述的时空区块)，也可为时间上相连续的多个画面的连续的一个像素的集合。亦即，不拘图像及处理图像的信息量单位。此外，所谓时空区块，通常是称将映像作空间性、或时间性、或空间性与时间性分割的一部分。但，时空区块只要是像素的集合即可。亦即，时空区块并不限于矩形的连续区域。时空区块也可为非矩形且不连续的图像区域。而且，图像分割所取得的多个时空区块也可具有部分重复的像素。
[0092]图像受理部11受理I个或2个以上图像。而且，图像受理部11也可受理一个对象在不同的2个以上环境拍摄所得的两种以上图像。在此，图像通常是指用摄影机拍摄所得拍摄图像，但不必限于拍摄图像。图像也可为例如CG(数字合成)图像等。再者，此处所称不同的环境是指时间、天气、气温、摄影机、摄影机参数等不同的情形。而且，所谓2种以上图像，是指例如昏暗图像与明亮图像、分辨率不同的图像、颜色数不同的图像、视角不同的图像等。同时，此处的所谓受理，通常是指使用通讯装置或讯号收发装置进行的接收，但也包含从光盘或磁盘、半导体内存等记录介质读取信息的受理、从扫描仪或摄影机等输入设备输入图像的受理等概念。图像受理部11得藉由例如讯号收发装置、或通讯装置等来实现。
[0093]图像分析部12将图像受理部11所受理的I个以上图像的全部或一部分加以分析，取得分析结果，并选择与该分析结果对应的对应信息。图像分析部12也可将图像受理部11所受理的I个以上图像的全部或一部分加以分析，取得分析结果，选择和该分析结果对应的LUT，并自该LUT内选择对应信息。在此，所谓对应信息的选择，可为取得对应信息，也可为取得包含在对应信息的部分信息(例如，第二图像相关信息、或物理特性信息)，亦可为取得识别对应?目息的?目息等。
[0094]而且，图像分析部12将例如图像受理部11所受理的I个以上图像的全部或一部分加以分析，取得第一图像相关信息，并取得与该第一图像相关信息对应的对应信息。此夕卜，如上所述，第一图像相关信息为例如图像的邻近特征量或整体特征量等。
[0095]此外，图像分析部12在将图像受理部11所受理的I个以上图像的一部分进行分析时，图像分析部12通常将图像受理部11所受理的I个以上图像加以分割，而取得2个以上时空区块。在此，时空区块也包含将一个图像作空间性分割所得的区块，也可看作包含多个图像作时间性分割的时间区块。
[0096]数字处理部13对图像受理部11所受理的I个或2个以上图像进行数字处理，并取得I个或2个以上处理图像。在此，所谓数字处理，可为例如提升分辨率的处理、变更像素值的处理、变更亮度的处理、变更明亮度的处理等。在此，所谓数字处理，只要是对图像的数字处理，任一种皆可。
[0097]其次，数字处理部13也可使用后述物理特性信息取得部14所取得的物理特性信息，对图像受理部11所受理的I个或2个以上图像进行数字处理，并取得I个或2个以上处理图像。在此，所谓物理特性信息，是指例如关于显示画面面积的信息、关于时空分辨率的信息、关于光量的信息、关于表示位置的信息、关于光轴方向的信息等。
[0098]而且，数字处理部13也可使用后述的物理性特性处理部15进行物理性特性处理后所得的信息的处理后信息，对图像受理部11所受理的I个或2个以上图像进行数字处理，并取得I个或2个以上处理图像。在此，所谓处理后信息，是指例如输出图像信息、用户反应信息等。所谓输出图像信息，是为输出部16所输出的I个或2个以上有关处理图像的信息，例如，处理图像、或拍摄处理图像所得图像的邻近特征量或整体特征量、显示画面上的明亮区域或昏暗区域的信息、显示亮度不均的有无、存在亮度不均区域的信息、对焦情形、时间响应(闪烁、反应速度)、关于屏幕面的信息(与屏幕的距离、屏幕的方向)等。又，所谓用户反应信息，是指关于观看处理图像的用户的信息，例如，关于使用者眼睛动作(眼球运动)的信息、关于瞳孔反应的信息、关于姿势变化的信息、关于用户脑波的信息、用户的性别或年龄等用户属性等。所称关于用户眼睛动作的信息，是指例如显示用户眼睛动作的信息本身、或显示用户眼睛动作是否在和学习中的眼睛动作均等的范围的信息等。再者，学习中的眼睛动作是以例如数字处理部13所保存。而且，学习中的眼睛的动作为例如和图像一起由图像受理部11受理的信息。
[0099]又，具体而言，例如，数字处理部13使用I个或2个以上对应信息中的任一对应信息，来取得与图像受理部11所受理的I个以上图像的全部或一部分对应的I个或2个以上处理图像的全部或一部分。
[0100]而且，数字处理部13也可使用图像分析部12所选择的对应信息，来取得与图像受理部11所受理的I个以上图像的全部或一部分对应的I个或2个以上处理图像的全部或一部分。
[0101]又，数字处理部13也可对图像受理部11所受理的I个或2个以上图像进行依显示画面面积调整时空亮度活动性的处理。此外，在此，显示画面面积越大的情形中，以进行使时空亮度活动性增加的处理较合适。亦即，数字处理部13保存有例如具备显示显示画面面积和时空亮度活动性的对应的2个以上纪录的对应表，并使用这种对应表，从所取得的显示画面面积来决定时空亮度活动性，对处理对象的图像进行处理，使之达到该时空亮度活动性。而且，数字处理部13亦可保存有例如以显示画面面积作为参数的计算式，且为决定时空亮度活动性的计算式，将取得的显示画面面积代入该计算式中，以决定时空亮度活动性，并对处理对象的图像进行处理，使之达到该时空亮度活动性。
[0102]再者，数字处理部13也可对2种以上图像进行数字处理，并取得2种以上处理图像。所谓2种以上图像，是指一个对象在不同的环境拍摄的2个以上图像。
[0103]构成数字处理部13的约束条件储存装置131得以储存图像所具有的关于像素及区域的I个以上约束条件。约束条件为例如适于所输出的图像的条件，且为从被拍摄体取得的条件。而且，约束条件通常是为供使图像与自然法则一致的条件。又，约束条件通常是为将依数字处理及物理性特性处理(也可称为模拟补偿处理)而变化的信息加以修复的处理。同时，约束条件是为例如图像所具有的关于像素亮度值的条件。此外，约束条件是为例如关于图像所具有的2个以上像素间的关系的条件。
[0104]在此，所谓以供使与自然法则一致的条件，是指例如包含于对象的多个对象间的关系可保持的情形。所谓对象间的关系，是指例如对象的纵深差、明亮度差等。
[0105]在此，所谓像素间的关系，是指例如像素间的亮度差、像素间的像素值的差等。再者，所称约束条件，是指例如亮度的时空活动性的最大范围、像素值的时空活动性的最大范围、明亮度的时空活动性的最大范围等。而且，约束条件是关于例如图像所具有的区域的亮度值的条件。在此，所称区域的亮度值，是指图像的某时空区块的平均亮度、最大亮度、最小亮度等。又，约束条件是为例如关于图像所具有的区域的活动性的条件。在此，所谓区域的活动性，是指图像的某时空区块的频率分布、动态范围等。再者，具体而言，约束条件是为保证例如由视听者看来，位在前侧的画面区域的亮度较大，位在后侧的画面区域的亮度较小的条件。而且，约束条件是为保证例如由视听者看来，位在前侧的对象的分辨率感较高，位在后侧的对象的分辨率感较低的条件。此外，所谓分辨率感，是指极细致图像的感觉、或美丽图像的感觉、或高质量图像的感觉、或噪声很少的图像的感觉、或接近自然的图像的感觉等。
[0106]此外，分辨率感可藉由例如进行频率分析来判定。具体而言，例如对图像或图像的一部分(例如，时空区块等)进行频率分析，高频成分越多，可判定为分辨率感越高，低频成分的比例越多，则判定为分辨率感越低。更具体而言，也可依第一阈值以上的高频成分的比例，将分辨率感作定量式(例如，I到5的5个阶段)决定。亦即，阈值以上的高频成分的比例越大，即当作分辨率感越高。再者，也可进行频率分析，取得频率分布，再依频率分布，将分辨率感作定量式决定。此外，在此种情形中，通常也是高频成分越多，判定为分辨率感越高，低频成分的比例越多，判定为分辨率感越低。
[0107]再者，分辨率感可用例如空间的像素值的活动性(称为空间上活动性)来判定。具体而言，例如，空间活动性在第一阈值以上的像素的比例越多，即可判定分辨率感越高。而且，空间活动性也可依第一阈值以上的像素的比例，将分辨率感作定量式(例如，I到5的5个阶段)决定。其他方面，不拘分辨率感的判定、或分辨率感的取得方法。
[0108]又，约束条件是为例如以像场所具有的像素的像素值作为参数的条件。而且，约束条件为以像素值的时间上活动性作为参数的条件，而该像素值的时间上活动性是指例如时间上连续的2个以上像场所具有的像素的像素值的变化量。再者，约束条件为以像素值的空间上活动性作为参数的条件，而该像素值的空间上活动性是为例如一个像场所具有的2个以上像素的像素值的差异。更具体而言，约束条件为保证例如像素值的时间上活动性是在一定的预先决定范围(也可为以时间t为函数来规定的范围)的条件。而且，具体而言，约束条件为保证例如像素值的空间上活动性在一定的预先决定范围(也可为可以自基准点的距离X为函数来规定的范围)的条件。
[0109]视野范围信息储存装置132得以储存有关视野范围的信息的视野范围信息。视野范围信息为例如视角(也可称为画角)、放大倍率、显示视野范围区域或大小的信息(例如，“纵:9m，横:16m”)等。
[0110]数字处理装置133对图像受理部11所受理的I个或2个以上图像进行数字处理。另外，如上所述，不拘数字处理的内容。再者，数字处理装置133是以将I个或2个以上图像所具有的像素加以变更，使图像受理部11所受理的I个或2个以上图像符合I个以上约束条件，并取得I个或2个以上处理图像为佳。在此，所谓像素的变更，是指像素值等的变更。又，数字处理装置133是以将I个或2个以上图像所具有的区域加以变更，使图像受理部11所受理的I个或2个以上图像符合I个以上约束条件，并取得I个或2个以上处理图像为佳。在此，所谓区域的变更，是指时空区块的像素值等的变更。而且，此时，是以将时空区块的时空分辨率、阶度变更为佳。
[0111]其次，数字处理装置133也可将图像受理部11所受理的I个或2个以上图像所具有的像素的亮度值加以变更，使之符合储存于约束条件储存装置131的I个以上约束条件，并取得I个或2个以上的处理图像。
[0112]此外，数字处理装置133也可在图像内的范围，且为储存于视野范围信息储存装置132的视野范围信息所显示的视野范围中，将图像受理部11所受理的I个或2个以上图像所具有的像素及区域加以变更，使之符合I个以上约束条件，并取得I个或2个以上处理图像。在此种情形中，数字处理装置133是一边使视野范围信息所