被摄体的脸部方向相等。即，使用脸部立体形状模板信息即脸部的距离数据来变换图像中的三维空间中的位置。若脸部方向为朝上则生成朝上的脸部模型，若是朝下则生成朝下的脸部模型，并输出到图像生成部112。
[0055]图8示出了对于被摄体朝下的图像数据801所生成的脸部模型802。在此，进行了脸部方向信息为朝上和朝下时的说明，若不仅朝上、朝下还进行左右方向或者对它们进行复合的右下方向这样的脸部方向的脸部模型生成，则在接下来说明的图像生成时，能够生成品质更高的正面脸部图像，故优选。通过上述来进行脸部模型的生成。
[0056]上述方法无需为了取得被摄体的脸部的立体形状在图像显示装置100中追加新的传感器或执行立体形状计算处理等复杂的处理，而能够通过简易的系统来生成被摄体的脸部模型，并灵活运用于被摄体的正面脸部生成，故优选。此外，若预先检测脸部立体形状模板信息及其脸部成分信息的位置信息，对脸部立体形状模板信息进行变形以使脸部立体形状模板信息的脸部成分信息的位置信息与所检测出的脸部区域的脸部成分信息的位置信息一致，则在接下来说明的图像生成时，能够生成品质更高的正面脸部图像，故优选。
[0057]最后，使用图9来说明图像生成的动作。图9是说明脸部方向为朝向侧面以外的情况下的图像生成的动作的图。图像生成部112使用脸部方向信息和脸部模型来生成被摄体的正面脸部903。另外，作为图像生成部112的处理对象的图像数据901是由图像平行移动部110实施了平行移动处理后的图像数据。由此，生成被摄体的脸部朝向正面并且在图像中心显示脸部区域的图像。
[0058]接着，说明生成正面脸部的方法。对于脸部方向未朝向正面的图像数据，使用脸部模型即脸部的距离数据来变换图像中的三维空间中的位置，生成脸部方向成为正面的图像数据。该三维空间中的位置变换基于在脸部模型生成部111中所使用的脸部方向来进行。即，在由脸部模型生成部111生成向下偏移了 5度的脸部模型(校正后的脸部立体形状模板)时，由图像生成部112生成向上偏移了 5度的脸部图像，并将该生成图像作为脸部方向成为正面的图像数据来输出。这样，在图像生成部112中，将平行移动后的图像数据变换为脸部模型上的位置，并对图像数据上的像素进行校正以修正在脸部模型上倾斜的角度相应的量。
[0059]脸部模型生成部111中的脸部模型生成处理和图像生成部112中的图像生成处理在被摄体的脸部方向信息小于阈值时执行。该阈值是被摄体的脸部的倾斜程度。值越小则表示被摄体越朝向正面即与摄像部103正对，值越大则表示被摄体从正面偏移即不与摄像部103正对。例如，若将被摄体的脸部方向信息为朝向侧面的状态设为阈值，则所谓小于阈值指的是，被摄体的脸部的方向与朝向侧面相比更朝向正面的状态，所谓阈值以上指的是，被摄体的脸部的方向与朝向侧面相比从正面侧偏移较多的状态。在被摄体的脸部方向信息小于阈值的情况下，将被摄体的脸部方向变换为正面脸部的脸部图像显示在图像中心，在被摄体的脸部方向信息为阈值以上的情况下，脸部的朝向维持不变地在图像中心显示脸部图像。所谓脸部方向朝向侧面表示，被摄体的双眼偏于脸部区域的左右的状态、一只眼睛看不见的状态等被摄体的脸部方向从正面偏移得较大的情况。
[0060]此外，在不仅朝向侧面还将朝上、朝下等设为阈值而被摄体的脸部向上下方向较大地倾斜时、和向左右方向较大地倾斜时、或者其复合状态时，判断为被摄体的脸部方向为阈值以上。例如，在被摄体的脸部向下较大地倾斜的情况下，判断为被摄体想要使头顶可见，并非设为正面脸部而是设为将脸部平行移动至画面中心来进行显示的处理。通过对输出如上所述根据被摄体的脸部方向使图像数据平行移动后的图像数据的处理、和输出按照被摄体的脸部成为正面脸部的方式进行变换后的图像数据的处理进行切换，从而处理量变少并且能够生成用户想要的易见的图像。
[0061]以下，使用图10所示的流程图来说明上述动作的流程。
[0062]首先，在步骤S1001中，图像处理装置101从摄像部103、收发部106等取入摄像图像数据。接着，在步骤S1002中，脸部信息检测部108从摄像图像数据中检测脸部的大小信息、脸部位置信息、脸部成分信息等的脸部信息。接着，在步骤S1003中，脸部方向计算部109使用脸部信息来计算出被摄体的脸部的方向。
[0063]接着，在步骤S1004中，图像平行移动部110使图像整体平行移动以使脸部位置信息成为图像中心。在此，在步骤S1005中，脸部模型生成部111进行脸部方向信息是否小于阈值的判定，若脸部方向信息小于阈值，则在步骤S1006中，取得脸部立体形状模板信息。接着，在步骤S1007中，脸部模型生成部111进行脸部模型生成。在脸部模型生成中，根据脸部的大小信息和脸部方向信息来变换脸部立体形状模板信息，生成脸部模型。
[0064]接着，在步骤S1008中，图像生成部112使用所生成的脸部模型，来生成摄像数据中的被摄体的脸部成为正面脸部的图像。然后，在步骤S1009中，图像生成部112将所生成的图像输出到显示部104。另外，若脸部方向信息为阈值以上，则按照使脸部位置信息成为图像中心的方式使图像整体进行了平行移动的图像作为生成图像而被输出。上述为图像处理装置101的动作流程。按照上述方式，第I实施例的图像显示装置100执行动作。
[0065]在本实施例中，将由图像显示装置100所具有的图像处理装置101生成的图像显示于显示部104，但也可以构成为由收发部106接收由具有本发明的图像处理装置101的其他图像显示装置生成的图像，并显示于显示部104。根据该构成，能够实现与远程地点的电视机会议、视频聊天等，故优选。
[0066]根据具备上述的本发明所涉及的图像处理装置101的图像显示装置100，能够根据被摄体的脸部方向来进行适当的图像处理，能够显示适当的自拍图像。
[0067]此外，在本实施例中说明了脸部立体模板信息为I个的情况，但也可以从多个脸部立体形状模板信息中选择适当的脸部立体形状模板信息。例如，根据所检测出的脸部成分信息、脸部的大小信息等，解析被摄体的眼睛的宽度、脸部成分信息的配置、脸部形状等的脸部的信息，推断年龄、脸部形状、轮廓的清晰度等的脸部的立体形状，选择最接近所推断出的脸部的立体形状的脸部立体形状模板信息。由此，以适于用户的脸部立体形状模板信息进行图像处理，所以能够提高所生成的画质，故优选。
[0068]而且，在与用户的脸部的立体形状相似的至少2个以上的脸部立体形状模板信息存在的情况下，若生成成为2个以上的脸部立体形状模板信息的中间的中间脸部立体形状模板信息，则能够生成更适于用户的脸部的立体形状的脸部模型，故优选。中间脸部立体形状模板信息对2个以上的脸部立体形状模板信息实施变形(morphing)来生成。在用户的脸部的立体形状与脸部立体形状模板信息A类似45%而与脸部立体形状模板信息B类似55%的情况下，根据类似的比例来实施变形。从多个脸部立体形状模板信息中通过变形来生成适于用户的脸部立体形状模板信息，由此能够生成更适于用户的脸部的立体形状的脸部模型，故优选。
[0069]此外，因为在脸部立体形状模板信息A与脸部立体形状模板信息B之间模板信息的选择不会较大变动，所以能够消除由于所选择的模板信息突然切换而在生成图像中产生的不谐调，故优选。而且，若按照每个用户的脸部成分信息来计算出类似程度，则能够生成眼睛的形状使用脸部立体形状模板C而脸部的轮廓使用脸部立体形状模板D等更适于用户的脸部的立体形状的脸部模型，故优选。
[0070]〈第2实施例>
[0071]接着，使用图11来说明本发明的第2实施例所涉及的图像显示装置的构成。在图11中，对于与图1相同的构成要素标注相同编号，这些构成要素因与图1的实施例进行相同处理而省略说明。
[0072]本实施例与第I实施例的不同点在于，将收发部106替换为发送部1106的构成。动作与第I实施例大致相同，对摄像到的图像数据进行保存或者发送，是发送专用的图像显示装置1100。此外，也可以想到