没有图11的发送部1106的构成。在该情况下成为不进行通信而仅对校正后的图像进行摄像显示以及保存的装置。
[0073]在第2实施例中，显示部104与摄像部103的关系唯一地决定，在显示部104的外框上部设置了摄像部103。在该构成的情况下，由摄像部103摄像的被摄体图像会总是朝下，所以能够将脸部立体形状模板信息限定为朝下的脸部。此外，在显示部104的外框下部设置了摄像部103的情况下，由摄像部103摄像的被摄体图像会总是朝上，所以能够将脸部立体形状模板信息限定为朝上的脸部。如上所述按位置关系保存的脸部立体形状模板信息的脸部方向的朝向唯一地决定，因此通过预先在存储部105中保存朝上或朝下的脸部立体形状模板信息并在脸部模型生成时读出脸部立体形状模板信息，能够不变更脸部朝向而进行脸部模型生成。即，第2实施例具有如下优点:在脸部模型生成部111中，无需根据脸部方向来变换脸部立体形状模板信息的脸部朝向，处理量变少。
[0074]如上所述，在具备图像处理装置101的图像显示装置100、1100以及使用了其的通信装置中，能够在自拍摄影时一边观察显示部104—边进行显示、保存、发送，并能够生成适当的自拍图像。
[0075]另外，本发明并非通过上述的实施例而被限定性地解释，在权利要求所所记载的事项的范围内，能够进行各种变更并包含在本发明的技术的范围内。
[0076]本发明的图像处理装置101中工作的程序可以是对CPU等进行控制以实现本发明所涉及的上述实施例的功能的程序(使计算机发挥功能的程序)。而且，可以将这些装置中所处理的信息在其处理时临时蓄积于RAM (Random Access Memory,随机存取存储器)，之后保存于Flash ROM (Read Only Memory，只读存储器)等各种ROM或HDD，并根据需要由CPU读出并进行修正、写入。
[0077]此外，可以通过将用于实现图1的各构成的功能的程序记录在计算机可读取的记录介质中，使计算机系统读入该记录介质中所记录的程序，并由CPU等执行，来进行各部的处理。另外，在此所说的“计算机系统”包括OS、周边设备等硬件。此外，所谓“计算机可读取的记录介质”指的是软盘、光磁盘、ROM、CD-ROM等可移动介质、内置于计算机系统的硬盘等存储装置。而且，所谓“计算机可读取的记录介质”包括如在通过因特网等网络、电话线路等通信线路发送程序的情况下的通信线那样短时间且动态地保持程序的介质、以及向成为此情况下的服务器或客户端的计算机系统内部的易失性存储器那样将程序保持一定时间的介质。
[0078]此外，可以将上述实施例中的图像处理装置101的一部分或全部作为典型的集成电路即LSI来实现。图像处理装置101的各功能模块既可以单独地芯片化，也可以将一部分或全部集成后芯片化。此外，集成电路化的方法并不限于LSI，也可以通过专用电路或通用处理器来实现。此外，在随着半导体技术的进步而出现了代替LSI的集成电路化的技术的情况下，还能使用基于该技术的集成电路。
[0079]此外，在上述的实施例中，对于控制线、信息线，示出了说明上认为需要的，产品上未必示出所有的控制线、信息线。所有的构成也可以相互连接。
[0080]符号说明
[0081]100:图像显示装置
[0082]101:图像处理装置
[0083]103:摄像部
[0084]104:显示部
[0085]105:存储部
[0086]106:收发部
[0087]107:输入输出部
[0088]108:脸部信息检测部
[0089]109:脸部方向计算部
[0090]110:图像平行移动部
[0091]111:脸部模型生成部
[0092]112:图像生成部
[0093]113:外部网络
[0094]1100:图像显示装置
[0095]1106:发送部
【主权项】
1.一种图像处理装置，其特征在于，具备: 脸部信息检测部，其从图像数据检测被摄体的脸部位置信息、脸部大小信息和脸部成分信息； 脸部方向计算部，其根据所述脸部位置信息、所述脸部大小信息和所述脸部成分信息，来计算出所述被摄体的脸部方向信息； 图像平行移动部，其使所述图像数据进行平行移动以使所述脸部位置信息成为所述图像数据的中心； 脸部模型生成部，其基于所述脸部位置信息、所述脸部大小信息、所述脸部成分信息和所述脸部方向信息，使表示脸部的立体形状的脸部立体形状模板信息进行变形来生成所述被摄体的脸部t旲型；和 图像生成部，其基于所述脸部方向信息和所述脸部模型，来生成按照所述被摄体的脸部成为正面脸部的方式进行了变换的图像， 所述图像处理装置根据所述脸部方向信息，对输出由所述图像平行移动部进行了平行移动的图像数据的处理、和输出由所述图像生成部生成的图像数据的处理进行切换。
2.根据权利要求1所述的图像处理装置，其特征在于， 所述脸部模型生成部对所述脸部立体形状模板信息的大小信息和所述脸部大小信息进行比较，来对所述脸部立体形状模板信息进行放大或缩小。
3.根据权利要求1?2中任一项所述的图像处理装置，其特征在于， 所述脸部模型生成部使所述脸部成分信息的位置与所述脸部立体形状模板信息的脸部成分信息的位置为相同位置。
4.根据权利要求1?3中任一项所述的图像处理装置，其特征在于， 所述图像平行移动部对所述脸部位置信息在时间轴方向上进行平滑化。
5.根据权利要求1?4中任一项所述的图像处理装置，其特征在于， 所述脸部模型生成部具备多个脸部立体形状模板信息， 所述脸部模型生成部基于所述被摄体的所述脸部成分信息和所述脸部大小信息来推断所述被摄体的脸部的立体形状，并选择最接近于所推断出的脸部的立体形状的脸部立体形状模板信息。
6.根据权利要求1?4中任一项所述的图像处理装置，其特征在于， 所述脸部模型生成部具备多个脸部立体形状模板信息， 所述脸部模型生成部在选择了 2个以上的接近于所述被摄体的脸部立体形状模板信息的情况下，基于所述2个以上的脸部立体形状模板信息来生成中间脸部立体形状模板信息。
7.一种图像显示装置，其特征在于，具备: 摄像部，其对被摄体进行摄像； 权利要求1所述的图像处理装置，其对由所述摄像部摄像到的所述被摄体的图像数据进行处理；和 发送部，其发送在所述图像处理装置中生成的图像。
8.一种图像显示装置，其特征在于，具备: 摄像部，其对被摄体进行摄像； 权利要求1所述的图像处理装置，其对由所述摄像部摄像到的所述被摄体的图像数据进行处理； 接收部，其接收由其他带摄像部的图像显示装置生成的图像数据；和 显示部，其显示由所述接收部接收到的图像数据。
【专利摘要】本发明提供一种在摄像部的摄像方向与显示部的显示方向一致的所谓白拍摄像的情况下生成适当的白拍摄像图像的技术。图像处理装置具备脸部信息检测部、脸部方向计算部、图像平行移动部、脸部模型生成部和图像生成部。脸部信息检测部对被摄体的脸部的位置、脸部的大小信息和脸部成分信息进行检测。脸部方向计算部基于脸部成分信息的配置来计算出被摄体的脸部方向信息。图像平行移动部使图像平行移动以使被摄体的脸部的位置与图像中心一致。脸部模型生成部基于脸部的大小信息和脸部的方向信息将脸部立体形状模板信息变换为适于被摄体的脸部模型。图像生成部基于脸部模型来生成将被摄体的脸部变换为正面脸部的图像。
【IPC分类】H04N5-232, G06T1-00, H04N5-225
【公开号】CN104584531
【申请号】CN201380043318
【发明人】涩久奈保, 德井圭
【申请人】夏普株式会社
【公开日】2015年4月29日
【申请日】2013年8月23日
【公告号】US20150206354, WO2014034556A1