图像处理装置、重要人物判定方法、图像布局方法、以及程序和记录介质的制作方法
【技术领域】
[0001]本发明涉及一种从基于多个图像数据的图像所呈现的人物中判定重要人物，并进行图像布局的图像处理装置、重要人物判定方法、图像布局方法，以及用于使计算机执行重要人物判定方法或者图像布局方法的各个步骤的程序和记录介质。
【背景技术】
[0002]当前，基于在移动电话或者个人计算机的存储部、数码相机等的闪存中存储的多个图像数据，进行照片书等图像商品的自动生成(例如，参照专利文献I)。
[0003]通常，图像商品的自动生成，是用户从大量的图像数据中选择出登载到图像商品中的图像数据，并逐一进行布局的过程，该过程并不繁琐，因此，比较方便，但不一定能够生成对用户而言满意度较高的图像商品。例如，如图13所示，在图像商品的自动生成中，有时希望进行以自己的孩子的图像为中心的布局，但却进行了以其他人的孩子的图像作为中心的布局，有可能降低用户对自动生成的图像商品的满意度。
[0004]在专利文献I中，提出了下述的图像输出装置，即，该图像输出装置从每个图像数据中检测出面部图像，计算出面部图像的作为被摄体的主要度，基于这些主要度计算出图像数据的重要度，基于重要度进行布局。
[0005]另外，在专利文献2中，公开了下述的图像分类装置的发明，S卩，该图像分类装置从影像的帧图像中检测出人物的面部图像，对所有的面部图像进行比较，针对每个人物的面部图像进行分组化，从而，将出现频度最高的人物推定为主人公。
[0006]专利文献1:日本特开2007 - 49387号公报
[0007]专利文献2:日本特开2006 - 244279号公报
[0008]如果利用专利文献I的图像输出装置或者利用专利文献2的图像分类装置的技术，则也许能够避免如图13所示的布局，但专利文献I的面部图像的作为被摄体的主要度、专利文献2的主人公的推定是根据面部图像的出现次数(出现频度、检测数量)即与面部图像相对应的人物的出场次数而决定的，在专利文献I的图像输出装置、专利文献2的图像分类装置中，难于对呈现有出场次数较少但却是重要人物的图像数据进行提取。
[0009]例如，在生成以孩子为中心(主人公)的家族的照片书的情况下，父亲、祖父祖母是重要人物，但父亲是拍摄者的情况较多，与母亲相比，存在出场次数较少的倾向。另外，例如，能够想到不与孩子一起生活的祖父祖母等的出场次数也较少。因此，如果利用专利文献I的图像输出装置或者专利文献2的图像分类装置生成照片书，则存在下述问题，即生成没有呈现出场次数较少的父亲、祖父祖母的照片书。
【发明内容】
[0010]本发明的目的在于解决上述现有技术的问题点，并提供一种不依靠出场次数判定重要人物，并进行图像布局的图像处理装置、重要人物判定方法、图像布局方法，以及用于使计算机执行重要人物判定方法或者图像布局方法的各个步骤的程序和记录介质。
[0011]为了解决上述课题，本发明提供一种图像处理装置，该图像处理装置的特征在于，具有:图像数据获取部，其获取多个图像数据；面部图像检测部，其从由图像数据获取部获取的多个图像数据中检测面部图像；人物确定部，其基于在面部图像检测部中检测出的多个面部图像，进行相同人物判定处理，并将多个面部图像分类至由相同人物的面部图像构成的图像组中，从而分别确定出与各图像组相对应的人物；主人公决定部，其将由人物确定部确定出的人物中的至少一个人物决定为主人公；以及重要人物判定部，其基于在主人公决定部中决定出的主人公，将由人物确定部确定出的除了主人公以外的人物中的、与主人公关联性较高的至少一个人物，判定为重要人物。
[0012]另外，优选主人公决定部将面部图像的检测数量最多的人物决定为主人公。
[0013]另外，优选重要人物判定部将由人物确定部确定出的除了主人公以外的人物中的、与主人公一起呈现的图像数据的数量最多的人物判定为重要人物。
[0014]另外，优选面部图像检测部从多个图像数据中检测面部图像，并且，检测面部图像的位置信息，重要人物判定部基于在面部图像检测部中检测出的、在相同图像中呈现的主人公的位置信息和除了主人公以外的人物的位置信息，计算出2个面部图像之间的距离，基于2个面部图像之间的距离，判定重要人物。
[0015]另外，优选多个图像数据分别具有作为元信息的拍摄日期时间信息以及拍摄位置信息中的至少一个，重要人物判定部基于呈现主人公的图像数据的拍摄日期时间信息与呈现除了主人公以外的人物的图像数据的拍摄日期时间信息的差异、以及呈现主人公的图像数据的拍摄位置信息与呈现除了主人公以外的人物的图像数据的拍摄位置信息的差异中的至少一方，判定重要人物。
[0016]优选还具有:存储部，其存储多个图像数据；图像数据管理部，其对在存储部中存储的多个图像数据进行分类，作为规定的管理图像组进行管理；以及显示部，其对表示出规定的管理图像组的管理画面进行显示，图像数据管理部在规定的管理图像组中存在包含有主人公以及重要人物中的至少一方的图像数据的情况下，对显示部所显示的管理画面进行强调显示。
[0017]另外，优选还具有:优先级设定部，其基于在主人公决定部中决定出的主人公和在重要人物判定部中判定出的重要人物，设定多个图像数据的优先级；图像布局决定部，其基于在优先级设定部中设定出的优先级，决定多个图像数据的布局；以及输出部，其按照由图像布局决定部决定出的布局，输出多个图像数据。
[0018]另外，优选优先级设定部基于主人公和重要人物的有无、主人公和重要人物的配置、以及主人公和重要人物与其他人物的位置关系中的至少一项，设定优先级。
[0019]另外，优选还具有人物变更部，该人物变更部基于用户的指示，变更主人公或者重要人物，优先级设定部基于由人物变更部变更后的主人公或者重要人物变更优先级，图像布局决定部基于变更后的优先级变更多个图像数据的布局。
[0020]另外，优选还具有图像修剪部，该图像修剪部与布局相对应，对基于多个图像数据的图像实施修剪处理，图像修剪部基于主人公和重要人物的有无、主人公和重要人物的配置、以及主人公和重要人物与其他人物的位置关系中的至少一项而进行修剪处理。
[0021]另外，本发明提供一种重要人物判定方法，该重要人物判定方法的特征在于，从多个图像数据中检测面部图像，基于检测的多个面部图像进行相同人物判定处理，并将多个面部图像分类至由相同人物的面部图像构成的图像组中，从而分别确定出与各图像组相对应的人物，将确定出的人物中的至少一个人物决定为主人公，基于决定出的主人公，将除了主人公以外的人物中的、与主人公关联性较高的至少一个人物判定为重要人物。
[0022]另外，优选将面部图像的检测数量最多的人物决定为主人公。
[0023]另外，优选将除了主人公以外的人物中的、与主人公一起呈现的图像数据的数量最多的人物判定为重要人物。
[0024]另外，优选从多个图像数据中检测面部图像，并且，检测面部图像的位置信息，基于在相同图像中呈现的主人公的位置信息和除了主人公以外的人物的位置信息，计算出2个面部图像之间的距离，基于2个面部图像之间的距离，判定重要人物。
[0025]另外，优选多个图像数据分别具有作为元信息的拍摄日期时间信息以及拍摄位置信息中的至少一个，基于呈现主人公的图像数据的拍摄日期时间信息与呈现除了主人公以外的人物的图像数据的拍摄日期时间信息的差异、以及呈现主人公的图像数据的拍摄位置信息与呈现除了主人公以外的人物的图像数据的拍摄位置信息的差异中的至少一方，判定重要人物。
[0026]另外，本发明提供一种图像布局方法，该图像布局方法的特征在于，基于主人公和通过重要人物判定方法判定出的重要人物，决定多个图像数据的优先级，基于优先级，决定多个图像数据的布局。
[0027]另外，优选基于主人公和重要人物的有无、主人公和重要人物的配置、以及主人公和重要人物与其他人物的位置关系中的至少一项，决定优先级。
[0028]另外，在基于用户的指示对主人公或者重要人物进行变更的情况下，优选基于变更后的主人公或者重要人物变更优先级，基于变更后的优先级变更多个图像数据的布局。
[0029]另外，优选基于主人公和重要人物的有无、主人公和重要人物的配置、以及主人公和重要人物与其他人物的位置关系中的至少一项，以及布局对基于多个图像数据的图像进行修剪处理。
[0030]另外，本发明提供一种程序，该程序用于使计算机执行上述任意一项所述的重要人物判定方法的各个步骤。
[0031]另外，本发明提供一种程序，该程序用于使计算机执行上述任意一项所述的图像布局方法的各个步骤。
[0032]另外，本发明提供一种计算机可读取的记录介质，该记录介质记录有用于使计算机执行上述的重要人物判定方法或者上述的图像布局方法的各个步骤的程序。
[0033]发明的效果
[0034]根据本发明，能够不依靠出场次数判定重要人物，另外，能够基于不是依靠出场次数决定出的重要人物进行