专利名称：图像数据处理装置、方法、程序及集成电路的制作方法
技术领域：
本发明涉及计算用于将图像分类的图像特征信息的图像数据处理装置。
背景技术：
数字静像摄像机和带摄像机功能·的移动电话机等数字图像摄影设备已经得到普及，也能够低廉地提供用于记录所拍摄的图像的硬盘等记录介质。
通常，数字图像摄影设备等的用户(下面简称为用户)将所拍摄的各个图像存储在大容量的硬盘等记录介质中。
在所存储的图像数量量大时，很难从所存储的图像中找到目标的图像，因而基于使用户容易进行图像的检索的目的，将各个图像分类为几个类别。例如，可以考虑将在运动会中拍摄的图像分类为运动会这一类别的情况等。
作为将图像分类的技术，例如公知有如专利文献I记载的技术，根据所存储的各个图像计算该图像的特征即图像特征信息，使用计算出的图像特征信息将各个图像分类为各个类别，还公知有如专利文献2记载的技术，使用被摄入到图像中的人脸的数量和大小将该图像分类。
现有技术文献
专利文献
专利文献I :日本专利第4232774号公报
专利文献2 :日本专利第4315344号公报发明概要
发明要解决的问题
可是，用户拍摄图像的机会往往是在例如海水浴场或滑雪旅行这种活动中，并且用户在欣赏图像时，往往也是以在某次活动中拍摄的图像组为单位来欣赏图像。
因此，期望将属于在一次活动中拍摄的图像组的图像分类为同一个类另IJ。
但是，当在从在互不相同的活动中拍摄的图像中抽取的图像特征信息中存在彼此相似的图像特征信息的情况下，很难将这些图像的各个图像分类为本来应该分类的类别。
作为示例来说明如下情况，过去的图像数据处理装置在根据图像中大量包含的主要颜色(例如黑色、蓝色、绿色、白色等)计算图像特征信息的情况下，在海水浴场中拍摄的图像组A的图像和在滑雪旅行中拍摄的图像组B的图像成为分类图像。
在于海水浴场中拍摄的图像中往往摄入了大量的大海的蓝色和沙滩的白色，在于滑雪旅行中拍摄的图像中往往摄入了大量的天空的蓝色和雪的白色。因此，由该图像数据处理装置计算出的在海水浴场中拍摄的图像的图像特征信息、和在滑雪旅行中拍摄的图像的图像特征信息成为彼此相似的图像特征信息。
在这种情况下，在根据由该过去的图像数据处理装置计算出的图像特征信息将图像分类时，很难将在海水浴场中拍摄的图像组A的图像和在滑雪旅行中拍摄的图像组B的图像分类为彼此不同的类别。发明内容
本发明正是鉴于上述问题而提出的，其目的在于，提供一种计算用于将图像分类的图像特征信息的图像数据处理装置，在使用由该图像数据处理装置计算出的图像特征信息将图像分类的情况下，相比过去能够提高将在一次活动中拍摄的图像组的各个图像分类为相同的类别的分类精度。
用于解决问题的手段
为了解决上述问题，本发明的图像数据处理装置计算用于将图像分类的图像特征信息，其特征在于，该图像数据处理装置具有人脸确定部，确定一张图像中所包含的人脸的区域；以及图像特征计算部，利用根据一张图像的至少一部分像素计算出的图像特征量，计算该图像中的图像特征信息，所述图像特征计算部以如下方式进行所述图像特征信息的·计算，使根据由所述人脸确定部确定出的人脸的区域周围的一定区域中所包含的像素计算出的图像特征量，比根据不包含在该一定区域中的像素计算出的图像特征量更多地体现在所述图像特征信息中。
发明效果
通常，图像的摄影者在某次活动中拍摄包括人的人脸的图像时，具有以在此人的人脸的周围的区域中表现出该活动的特点的方式进行拍摄的倾向。例如，在海水浴场中，摄影者具有以在人的人脸的周围的区域中大量表现大海的蓝色的方式来拍摄图像的倾向，而在滑雪旅行中则具有以在人的人脸的周围的区域中大量表现雪的白色的方式来拍摄图像的倾向。
具有上述结构的本发明的图像数据处理装置在抽取图像特征信息时，使相比根据具有不易表现出活动的特点的倾向的距离人的人脸较远的区域的像素计算出的图像特征量，更多地体现出根据具有容易表现出活动的特点的倾向的人的人脸周围的区域的像素计算出的图像特征量。由此，与过去的图像数据处理装置相比，本图像数据处理装置能够计算出更多地体现出活动的特点的图像特征信息。
因此，该图像数据处理装置相比过去能够提高使用由该图像数据处理装置计算出的图像特征信息将图像分类时的分类精度。
图I是表示图像数据处理装置100的硬件结构的硬件框图。
图2是表示图像数据处理装置100的功能结构的功能框图。
图3是表示图像存储部231的目录构造的目录构造图。
图4是从视觉上表示各种区域的示意图。
图5是从视觉上表示特殊状况下的人周围区域的示意图。
图6是图像特征信息的数据构造图。
图7是图像家人场景信息的数据构造图。
图8是图像集家人场景信息的数据构造图。
图9是事件特征信息的数据构造图。
图10是图像特征信息生成处理的流程图。
图11是图像家人场景信息生成处理的流程图。
图12是图像集家人场景信息生成处理的流程图。
图13是图像集分类处理的流程图。
图14是表示在家庭成员参加的活动中拍摄的图像组的图。
图15是过去的图像数据处理装置生成的图像集场景信息的数据构造图。
图16是表示两张图像的图。
图17是表示图像数据处理装置1700的功能结构的功能框图。·
图18是表示图像存储部1731的目录构造的目录构造图。
图19是事件特征信息的数据构造图。
图20是变形图像特征信息生成处理的流程图。
图21是图像分类处理的流程图。
图22是表示图像数据处理装置2200的功能结构的功能框图。
图23是表示图像数据处理装置2300的功能结构的功能框图。
具体实施方式
<实施方式1>
下面，作为本发明的图像数据处理装置的一个实施方式来说明这样的图像数据处理装置100，该图像数据处理装置100计算表示被摄入到图像中的人物的周围的像素的特征的人周围特征量，根据计算出的人周围特征量，按照由与一次活动即事件相关联地拍摄的多张图像构成的图像集单位，将图像分类为彼此不同的预先设定的多个门类事件中的某一个门类事件。
其中，图像集是指由用户指定的多张图像构成的图像的集合，例如在2009年冬季去北海道旅行的事件中拍摄的图像的集合，例如在2010年夏季去冲绳旅行的事件中拍摄的图像的集合等。另外，门类事件是指作为图像集的门类的类别，例如作为与滑雪相关的图像集的门类的类别，例如作为与海水浴场相关的图像集的门类的类别等。
〈结构〉
〈图像数据处理装置100的硬件结构〉
图I是表示图像数据处理装置100的主要硬件结构的硬件框图。
图像数据处理装置100由系统LSI (Large Scale Integrated Circuit :大规模集成电路)110、硬盘装置130、外部记录介质读取写入装置140、USB控制装置150、输出装置160、输入装置170、通信装置180构成，其具有将数字照片即图像存储为以JPEG(JointPhotographic Experts Group :运动图像专家组)方式进行编码得到的数据，并将存储的图像分类的功能。
并且，图像数据处理装置100具有如下功能通过可插拔的USB线缆195与以数字摄像机192为代表的记录图像的设备连接，通过监视器线缆196与用于显示图像的显示器193连接，还与网络194连接，并与受理来自用户的操作命令的遥控器197进行无线通信，向以SD存储卡191等为代表的外部记录介质进行数据的读出和写入。
系统LSI 110是将以下部件集成于一个集成电路中的LSI包括CPU10UR0M 10全文摘要
通常，图像的摄影者在某次活动中拍摄包括人的人脸的图像时，具有以在此人的人脸的周围的区域中表现出该活动的特点的方式进行拍摄的倾向。本发明的图像数据处理装置在抽取图像特征信息时，使相比根据具有不易表现出活动的特点的倾向的距离人的人脸较远的区域的像素计算出的图像特征量，更多地体现出根据具有容易表现出活动的特点的倾向的人的人脸周围的区域的像素计算出的图像特征量。由此，与过去的图像数据处理装置相比，该图像数据处理装置能够计算出更多地体现出活动的特点的图像特征信息。因此，该图像数据处理装置相比过去能够提高使用由该图像数据处理装置计算出的图像特征信息将图像分类时的分类精度。
文档编号G06T7/00GK102893304SQ20128000101
公开日2013年1月23日 申请日期2012年1月24日 优先权日2011年1月28日
发明者山口晃一郎 申请人:松下电器产业株式会社