专利名称：图像布局装置、图像布局方法以及程序的制作方法
技术领域：
本发明涉及用于可对由数字照相机等摄影的数字图像(以下仅称为“图像”)自动进行布局(图像配置)的图像布局装置、图像布局方法以及程序。并且，本发明具体涉及用于当使其他图像重叠在图像背后时，可自动布局成使图像中的注目区域不被隐藏的图像布局装置、图像布局方法以及程序。本申请是以特願2002-365080号为基础的申请，并导入其内容。
背景技术：
近年，数字照相机得到普及，并且把所摄影的数字图像导入PC(个人计算机)，并可简单地对其进行编辑和印刷。例如，可对在旅行目的地使用数字照相机摄影的数字图像进行编辑，并可简单生成旅行像册等。
当对这些数字图像进行编辑时，如图2所示，有时以表示主题的标题图像11为中心，在标题图像11的背后使多个数字图像重叠进行布局。在这种布局中，以往，为使数字图像内的注目区域(显眼区域)不被隐藏，通过人操作鼠标等来手动进行布局。
当数字图像张数少时，该手动布局不那么费事并没有问题。然而，当把多个数字图像作为像册进行编辑等时，手动布局工作成为结构麻烦的工作。
并且，随着数字照相机的普及，利用者的层次范围扩大。由于利用者中也有对PC操作不习惯的人，因而期望提供一种用于能够更简单进行使数字图像重叠的布局的装置。
作为针对这种数字图像布局的在先技术，例如，具有在特开2000-261649号公报内记载的“图像处理方法、装置以及存储介质”。
在该在先技术中揭示的发明中，通过使布局名称与赋予给图像的多个编辑信息或者选择图像时的选择条件对应来进行登录，可根据该布局名称的指示来再利用这些信息。这样，可提高在向不同图像指定相同布局时的操作性。并且，可提高在输入用于从多个图像信息中选择期望图像信息的选择条件时的操作性。
然而，在上述在先技术中揭示的发明由于以操作者(利用者)自己手动进行图像布局为前提，因而不能简单进行使数字图像重叠的布局。
发明内容
本发明是为解决上述课题而提出的。本发明的目的是提供用于在使多个图像重叠进行布局时，可在避开各图像的注目区域的同时，自动进行重叠的图像布局装置、图像布局方法以及程序。
然后，本发明的图像布局装置用于对多个图像进行布局，其特征在于，该图像布局装置具有注目区域算出单元，用于算出在第1图像B的背后重叠的第2图像A的注目区域；以及布局单元，用于避免上述第2图像A的注目区域与上述第1图像B重叠来进行布局。
根据上述图像布局装置，其注目区域算出单元算出在第1图像B的背后重叠的第2图像A内包含的高注目区域的部分。并且，上述布局单元在避免第2图像A的注目区域与第1图像B重叠的同时，进行重叠。这样，当对多个图像进行布局时，可在避开注目区域的同时，自动进行重叠。
并且，本发明的图像布局装置的特征在于，在上述图像布局装置中具有模板存储单元，用于存储对多个图像布局进行定义的模板组；以及模板选择单元，用于从该模板存储单元中选择上述模板；上述布局单元以上述所选择的模板为基础，对多个图像进行布局，而且避免各图像的注目区域重叠进行布局。
根据上述图像布局装置，上述模板存储单元存储对多个图像布局进行定义的模板组。并且，上述模板选择单元从所存储的模板组中选择模板。并且，上述布局单元根据所选择的模板来对多个图像进行布局。此时，在避免将要布局的各图像的注目区域重叠的同时，进行布局。这样，当对多个图像进行布局时，可在避开注目区域的同时，自动进行重叠。而且，通过模板选择，可指示期望的模式来进行布局。
并且，本发明的图像布局装置的特征在于，在上述图像布局装置中，还具有用于当根据上述所选择的模板不能决定上述多个图像布局时，选择其他模板的单元。
根据上述图像布局装置，当对多个图像进行布局时，在不能一边避开注目区域一边进行重叠的情况下，可选择其他模板来再次执行布局工作。
并且，本发明的图像布局方法用于对多个图像进行布局，其特征在于，该图像布局方法包含注目区域算出步骤，用于算出在第1图像B的背后重叠的第2图像A的注目区域；以及布局步骤，用于避免上述第2图像A的注目区域与上述第1图像B重叠来进行布局。
根据上述图像布局方法，通过上述注目区域算出步骤，算出在第1图像B的背后重叠的第2图像A内包含的高注目区域，并且，通过上述布局步骤，可在避免第2图像A的注目区域与第1图像B重叠的同时，使其重叠。这样，当对多个图像进行布局时，可自动执行一边避开注目区域一边使其重叠。
并且，本发明的计算机程序的特征在于，该程序使用于对多个图像进行布局的图像布局装置内的计算机执行注目区域算出步骤，用于算出在第1图像B的背后重叠的第2图像A的注目区域；以及布局步骤，用于避免上述第2图像A的注目区域与上述第1图像B重叠来进行布局。
图1是示出本发明的图像布局装置的实施例的图，并且是示出其结构的图。
图2是用于对布局例进行说明的图。
图3是以把人物配置在左端的图像示例为模式的图。
图4是以与图3对应的醒目度图案为模式的图。
图5是以把花配置在右端的图像示例为模式的图。
图6是以与图5对应的醒目度图案为模式的图。
图7是示出不使图像重叠的示例图。
图8是示出本发明的图像布局装置的处理步骤的图。
图9是示出图像布局装置的构成例的方框图。
具体实施例方式
以下，参照附图对本发明的实施例进行说明。
图1是示出本实施例的图像布局装置100具有的构成的一例的图。设置在图1所示的图像布局装置100内的各单元按以下所示进行处理。
·图像选择单元101，是用于从图像数据库110内选出要进行布局的图像(图像，文字，图形等)的单元。
·图像读取单元102，是用于读出构成图像的各像素的值(RGB值等)的单元。
·注目区域算出单元103，是用于算出注目区域的单元。注目区域算出单元103把图像内分离成多个区域，并对所分离的各区域，把醒目度的程度划分成2级以上。算出该注目区域时，例如，可使用在“特开2001-126070号公报(注目区域抽出装置和使用该装置的自动构图决定装置)”内揭示的“醒目度”。另外，针对醒目度，在下述“有关醒目度的补充说明”的项目中，对其概要进行说明。
·模板存储单元104，是用于存储记述图像布局的模板的单元。
·模板选择单元105，是用于选择记述图像布局的模板的单元。
·布局单元106，是用于根据由模板选择单元105选择的模板来对多个图像、文字、图形等进行配置的单元。
·显示单元107，是用于在显示装置上显示布局结果的单元。
·印刷单元108，是用于印刷布局结果的单元。
并且，图2是用于对布局例进行说明的图。该图2示出了把以某个主题(在学期间，旅行期间，旅行场所等)所摄影的图像按照模板10进行布局的例。在图2所示例中，是主题为“旅行”的示例，并且是在表示主题的标题图像11的背后的图像位置(1)、图像位置(2)、图像位置(3)，把3个数字图像(用数字照相机摄影并存储在图像数据库110内的照片图像)进行布局的例。
当进行该布局时，使用图1所示的模板存储单元104和模板选择单元105的功能来最初指定图2所示形式的模板10。然后，通过布局单元106，按照该模板10来配置多个图像。在图2所示例中，在中央配置标题图像11，使各图像在标题图像11的背后进行重叠，并将其配置在图像位置(1)～(3)。并且，重叠方法是布局成使得配置在图像位置(1)～(3)的各图像内的注目区域不被标题图像11隐藏。
并且，图3是以把人物21配置在左端的图像20示例为模式的图。图4是以与图3对应的醒目度的图案为模式的图。在图4所示的画面30内，醒目度为区域A算出得最高，区域B、区域C依次算出得较低。
然后，当按照图2所示的布局(模板10)来配置图3所示的图像时，为使注目区域不被标题图像11隐藏，把该图像配置在图像位置(2)和图像位置(3)是不优选的，而最好是配置在图像位置(1)。
并且，图5是以把花41配置在右端的图像40示例为模式的图。图6是以与图5对应的醒目度的图案为模式的图。在图6所示的画面50内，醒目度为区域A算出得最高，区域B、区域C依次算出得较低。
然后，当按照图2所示的布局(模板10)来配置图5所示的图像时，把该图像配置在图像位置(1)和图像位置(3)是不优选的，而最好是配置在图像位置(2)。
通过以上说明的方法来决定图像布局。
图7的下图是示出不使各图像互相重叠时的示例图。即如图7的上图所示，如果按照模板60使各图像重叠，则形成醒目度高的区域重叠，而看不见注目区域的示例。在该情况下，变更模板60，为使各图像不重叠，例如，再次选择模板70进行布局。
图8是示出本实施例的图像布局装置100的处理步骤的图，并且是示出利用醒目度的布局步骤的流程图。以下，对该流程图进行说明。
(a)步骤S1图像选择单元101从图像数据库110中选择要进行布局的图像。
(b)步骤S2图像读取单元102针对所选择的全部图像，读出构成像素的数据(例如，RGB值)。然后，注目区域算出单元103进行醒目度的算出。并且，生成注目区域(醒目度)的图案。
(c)步骤S3针对全部图像，决定以醒目度的图案为基础而不重叠的区域。
(d)步骤S4模板选择单元105从模板存储单元104中选择1个模板。
(e)步骤S5按照所选择的模板，布局单元106进行布局，使得醒目度高的区域不被隐藏。
(f)步骤S6检查是否能进行布局并使醒目度高的区域不重叠。当不能进行布局时，选择下一模板(返回到步骤S4)。
(g)步骤S7通过显示单元107或印刷单元108来显示或印刷布局结果。
图9是示出本实施例的图像布局装置100的构成的方框图，并且是仅示出与本发明直接相关的部分的图。在图9中，符号100表示图像布局装置，符号1表示因特网等的通信网络，符号111表示用于连接图像布局装置和通信网1的通信用接口，符号112表示用于对图像布局装置整体进行统一控制的控制部，符号120表示处理程序部。另外，根据本实施例的图像布局装置100可使用PC(个人计算机)来实现。
该图9所示的处理程序部120内包含以下处理部。
·图像选择处理部121，是用于从图像数据库110中选出要进行布局的图像的处理部。
·图像读取处理部122，是用于读出构成图像的各像素的值(RGB值等)的处理部。
·注目区域算出处理部123，是用于算出注目区域的处理部。注目区域算出处理部123把图像内分离成多个区域，并对所分离的各区域，把醒目度的程度划分成2级以上。算出该注目区域时，例如，可使用在“特开2001-126070号公报(注目区域抽出装置和使用该装置的自动构图决定装置)”内揭示的“醒目度”。
·模板存储处理部124，是用于存储记述图像布局的模板的处理部。模板数据被存储在模板数据库110a内。
·模板选择处理部125，是用于从模板数据库110a中选择记述图像布局的模板的处理部。
·布局处理部126，是用于根据由模板选择处理部125选择的模板来对多个图像、文字、图形等进行配置以使注目区域不被隐藏的处理部。
·显示处理部127，是用于把布局结果显示在显示装置上的处理部。
·印刷处理部128，是用于印刷布局结果的处理部。
另外，该处理程序部120可以使用专用硬件来实现，也可以通过由存储器和CPU(中央处理装置)等的通用信息处理装置来构成，并把用于实现各处理部的功能的程序(未作图示)装载在存储器内并执行该程序来实现其功能。
图像布局装置100与作为外围设备的输入装置、显示装置、印刷装置等(全都未作图示)连接。上述输入装置表示键盘、鼠标等的输入装置。上述显示装置表示CRT(阴极射线管)或液晶显示装置等。上述印刷装置表示激光打印机、喷墨打印机等。
也可以把用于实现图9所示的图像布局装置100的功能的程序记录在计算机可读取的记录介质内，通过把记录在该记录介质内的程序读入计算机系统并执行该程序，使本实施例的图像布局装置100执行必要处理。另外，此处所说的“计算机系统”包含OS(操作系统)或外围设备等的硬件。
并且，该“计算机系统”如果是在利用WWW(万维网)系统的情况下，则包含主页的提供环境(或显示环境)。并且，上述“计算机可读取的记录介质”表示软盘、光磁盘、ROM、CD-ROM等的可移动介质、内置于计算机系统中的硬盘等的存储装置。
而且，上述“计算机可读取的记录介质”表示象通过因特网等的网络或电话线路等的通信线路来发送程序的通信线那样，包含用于在短时间的期间内动态保持程序的介质(传送介质或传送波)，或者象作为该情况时的服务器或客户机的计算机系统内的易失性存储器那样，包含用于把程序保持恒定时间的介质。
上述程序可以用于实现上述功能的一部分。而且，上述程序可以是用于通过与已记录在计算机系统内的程序进行组合可实现上述功能的所谓的差分文件(差分程序)。
以上，尽管对本实施例作了说明，然而本发明的图像布局装置不限于仅上述图示例，当然可在不背离本发明要旨的范围内施加各种变更。
另外，在上述在先技术(在特开2000-261649号公报内记载的“图像处理方法、装置以及存储介质”)中揭示的发明是以操作者(利用者)自己手动进行图像布局为基础，并以再利用该布局信息为目的的发明。因此，如本发明那样，当使图像重叠进行布局时，和使计算机系统自身进行避免注目区域重叠的自动布局的发明，其目的和用途是完全不同的。
在上述实施例中，作为用于抽出注目区域的基准的一例，使用“醒目度”。该“醒目度”的算出方法的一例在“特开2001-126070号公报(注目区域抽出装置和使用该装置的自动构图决定装置)”内作了详细揭示。
以下，仅对其概要进行说明。
为了抽出注目区域，按照原图像的物理特征来评价醒目度。此处，醒目度是指与人的主观一致的参数。注目区域的抽出是从评价结果中抽出最显眼区域作为注目区域。也就是说，当评价注目区域时，由于按照物理特征来进行与人的主观一致的评价，因而可抽出适合于人的主观的注目区域。
例如，当物理特征包含色彩差异时，根据各区域的色彩差异，可评价醒目度。
并且，当物理特征除了色彩差异以外，还包含形状差异、面积差异和纹理(花纹)差异时，如果根据这4种差异的至少一种来评价醒目度，则根据原图像的特征，可正确评价醒目度。
并且，当针对色彩的三要素(色相，彩度，亮度)进行评价时，可把接近于以人看见时主观感觉显眼的色彩(红色)的区域作为最显眼区域进行评价。
而且，如果针对空间频率或原图像中的各区域的面积进行评价，则还可对最显眼区域的评价作出正确判断。
并且，醒目度的评价按以下步骤进行。
(1)最初，把原图像进行区域分割。在该情况下，把原图像分割成图区域和画区域。作为该区域分割方法，例如，在1997 IEEE中由W.Y.Ma和B.S.Manjunath等人在“Edge FlowA Framework of BoundaryDetection and Image Segmentation”内记载的基于“edge flow”的边界检测方法是可适用的。
(2)然后，抽出由上述分割获得的图区域，并评价该图区域的醒目度。
该醒目度的评价大致按以下进行。
·最初，求出各区域的非均质性醒目度。在该情况下，分别求出色彩的非均质度、纹理的非均质度、形状的非均质度以及面积的非均质度，并分别赋予加权系数进行线性结合，并求出各区域的非均质性醒目度。
·然后，求出各区域的特征醒目度。在该情况下，求出色彩的醒目度、空间频率的醒目度、面积的醒目度，并分别赋予加权系数进行线性结合，并求出各区域的特征醒目度。
·然后，把各区域的非均质性醒目度和特征醒目度相加，并求出特征量综合值。使用规定的β函数来评价该特征量综合值，并算出醒目度。
(3)并且，根据原图像生成作了醒目度评价的图案图。
权利要求
1.一种图像布局装置，用于对多个图像进行布局，其特征在于，该图像布局装置具有注目区域算出单元，用于算出在第1图像B的背后重叠的第2图像A的注目区域；以及布局单元，用于避免上述第2图像A的注目区域与上述第1图像B重叠来进行布局。
2.根据权利要求1所述的图像布局装置，其特征在于，该图像布局装置具有模板存储单元，用于存储对多个图像布局进行定义的模板组；以及模板选择单元，用于从该模板存储单元中选择上述模板；上述布局单元以上述所选择的模板为基础，对多个图像进行布局，同时避免各图像的注目区域重叠来进行布局。
3.根据权利要求2所述的图像布局装置，其特征在于，还具有用于当根据上述所选择的模板不能决定上述多个图像布局时，选择其他模板的单元。
4.一种图像布局方法，用于对多个图像进行布局，其特征在于，该图像布局方法包含注目区域算出步骤，用于算出在第1图像B的背后重叠的第2图像A的注目区域；以及布局步骤，用于避免上述第2图像A的注目区域与上述第1图像B重叠来进行布局。
5.一种程序，其特征在于，该程序使用于对多个图像进行布局的图像布局装置内的计算机执行注目区域算出步骤，用于算出在第1图像B的背后重叠的第2图像A的注目区域；以及布局步骤，用于避免上述第2图像A的注目区域与上述第1图像B重叠来进行布局。
全文摘要
采用了一种图像布局装置100，该图像布局装置100具有注目区域算出单元103，用于算出在第1图像的背后重叠的第2图像的注目区域；以及布局单元106，用于避免第2图像的注目区域与第1图像重叠来进行布局。
文档编号H04N1/387GK1509072SQ20031012121
公开日2004年6月30日 申请日期2003年12月15日 优先权日2002年12月17日
发明者长桥敏则, 永原敦示, 示 申请人:精工爱普生株式会社