数字图像处理装置中提供构图信息的方法和设备的制作方法

专利名称：数字图像处理装置中提供构图信息的方法和设备的制作方法
技术领域：
本发明涉及一种4甜聂设备和方法，*#^说，涉及一种在数字图像处^ 置中提供构图信息(compositioninformation)的方法^i殳备，其中利用听觉信 息^^供与参考构图相t饿的目标对象的构图信息。
背景絲
絲图像处理技术的新;1^， #^^置如便于携带的数字照相机、数字拍 摄机，以^U多动电话照相才;UF;U^i^亍。it些4甜I^^不^l可以4甜聂"^止画面， 还可以4財聂运动对象的运动画面，尤其;WI于4甜聂肖像。
图1A示出^^贿技术的通常的对財聂实例。从图1A可以看出，4財聂过程 仅仅信赖于用户的视觉信息。图1B示出才^^^^MMU甜I^置背面设有液晶 显示^(LCD)时自拍的实例。这种情况下，因为用户在自拍期间看不见LCD而 导lfc^得理想的用户画面的可靠性降低。
图2A到2E图示了才娥贿净^的利用^架自拍的实例。这种情况下， 用户首先如图2A所示^^御架，然后如图2B所示进^^定构图的自拍。然 而，如图2C和2D所示，自拍可能因为用户在马上进行自^^前不知i!A&的位 置和构图而&收。这种情况下，用户将经历需要重复^甜tjL到^甜聂到具有理想 的位置和构图画面而带来的不便。

发明内容
本发明提^^种在数字图像处S^置中提供构图信息的方法^i殳备,其中，
在4財聂期间利用听觉信息或视觉信,yc供在实时xw屏幕上显示的目标对象的
构图信息，以便引导与用于4射氛的预定构图相tb^的目标对象的构图。
才緣本发明的一方面，提^-"种在数字图像处s^置中提供构图信息的设
备。该设备包:M^"测单元，从要捕获的实时MJr图像中检测对象的构图；t汲 单元，tb^检测得到构图与参考构图；以及控制单元，进储制辦，从而输 出听觉报f^f言号直到检测到的构图与参考构图相匹配，并JLi^谁制辦，从 而当检测到的构图与参考构图相匹配时，输出听觉匹配信号。
对象构图可包括对象的大小、位置和方向，参考构图可包括参考对象的大 小、位置和方向。
参考构图可由用户i^。
该控制单元可进行控制,，从而输出不同听觉报^ft号直到对,图与 参考构图相匹配。
该控制单元可进行控制辦，从而^Jir出听觉匹酉e/ft号的时间点经过的 预定时间之后，自动对射菱对象。
听觉报f^言号和听觉匹SM言号也可以是衬消息信号。
才娥本发明的另一个方面，提^-""种在数字图像处錄置中提供构图信息 的设备。该设备包^^测单元，从实时^L^图像中检测对象的构图；》b^单元， 比较#"测到的构图与参考构图；以及控制单元，进行控制辦，从而输出视觉 报警信号直到检测到的构图与参考构图相匹配，并iUi行控制旨，从而如果 对,图与参考构图相匹配，在预定时间过去^自动捕获实时，W"图像。
对絲图可由用户iU，如果用户没有i^tf^图，该对IM^J图可以设 置到屏幕中央部分。
对絲图可包括对象的大小、位置和方向，参考构图可包括参考对象的大 小、位置和方向。
^L觉才艮f^号"5T从向对^^^^光的:JT输出。
该控制单元可通过tb^t象的大小与参考对象的大小i!t^制变焦操怍，通
过》嫩叶象的位置与参考对象的位置来调整灯的闪烁逸复，M过tb^f象方 向与参考对象方向来调整灯所发出的颜色。
才峰本发明的另一方面，提^-种在数字图^狄錄置中提供构图信息的 方法。该方法包樹a)从捕获的实时观看图傢检测对象构图；(b)》b^检测到的构
图与参考构图；以^(c)进g制，，输出听觉报^t号直到检测到的构图与 参考构图相匹配，并JLiie^制liMt，从而当检测到的构图与参考构图相匹配 时，输出听觉匹酉e/ff号。
该方法可包樹d)进M制^t，从而^JNSr出听觉匹酉Mt号的时间点过去 预定时间4U^自动4財H^象。
步辦c)可包^^f谁制，，从而输出不同的听觉报^ft号直到对綠图 与参考构图相匹配。
在(c)中，听觉报！4T号和听觉匹酉e4言号可以是"i^消息信号。
才娥本发明的另一个方面，提^-种在数字图像处SL^置中提供构图信息 的方法。该方法包括(a)从实时观看图像中检测对象的构图，包括对象的大小、 位置和方向；(bUb^检测到的构图与参考构图，包括参考对象的大小、距离 和方向；(c)输出视觉报f^言号直到检测到的构图与参考构图相匹B己，以A(d)如 糾,图与参考构图相匹配，在预定时间过去^自动捕获实时，M图像。
对,图可由用户iM，如果用户没有i^^t^J图，该对^图可以设 置到屏幕中央部分。
在(c)中，视觉报韓号可从向对#4^供光的灯输出。
步辦c)可包M过》b^t象的大小与参考对象的大小控制变焦操怍，通过 比4W象的位置与参考对象的位置调整灯的闪烁逸变，^if过tb^f象方向与 参考对象方向调整灯发出的颜色。


本发明上述及^# ^优点#^过参考附图对实施例进^#细描述而变 得更明显，其中
图lA和lB示出才娥贿技^M训数字图像处3S^置的^it4甜聂的实例和
自拍实例；
图2A到2E示出才M^贿^^N用数字图像处^^置的自拍实例；
图3为凝:字图^^tS^^置的iW图4为图3所示的凝:字图《象处^^置的后视图5为才Mt本发明实施例在数字图像处^^置中提供构图信息的设备的方 框图6a到6f为描述根椐图5的图^象处^^置中的面部识别的构图检测的视
图7a到7i示出^^对象的构图在图5所示的装置中产生的听觉报f^号 和听觉匹西Mf号的实例；
图8a到9c示出才M^对象的构图在图5所示的装置中产生的听觉才艮^T号 ^^见觉才艮f^言号的实例；
图10为示出才娥本发明第一实施例在数字图像处3^置中提供构图信息 的方法的;j^呈图；以及
图11为示出才娥本发明第二实施例在数字图像处3S^置中提供构图信息 的方法的沐-呈图。
M实施方式
以下，将参考附图详细皿ii^发明的实施例。应该注意，同样的附图标 i化一个或多个附图中表示同样的元件。^^发明的如下描述中，为了简明和 清楚，省略对扭b^合的已知功能和结构的详细描述。
图3为凝:字图<象处^ 置的，图。
快门#^文敏11用于打开和关闭光圏，以使电荷齡IW(CCD)舰片曝 光预定量的时间，絲过协同光圏(未示出)适当曝树象，在CCD中记录图 像。
快门#^文#^ 11 4赚用户的输入产生第一4射聂信号和第^財聂信号。起 先，对快门#^文敏11的部分辦作为年决门信号，数字图^狄^^置调整聚 焦和光量。当数字图像处S^置聚焦时，显示单iUi的绿灯将被打开。在数字 图像处^置完成响应于对快门辨放掩組11的第一操怍的聚焦和光 整之 后，快门释放按钮ll被进一步操怍，以输入用于4財聂的全决门信号。
IMt电源掩組13以^^过为该数字图^^S^置供应电力;JM^fti亥数字 图像处錄置。
闪光灯15在黑暗环境中瞬间地向# )"#^供强光。闪光灯15具有多种 闪光模式，如自动闪光，强制闪光(ffllflash)，闪光关闭，红眼减少，衝逸同 步，等等。
副灯17为对象提供光，以让数字图像处^^置在光不^1^夜间4財聂*
下以自动的方^it^lt确地调节聚焦。
透#^元19接#自夕MP光源的光并处理图像。
图4为图1所示的数字图^^tS^置的后视图。参见图2,数字图^^t理 装置包括广角变焦按钮21w，摄远变焦按钮21t，显示单元23，扬声器25和具 有触M感器或接触开关的输入掩組B1到B14。
当操怍广角变焦掩組21w或才聂远变焦g21t时， 一见角将变宽或变窄。特 别地，操作广角变焦按纽21w或摄远变焦按钮21t,以侵^ ^膝光区域的 大小。当辨广角变焦独21w时，赋啄光区域的大小减小，当对摄远变焦 按钮21t^T入时，i^l曝光区域的大小增大。
扬声器25输出听觉信号，如储存在数字图像处錄置中的"^"信号，例如 所储存的运动画面的语"^f言号或储存的音乐文^H言号。^^发明中，扬声器25 输出听觉报f4言号，直到要4財聂的目标对象的构图与参考构图匹配，当目标对 象的构图与参考构图匹配时，输出听觉匹酉Mt号。
输入按钮Bl到B14沿显示单元23的7JC平线和垂直^^供。输入按钮Bl 到B14可以具有触才辨感^(未示出)或接触开关(未示出)。
换句^i兌，当输入独B1到B14具有触辦感器时，用户可以M菜单 项目中选#^如颜色或狄的期望值，或者可以通ii^接触水平线上的胁Bl 到B7或垂直线上的独B8到B14的同时，Ji/下/iE7右移动iML活包含在主菜 单图标中的副菜单图标。
当输^^^B1至'JB14具有4^触开关时，用户可以通过直^^^^主菜单图 标及其副菜单图标来^e所希望的功能。触4辦感器输入与接触开关输A^目比 要,^NN"I^轻的"^触，而接触开关输入与触，感器输A^目比要4^目对较重的
图5为#^本发明实施例在数字图#^^^置中提供构图信息的设备的方 框图。参见图5，该设备包括副灯17,显示单元23，用户输入单元51， 4財聂单 元53，图像处理单元55， ^#单元57和数字信号处理单元59。数字信号处理 单元59包絲部识别单元59-1, tb^单元59-2和控制单元59-3。
向对象提供光的副灯17在自拍期间向用户提僻巨离信息和方向《I "Ht息。 才N^对象的距离和参考距离副灯17的闪烁M改变，#4^对象方向和参考方向， 即，右方向和左方向，副灯17的颜色显示改变。 参见图3和图4,用户输入单元51包括用于打开或关闭光圏以便使CCD或 胶片膝光预定量时间的快门#^^11，用于*电源的电源^13，用于增 ;Ul缩小视角的广角变焦敏21w ^^聂远变焦独21t，以朋于齡与数字 图像处S^置的功肯沐关的不同菜单的独B1到B14。
才甜聂单元53包括决门#^1独11，透辨元，光圏，CCD以及图中未示 出的做转换IKADC)。
快门释放按钮ll用于协同光圏调节曝光的光量。透4^;^收来自夕NP光 源的光并处理图i"象。光團根据^1开/关闭的 1整4光的量。光團打开/关闭 的量由数字信号处理单元59控制。
CCD接皿iiit4^M^r入的光并才Mt累积的光量与垂直同步信号同步 皿iiii:4W力渝出捕获的图像。数字图像处^^置借助于CCD可以捕获图
像，ccD将树^jN"的ib^妙电信号。
图像处理单元55扭行信号处理，以允许显示转变成电信号的图像信号。为 此，图像处理单元55去除由暗电: j^斤引起紫、色电平(black level) ^ii行伽马 妙，以^树输入图像信号编码，以适于人类视觉的非线性。图像处理单元55
到RGB行，进行色彩滤镜P车列(CFA)内插，然后将内插的RGB信号转M YUV 信号，通it^'J用高通滤波器选虑Y信号iMi行i^M尝，通it^'J用标准色坐标 系校正U信号和V信号的色值进行颜色校正，并去除来自U信号和V信号的 噪声。然后，图像处理单元55对去I^^声的YUV信号进行压缩^f言号处理， 并产生JPEG文件。产生的JPEG文件 _示单元23中显示并被<##^^单 元57中。图像处理单元55在数字信号处理单元59的控制下工作。
本发明包括在数字图像处S^置中提供构图信息的两个实施例。
第一，为了允许只利用听觉信,l^t数字图像处理单元，其超出只依靠视 觉信息的数字图^hS^置的常Mi^t限制，数字信号处理单元59包括面貌识 别单元59-l，》b^l单元59-2，和控制单元59-3。
面部识别单元59-l作为从显示的实时观看图像检测对象的构图的检测器。 更^^ki兌，面部识别单元59-1 ^^测面，息，即，显示单元23内面部的大 小、位置、和方向，作为显示在显示单元23中的实时MJ"图像的对象的构图。
面部识别单元59-1的构图检测iyL将参考图6a到6f进4亍搭述。图6a到
6f为根提图5的图像处S^置中的面部识别描逸沟图检测的示意图。
图6a示出面部识别单元59-l的面部大小抬邻J。参见图6a， M示单元23 Ji^示实时观看图像。面部识别单元59-l基于颜色或ii^'I;4^测面部识别区 域，并可以计算面部识别区域的大小。
图6b示出面部识别单元59-l的面*置枱-测。面部识别单元59-l利用面 部识别区域中心与显示单元23中心之间的距离计算面部的位置。换句谅说，面 部距离1>|显示单元中心-面部中心|。
图6c示出面部识别单元59-l的面部方向检测的示图。面部方向为面部识 别区域的中心的角坐标，即，面部中心相对显示单元23的中心，面部方向值可 以表示为0。换句话说，面部方向表示面部相对于中心的角位置，该值可以用于 生成指示用户向该中心移动的听觉信号。如图6f所示，当面部方向值0在-45° 与45。之间时，面部趋于中心的右侧；当面部方向值0在45。与135。之间时，面 部趋于中心的上部，当面部方向值e在135。与225。之间时，面部趋于中心的左 侧；而当面部方向值9在-225。与315。之间时，面部趋于中心的底部。
^^单元57储存包括参考面辦息在内的参考构图，即，参考面部的大小、 位置和方向。特别地，参考面部的位置和方向为参考区域之内的值，该参考区 域为如图6b所示离开显示单元23中心的预定区域，并且如果来自实时观看图 4象的面部的位置与方向在参考区域之内，^#确定为理想的对射聂构图。^f^存在 ^f^单元57的参考构图用于在4財聂期间引起匹商诚想的#^构图的显示絲示 单元23中的面部图像的构图。参考构图可以设置为默认M^^用户的习惯设 置为适当值。
tb^单元59-2t嫩由面部识别单元59-l检测出的实时，M图像的当前面部 的构图(或当前构图)与储存^##单元57中的参考构图，并向控制单元59-3输 出》b^果。
如果当前构图与参考构图不匹配，控制单元59-3控制扬声器25输出听觉 报f^f言号。如果当前构图与参考构图匹配，控制单元59-3控制扬声器25输出
听觉匹se/ft号。
如果当前面部的大小与储存4#^单元57中的参考面部的大小不匹配，如 果当前面部的位置与储存^#单元57中的参考面部的位置不匹配，以及如果 当前面部的方向与在4^单元57中的参考面部的方向不匹配，控制单元59-3
都渝出听觉报警信号。对应于面部大小的听觉净艮奢ft号、对应于面部位置的听
觉报f4言号和对应于面部方向的听觉报^号的组^^终控制扬声器25。图6d 表示由于图6a的当前面部的位置和方向处于参考区域"卜因此渝出听觉报^ 号。
在扬声器25输出听觉匹酉M言号^r，控制单元59-3可以^^谁制辦， 4吏^^在经过预定时间(例如2秒钟)^通过自动快门输入可以捕获图像。当 当前构图和参考构图相互匹配时，由于用户,用于对射聂的快门#^^11期 间的振动，可能捕获到不理想的图像。由此，控制单元59-3可以W^制操怍， 使得^U为声器25输出听觉匹酉e/ft号的时间点开始经过预定时间之后可以自动 1^具有当前构图的图4象。
图7a到7i示出#^对象的构图控制单元59-3控制扬声器25输出听觉报警 信号和听觉匹gC/ft号的实例。
图7f示出最^fi^幕，其中a示单元23的实时，M屏幕中显示的当前面 部的构图(即面部的大小、位置和方向)与^#单元57中储存的参考构图匹 配。这种情况下，控制单元59-3控制扬声器25输出听觉匹酉Mt号Sf。
图7a示出^示单元23的实时，M屏幕中显示的面部构图趋于实时，M 屏幕左上部的实例。当图7a与图7f相比时，面部大小、面"^Mi置和面部方向 之间都不匹配，从而控制单元59-3控制扬声器25输出听觉报f^ff号Sa。
图7b示出^示单元23的实时，M屏幕中显示的面部构图趋于实时，財 屏幕左中部的实例。当图7b与图7f相比时，面部大小、面"^lHi置和面部方向 之间都不匹配，从而控制单元59-3控制扬声器25输出听觉报f^t号Sb。可以 从图7a到7b中看出，听觉报f^f言号Sa和Sb互不相同。
图7c示出^:示单元23的实时》M屏幕中显示的面部构图位于实时，財 屏幕的中央部分的实例。当图7c与图7f相比时，面^Mi置之间匹S&，而面部大 小和面部方向之间不匹配，从而控制单元59-3控制扬声器25输出听觉报^f言 号Sc。可以从图7a到7c中看出，听觉报^fT号Sc与听觉报f^言号Sa和Sb都 不同。
图7d示出除了显示的面部大小比图7a所示的面部大小大"M^示单元 23的实时，M屏幕中显示的面部构图与图7a所示的面部构图勤以的实例。当图 7d与图7f相比时，面部大小、面部位置和面部方向之间不匹配，从而控制单元
59-3控制扬声器25输出听觉报f^ft号Sd。可以从图7a到7d中看出，听觉报警
信号Sd不同于听觉报^fTfSa、 Sb和Sc。
图7e示出除了显示的面部大小比图7b所示的面部大小大0卜^示单元 23的实时X!^屏幕中显示的面部构图与图7b所示的面部构图务似的实例。当 图7e与图7f相比时，面部大小、面^置和面部方向之间不匹配，从而控制单 元59-3控制扬声器25输出听觉报f^ft号Se。可以从图7a到7e中看出，听觉
报警信号Se不同于听觉报警信号Sa、 Sb、 Sc和Sd。
图7g示出除了显示的面部大小比图7d所示的面部大小大^卜a示单元 23的实时XW屏幕中显示的面部构图与图7d所示的面部构图类似的实例。当 图7g与图7f相比时，面部大小、面部位置和面部方向之间不匹配，从而控制 单元59-3控制扬声器25输出听觉报f^T号Sg。可以从图7a到7g中看出，听
觉报^i言号Sg不同于听觉报警信号Sa、 Sb、 Sc、 Sa和Se。
图7h示出除了显示的面部大小比图7e所示的面部大小大^M^示单元 23的实时MJ"屏幕中显示的面部构图与图7e所示的面部构图务似的实例。当图 7h与图7e相比时，面部大小、面"^Mi置和面部方向之间不匹配，从而控制单元 59-3控制扬声器25输出听觉报f^t号Sh。可以从图7a到7h中看出，听觉报警
信号Sh不同于听觉才艮警信号Sa、 Sb、 Se、 Sd、 Se和Sg。
图7i示出^示单元23的实时，M屏幕中显示的面部构图位于实时，W" 屏幕的中央部分的实例。当图7i与图7f相比时，面*置之间匹配，而面部大 小和面部方向之间不匹配，从而控制单元59-3控制扬声器25输出听觉报f^ft 号Sj。可以从图7a到7i中看出，听觉报f^言号Si与听觉报f^f言号Sa、 Sb、 Sc、
Sd、 Se、 Sg和Sh不同。
参见图7a到7i，通过当前构图(即面部的大小、位置和方向)与参考构图 (即参考面部的大小、位置和方向)之间的》傲，控制单元59-3控制扬声器25 输出不同的听觉报f4言号，直到当前构图与参考构图相匹配，从而引导用户调 整当前构图。当用户响应于听觉报f^賴整当前构图从而使得当前构图与参 考构图相匹配时，控制单元59-3控制扬声器25输出听觉匹酉膽号。才娥本发 明另一个实施例，可以输出引起当前构图与参考构图匹配i"H"消息信号。例如， 当当前构图与参考构图不匹配时，可以输出如'郝整构图，，或'喻向右移动"等 的i請消息信号。当当前构图与参考构图相匹配时，可以输出如'最佳构图！ 2
秒钟<^自动进行^^"的i賠消息信号。
第二，为了允许在自拍期间,数字图像处3S^置，数争ft号处理单元59 包括面部识别单元59-1 ， tb^单元59-2和控制单元59-3。
面部识别单元59-1用作MJMt获的实时X见看图^^r测对象构图的检测器。 更^^说，面部识别单元59-1检测面部信息，即，显示单元23内的面部的 大小、距离和方向，作为"示单元23中显示的实时观看图像的对象构图。面 部识别单元59-l的面^,y^测如上所述，因此不再，。
^f^单元57储存包括参考面部信息的参考构图，即，参考面部的大小、距 离和方向。特别地，凑"考面部的位置和方向^1在^^考区域^之内的值，该参考区 域为如图6b所示的离开显示单元23中心的预定区域，如果来自实时观看图像 的面部的位置和方向在参考区域之内，其可以确定是希望的4甜聂构图。储存在 ^Ht单元57中的参考构图用于在对甜聂期间将显示在显示单元23中的面部图像 的构图引导为希望的4財聂构图。该参考构图可以设置为默认值或才娥用户的习 '贯iM为适当的值。
比较单元59-2 t嫩由面部识别单元59-l检测出的实时MJ"图像的当前面部 的构图(或当前构图)与储存^H^单元57中的参考构图，并向控制单元59-3输 出》b^果。特别地，tb^单元59-2 t诚由面部识别单元59-1 ^r测到的当前面 部的大小与储存>^##单元57中的参考面部的大小，》嫩当前面部的距离与参 考面部的距离，以及tb^当前面部的方向与参考面部的方向，并向控制单元59-3 输出tb^果。
控制单元59-3执行变焦梯作，调整副灯17的闪烁逸变，调整副灯17的颜 色显示，或才娥》b^单元59-2的》b^絲制扬声器25的声音输出。
控制单元59-3接收来自tb^单元59-2的关于面部大小的tb^结果,如果当 前面部的大小大于参考面部的大小，^t缩小操怍；如果当前面部的大小小于 ;^考面部的大小，批^^大操怍。
控制单元59-3接tt自tb^单元59-2的关于面*置的J;b^结果，以便确 定当前面部的位置与参考面部的位置有多大的差另'J，从而控制副灯17的闪烁速 度。这里，关于面部位置的比，果可以利用上面的公式计算，面部距离D=| 显示单元的中心-面部的中心l。例如，当当前面部的面部距离大，定数量，例 如，当当前面部的距离与参考面部的距离之间的差大于lcm时，副灯17的闪
烁i^l相对较慢，表明该距离远离参考值。当当前面部的面部距离小于预定数 量，例如，当差小于lcm时，副灯17的闪烁ii;l重新变快，指示用户该距离 接近参考值。除了副灯17"卜，通过控制扬声器25,控制单元59-3还可以输 出^"信号引导用户调整当前距离。图6e表示由于图6a的当前面部的位置与 方向处于参考区域"卜，因此副灯17闪烁。
控制单元59-3接》1棘自tb^单元59-2的实时MJ"图像的面部方向的tb^ 果，如果当前面部的方向与参考面部的方向不匹配，则控制副灯17发出颜色。 例如，如图6f所示，如勤目对于参考面部的方向当前面部的方向趋于右侧(如果 面部方向值e在-45。与45。之间)，副灯17顺序地发出红色、绿色、红色和绿色； 如勤目对于参考面部的方向当前面部的方向趋于左侧(如果面部方向值e在45° 与135。之间)，副灯17顺序赋出红色、黄色、红色械色。如勤目对于参考 面部的方向当前面部的方向趋于顶部(如果面部方向值9在135°与225。之间)， 副灯17持续地闪烁绿色；如勒目对于参考面部的方向当前面部的方向趋于底部 (如果面部方向值e在-225。与315°之间)，副灯17持续闪烁黄色。除了副灯17 "卜，通过控制扬声器25,控制单元59-3还可以输出i^^信号以引导用户调整 当前i 巨离。
控制单元59-3同时调整副灯17的闪烁i^l和副灯17的颜色显示，以便同 时反映闪烁ii^和颜色显示。
当当前面部的大小、位置和方向都与参考面部的相匹配时，控制单元59-3 控制扬声器25输出指示4財聂将在;UH中过去^进行的^I"信号。^3H^t 号输出的时间点开始经过^4H中之后，进行拍摄。
图8a到8c示出在单人自拍期间实时观看的面部构图与参考构图不匹配并 由》bit过副灯17和扬声器25引导对IM^图调整的实例。如图8b所示，通过比 较图8a所示的实时观看图像的面部大小与参考面部大小进行变焦操怍。由于对 象的位置i^不同于参考位置并且在图8b所示的变焦实时^bf屏幕上对象的 方向趋于右侧，因此副灯17顺序赋出红色、黄色、红色、械色，并且扬声 器25输出要求向右移动的语-l"信号。 一旦用户辨别出副灯17显示和扬声器25 #^"信号，用户便如图8c所示向右移动，然后扬声器25输出表明4甜聂可育t^ 緣钟^将要进行的絲信号。
图9a到9c示出在一群人自拍期间实时观看的面部构图与参考构图不匹配页
并由j):kit过副灯17和扬声器25引导对象构图调整的实例。面部大小信息和面 ^Mi置信息可以计算为自^lA^的平均值。在图9a所示的实时观看图像中，通 过tb^面部大小与参考面部的大小进行变焦操怍，如图9b所示。由于对象的位 置与参考对象的位置并没有太大不同以;Sj t象方向趋向图9b所示的变焦实时 Xlt屏幕的右侧，因此副灯17顺序*出红色、绿色、红色和绿色，并且扬声 器252输出要求向左移动的语^"信号。 一旦用户辨别出副灯17的显示和扬声器 25的语音信号，用户便如图9c所示向左边移到，然后扬声器25输出表明^射聂 可絲膽钟^#^^佈糊言号。
通it^用视觉和/或听觉报^f言号引导预定4財聂构图，即，调整副灯17的 闪烁i^l和颜色显示，可以狄重复4甜聂的不便。
以下将参照附图10和ll描ii^数字图像处^^置中提供构图信息的方法。 该方法可以在如图5所示的用于提供构图信息的设备中扭行。该方法的主算法 可以借助iS殳备的外围组件在数字信号处理单元59之内赌。
参考图10描述4 本发明第一实施例在数字图像处^置中提供构图信 息的方法。
一旦用户为进行4甜聂打开数字图像处^^置，在操怍IOOI中，数字信号处 理单元59侵在显示单元23的实时Mjf屏幕上显示当前面部的构图(或当前构 图)。
在辦1003中，数字信号处理单元59检测当前构图。在面部构图检测期 间，数字信号处理单元59#^颜色或边，测面部识>^区域，并可以计算面部 识别区樹目对如图6a所示的实时观看图^象的大小。如图6b所示，数字信号处 理单元59可以利用面部识别区域中心与显示单元23中心之间的距离计算面部 的位置。换句"^i兌，面部距离D叫显示单元中心-面部中心l。 jJ^卜，数字信号处 理单元59可以计算面部方向，即如图6c所示面部中心倾向显示单元23中心的 度数。该面部方向值可以用e表示。面部方向枱侧在上面详细所述，jtb^t不再 料。
一旦包括面部的大小、位置和方向的当前构图被检测到，数字信号处理单 元59在操怍1005中tb^^r测到的当前构图与储存^##单元57中的参考构图。 储存^M^单元57参考构图可以诏！为默认M射艮提用户的习惯i殳置为适当 的值。
数字信号处理单元59在^ft 1007中确定检测到的当前构图是否与参考构 图相匹配。
如，测到的当前构图与参考构图不匹配，在,1009中，数^ff号处理 单元59 #^检测到的当前构图控制扬声器25输出不同的听觉报^ff号。如果 当前面部大小与储存^M^单元57中的参考面部的大小不匹配，如果当前面部 的位置与参考面部的位置不匹配，以及如果当前面部的方向与参考面部的方向 不匹配，数字信号处理单元59都输出听觉报f^f号。对应于面部大小的听觉 报f^言号、对应于面^置的听觉报^ft号和对应于面部方向的听觉报^ft号 的组合最终控制扬声器25。 ##检测到的当前构图输出的听觉报转号如图7a 到7i中(除了图7f)所示，并且M"其进e^述，因jtbtl^h不在^i。
在#^1011中，数字信号处理单元59 M生成听觉报f^ft号直到检测到 的当前构图与参考构图相匹配，从而引导用户调整当前构图。
在辦1013中，如^"测到的当前构图与参考构图相匹配，数字信号处理 单元59控制扬声器25输出表明检测到的当前构图与参考构图相匹配的听觉匹 酉Mt号。图7f表示当检测到的当前构图与参考构图相匹配时输出的听觉匹酉Mt 号。
在辦1015中，在扬声器25输出听觉匹酉e/ft号^，数字信号处理单元 59在预定时间(例如2秒钟)过去之后，通过自动快门输7^^取图像。当当前 构图和参考构图相互匹配时，由于用户操怍用于4財聂的快门釋放^11期间的
振动，可能会捕获到不理想的图像。因此，数字信号处理单元59可以扭^^制 操作，使得可以从扬声器25输出听觉匹S2/ft号的时间点开始经过预定时间^ 自动赠获具有当前构图的图像。
同样的，通过》饿当前构图(即面部的大小、位置和方向)与参考构图(即 参考面部的大小、位置和方向)，数字信号处理单元59控制扬声器25输出不 同的听觉报奢ft号直到当前构图与参考构图相匹配，从而引导用户调整当前构 图。当用户响应于听觉报^ft号调整当前构图从而使得当前构图与参考构图相 匹配时，数^f言号处理单元59控制扬声器25输出听觉匹酉e/ft号。才娥本发明 另一个实施例，可以输出用于引导与参考构图匹配的当前构图的语音消息信号。 例如，当当前构图与参考构图不匹配时，可以输出如懒整构图"或"^#向右 边"等等的i^消息信号。当当前构图与参考构图相匹配时，可以输出如'最佳
构图！ 2秒钟<^自动进行才財聂"的i絲消息信号。
以下参考图11描述才娥本发明第二实施例在数字图^^S^置中提供构 图信息的方法。
当用户为了自拍站在数字图像处3S^置前面时，在辦IIOI中，对应于当 前对象的构图(或当前构图)的实时，M屏幕显示在显示单元23中。当前构图可 以由用户设置，如果用户不设置则可将其设置为到屏幕中心部分的默认值。
在操作1103中，数字信号处理单元59检测显示在实时，M屏幕上的对象 的面部的大小、位置和方向。在面部大小检测期间，数字信号处理单元59## 颜色或边^测面部区域。在面部距离检测期间，数字信号处理单元59可以利 用所提取的面部的中心部分与显示单元23的中心部分之间的距离来计算面部的 距离。换句^i兌，面部距离D叫显示单元的中心-面部的中心I。对于面部方向检 测，如果计^^寻到的面部距离为正(+D),数字信号处理单元59检测该面部趋向 右；如果计將到的面部距离为负(-D)，数字信号处理单元59检测该面部趋向 左。
在面部构图检测期间，数字信号处理单元59才娥颜色或边，测面部识别 区域，并可以相对于如图6a所示的实时观看图像计算该面部识别区域的大小。 如图6b所示，数字信号处理单元59可以利用面部识别区域中心与显示单元23 中心之间的距离计算面部的位置。换句"^i兌，面部距离D叫显示单元中心-面部 的中心|。 jtl^卜，数字信号处理单元59可以计算面部方向，该方向即为如图6c 所示面部中心倾向显示单元23中心的度数。该面部方向值可以用e表示。如图 6f所示，当面部方向值0在-45。与45°之间时，确定面部趋向右；当面部方向 值0在45。与135°之间时，确定面部趋向顶部；当面部方向值e在135°与225° 之间时，确定面部趋向左；当面部方向值e在-225。与315。之间时，表明该面部 趋向底部。
数字信号处理单元59在操作1105中确定当前面部的大小是否与储存M 储单元57中的参考面部的大小相匹配。^ft单元57储存参考构图，其包括参 考面部信息，即参考面部的大小、位置与方向。储存^4^单元57中的参考构 图用于在4射聂期间将在显示单元23中显示的面部图像的构图引导为所希望的拍 摄构图。参考构图可以^^为默认W^N^用户的习惯iU为适当的值。
如果当前面部的大小与参考面部的大小不匹配，在操怍1107中，数字信号 处理单元59控制变傳JMt。如果当前面部的大小大于参考面部的大小，数字信
号处理单元59"^f^小辦；如果当前面部的大小小于参考面部的大小，数字 信号处理单元59 ^fm大靴
数字信号处理单元59在操怍1109中确定当前面部的位U否与储存^ 储单元57中的参考面部的位置相匹配。
如果当前面部的位置与参考面部的位置不匹配，在操怍llll中，数字信号 处理单元59调整副灯17的闪烁逸变。随着当前面部的位置比参考面部的位置 区别越大，例如，当前面部的位置与参考位置之差大于lcm时，数字信号处理 单元59降低副灯17的闪烁逸变。随着当前面部的位置比参考面部的位置区别 越小，例如，当差异小于lcm时，数字信号处理单元59增加副灯17的闪烁速 度。除了副灯17夕卜，通继制扬声器25，数字信号处理单元59还可以输出引 导用户调整当前位置的i^f言号。
数字信号处理单元59在操怍1113中确定当前面部的方向是否等于参考面 部的方向。
如果该当前面部的方向与参考面部的方向不同，在操作1115中，数字信号 处理单元59控制副灯17的颜色。如图6f所示，如勤目对于参考面部的方向当 前面部的方向趋于右侧，即，如果面部方向值e在-45。与45。之间，数字信号处 理单元59控制副灯17顺序赋出红色、绿色、红色和绿色；如^目对于参考 面部的方向当前面部的方向趋于左侧，即，如果面部方向值0在45°与135°之 间，数字信号处理单元59控制副灯17顺序赋出红色、黄色、红色械色。 如勤目对于参考面部的方向当前面部的方向趋向顶部，即，如果面部方向值e 在135。与225°之间，数字信号处理单元59控制副灯17持续地闪烁绿色。如果 相对于参考面部的方向当前面部的方向趋向底部，即，如果面部方向值e在225° 与315。之间，数字信号处理单元59还可以控制副灯17持续地闪烁黄色。除副 灯17外，通过控制扬声器25，数^f言号处理单元59还可以输出引导当前对象 的方向调整的if^ft号。
数字信号处理单元59同时调整副灯17的闪烁速度和副灯17的颜色显示， 以便同时反映闪烁ii^l和颜色显示。
在数字信号处理单元59引导对^J图的调整^，在旨1117中，确定 对象的当前面部的大小、位置与方向是否与参考面部的大小、位置与方向相匹 配。倘^ta此，数字信号处理单元59控制扬声器25输出表明对甜聂将在预定时
间(例如3秒)过去^进^^i"g^ft号，然后在操怍1119中，在几秒钟过去 4^进行樹聂。
如上所述，才赚本发明，通过提供构图信息的方法和装置，其允i快出只 依靠视觉信息的数字图M^^置的常MJMt限制，只利用听觉信,UMt数字 图像处S^置，数字图像处^置可以方^^Mt。
jH^卜，可以仅似'J用视觉报^f言号引导预定4財聂构图，而不^t^jt在自拍 期间的数字图傢处^:置的传^^作的限制，从而消除了重复对財聂的不便。
参照本发明的实施例已经能够详细的展示和描述了本发明，本领域技# 员应当理解，在不脱离所附权利要求P艮定的本发明樹申和范围的情况下，可以 对本发明在形式和细节上做出不同的改变。
权利要求
1.一种在数字图像处理装置中提供构图信息的设备，该设备包括检测单元，从实时观看图像检测对象的构图；比较单元，比较检测到的构图与参考构图；以及控制单元，进行控制操作，从而输出报警信号直到检测到的构图与参考构图相匹配；以及进行控制操作，从而当检测到的构图与参考构图相匹配时输出匹配信号。
2. 如权矛决求i所述的设备，其中报f^t号和匹西e/f言号为听觉倌号。
3. 如似'J要求l所述的设备，其中报警信号和匹酉e4t号为视觉信号。
4. 如;M，J要求1所述的设备，其中对象的构图包括对象的大小、位置和方向，并且参考构图包括参考对象的大小、位置和方向。
5. 如权矛溪求4所述的设备，其中参考构图能够由用户设置。
6. 如^5U'溪求1所述的设备，其中所述控制单iti^f谁制辦，从而输出 不同的报警信号直到对象的构图与参考构图相匹配。
7. 如似'J^求1所述的设备，其中控制单;^ii行控制辦，从而当检测到 的构图与参考构图相匹配时自动^甜影寸象。
8. 力wM'J要求7所述的设备，其中^r测到匹配时和进行4財聂时之间，所 述控制单元以预^^i^f^t。
9. :i^'J^"求1所述的设备，其中听觉报^ft号和听觉匹酉24言号包^if^ 消息信号。
10. —种在数字图^^t^^置中4^供构图信息的设备，该设备包拾 检测单元，从实时M^"图^^r测对象的构图；》b^单元，^^^^']到的构图与参考构图；以及控制单元，进行控制操怍，从而输出视觉报警信号直到检测到的构图与参 考构图相匹配；以;sji行控制辦，从而^M^测到匹酉e^自动捕获实时，M 图像。
11. 如权矛J^求10所述的设备，其中^"测到匹配时和自动捕获实时X! J" 图像时之间控制单it^^预定时间。
12. 如^5U，J要求10所述的设备，其中对象的构图能够由用户设置，并且如 果用户没有设置对象的构图，则对象的构图可以该设置到屏幕的中心部分。
13. 如权利要求12所述的设备，其中对象的构图包树象的大小、位置和 方向，参考构图包括参考对象的大小、位置和方向。
14.如权利要求12所述的设备，其中视觉报警信号从向对象提供光的副灯 输出。
15. 如权利要求14所述的设备，其中控制单元通过比较对象的大小与参考 对象的大小来控制变焦操怍，通过比较对象的位置与参考对象的位置来调整副 灯的闪烁速度，并通过比较对象的方向与参考对象的方向来调整副灯发出的颜 色。
16. —种在数字图像处S^置中提供构图信息的方法，该方法包拾(a) 从捕获的实时观看图傢检测对象的构图；(b) tb^检测到的构图与参考构图；以及(e)进行控制辦，从而输出报警信号直到检测到的构图与参考构图相匹配； 以及进行控制操怍，从而当检测到的构图与参考构图相匹配时输出匹配信号。
17. 如权利要求16所述的方法，其中报警信号和匹配信号包括听觉信号。
18. 如权利要求16所述的方法，其中报警信号和匹配信号包括视觉信号。
19. 如权利要求16所述的方法，还包括(d)进储制辦从而在从输出听觉匹配信号的时间点开始经过预定时间之后自动拍摄对象。
20. 如权利要求16所述的方法，其中(c)包^i^谁制辦，从而输出不同 的听觉报警信号直到对象构图与参考构图相匹配。
21. 如权利要求16所述的方法，其中在(c)中，听觉报^[言号和听觉匹酉MT号是姊肖息信号。
22. —种在数字图像处S^置中提供构图信息的方法，该方法包括(a )从实时，M图^^测包括对象的大小、位置和方向在内的对象的构图；(b) tb^^则到的构图与包括参考对象的大小、距离和方向在内的参考构图；(c) 输出视觉报f^ft号直到检测到的构图与参考构图相匹配；以及(d) 如果检测到的对象的构图与参考构图相匹配，则在预定时间过去之后自 动,获实时XW图像。
23. 如权利要求22所述的方法，其中对象的构图能够由用户设置，并且如 果用户没有iS^t象构图，对象的构图可以设置到屏幕中心部分。
24. 女H5U'j要求22所述的方法，其中在(c)中，^L觉才艮警信号包括从向对象 "l^^光的副灯的输出。
25. 如^'J^求24所述的方法，其中(c)包^ititH^t象的大小与参考对 象的大小^^制变焦操怍，通过tbW象的位置与参考对象的位置来调整副灯 的闪烁逸复，以;sji过比^f象的方向与参考对象的方向来调整副灯发出的颜色。
全文摘要
提供一种在数字图像处理装置中提供构图信息的方法和设备，其中在拍摄期间利用听觉信息或视觉信息提供显示在实时观看屏幕上的目标对象的构图信息以便产生与用于拍摄的预定构图相匹配的目标对象构图。该设备包括检测单元，从要捕获的实时观看图像检测对象的构图；比较单元，比较检测到的构图与参考构图；以及控制单元，进行控制操作，从而输出听觉报警信号直到检测到的构图与参考构图相匹配，并且进行控制操作，从而当检测得到的构图与参考构图相匹配时输出听觉匹配信号。
文档编号H04N5/232GK101370087SQ200810168680
公开日2009年2月18日 申请日期2008年4月2日 优先权日2007年4月2日
发明者高成植 申请人:三星Techwin株式会社