专利名称：带有图像修改的摄像机装置的制作方法
技术领域：
本发明涉及带有集成的图像修改功能的摄像机装置和对应的方法。术语“摄像机装置”在这旨在不仅指代摄像机装置，而且还指代集成在其它移动电子设备中的摄像机装置，例如，集成在移动电话、个人数字助理、便携式游戏设备或者膝上型计算机中的摄像机。
背景技术：
近年来，数字照相广泛代替了胶卷照相。用数字摄像机装置拍摄的照片即图像例如可在计算机上被后处理。这种后处理可以包括对记录图像的轻微修改，而且包括显著改变或者修改以给予图像不同的效果。然而，这种后处理需要使用计算机和对应的图像处理软件，这些并不总是很好操作。另外，特别是随着移动电话中集成的数字摄像机装置的使用日益增多，人们经常期望在记录图像之后立即向例如朋友发送图像，例如通过SMS、MMS或者e-mail并且仍能够一定程度地修改图像。
发明内容
根据一个实施方式，本发明提供了一种摄像机装置，该摄像机装置包括数字摄像机单元，其被配置为数字地记录至少一个图像；以及分析电路，其被配置为确定所记录的至少一个图像的主体(subject)的姿势并根据所确定的姿势来决定照片修改。根据一个实施方式，所述分析电路可以进一步被配置以与所决定的修改相对应地来修改所述至少一个图像。根据一个实施方式，所述摄像机单元还可以被配置为记录至少一个另外的 (further)图像，并且其中，所述分析电路还被配置为与所决定的修改相对应地来修改所述至少一个额外图像。根据一个实施方式，所述摄像机装置还可以包括用户输入装置，其中，所述分析电路还被配置为基于从所述用户输入装置接收的输入来决定所述修改。根据一个实施方式，所述分析电路还可以被配置为基于所选择的图像记录模式来决定所述修改。根据一个实施方式，所述修改可以包括用基于先前存储的图像素材的一部分来替换所记录图像的一部分。根据一个实施方式，所述所记录图像的一部分可以包括从由所记录图像的背景、 所记录图像的主体的衣着部分和所记录图像的框(frame)部分构成的组中选择的一部分。根据一个实施方式，所述修改可以包括对图像的一部分应用算法来改变所述所记录图像的一部分的外观。根据一个实施方式，所述所记录图像的一部分可以包括图像的主体的面部部分。根据一个实施方式，所述算法可以包括从由变形(morphing)算法和模糊算法构成的组中选择的算法。根据一个实施方式，所述修改可以包括调整大小(resize)和重定心(recenter)的组合操作。根据一个实施方式，所述姿势可以从由所记录图像的主体的面部前的手部运动、 所记录图像的主体描绘了矩形、所记录图像的主体拉动头部的耳朵、所记录图像的主体用手指形成加号、所记录图像的主体敬礼和所记录图像的主体摆出的武术姿势所构成的组中选择。根据一个实施方式，所述摄像机装置可以是从由移动电话、便携式游戏设备、个人数字助理、智能电话和膝上型计算机构成的组中选择的电子设备的一部分。根据一个实施方式，所述分析电路可以被配置为在进行所述分析之前增强所述至少一个图像的对比度。根据另一个实施方式，本发明提供了一种方法，该方法包括以下步骤记录至少一个图像；分析所述至少一个图像以识别所述至少一个图像的主体的姿势；以及根据所识别的姿势来决定修改。根据一个实施方式，所述修改可以包括用基于先前存储的图像素材的一部分来替换所记录图像的一部分。根据一个实施方式，所述修改可以包括执行改变所记录图像的一部分的外观的算法。根据一个实施方式，所述方法还可以包括以下步骤在所述分析之前增强所述至少一个图像的对比度。根据一个实施方式，所述方法还可以包括以下步骤对从由所述至少一个图像和另外的所记录图像构成的组中选择的图像进行所述修改。应注意上述特征可以彼此自由组合除非明确地相反说明。
图1示出了根据一个实施方式的摄像机装置；图2示出了根据一个实施方式的方法；图3示出根据另一个实施方式的方法；图4A到图9示出了用于说明一些实施方式的功能的照片。
具体实施例方式下面将参照附图来详细地描述本发明的各个实施方式。应理解以下描述和附图仅为了例示而给出并且理解为限制。应理解在附图中按照向本领域技术人员给出对各个实施方式的清楚理解的方式描绘各个元件，并且不一定表示大小。另外，不同的附图尽管示出相同或者类似的元件，不一定表示彼此大小。应理解附图中所示的结构元件中块之间的耦合或者连接可以通过直接连接(即没有中间元件)和通过间接连接(即经过一个或者更多个中间元件连接)实现。另外，应连接尽管为了例示，功能块可以示出为单独的单元，但是除非相反说明，对应的功能还可以在公共单元中实现，例如，在公共电路或者芯片中实现。应注意描述实施方式包括多个具体元件不理解为指示这些元件的全部对于实现本发明是必需的。相反，在其它实施方式中，可以提供更少的元件和/或代替的元件。另外， 可以存在对附图所示的元件的附加元件。各个实施方式的特征可以彼此组合处分相反说明。本发明的范围不旨在被下文描述的实施方式限制，而旨在仅被所附的权利要求和等同物限制。图1中示出了根据本发明实施方式的摄像机装置15的框图。图1所示的摄像机装置15可以是专用数字摄像机的一部分，但是也可以合并在任何其它电子移动设备中，例如，移动电话、个人数字助理、便携式游戏设备、智能电话或者膝上型计算机。应注意未描绘这种设备中的不直接涉及下文说明的所示实施方式的功能的部件。例如，如果摄像机装置 15是移动电话的一部分，则移动电话中涉及进行电话功能的部分未被示出。图1的实施方式的摄像机装置15包括用于拍摄数字照片即记录数字图像的数字摄像机单元10。数字摄像机单元10可以按照任何现有方式实现，并且通常包括用于将光转换为电信号的图像传感器，例如CCD传感器(电荷耦合器件)或者CMOS传感器(互补金属氧化物半导体)；以及用于光聚焦到图像传感器上的一个或者更多个透镜。图像传感器记录的图像可以存储在存储器11中。存储器11可以包括闪存型存储器、随机存取存储器和/或其它类型的存储器，并且可以实现为摄像机装置15的内置存储器、可移除芯片卡的存储器，或者其组合。控制单元12可以包括例如微处理器，可以访问存储器11，即对存储器11读和写， 并且控制数字摄像机单元10。用户可以经过输入部14进行输入以影响控制单元12施加的控制。例如，通过按压输入部14的特定按钮，用户可以使控制单元12控制数字摄像机单元10以记录图像。其它输入可以包括针对记录图像的各种设定，例如曝光时间、闪光灯激活、光圈、分辨率、自拍激活或者激活特定图像记录模式，例如用于黑白拍摄、夜间拍摄的图像模式，或者还用于基于主体的姿势的图像修改，这些将在下面更详细描述。摄像机装置15还包括用于对存储在存储器11中的由数字摄像机10记录的图像进行处理和分析的图像处理器13。在对应的图像记录模式中，图像处理器13可以准备要分析的图像并且分析以识别要拍照的主体(特别是人)的特定预定姿势，尽管在一些实施方式中还可以识别动物的姿势。基于这些姿势，可以进行特定图像操纵或者修改，下面将说明其示例。在图1的实施方式中图像处理器13被控制单元12控制以在对应的图像记录模式下进行上述分析和修改。应注意尽管在图1的实施方式中示出单独的图像处理器13作为分析电路，但是在其它实施方式中图像处理器13的功能可以被控制单元12执行，例如通过使用控制单元12 的微处理器。取决于所分析的姿势而进行的图像修改在一些实施方式中可以包括用存储器11 中存储的素材或者图像部分来代替图像部分，或者可以包括使用例如变形算法或者模糊算法的算法来修改照片的部分。在一些实施方式中，在通过分析图像而识别了姿势之后，记录额外图像，并且在该额外图像上进行修改。图2示出了对应方法的实施方式。下面参照图2描述的方法可以但是不必在参照图1讨论的摄像机装置15中实现。在20，记录一个或者更多个图像。对于单个图像，可以例如识别静止姿势，另外通过记录和分析超过一个图像还可以识别移动姿势，例如手部移动。应注意，可以通过记录电影来记录超过一个图像，电影通常是快速连续的图像，或者还记录超过一个静止图像。在21，准备对在20记录的一个或者更多个图像进行分析。例如，可以增强图像的对比度来帮助检测姿势。在22，分析图像以识别姿势。在23，取决于所识别的姿势，决定是否要根据一个或者更多个修改来修改图像。应注意该决定不一定仅基于所识别的姿势，而且可以额外地取决于其它因素，例如所选择的图像记录模式或者用户输入。例如，如果识别了指示特定修改的姿势，则可以询问摄像机装置的用户是否实际要进行该修改。在M，记录额外图像，在25，与在23决定的修改相对应地对该额外图像进行修改。 应注意，该额外图像可以是多个额外图像中的一个，例如电影的图像，可以修改电影的全部
或者一些。在其它实施方式中，所分析的图像与接着要修改的图像是同一个。图3示出了对应于这种实施方式的方法的示例。在30，记录至少一个图像。在31，准备要分析的所记录图像。这可以但是不必通过复制图像来实现以保留原始图像。准备分析可以包括对比度增强，类似于参照图2进行的说明。在32，分析图像以识别图像的主体的姿势。在33，取决于所确定的姿势以及类似于图2的实施方式可能取决于例如用户输入的其它因素，来决定修改。在34，根据所决定的修改来修改图像。图2的22和图3的32的图像分析可以包括进行一个或者更多个算法，例如皮肤颜色识别、对主体的手指数进行计数、图案识别、神经网络、面部检测算法或者身体形态识别。应注意在图2和图3的实施方式中，可以省略步骤，或者可以改变步骤的顺序。例如，在一些实施方式中可以省略准备要分析的图像的步骤。在其它实施方式中，可以省略基于图像记录模式来确定修改的步骤，而可以是只有选择了对应的图像记录模式才进行完整方法。在图2的实施方式中，在20记录了多个图像的情况下，从20到22的方法可以针对每个图像依次地单独进行。下面，将参照图4到图9说明例如在图2的22或者在图3的32识别的预定姿势和接着进行的修改的示例。图4到图7具体地示出了可以在参照图2讨论的方法中使用的示例，图8和图9的示例涉及图3的方法。然而，该示例划分仅构成一种可能性，并且图4 到图7所示的姿势和修改还可以用于图3的实施方式，并且图8和图9所示的姿势和修改还可以用于图2的实施方式。在图4A中，示出了要拍摄的主体将手在面部前方向下移动。可以例如通过在图2 的20记录手处于不同位置的多个图像，接着在22分析图像期间重构该运动来识别这种姿势。在实施方式中，如果识别了这种姿势，则在移动之后，例如，移动之后一定时间，记录额外图像，并且在该额外图像中，如图4B所示识别并且模糊了主体的头部，从而在照片中不能轻易地识别主体。在图5A和图5B中，示出了又一个示例。在图5A中，主体交叉两个手指以形成十字符号。当该姿势被识别时，在实施方式中，记录额外图像，并且该图像被定心并且调整大小使得主体在照片的中部，如图5B所示。图6A和图6B示出了另一个示例。在图6A中，示出主体用手或者手指描绘矩形框的姿势的示例。当这种姿势被识别时，在实施方式中，记录额外图像，并且如图6B所示在图像上添加边框。图6B所示的图像的边框部分可以是在例如图1的存储器11的存储器中存储的预定图案。在这种情况下，图像可以进一步被调整大小和/或定心从而使主体定位在边框的中部。在图7中，示出了另一个实施方式。作为预定姿势，在图7A中图像的主体拉他的耳朵。这可以例如通过检测如图7A的线指示的手臂的特征部分来检测。如果这种姿势被识别，则记录额外图像，并且对主体的面部执行变形算法以提供如图7B所示的类似于漫画的图像。图8A示出了另一个示例。在本示例中，姿势是军礼。在实施方式中，当这种姿势被识别时，如图8B所示，用军服替代所记录图像中人的衣服。在另一个实施方式中，如图8C 所示，图像的背景变为军事背景。图8B和图8C的两种可能还可以被组合，即，可以向主体提供军服，并且可以插入军事背景。服装和军事背景的素材均可以先前存储在摄像机装置中，例如图1的存储器11中。图9示出了另一个可能的姿势。在图9中，主体摆出了类似于功夫的姿势。在这种实施方式中，当标识了这种姿势时，可以用武术服替换主体的衣服，和/或背景可以替换为远东背景。图6、图8和图9的示例是所记录图像的一部分被预定素材、图案或者图像部分替代的示例。图4和图7的示例是在照片的一部分上执行算法的情况，在所示的示例中为模糊算法或者变形算法。以上讨论的姿势和修改仅用作示例。此外，实施方式可以实现这些可能中的一个、 超过一个或者全部。在一些实施方式中，检测到对应的姿势可以马上就进行所讨论的全部修改，在其它实施方式中，可以在进行修改之前询问摄影师。一些实施方式中已说明的姿势识别和修改可以仅当摄像机装置设定为对应图像记录模式时才进行，但是在其它实施方式中可以还不管设定的图像记录模式而进行。从以上描述可见，可能有多种变型例，因此本申请旨在不被上述实施方式限制，仅被所附的权利要求和等同物限制。
权利要求
1.一种摄像机装置，该摄像机装置包括数字摄像机单元，其被配置为数字地记录至少一个图像；以及分析电路，其被配置为确定所记录的至少一个图像的主体的姿势并根据所确定的姿势来决定照片修改。
2.根据权利要求1所述的摄像机装置，其中，所述分析电路还被配置为与所决定的修改相对应地来修改所述至少一个图像。
3.根据权利要求1或2所述的摄像机装置，其中，所述摄像机单元还被配置为记录至少一个额外图像，并且其中，所述分析电路还被配置为与所决定的修改相对应地来修改所述至少一个额外图像。
4.根据权利要求1至3中任意一项所述的摄像机装置，该摄像机装置还包括用户输入装置，其中，所述分析电路还被配置为基于从所述用户输入装置接收的输入来决定所述修改。
5.根据权利要求1至4中任意一项所述的摄像机装置，其中，所述分析电路还被配置为基于所选择的图像记录模式来决定所述修改。
6.根据权利要求1至5中任意一项所述的摄像机装置，其中，所述修改包括用基于先前存储的图像素材的一部分来替换所记录图像的一部分。
7.根据权利要求6所述的摄像机装置，其中，所述所记录图像的一部分包括从由所记录图像的背景、所记录图像的主体的衣着部分和所记录图像的边框部分构成的组中选择的一部分。
8.根据权利要求1至7中任意一项所述的摄像机装置，其中，所述修改包括对所述图像的一部分应用改变所述所记录图像的一部分的外观的算法。
9.根据权利要求8所述的摄像机装置，其中，所述所记录图像的一部分包括所述图像的主体的面部部分。
10.根据权利要求9所述的摄像机装置，其中，所述算法包括从由变形算法和模糊算法构成的组中选择的算法。
11.根据权利要求1至10中任意一项所述的摄像机装置，其中，所述修改包括调整大小和重定心的组合操作。
12.根据权利要求1至11中任意一项所述的摄像机装置，其中，所述姿势是从由所记录图像的主体的面部前的手部移动、所记录图像的主体描绘矩形、所记录图像的主体拉扯头部的耳朵、所记录图像的主体用手指形成加号、所记录图像的主体敬礼和所记录图像的主体摆出的武术姿势构成的组中选择的。
13.根据权利要求1至12中任意一项所述的摄像机装置，其中，所述摄像机装置是从由移动电话、便携式游戏设备、个人数字助理、智能电话和膝上型计算机构成的组中选择的电子设备的一部分。
14.根据权利要求1至13中任意一项所述的摄像机装置，其中，所述分析电路被配置为在进行所述分析之前增强所述至少一个图像的对比度。
15.一种方法，该方法包括以下步骤记录至少一个图像；分析所述至少一个图像以识别所述至少一个图像的主体所摆出的姿势；以及根据所识别的姿势来决定修改。
16.根据权利要求15所述的方法，其中，所述修改包括用基于先前存储的图像素材的一部分来替换所记录图像的一部分。
17.根据权利要求15或16所述的方法，其中，所述修改包括执行改变所记录图像的一部分的外观的算法。
18.根据权利要求15至17中任意一项所述的方法，该方法还包括以下步骤在所述分析之前增强所述至少一个图像的对比度。
19.根据权利要求15至18中任意一项所述的方法，该方法还包括以下步骤对从由所述至少一个图像和所记录的额外图像构成的组中选择的图像进行所述修改。
全文摘要
本发明提供了一种摄像机装置和对应的方法。实施方式中的摄像机装置包括用于分析所记录图像以确定姿势并基于所识别的姿势来决定图像修改的电路。
文档编号G06T11/60GK102422320SQ200980159274
公开日2012年4月18日 申请日期2009年11月3日 优先权日2009年5月14日
发明者斯特凡·奥尔松, 达吕斯·卡茨 申请人:索尼爱立信移动通讯有限公司