用于增强数字成像的方法和装置的制造方法
【技术领域】
[0001]本申请一般涉及增强数字成像。
【背景技术】
[0002]本节未经表示现有技术状态的本文中所描述的任何技术许可的情况下图示了有用的背景信息。
[0003]数码相机由于具有相机功能的移动电话已经变得非常普及。还有具有相机功能的各种其它便携式设备，但是移动电话实际上总是通过它们的用户随身携带。数字图像的所得增长已经使得能够拍摄取悦它们相应摄影师的众多图像。需要增强图像观看体验已经通过人们所看到的绝对数量的图像而得以强调。
[0004]已经开发出了各种技术方案以增强拍摄数字图像的体验。光学和数字图像稳定已经使得能够进行让摄影师更自由地使用他们的数码相机的更长的曝光时间。3D成像利用一对相机和特殊显示器和/或由观众佩戴的3D眼镜。已经开发出了不同的音调效果和失真以润色图像，从而使它们更加赏心悦目。甚至还有将运动结合到静止图像的图像(还被称为电影动图)。电影动图也需要合适的运动(诸如在风中移动的一些草或从水龙头流出的水)。还有，图像观看已经通过合适的滑进和滑出效果在各种滑动展示中得以增强。仍然需要进一步增强数码相机的使用体验。
【发明内容】
[0005]在权利要求中对本发明的示例的各种方面进行陈述。
[0006]根据本发明的第一示例方面，提供了一种装置，包括:
[0007]至少一个存储器，其被配置成存储校准信息；
[0008]两个数字图像捕获单元，其被配置成以彼此给定的偏移来拍摄相应对的数字图像，该两个数字图像捕获单元具有重叠的视场，以使一些图像对象可能出现在该对数字图像的每幅数字图像中；
[0009]该至少一个存储器被进一步配置成存储该对数字图像；
[0010]处理器，其被配置成:
[0011]基于校准信息和该对数字图像产生用于该对数字图像的视差图；
[0012]使用该对数字图像来形成组合图像；
[0013]使用视差图来分割组合图像以包括前景区域和背景区域；
[0014]形成合成摇摄图像序列，以使对于每个组合图像:
[0015]在前景区域和背景区域之间施加透视移位;和
[0016]裁剪透视移位图像的移位部分。
[0017]视差图可以针对该对数字图像中的图像对象而被形成。
[0018]可以通过将组合图像分割成前景区域和背景区域来执行组合图像的分割。
[0019]可以通过移位前景区域和背景区域中的至少一个区域来施加透视移位。
[0020]两个数字图像捕获单元可以由两个数码相机形成。可替代地，两个数字图像捕获单元可以由公共数码相机形成和光学图像分离器形成，所述光学图像分离器具有两个偏移且基本上平行的图像输入端口。光学图像分离器可以包括选自以下各项组成的组的一个或多个部件:镜子、棱镜、无焦点光学元件、出瞳扩大器、和焦点光学元件。
[0021]该对数字图像可以具有基本上重叠的视场。当拍摄该对数字图像时，光轴可以平行或几乎平行(例如，高达I，2，3，4或5度差)。
[0022]可以通过镶嵌来执行由该对数字图像形成组合图像。
[0023]可以用(多个)基于深度的分割算法来执行场景的分割。用户可以被允许识别前景区域以有助于分割。
[0024]处理器可以进一步被配置成形成合成摇摄图像序列的动画文件。
[0025]该装置进一步可以包括光学图像稳定单元，其被配置成光学地稳定该对数字图像的数字图像中的至少一幅图像。
[0026]处理器可以被配置成控制光学图像稳定单元并且控制图像捕获单元，以便拍摄将受到光学图像稳定单元影响的视图在合成摇摄方向上从一幅图像移位到另一幅图像的多幅图像。
[0027]该装置还可以包括显示器。该处理器可以进一步被配置成在显示器上呈现预览，以图示可以用图像捕获单元的当前视图产生的合成摇摄。
[0028]该装置可以进一步包括用户输入。该处理器可以进一步被配置成使用户能够确定至少一个参数并且在以下各项中的任一项或多项中使用所述至少一个参数:视差图的产生、组合图像的形成、组合图像的分割，以及合成摇摄图像序列的形成。
[0029]用户输入可以包括触摸屏。该处理器可以被配置成通过识别手势(诸如在触摸屏上轻扫)来至少部分地形成所述至少一个参数。
[0030]处理器可以被配置成控制光学图像稳定单元以执行图像稳定和视图移位两者。光学图像稳定可以被执行到在视图移位之后可能的程度。
[0031]处理器可以被配置成使得数字图像捕获单元拍摄多对数字图像，并且使得光学图像稳定单元对于不同对的数字图像以不同的方式执行视图的移位。处理器可以被配置成基于多对数字图像来执行视差图的产生。处理器可以被配置成使用多对数字图像执行组合图像的形成。
[0032]处理器还可以进一步被配置成使用图像捕获单元的改变的相互几何结构以有助于视差图的产生或细化视差图。
[0033 ]根据本发明的第二示例方面，提供了一种装置，包括:
[0034]至少一个存储器，其被配置成存储校准信息；
[0035]以彼此给定的偏移的两个数字图像捕获单元，所述两个数字图像捕获单元具有重叠的视场，以使一些图像对象可能出现在用两个图像捕获单元中的每个图像捕获单元拍摄的图像中；
[0036]处理器，其被配置成使用于形成视频对象的装置顺序地:
[0037]使得两个数字图像捕获单元捕获一对数字图像；
[0038]在至少一个存储器中存储所捕获的一对数字图像；
[0039]基于校准信息和该对数字图像产生用于该对数字图像的视差图；
[0040]由该对数字图像形成组合图像；
[0041]使用视差图来分割组合图像以包括前景区域和背景区域；
[0042]由顺序地形成的组合图像来形成合成摇摄图像，以使对于每个组合图像:
[0043]在前景区域和背景区域之间施加透视移位;和
[0044]裁剪图像的移位部分。
[0045]视差图可以针对该对数字图像中的图像对象而被形成。
[0046]可以通过将组合图像分割成前景区域和背景区域来执行组合图像的分割。
[0047]可以通过移位前景区域和背景区域中的至少一个区域来施加透视移位。
[0048]第一和第二示例方面中的任一方面的装置可以由便携式设备、手持设备、数码相机、摄录像机、游戏设备、移动电话、游戏设备、膝上型计算机和平板计算机中的任一个组成，或包括便携式设备、手持设备、数码相机、摄录像机、游戏设备、移动电话、游戏设备、膝上型计算机和平板计算机中的任一个。
[0049]根据本发明的第三示例方面，提供了一种装置，被配置成作为第一示例实施例的装置并且作为第二示例实施例的装置操作，使得如同第一示例方面的装置一样，一系列的合成摇摄图像由一对数字图像形成，并且如同第二示例方面一样，另一系列的合成摇摄图像由另一对数字图像形成。
[0050 ]根据本发明的第四示例方面，提供了一种方法，包括:
[0051]存储校准信息；
[0052]通过两个数字图像捕获单元以彼此给定的偏移来拍摄相应对的数字图像，所述两个数字图像捕获单元具有重叠的视场，以使一些图像对象可能出现在该对数字图像的每幅数字图像中；
[0053]存储该对数字图像；
[0054]基于校准信息和该对数字图像来产生用于该对数字图像的视差图；
[0055]使用该对数字图像来形成组合图像；
[0056]使用视差图来分割组合图像以包括前景区域和背景区域；
[0057]形成合成摇摄图像序列，以使对于每个组合图像:
[0058]在前景区域和背景区域之间施加透视移位;和
[0059]裁剪透视移位图像的移位部分。
[0060]根据本发明的第五示例方面，提供了一种方法，包括:
[0061]存储校准信息；
[0062]使用两个数字图像捕获单元以彼此给定的偏移来形成视频图像，所述两个数字图像捕获单元具有重叠的视场，以使一些图像对象可能出现在用两个图像捕获单元中的每个图像捕获单元拍摄的图像中；和
[0063]顺序地:
[0064]使用两个数字图像捕获单元来捕获一对数字图像；
[0065]存储所捕获的一对数字图像；
[0066]基于校准信息和该对数字图像来产生用于该对数字图像的视差图；
[0067]由该对数字图像来形成组合图像；
[0068]使用视差图来分割组合图像以包括前景区域和背景区域；
[0069]由顺序地形成的组合图像来形成合成摇摄图像，以使对于每个组合图像:
[0070]在前景区域和背景区域之间施加透视移位;和
[0071]裁剪图像的移位部分。
[0072]根据本发明的第六示例方面，提供了一种装置，包括处理器，其被配置成:
[0073]存储校准信息；
[0074]通过两个数字图像捕获单元以彼此给定的偏移来拍摄相应对的数字图像，所述两个数字图像捕获单元具有重叠的视场，以使一些图像对象可能出现该对数字图像中的每幅数字图像中；
[0075]存储该对数字图像；
[0076]基于校准信息和该对数字图像来产生用于该对数字图像的视差图；
[0077]使用该对数字图像来形成组合图像；
[0078]使用视差图来分割组合图像以包括前景区域和背景区域；
[0079]形成合成摇摄图像序列，以使对于每个组合图像:
[0080]在前景区域和背景区域之间施加透视移位;和
[0081]裁剪透视移位图像的移位部分。
[0082]根据本发明的第七示例方面，提供了一种装置，包括处理器，其被配置成:
[0083]存储校准信息；
[0084]使用两个数字图像捕获单元以彼此给定的偏移来形成视频图像，所述两个数字图像捕获单元具有重叠的视场，以使一些图像对象可能出现在用两个图像捕获单元中的每个图像捕获单元拍摄的图像中；和
[0085]顺序地:
[0086]使用两个数