图像处理方法和设备的制造方法
【技术领域】
[0001]本发明涉及一种用于在包括相机模块的装置中处理图像的图像处理方法及其设备。更具体地讲，本发明的某些方面涉及一种使图像被检测和捕捉之前的延迟时间最小化的用于在相机装置或便携式装置中处理图像的图像处理方法和设备。
【背景技术】
[0002]近些年，相机装置或包括相机模块的便携式终端(以下称为“便携式装置”)变得能够更好地提供高质量图像和/或各种方便用户的功能。具有相机模块所提供的拍摄功能的便携式装置可通过图像传感器(或相机传感器)检测具有全高清(HD)分辨率或更高分辨率的图像。
[0003]另外，在预览模式下，便携式装置显示从相机传感器检测到的图像作为预览图像。如果用户按压快门按钮，则捕捉预览图像。在这种情况下，便携式装置响应于快门按钮输入而检测、捕捉、处理并在存储器中存储从图像传感器获取的图像，并且，存在从图像在存储器中的存储终止到下一可能的拍摄时刻(即，从快门按钮的输入到下一可能的对于另一照片的拍摄时刻)的延迟时间(例如，快门时刻到预览时刻)。由于被摄物的拍摄环境和图像处理能力的影响，会产生延迟时间。
[0004]相应地，根据延迟时间，用户必须等待下一次拍摄，直到图像处理终止为止。因此，当用户想要拍摄一系列连续照片时，这种延迟是不方便的，并会抑制在不同的连续时间对被摄物进行捕捉，其中，这种捕捉对于处于运动中的被摄物或其他物体而言是期望的。此夕卜，近期，可通过根据用户设置而设置各种拍摄选项来捕捉被摄物的图像。例如，用户可设置素描效果、阴影效果、扭曲效果、合成效果、动画效果、黑白效果、渐晕效果、用于提高图像质量的组成变化和背景变化、用于执行拍摄的全景拍摄。当针对完整的捕捉图像所设置的拍摄选项是后处理补偿时，可通过处理图像转换来实现根据拍摄选项的图像拍摄。
[0005]相应地，当在便携式装置中根据拍摄选项设置进行拍摄时，从由用户进行的快门按钮的输入到下一可能的图像被捕捉的时刻的延迟时间与一般拍摄相比显著增加。相应地，用户必须不方便地等待比平常当在选择了附加的选项的情况下一般地拍摄图像时更长的用于利用某些后处理补偿来捕捉图像的时间段的结束。
【发明内容】
[0006]技术问题
[0007]本发明的某些实施例的目的在于至少部分地解决、减轻或消除与现有技术相关的问题和/或缺点中的至少一个。某些实施例旨在提供至少一个下述优点。
[0008]本发明部分针对以上问题而做出，并提供这样的一种图像处理方法及其设备:当基于便携式装置的拍摄选项进行拍摄操作时，所述图像处理方法及其设备能够通过快速处理图像转换以使连续图像捕捉之间的延迟时间最小化来进行图像转换和后续拍摄操作的快速输入，而不降低用户便利性。
[0009]本发明还提供了这样的一种图像处理方法:所述图像处理方法通过在便携式装置中实现用于使根据拍摄的延迟时间最小化的最优环境，提高了用户便利性和具有拍摄功能的便携式装置的可用性。
[0010]技术方案
[0011]根据本发明的示例性方面，图像处理方法可包括:在拍摄模式下显示预览；在显示预览的同时接收基于拍摄选项的拍摄命令；作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时进入预览模式以对显示图像的预览进行显示。
[0012]可与拍摄模式的终止独立地执行针对具有全分辨率的图像的处理补偿。
[0013]另外地或可选地，可提供针对正作为后台处理的图像补偿的进展状态。
[0014]所述图像处理方法还可包括:当基于拍摄选项的拍摄命令被接收时，确认浏览模式的预设状态。
[0015]本发明的另一方面提供了包括指令的计算机程序，其中，所述指令被布置为:当所述指令被执行时，所述指令实现与上述方面中的任意一个相应的方法。
[0016]根据本发明的另一示例性方面，提供了一种记录程序的计算机可读记录介质，其中，所述程序用于通过诸如处理器、微处理器或控制单元的硬件执行所述方法。
[0017]根据本发明的另一示例性方面，一种图像处理设备可包括:相机模块，获取具有全分辨率的图像，对所获取的具有全分辨率的图像进行缩放，以通过显示图像缓冲器进行缓存和输出，并通过静止图像缓冲器对具有全分辨率的图像进行缓存和输出；显示单元，用于显示从相机模块输出的显示图像的预览；存储器，存储至少一个程序、以显示图像为基础应用了拍摄选项的效果预览图像、以及以具有全分辨率的图像为基础应用了拍摄选项的图像；控制器，在显示显示图像的预览的同时，执行所述至少一个程序以处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时进入预览模式以对显示图像的预览进行显示。
[0018]根据本发明的另一示例性方面，计算机可读记录介质存储程序。当所述程序被加载到诸如用于执行机器可执行代码的处理器或装置的处理器内时，所述装置将通过相机模块获取的图像转换为显示图像和具有全分辨率的图像，以对转换后的显示图像和转换后的具有全分辨率的图像进行缓存，显示缓存的显示图像的预览，当在显示显示图像的预览的同时基于拍摄选项的拍摄命令被接收时，作为后台处理将拍摄选项应用于具有全分辨率的图像的图像补偿，并同时或者至少在重叠的时间期间进入预览模式，以显示基于下一帧的显示图像的预览。
[0019]本发明的各种方面和特征在权利要求中被限定。
[0020]有益效果
[0021]根据上述本发明的图像处理方法和设备的示例性实施例，用于显示预览的预览图像由显示图像而不是具有全分辨率的图像转换而成，允许预览图像被迅速地处理和显示。此外，根据本发明示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。
[0022]相应地，在本发明示例性实施例中，当用于显示预览图像的图像转换处理或对于具有全分辨率的图像的图像转换处理时，作为从快门按钮的输入到下一可能的拍摄的时间段的延迟时间(例如，拍摄到预览时刻)可大幅缩短。
[0023]此外，根据本发明的示例性实施例，通过单独的图像补偿功能(或图像补偿应用)的针对具有全分辨率的图像(静止图像)的转换处理作为后台进行，使得通过拍摄功能(或拍摄应用)的预览模式可被直接执行。
【附图说明】
[0024]图1是示意性地示出根据本发明示例性实施例的便携式装置的配置的框图；
[0025]图2是示意性地示出根据本发明示例性实施例的相机模块的配置的框图；
[0026]图3是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的方法的示例性操作的流程图；
[0027]图4示出其上显示有预览图像的画面上的用于选择用于设置拍摄选项的预设项目(或图标)的选择事件的输入；
[0028]图5示出处于能够在其上显示有便携式装置的预览图像的画面上选择各种拍摄选项的拍摄选项菜单的状态下的画面的示例；
[0029]图6示出用户输入用于从通过拍摄选项菜单而提供的各种拍摄选项中选择素描的选择事件(触摸)；
[0030]图7示出根据选择事件输入而转换的图6的画面；
[0031]图8显示根据浏览模式或快速查看模式的设置状态(激活或未激活)的画面；
[0032]图9示出根据本发明示例性实施例的当便携式装置显示新图像作为预览时便携式装置上的画面的示例；
[0033]图10是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的方法的示例性操作的流程图；
[0034]图11是示出根据本发明示例性实施例的在便携式装置中处理拍摄图像的过程期间用于显示效果预览图像的示例性操作的流程图；
[0035]图12是示出根据本发明示例性实施例的在便携式装置中基于拍摄选项而拍摄图像过程期间的示例性并行处理操作的流程图。
【具体实施方式】
[0036]以下参照附图在这里详细描述本发明示例性实施例。在附图中，始终使用相同的附图标号来指示相同或相似的部件。可省略对合并于此的公知的功能和结构的详细描述，以避免模糊本领域普通技术人员对于本发明的主题的判断。
[0037]本发明实施例提供了一种相机装置或便携式终端(以下称为“便携式装置”)中的图像处理方法及其设备。具体地讲，本发明示例性实施例提供了一种用于在照片拍摄方案下处理图像的方法和设备，其中，所述照片拍摄方案经历通过图像后处理校正(诸如，图像合成或各种过滤器处理)以新形式捕捉的图像。换言之，在本发明的这个示例性实施例中，一种用于处理图像的方法和设备可检测、捕捉、处理并在存储器中存储在各种拍摄选项(或效果)被设置的拍摄执行期间的图像，并使再次能够进行拍摄(换言之，在快门按钮的输入之后，随后能够捕捉(拍摄)另一图像)之前的延迟时间(例如，拍摄时刻到预览时刻)最小化。
[0038]在本发明的某些示例性实施例中，拍摄选项可包括诸如例如素描、阴影、扭曲、合成、动画、渐晕、复古、色彩转换和冷光的效果选项，以及诸如用于提高图像质量的组成、能够改变被摄物的背景的背景和能够拍摄宽视角的全景的效果选项。根据本发明的这个示例性实施例，可以以插件形式实现上述拍摄选项。例如，用户可促进各种拍摄选项的开发，并通过选择和下载各种拍摄选项以及在便携式装置中安装所述拍摄选项，在便携式装置中容易地更新各种拍摄选项。
[0039]根据本发明的这个示例性实施例，便携式装置处理在驱动相机模块期间(例如，当进入预览模式时)从相机模块获取的针对每一帧的图像，以产生用于预览显示的显示图像和用于捕捉的具有全分辨率的整幅图像(或静止图像)。显示图像的尺寸可小于静止图像的尺寸，或与静止图像的尺寸相同。在这种情况下，便携式装置可针对每一帧从相机模块获取图像，将获取的图像转换为将作为预览显示的显示图像，在显示单元上对显示图像进行显示，并对从相机模块获取的具有全分辨率的图像进行缓存，以将该图像作为静止图像进行存储。另外，在前述状态下，如果捕捉被请求，也就是说，当快门按钮被输入时，便携式装置可从被缓存的帧的图像中选择在当捕捉被请求时(也就是说，当快门按钮被输入时)的时间点处的一帧的图像，并对所选择的帧的图像进行压缩编码和存储。
[0040]相应地，本发明的这个示例性实施例可包括用于暂时存储具有全分辨率的图像(或静止图像)的缓冲器，其中，所述暂时存储操作与下列操作独立(并行):在预览模式下对显示图像进行显示的操作，以及用于处理图像转换的后台的功能(应用)(诸如，具有全分辨率的图像的后处理校正)。
[0041]通过上文中的前述布置，在驱动相机模块期间，便携式装置可在缓冲器中对具有全分辨率的图像进行缓存。此外，当因快门按钮的输入而进行的图像捕捉(拍摄)被用户请求时，便携式装置可从通过缓冲器而缓存的帧图像选择捕捉请求时间点的帧图像，并作为后台对所选择的帧图像进行处理。具体地讲，本发明的这个示例性实施例可单独地(并行地)操作用于在拍摄选项被设置的拍摄方案下进行拍摄的拍摄功能(或应用)和用于对图像进行补偿的校正功能(或应用)，作为后台针对具有全分辨率的图像对校正进行处理，并通过拍摄应用直接返回到预览模式以将显示图像的预览作为预览而显示。通过校正应用的图像校正可作为后台功能进行，直到相应的任务被终止为止，即使在拍摄应用已终止之后，所述图像校正也可继续进行。
[0042]此外，根据本发明的这个示例性实施例，便携式装置可将针对作为后台进行的图像转换处理的进展度(例如，针对图像转换已进行了多少百分比的进展情况)或针对包括所有堆积任务中的多少任务被处理和剩余多少任务的图像转换的进展情况返回给用户。在这种情况下，当拍摄应用正在进行时，可在拍摄应用的执行画面上提供反馈。如果拍摄应用被终止，则可通过设置在给定的执行画面(例如，空闲画面、画廊画面和其他应用执行画面)的一个区域上的用户界面(UI)或图形UI (GUI)来提供返回。
[0043]同时，在下文中，具有全分辨率的图像(或静止图像)表示从相机模块获取的图像，并可表示针对通过图像传感器获取的图像的缩放未被实现的图像。此外，显示图像表示在预览模式下显示在显示单元上的图像，并可表示通过根据预设尺寸(或分辨率)对通过图像传感器获取的图像进行缩放而获得的图像。同时，捕捉图像表示将被作为静止图像而存储的图像，并可表示通过图像传感器获取的具有全分辨率的图像或通过将从图像传感器获取的图像缩放到预设尺寸而获得的显示图像。
[0044]此外，在本发明的这个示例性实施例中，图像缩放可表示