处理图像数据的方法及其装置的制造方法
【技术领域】
[0001]本公开涉及一种用于构成获得的图像的预处理方法和装置。
【背景技术】
[0002]当前，诸如电子设备(例如，移动设备、移动电话、智能电话和平板个人计算机(PC))之类的用户终端具有至少一个相机并且通过使用至少一个相机提供拍摄诸如静止图像或活动图像之类的图像的功能。
[0003]而且，电子设备具有增强的数据处理操作能力和增强的媒体构件(例如，相机等等)，并且同时提供多种媒体处理功能。
[0004]给出上述信息仅作为用于帮助对本公开的理解的背景信息。对于上述的任何部分是否对于本公开来说可以作为现有技术适用，不做确定，也不做断言。
【发明内容】
[0005]本公开的方面将解决上述问题和/或缺点以及提供至少如下所述的优点。因此，本公开的方面提供一种用于使用由电子设备拍摄的图像来提供多种媒体的方法和装置。
[0006]本公开的另一方面是提供一种使用由电子设备拍摄的图像提供多种媒体，以及向用户推荐或提供最佳媒体的方法和装置。
[0007]本公开的另一方面是提供一种使用由电子设备拍摄的图像提供各种媒体，以及迅速和有效地提供最佳媒体的方法和装置。
[0008]根据本公开的另一方面，提供一种处理由电子设备拍摄的图像的方法。所述方法包括:从拍摄的图像获得多个原始图像，分析所述多个原始图像，以及基于分析结果的至少一部分提供用于推荐图像处理模式的信息。
[0009]依照本公开的另一方面，提供一种图像处理装置。所述装置包括:图像传感器单元，被配置为生成并提供原始图像；控制器，被配置为分析多个原始图像，并且基于分析结果的至少一部分提供用于推荐图像处理模式的信息；和存储器单元，被配置为存储所述多个原始图像中的至少一个和通过对所述多个原始图像编码获得的编码数据。
[0010]依照本公开的另一方面，提供一种存储指令的存储介质。所述指令被设置为指令至少一个处理器执行处理由电子设备拍摄的图像的方法，所述方法包括:分析从拍摄的图像获得的多个原始图像，以及基于分析结果的至少一部分提供用于推荐图像处理模式的信息。
[0011]本公开的其它方面、优点和显著的特征将从以下结合附图的详细说明中对于本领域技术人员变得明显，其中，具体实施例中公开了本公开的各种实施例。
【附图说明】
[0012]本公开的一些实施例的上述及其他方面、特征和优点将从以下结合附图的详细说明中变得更加明显，附图中:
[0013]图1是示出根据本公开的实施例的图像处理方法的流程图；
[0014]图2是示出根据本公开的实施例的图像处理方法的框图；
[0015]图3示出根据本公开的实施例的在图像处理方法中使用的图像处理模式推荐信息的例子；
[0016]图4是示出根据本公开的另一实施例的、包括在图像处理方法中的处理的流程图；
[0017]图5是示出根据本公开的另一实施例的图像处理方法的框图；
[0018]图6是示出根据本公开的另一实施例的、包括在图像处理方法中的处理的流程图；
[0019]图7是示出根据本公开的另一实施例的图像处理方法的框图；
[0020]图8是示出根据本公开的另一实施例的图像处理方法的框图；
[0021]图9是示出根据本公开的另一实施例的图像处理方法的流程图；
[0022]图10是示出根据本公开的另一实施例的图像处理方法的框图；
[0023]图11是示出根据本公开的另一实施例的图像处理方法的流程图；
[0024]图12是示出根据本公开的另一实施例的图像处理方法的框图；
[0025]图13A、图13B和图13C是示出根据本公开的实施例的提供于图像处理方法中的用户界面的图；
[0026]图14是示出根据本公开的实施例的图像处理装置的框图；
[0027]图15是示出根据本公开的另一实施例的图像处理装置的框图；
[0028]图16是根据本公开的实施例的、图像处理方法和装置应用于其的电子设备的框图；
[0029]图17是根据本公开的实施例的、图像处理方法和装置应用于其的硬件设备的框图；和
[0030]图18是根据本公开的实施例的、图像处理方法和装置应用于其的编程模块的框图。
【具体实施方式】
[0031]提供以下参考附图的描述是为了帮助全面理解如权利要求及其等效物所定义的本公开的各种实施例。其包括帮助理解的各种具体细节但是这些都将被认为仅仅是示范性的。因此，本领域的技术人员将认识到，可以进行对这里描述的各种实施例的各种变化和修改而不脱离本公开的范围和精神。另外，众所周知的功能和构造的描述可能出于清楚和简要的目的而略去。
[0032]下面描述和权利要求中使用的术语和词语不局限于文字意义，而是，仅仅由发明人用来使得本公开被清楚和一致的理解。因此，对本领域技术人员明显的是，提供以下本公开的各种实施例的描述仅为了图解的目的，而非为了限制如权利要求及其等效物所定义的本公开的目的。
[0033]将理解的是，单数形式的“一”、“一个”、“该”包括复数指代，除非上下文清楚地指明不是如此。因而，例如，“一个元件表面”的指代包括至少一个这样的表面的指代。
[0034]可以用于本公开中的诸如“包括”和“可以包括”的表达表示存在所公开的功能、操作和组成元素并且不限制一个或多个附加功能、操作和组成元素。在本公开中，诸如“包括”和/或“具有”这样的术语可以被解释为表示特定特征、数字、步骤、操作、组成元素、元件或其组合，但是不可以解释为排除存在添加一个或多个其它特征、数字、步骤、操作、组成元素、元件或其组合的可能性。
[0035]此外，在本公开中，表达“和/或”包括相关联的所列词语的任意一个或全部组合。例如，表达“A和/或B”可以包括A，可以包括B，或可以包括A和B 二者。
[0036]虽然在本公开中诸如“第一”和“第二”这样的表达可以修改本公开的各种组成元素，但是它们不限制组成元素。例如，以上表达不限制元件的顺序和/或重要性。以上表达仅仅出于将一个元件与其它元件区分开而使用。例如，第一用户设备和第二用户设备指示不同的用户设备，虽然两者都是用户设备。例如，第一元件可以称为第二元件，类似地，第二元件也可以称为第一元件，而不脱离本公开的范围。
[0037]在元件称为“连接”或“接入”其它元件的情况下，应当理解，元件不仅直接连接或接入其它元件，而且在它们之间可以存在其它元件。同时，在元件称为“直接连接”或“直接接入”其它元件的情况下，应当理解没有元件居间。在本公开中使用的术语仅仅用于描述特定实施例，并且不旨在限制本本公开。单数形式旨在包括复数形式，除非上下文清楚地指示不是这样。
[0038]在下文中，将参照附图描述根据本公开的各种实施例的电子传感器。例如，包括根据本公开的实施例的电子传感器的相机模块，图像传感器可以安装在电子设备上。这样的电子设备可以被提供有相机、录像摄像机、网络相机、监控相机、医用照相机、高速相机、诸如3D相机的多相机等等。
[0039]根据本公开的各种实施例的电子设备可以包括具有通信功能的设备。例如，电子设备可以包括诸如智能相机、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、台式机PC、膝上型个人计算机、上网本计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MP3播放器、移动医学设备、可穿戴设备(例如，诸如电子眼镜、电子衣服、电子钟、腕表、电子手镯、电子项链、电子附件(即，应用附件)和智能手表之类的头戴设备(HMD))、家庭用具(例如，冰箱、空调、真空吸尘器、烤箱、微波炉、洗衣机、空气清洁器等等)、人工智能机器人、电视(TV)、数字光盘(DVD)播放器、音响、各种医用设备(例如，磁共振血管造影(MRA)、核磁共振机(MRI)、计算机断层(CT)、电影摄影机、超音速设备等等)、导航设备、全球定位系统(GPS)接收器、行车记录仪(EDR)、飞行数据记录器(FDR)、机顶盒、电视盒(例如，Samsung HomeSync、Apple TV或Google TV)、电子词典、车载娱乐信息设备、用于船运的电子设备(例如，用于船运的导航设备、回转罗盘等等)、航空电子、保密设备、电子衣服、电子钥匙、录像摄像机、游戏机、平板显示设备、电子相框、电子相册、包括通信功能的建筑/结构的家具或部分、电子板、电子签名接收设备、投影仪等等各种设备中的至少一个的组合。而且，对于本领域技术人员明显的是，根据本公开的各种实施例的电子设备不局限于以上描述的设备。
[0040]在下文中，在本公开的各种实施例中的术语“原始图像”用于将图像数据与编码数据区分开，并且指示图像数据没有被压缩或编码。而且，本公开的各种实施例中的“原始图像”可以包括RAW格式图像、YUV格式图像、RGB格式图像等等。本公开的各种实施例中的“原始图像”可以包括对其执行处理的图像，所述处理诸如伽玛校正、颜色滤波、排列内插、颜色矩阵、颜色校正、颜色改进等等。
[0041]图1是示出根据本公开的实施例的图像处理方法的流程图。
[0042]图2是示出根据本公开的实施例的图像处理方法的框图。
[0043]图3示出根据本公开的实施例的在图像处理方法中使用的图像处理模式推荐信息例子。
[0044]参照图1、图2和图3，根据本公开的实施例的图像处理方法可以包括:操作Sll获得多个原始图像，操作S12缩小原始图像，操作S13分析原始图像，并且操作S14基于分析结果提供用于推荐使用至少一个原始图像的图像处理模式的信息。
[0045]在操作Sll中，获得多个原始图像可以包括接收通过图像传感器提供的原始图像201的操作。图像传感器可以基于用户输入提供原始图像201。例如，因为生成用于拍摄的用户输入(例如，拍摄按钮上的输入、拍摄按钮区域上的触摸输入等等)，所以用于构成各种图像处理模式的图像的原始图像201被输入。原始图像201可以包括在从提供用户输入(例如，拍摄按钮上的输入、拍摄按钮区域上的触摸输入等等)的时间点开始的时间段(例如，一秒)期间，以时间间隔(例如，1/30秒)输入的多个原始图像(例如，30片)。
[0046]在操作S13中，原始图像的分析确定原始图像并且分析推荐图像处理模式需要的信息。例如，在操作S13中确定的信息可以包括人脸区域、面部表情、移动对象的大小、移动对象的位置、移动对象的运动、与包括在多个原始图像中的对象是否重叠相关联的信息以及多个原始图像的相关性当中的至少一个参数值(在下文中，称为“分析的参数值”)。
[0047]在操作S14中，基于在操作S13中确定的信息，用于推荐图像处理模式的信息的提供推荐在电子设备中提供的多个图像处理模式当中的至少一个图像处理模式。例如，操作S14将相对于多个原始图像中的每一个检测的参数值应用于电子设备中支持的图像处理模式。而且，确定用于图像处理模式的完备(completeness)程度。可以基于完备程度确定推荐的图像处理模式。例如，具有比阈值高的完备程度的图像处理模式可以被确定为推荐的图像处理模式，或具有相对较高完备程度的几个图像处理模式(例如，三个图像处理模式)可以被确定为推荐的图像处理模式。例如，图像处理模式可以包括最佳图像模式、最佳人脸模式、戏剧(drama)图像处理模式、运动图像处理模式等等。
[0048]在操作S14中，可以提供所获得的信息，例如，图像处理模式推荐信息203。图像处理模式推荐信息可以包括在操作Sl3和S14中确定的推荐的图像处理模式、与推荐的图像处理模式中使用的原始图像相关联的信息、与推荐的图像处理模式相应的预览图像以及用于选择推荐的图像处理模式的参数值中的至少一个(请参阅图3)。
[0049]操作S14中提供的图像处理模式推荐信息可以与已存储图像(例如，编码数据)关联存储，并且可以不同地应用于电子设备中运行的各种应用。
[0050]如上所述，操作S13检测相对于每个输入的原始图像的分析的参数值，并且操作S14将每个分析的参数值应用于电子设备中支持的图像处理模式以便确定推荐的图像处理模式。在操作S13和S14期间，大量资源和时间花费在图像处理上，导致担心电子设备的处理速度将变慢，电池消耗将提高，和/或大量时间将花费用于提供推荐的图像处理模式信息。
[0051]为了平稳地处理操作S13和S14，通过缩小原始图像201并且使用缩小的图像202来处理操作S13和S14。根据本公开的实施例的图像处理方法还可以包括缩小原始图像201的操作S12，其在操作