一种图像处理方法和电子设备的制造方法

一种图像处理方法和电子设备的制造方法
【专利摘要】本申请提供了一种图像处理方法和电子设备，该方法包括：对当前场景进行图像采集，获取到当前场景的参考图像；从参考图像中至少确定出满足第一特征条件的第一区域和满足第二特征条件的第二区域；分别将第一区域和第二区域作为参考图像的感兴趣区域ROI，计算参考图像的曝光参数，得到至少两组曝光参数；分别基于每组曝光参数对当前场景进行图像采集，得到至少两幅目标图像；对参考图像以及至少两幅目标图像进行图像融合，得到融合后的合成图像。该方法和电子设备可以使得合成的图像能够更好的反映出真实环境中的视觉效果。
【专利说明】
-种图像处理方法和电子设备
技术领域
[0001] 本申请设及图像处理技术领域，更具体的说是设及一种图像处理方法和电子设 备。
【背景技术】
[0002] 自然场景的亮度包含很大的动态范围，其动态范围可达亿级，然而自然场景的动 态范围已经大大超出现有数码采集设备的捕获能力，从而使得数码采集设备不能完全覆盖 真实场景的动态范围。目前可W通过生成高动态范围图像来进行动态范围的扩展。高动态 范围图像化DR，化曲-DynamiC Range)可W包含更多的图像范围和图像细节，能够更好的反 映出真实环境中的视觉效果。
[0003] 通过多曝光度方法可W生成高动态范围图像，多曝光度方法的基本思想是使用低 动态图像采集设备捕获一组曝光度不同的动态范围图像，然后将运组图形进行合成，W得 到高动态范围图像。然而目前获取运多张曝光度不同的图像时，都是随机调整图像采集装 置的曝光参数，并基于调整的曝光参数进行图像采集。然而不同场景下对曝光参数的需求 也是不同的，按照现有的方式摄取到的多幅图像无法涵盖真实场景的动态范围，从而使得 合成的高动态范围图像无法很好的反映出真实环境中的视觉效果。

【发明内容】

[0004] 有鉴于此，本申请提供了一种图像处理方法和电子设备，W使得合成的图像能够 更好的反映出真实环境中的视觉效果。
[0005] 为实现上述目的，本申请提供如下技术方案：
[0006] -种图像处理方法，包括：
[0007] 对当前场景进行图像采集，获取到所述当前场景的参考图像；
[000引从所述参考图像中至少确定出满足第一特征条件的第一区域和满足第二特征条 件的第二区域；
[0009] 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，计算 所述参考图像的曝光参数，得到至少两组曝光参数；
[0010] 分别基于每组所述曝光参数对所述当前场景进行图像采集，得到至少两幅目标图 像；
[0011] 对所述参考图像W及所述至少两幅目标图像进行图像融合，得到融合后的合成图 像。
[0012] 优选的，所述合成图像的信息量大于合成前的所述参考图像或者所述至少两幅目 标图像中的任一幅的信息量，或者所述合成图像的清晰度高于合成前的所述参考图像或者 所述至少两幅目标图像中的任一幅的清晰度。
[0013] 优选的，从所述参考图像中至少确定出满足第一特征条件的第一区域和满足第二 特征条件的第二区域，包括：
[0014] 计算所述参考图像的亮度直方图；
[0015] 根据所述参考图像的亮度直方图，从所述参考图像中至少确定出具有第一亮度值 的第一区域和具有第二亮度值的第二区域。
[0016] 优选的，所述根据所述参考图像的亮度直方图，从所述参考图像中至少确定出具 有第一亮度值的第一区域和具有第二亮度值的第二区域，包括：
[0017] 根据所述参考图像的亮度直方图，至少从所述参考图像中确定出具有最高亮度值 的第一区域和具有最低亮度值的第二区域。
[0018] 优选的，所述分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区 域，计算所述参考图像的曝光参数，包括：
[0019] 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，为所 述感兴趣区域ROI和所述参考图像中所述感兴趣区域ROI之外的其他区域分配不同的权重， 并依据所述感兴趣区域ROI和所述其他区域的权重，对所述参考图像进行曝光参数的加权 计算，其中，所述感兴趣区域的权重最大。
[0020] 优选的，当所述第一区域和第二区域分别为具有第一亮度值的第一区域和具有第 二亮度值的第二区域时，则所述依据所述感兴趣区域和所述其他区域的权重，对所述参考 图像进行曝光参数的加权计算，包括：
[0021] 依据所述感兴趣区域和所述其他区域的权重，计算所述参考图像的亮度平均值；
[0022] 基于所述亮度平均值和预设的亮度标准值，确定所述参考图像的曝光参数。
[0023] 优选的，所述曝光参数包括W下一种或多种：
[0024] 曝光时间或曝光增益。
[0025] 优选的，所述对所述参考图像W及所述至少两幅目标图像进行图像融合，包括：
[0026] 分别将所述参考图像和所述至少两幅目标图像划分为多个图像块，其中，同一坐 标位置处分别对应有来自于所述参考图像和所述至少两幅目标图像的至少=个不同的图 像块；
[0027] 从同一坐标位置处的至少=个不同图像块中，确定具有最大图像赌的候选图像 块；
[0028] 对于每一个所述候选图像块，确定所述候选图像块中各个像素点的融合权值，其 中，所述候选图像块的中屯、位置的像素点的融合权值最大，且所述候选图像块中像素点距 离所述中屯、位置的距离越大，像素点的融合权值越小；
[0029] 依据所述候选图像块中各个像素点的融合权值，将不同坐标位置处的所述候选图 像块进行融合，得到融合后的图像。
[0030] 另一方面，本申请实施例还提供了 一种电子设备，包括：
[0031] 图像采集器，用于对当前场景进行图像采集，获取到所述当前场景的参考图像；
[0032] 处理器，用于从所述参考图像中至少确定出满足第一特征条件的第一区域和满足 第二特征条件的第二区域;分别将所述第一区域和所述第二区域作为所述参考图像的感兴 趣区域R0I，计算所述参考图像的曝光参数，得到至少两组曝光参数；
[0033] 所述图像采集器还用于，分别基于所述处理器得到的每组所述曝光参数对所述当 前场景进行图像采集，得到至少两幅目标图像；
[0034] 所述处理器，还用于对所述参考图像W及所述至少两幅目标图像进行图像融合， 得到融合后的合成图像。
[0035] 优选的，所述处理器融合后的所述合成图像的信息量大于合成前的所述参考图像 或者所述至少两幅目标图像中的任一幅的信息量，或者所述合成图像的清晰度高于合成前 的所述参考图像或者所述至少两幅目标图像中的任一幅的清晰度。
[0036] 优选的，所述处理器从所述参考图像中至少确定出满足第一特征条件的第一区域 和满足第二特征条件的第二区域，具体为，计算所述参考图像的亮度直方图；根据所述参考 图像的亮度直方图，从所述参考图像中至少确定出具有第一亮度值的第一区域和具有第二 亮度值的第二区域。
[0037] 优选的，所述处理器根据所述参考图像的亮度直方图，从所述参考图像中至少确 定出具有第一亮度值的第一区域和具有第二亮度值的第二区域，具体为：
[0038] 根据所述参考图像的亮度直方图，至少从所述参考图像中确定出具有最高亮度值 的第一区域和具有最低亮度值的第二区域。
[0039] 优选的，所述处理器分别将所述第一区域和所述第二区域作为所述参考图像的感 兴趣区域，计算所述参考图像的曝光参数，具体为：
[0040] 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，为所 述感兴趣区域ROI和所述参考图像中所述感兴趣区域ROI之外的其他区域分配不同的权重， 并依据所述感兴趣区域ROI和所述其他区域的权重，对所述参考图像进行曝光参数的加权 计算，其中，所述感兴趣区域的权重最大。
[0041 ]优选的，当所述第一区域和第二区域分别为具有第一亮度值的第一区域和具有第 二亮度值的第二区域时，则所述处理器依据所述感兴趣区域和所述其他区域的权重，对所 述参考图像进行曝光参数的加权计算，具体为：
[0042] 依据所述感兴趣区域和所述其他区域的权重，计算所述参考图像的亮度平均值；
[0043] 基于所述亮度平均值和预设的亮度标准值，确定所述参考图像的曝光参数。
[0044] 优选的，所述曝光参数包括W下一种或多种：
[0045] 曝光时间或曝光增益。
[0046] 优选的，所述处理器对所述参考图像W及所述至少两幅目标图像进行图像融合， 具体为：
[0047] 分别将所述参考图像和所述至少两幅目标图像划分为多个图像块，其中，同一坐 标位置处分别对应有来自于所述参考图像和所述至少两幅目标图像的至少=个不同的图 像块；
[0048] 从同一坐标位置处的至少=个不同图像块中，确定具有最大图像赌的候选图像 块；
[0049] 对于每一个所述候选图像块，确定所述候选图像块中各个像素点的融合权值，其 中，所述候选图像块的中屯、位置的像素点的融合权值最大，且所述候选图像块中像素点距 离所述中屯、位置的距离越大，像素点的融合权值越小；
[0050] 依据所述候选图像块中各个像素点的融合权值，将不同坐标位置处的所述候选图 像块进行融合，得到融合后的图像。
[0051] 经由上述的技术方案可知，在获取到当前场景的参考图像之后，并不是按照随机 生成的曝光参数再对当前场景进行图像采集，而是需要对该参考图像进行分析，并分别W 该参考图像中满足不同特征条件的区域作为感兴趣区域，重新确定参考图像的曝光参数， 运样，基于确定出的至少两组曝光参数对当前场景进行采集后，采集到至少两组曝光参数 也更能呈现出当前场景在不同方面的效果，从而可W使得合成后的图像能够包含当前场景 更多的信息量，也更能反映出真实环境中的视觉效果。
【附图说明】
[0052] 为了更清楚地说明本申请实施例的技术方案，下面将对实施例描述中所需要使用 的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域 普通技术人员来讲，在不付出创造性劳动的前提下，还可W根据提供的附图获得其他的附 图。
[0053] 图1示出了本申请一种图像处理方法一个实施例的流程示意图；
[0054] 图2示出了本申请一种图像处理方法又一个实施例的流程示意图；
[0055] 图3示出了本申请一种图像处理方法一个应用场景的示意图；
[0056] 图4示出了本申请一种图像处理方法又一个实施例的结构示意图。
[0057] 图5示出了本申请一种图像处理方法进行图像融合的一种可能的实现流程示意 图；
[0058] 图6示出了本申请一种电子设备一个实施例的结构示意图。
【具体实施方式】
[0059] 下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完 整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于 本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他 实施例，都属于本申请保护的范围。
[0060] 参见图1，其示出了本申请一种图像处理方法一个实施例的流程示意图，本实施例 的方法可W应用于任意具有图像采集功能的电子设备，如，具有摄像头的智能手机、平板电 脑W及计算机等等。
[0061] 本实施例的方法可W包括：
[0062] 101，对当前场景进行图像采集，获取到该当前场景的参考图像。
[0063] 其中，该参考图像可W理解为对图像采集单元中曝光参数进行调整之前采集到的 图像;或者是按照图像采集单元预先设定的曝光参数或者是基于自动曝光策略确定的曝光 参数，而采集到的该场景中的图像。
[0064] 可W理解的是，由于后续依据当前对场景进行采集到的图像，对图像采集单元的 曝光参数进行调整，W重新获取当前场景的图像，因此，为了便于与后续调整曝光参数后采 集到的图像进行区分，将该步骤101中采集到的图像称为参考图像。
[0065] 102,从该参考图像中至少确定出满足第一特征条件的第一区域和满足第二特征 条件的第二区域。
[0066] 其中，第一区域和第二区域不同，该第一特征条件与第二特征条件不同。
[0067] 可W理解的是，图像具有不同的特征形态，图像的不同特征可W反映出场景中的 不同的视觉效果。为了能够更好的获取到反映当前场景中动态范围，本申请实施例对该参 考图像的特征进行分析，W从参考图像中找出至少两个具有满足不同特征条件的区域，为 了便于区分，可W将参考图像划分出的任意两个具有不同特征条件的区域称为第一区域和 第二区域。其中，该第一区域和第二区域不同，且该第一区域和第二区域所满足的特征条件 会有所不同。
[0068] 参考图像的特征可W有多种，如特征可W是参考图像的色溫、亮度等。
[0069] 如，当依据参考图像的色溫确定至少两个区域时，则可W确定满足第一色溫值或 者第一色溫范围的第一区域，W及满足第二色溫值或者第二色溫范围的第二区域。
[0070] 相对应的，当依据参考图像的亮度确定至少两个区域时，则可W确定满足第一亮 度值或者第一亮度范围的第一区域，W及满足第二亮度值或者第二亮度范围的第二区域。
[0071] 103,分别将该第一区域和该第二区域作为该参考图像的感兴趣区域，计算该参考 图像的曝光参数，得到至少两组曝光参数。
[0072] 感兴趣区域(R0I ,Region Of Interest)是指图像中选择出的，对图像分析所需重 点关注的区域，在本申请实施例中，该感兴趣区域可W也可W理解为该参考图像中作为需 要重点突出特征的区域。将步骤102中确定出的区域作为感兴趣区域后，该感兴趣区域的图 像特征也是需要在后续采集到的图像中呈现出的特征效果。其中，该曝光参数可W与现有 的图像融合中所设及的曝光参数相同，如该曝光参数可W曝光时间、曝光增益等参数中的 一种或多种。
[0073] 将步骤102中确定出的任意一个区域作为感兴趣区域时，均可W计算出相应的曝 光参数，运样至少两个区域分别作为感兴趣区域后，会得到至少两组曝光参数。
[0074] 104,分别基于每组曝光参数对该当前场景进行图像采集，得到至少两幅目标图 像。
[0075] 具体的，依次将每组曝光参数设置为图像采集单元的图像采集，并获取图像采集 单元在当前配置的曝光参数下所采集到的图像。
[0076] 由于目标图像与参考图像都是对当前场景进行摄取所得到的图像，因此目标图像 与参考图像中所包含的对象相同，都是当前场景内的所有物品或背景等对象，只不过由于 曝光参数不同，同一对象在目标图像和参考图像中所呈现出的图像效果会有所不同。
[0077] 为了便于区分，将调整曝光参数后所采集到的该当前场景的图像称为目标图像。 由于分别在不同组曝光参数下进行图像采集，因此，采集到的目标图像的数量与步骤103中 获取到的曝光参数的组数相同。
[0078] 可W理解的是，对于任意一组曝光参数而言，由于是W满足某种特征条件的区域 作为参考图像的分析重点而计算出的该组曝光参数，因此，与参考图像相比，基于该组曝光 参数对该当前场景进行图像采集所采集到的目标图像更能满足该种特征条件。由此可知， 与参考图像相比，运多幅目标图像更能处于某方面的特征，从而使得后续融合出的图像具 有更大的动态范围，也能够反映出真实场景的视觉效果。
[0079] 例如，W从参考图像中确定出具有不同亮度值的区域为例，如果W图像中具有较 高亮度值的区域作为感兴趣区域，并计算出一组曝光参数后，W该曝光参数设置作为图像 采集单元的曝光参数进行图像采集，则采集到的目标图像的亮度值应该大于该参考图像的 亮度值。
[0080] 105,对参考图像W及该至少两幅目标图像进行图像融合，得到融合后的合成图 像。
[0081] 对运参考图像W及目标图像进行融合的过程可W与现有的图像融合过程相似，在 此不再寶述。
[0082] 可W理解的是，融合后所得到的该合成图像的信息量大于合成前的该参考图像或 者该至少两幅目标图像中的任一幅的信息量;或者是，该融合后的合成图像的清晰度高于 该合成前的参考图像或者该至少两幅目标图像中的任一幅的清晰度。
[0083] 可选的，在本实施例中可W是将该参考图像和至少两幅目标图像进行融合，生成 高动态范围图像，从而使得该高动态范围图像比参考图像和目标图像具有更大的动态范 围，能够更为真实的反映出真实场景中的视觉效果。
[0084] 由W上可知，在本申请实施例中，在获取到当前场景的参考图像之后，并不是按照 随机生成的曝光参数再对当前场景进行图像采集，而是需要对该参考图像进行分析，并分 别W该参考图像中满足不同特征条件的区域作为感兴趣区域，重新确定参考图像的曝光参 数，运样，基于确定出的至少两组曝光参数对当前场景进行采集后，采集到至少两组曝光参 数也更能呈现出当前场景在不同方面的效果，从而可W使得合成后的图像能够包含当前场 景更多的信息量，也更能反映出真实环境中的视觉效果。
[0085] 可W理解的是，在本申请实施例中，W参考图像中某个区域作为感兴趣区域计算 该参考图像的曝光参数的方式可W有多种。
[0086] 为了便于理解W-种优选的方式进行介绍。在确定出当前作为感兴趣区域的区域 之后，为当前的该感兴趣区域W及参考图像中感兴趣区域之外的其他区域分配权重，同时， 感兴趣区域的权重大于其他区域的权重。然后，可W依据该感兴趣区域和该其他区域的权 重，对该参考图像进行曝光参数的加权计算。
[0087] 例如，W第一区域作为感兴趣区域时，在分配权重时，可W分配第一区域的权重比 第二区域的权重大，然后基于第一区域和第二区域的权重，对参考图像进行曝光参数的加 权计算，得到一组曝光参数。当然，在实际应用中，参考图像中除了第一区域和第二区域之 夕h还可W包括不属于第一区域和第二区域的第=区域，则此时可W依据为第一区域、第二 区域W及第=区域分配权重，其中，第一区域的权重最大，然后基于运=个区域的权重，对 参考图像进行曝光参数的加权计算。
[0088] 需要说明的是，确定出各个区域的权重之后，对参考图像进行曝光参数的加权计 算的过程可W与现有的任意一种计算曝光参数的过程相似，如，基于某个特征确定至少两 个第一区域和第二区域时，可W预先设定该特征的预设特征值，然后根据当前为不同区域 所分配的权重计算参考图像中的特征计算值，并将特征计算值与该预设的预设特征进行收 敛，通过不断调整权重并进行收敛，最终确定曝光参数。
[0089] 为了便于理解W基于参考图像的亮度值确定第一区域和第二区域为例，对本申请 实施例的图像处理方法进行介绍。
[0090] 参见图2,其示出了本申请一种图像处理方法另一个实施例的结构示意图，本实施 例的方法可W包括：
[0091] 201，对当前场景进行图像采集，获取到该当前场景的参考图像。
[0092] 202，计算该参考图像的亮度直方图。
[0093] 计算图像直方图的方式可W与现有的方式相似，在此不再寶述。
[0094] 203,根据该参考图像的亮度直方图，从参考图像中至少确定出具有第一亮度值的 第一区域和具有第二亮度值的第二区域。
[0095] 根据参考图像的亮度直方图，可W确定不同的亮度阔值或者阔值范围，根据确定 出的亮度阔值或阔值范围可W从参考图像中确定出满足不同亮度阔值或阔值范围的区域， 从而至少确定出第一区域和第二区域，该第一区域和第二区域的亮度值不同。
[0096] 可W理解的是，参考图像中亮度差异越大的区域越能够反映出该参考图像的亮度 特征，而分别将亮度差异较大的两个区域作为感兴趣区域来计算曝光参数后，基于该曝光 参数对当前场景进行图像采集所采集到的图像也能包含当前场景中更多的视觉效果，因此 可选的，可W根据参考图像的亮度直方图，至少从该参考图像中确定出具有最高亮度值的 第一区域和具有最低亮度值的第二区域。也就是说，第一区域的亮度值大于该参考图像中 其他区域的亮度值或者亮度平均值，第二区域的亮度值小于该参考图像中其他区域的亮度 值或亮度平均值。
[0097] 204,分别将该第一区域和该第二区域作为该参考图像的感兴趣区域，计算该参考 图像的曝光参数，得到至少两组曝光参数。
[0098] 具体的，可W感兴趣区域和参考图像中感兴趣区域之外的其他区域分配权重，并 使得感兴趣区域的权重大于其他区域的权重。然后，依据感兴趣区域和参考图像中该感兴 趣区域之外的该其他区域的权重，计算该参考图像的亮度平均值。基于该亮度平均值和预 设的亮度标准值，确定该参考图像的曝光参数。
[0099] 205,分别基于每组曝光参数对该当前场景进行图像采集，得到至少两幅目标图 像。
[0100] 206,对参考图像W及该至少两幅目标图像进行图像融合，得到融合后的合成图 像。
[0101] 其中，该步骤205可W与前面实施例中的相关介绍，在此不再寶述。
[0102] 为了便于理解W参考图像的亮度分布来调整曝光参数，下面结合一种应用场景， 对本申请实施例的图像处理方法进行详细介绍。如图3应用本申请的图像处理方法的一种 应用场景示意图。图4示出了在该图3的应用场景下，该图像处理方法的一种可能的实现流 程。
[0103] 如图4,该图像处理方法可W包括：
[0104] 401，按照图像采集单元预设的自动曝光参数对当前场景进行图像采集，获取到该 当前场景的参考图像。
[0105] 402,计算该参考图像的亮度直方图。
[0106] 403,根据该参考图像的亮度直方图，从参考图像中确定出具有最高亮度值的第一 区域和具有最低亮度值的第二区域。
[0107] 结合图3进行介绍，图3最左端的图像表征参考图像(空白箭头的起始端所对应的 图像)的亮度分布，由图可见该图像被划分为多个小方格，其中灰色方格所构成的区域表示 参考图像的第一区域，即参考图像中亮度值最低的暗区；黑色方格所构成的区域表示参考 图像的第二区域，即参考图像中亮度值最高的亮度。由图3可见，在实际应用中，亮度最高的 区域可W是由多个相邻像素点构成的区域，也可W是两个或多个独立的子区域，每个子区 域由多个像素点构成，运两个或多个子区域可W被第二区域或其他区域隔开而不相邻;相 应的，第二区域可W是由多个相连的像素点构成的区域，也可W是由两个或多个独立的子 区域构成，子区域之间可W不相邻。
[0108] 404,将第一区域作为感兴趣区域，为第一区域分配第一权重，为第二区域分配第 二权重，为参考图像中第一区域和第二区域之外的第=区域分配第=权重，并执行步骤 405；
[0109]其中，第一权重大于第二权重和第=权重，且第二权重小于第=权重。
[0110] 405,依据第一区域的第一权重、第二区域的第二权重W及第=区域的第=权重， 对参考图像进行亮度加权计算，得到参考图像的亮度的加权平均值，并基于该亮度的加权 平均值和预设的亮度标准值，确定参考图像的一组曝光参数。
[0111] 可W理解的是，基于亮度的加权平均值和预设的亮度标准值确定曝光参数实际上 是一个收敛过程，在该过程中可能需要不断调整各个区域的权重，但是各个区域的权重之 间的关系满足前面的限定关系，直至最终收敛得到曝光参数。
[0112] 具体的，可W基于如下原理，来确定曝光参数：
[0113] 在高亮区域的图像细节可W采取短曝光时间或低增益来保持。
[0114] 406,将第二区域作为感兴趣区域，为第一区域分配第四权重，为第二区域分配第 五权重，为参考图像中第一区域和第二区域之外的第=区域分配第六权重，并执行步骤 407；
[0115] 其中，第五权重大于第四权重和第六权重，且第四权重小于第六权重。
[0116] 407,依据第一区域的第四权重、第二区域的第五权重W及第=区域的第六权重， 对参考图像进行亮度加权计算，得到参考图像的亮度的加权平均值，并基于该亮度的加权 平均值和预设的亮度标准值，确定参考图像的一组曝光参数。
[0117] 可W理解的是，该步骤406和407同样是一个不断迭代，并实现收敛W最终得到曝 光参数的过程。
[0118] 具体的，可W基于如下原理，来确定曝光参数：
[0119] 延长曝光时间或给予更高的增益，W使暗处或阴影区域的测量值更可靠。
[0120] 408,分别基于每组曝光参数对该当前场景进行图像采集，得到两幅目标图像。
[0121] 结合图3可知，本申请实施例得到两组曝光参数后，基于步骤405中的确定出的曝 光参数来设定图像采集单元并进行图像采集，从而可W得到图3中亮度较高的目标图像，如 图3中竖直排列的S幅图像中的最上面的一幅图像，即黑色箭头指向的图像；同时，基于步 骤407中确定出的曝光参数设定图像采集单元的参数并进行图像采集，可W得到图像中亮 度较低的目标图像，如图3中竖直排列的=幅图像中最下面的一幅图像，即浅灰色箭头指向 的目标。通过对比竖直排列的运=幅图像可W比对出亮度的不同变化。
[0122] 409,对参考图像W及该两幅目标图像进行图像融合，得到融合后的合成图像。
[0123] 如图3,将竖直排列的=幅图像进行融合得到最右端的合成图像，合成图像的信息 量比中间运=幅图像更为丰富，清晰度也较高。可选的，该合成图像可W为高动态范围图 像，由图3也可W看出该高动态范围图像的图像细节W及范围更多，从而更能反映当前场景 的视觉效果。
[0124] 可W理解的是，在本申请W上任意一个实施例中，将参考图像与目标图像进行融 合的过程可W与现有方式相似。
[0125] 可选的，为了提高融合后的合成图像的合成效果，在进行图像融合时，需要从参考 图像W及至少两幅图像中同一位置处信息量最丰富的区域进行融合。同时，为了避免图像 之间的不连续，需要平滑的将各个区域拼接在一起。参见图5,其示出了本申请一种图像处 理方法中将参考图像与目标图像进行融合的一种可能的实现流程示意图，该过程可W包 括：
[0126] 501，分别将参考图像和至少两幅目标图像划分为多个图像块。
[0127] 其中，将每幅图像划分出的图像块的数量相同，具体将图像划分为多少个图像块 具体可W根据需要设定，如，将图像划分成d*d个图像块，d的数量可W根据需要设定，如可 W划分为3*3个图像块。
[0128] 可W理解的是，将参考图像和该至少两幅目标图像进行划分之后，同一坐标位置 处分别对应有来自于该参考图像和该至少两幅目标图像的至少=个不同的图像块。其中， 该坐标位置处也可W理解为同一坐标序号处。如，分别将参考图像和目标图像划分成3*3个 图像块，那么就得到处于九个坐标序号对应的九个图像块，如，坐标序号为横向第i且纵向 第k个，i从1到3，k从巧Ij3。那么坐标序号为横向第i且纵向第k个处的图像块具有至少S个， 且运至少=个分别来自参考图像和至少两个目标图像。
[0129] 502,从同一坐标位置处的至少=个不同图像块中，确定具有最大图像赌的候选图 像块。
[0130] 其中，图像赌的计算方式与现有的方式相同。图像块的图像赌是指该图像块在该 图像块所属的源图像中的图像赌。
[0131] 为了便于理解，下面介绍一种图像赌的计算方式，图像赌Ec的计算公式如下：
[01371
(公式一）；
[0133] 其中，i表征像素亮度，i的取值从0-255;pi表示亮度i在图像块中出现的概率。
[0134] 503,对于每一个候选图像块，确定该候选图像块中各个像素点的融合权值。
[0135] 其中，按照如下原则确定候选融合权值：
[0136] 图像块的中屯、位置的像素点的融合权值最大，且候选图像块中像素点距离该中屯、 位置的距离越大，该像素点的融合权值越小。如，图像块的中屯、像素具有最大权值，该图像 块中其他像素的权值等比于该像素与图像中屯、的距离。
[0137] 在本实施例中，为了避免图像块之间的不连续性，实现平滑融合，采用W图像块中 屯、为基准的单调递减函数作为融合权值，相应的图像颜色也乘W该融合权值。
[0138] 504,依据该候选图像块中各个像素点的融合权值，将不同坐标位置处的该候选图 像块进行融合，得到融合后的图像。
[0139] 确定出各个候选图像块的融合权值之后，基于融合权值将不同坐标位置处的候选 图像块进行融合的过程也可W有多种。
[0140] 为了便于理解，W-种可能的实现方式对本申请实施例中确定融合权重W及图像 融合的过程进行介绍。
[0141] 假设分别将参考图像和目标图像划分为drXdc个图像块。假设i和k分别代表候选 图像块所在的坐标序号，即，候选图像块处于横向第i个且纵向第k个的坐标序号位置，其 中，i从巧ljdr，k从巧Ijdc。同时，Ilk代表参考图像和至少两幅目标图像中，该候选图像块化所 属的源图像，换言之，Iik代表该候选图像块化具有最大赌的图像。则最终输出的融合后图像 可通过下而/八井夫志.
W42] (公式二）
[0143] 其中，Wik(x,y)是图像块ik中坐标位置(x,y)的融合权值；Iik(x,y)表示图像块ik 在坐标位置(x，y)的向量值。
[0144] 其中，融合权值应被定义在整个图像域，归一化表示为：
[0145] (公式王）
[0146] 其中，山和d。分别是参考图像或目标图像在竖直方向和水平方向被划分出的图像 块数目，如，图像被切换为3*3个图像块，则山和山均为3。
[0147] 其中，GikU, y)为图像块化中坐标(x，y)处的高斯核函数，其可W表示为：
[014 引
(公式四）
[0149] 其中，XikW及yik分别表示候选图像块ik的中屯、位置的横轴和纵轴坐标值;O表示 预设的方差，其预先根据算法调试得到；
[0150] 另一方面，本申请实施例还提供了一种电子设备，W支持如上图像处理方法的执 行。
[0151] 参见图6,其示出了本申请一种电子设备一个实施例的结构示意图，本实施例的电 子设备可W包括:图像采集器601和处理器602。
[0152] 其中，图像采集器601，用于对当前场景进行图像采集，获取到所述当前场景的参 考图像；
[0153] 处理器602,用于从所述参考图像中至少确定出满足第一特征条件的第一区域和 满足第二特征条件的第二区域;分别将所述第一区域和所述第二区域作为所述参考图像的 感兴趣区域R0I，计算所述参考图像的曝光参数，得到至少两组曝光参数；
[0154] 所述图像采集器601还用于，分别基于所述处理器得到的每组所述曝光参数对所 述当前场景进行图像采集，得到至少两幅目标图像；
[01W] 所述处理器602,还用于对所述参考图像W及所述至少两幅目标图像进行图像融 合，得到融合后的合成图像。
[0156] 其中，该图像采集器可W为电子设备的摄像头等具备图像采集功能的部件。
[0157] 可W理解的是，该电子设备还可W具有存储器，存储器用于存储该处理器运行所 需的程序W及数据。
[0158] 当然，该电子设备还可W包括通信总线，该通信总线用于连接存储器、处理器和图 像采集器等部件。
[0159] 可选的，所述处理器融合后的所述合成图像的信息量大于合成前的所述参考图像 或者所述至少两幅目标图像中的任一幅的信息量，或者所述合成图像的清晰度高于合成前 的所述参考图像或者所述至少两幅目标图像中的任一幅的清晰度。
[0160] 可选的，所述处理器从所述参考图像中至少确定出满足第一特征条件的第一区域 和满足第二特征条件的第二区域，具体为，计算所述参考图像的亮度直方图；根据所述参考 图像的亮度直方图，从所述参考图像中至少确定出具有第一亮度值的第一区域和具有第二 亮度值的第二区域。
[0161] 可选的，所述处理器根据所述参考图像的亮度直方图，从所述参考图像中至少确 定出具有第一亮度值的第一区域和具有第二亮度值的第二区域，具体为：
[0162] 根据所述参考图像的亮度直方图，至少从所述参考图像中确定出具有最高亮度值 的第一区域和具有最低亮度值的第二区域。
[0163] 可选的，所述处理器分别将所述第一区域和所述第二区域作为所述参考图像的感 兴趣区域，计算所述参考图像的曝光参数，具体为：
[0164] 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，为所 述感兴趣区域ROI和所述参考图像中所述感兴趣区域ROI之外的其他区域分配不同的权重， 并依据所述感兴趣区域ROI和所述其他区域的权重，对所述参考图像进行曝光参数的加权 计算，其中，所述感兴趣区域的权重最大。
[0165] 可选的，当所述第一区域和第二区域分别为具有第一亮度值的第一区域和具有第 二亮度值的第二区域时，则所述处理器依据所述感兴趣区域和所述其他区域的权重，对所 述参考图像进行曝光参数的加权计算，具体为：
[0166] 依据所述感兴趣区域和所述其他区域的权重，计算所述参考图像的亮度平均值；
[0167] 基于所述亮度平均值和预设的亮度标准值，确定所述参考图像的曝光参数。
[0168] 可选的，所述曝光参数包括W下一种或多种：
[0169] 曝光时间或曝光增益。
[0170] 可选的，所述处理器对所述参考图像W及所述至少两幅目标图像进行图像融合， 具体为：
[0171] 分别将所述参考图像和所述至少两幅目标图像划分为多个图像块，其中，同一坐 标位置处分别对应有来自于所述参考图像和所述至少两幅目标图像的至少=个不同的图 像块；
[0172] 从同一坐标位置处的至少=个不同图像块中，确定具有最大图像赌的候选图像 块；
[0173] 对于每一个所述候选图像块，确定所述候选图像块中各个像素点的融合权值，其 中，所述候选图像块的中屯、位置的像素点的融合权值最大，且所述候选图像块中像素点距 离所述中屯、位置的距离越大，像素点的融合权值越小；
[0174] 依据所述候选图像块中各个像素点的融合权值，将不同坐标位置处的所述候选图 像块进行融合，得到融合后的图像。
[0175] 对于装置实施例而言，由于其基本相应于方法实施例，所W相关之处参见方法实 施例的部分说明即可。W上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件 说明的单元可W是或者也可W不是物理上分开的，作为单元显示的部件可W是或者也可W 不是物理单元，即可W位于一个地方，或者也可W分布到多个网络单元上。可W根据实际的 需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不 付出创造性劳动的情况下，即可W理解并实施。
[0176] 在本发明所提供的几个实施例中，应该理解到，所掲露的装置和方法，在没有超过 本申请的精神和范围内，可W通过其他的方式实现。当前的实施例只是一种示范性的例子， 不应该作为限制，所给出的具体内容不应该限制本申请的目的。另外，所描述系统和方法W 及不同实施例的示意图，在不超出本申请的范围内，可W与其它系统，模块，技术或方法结 合或集成。另一点，所显示或讨论的相互之间的禪合或直接禪合或通信连接可W是通过一 些接口，装置或单元的间接禪合或通信连接，可W是电性，机械或其它的形式。
[0177] W上所述仅是本发明的【具体实施方式】，应当指出，对于本技术领域的普通技术人 员来说，在不脱离本发明原理的前提下，还可W做出若干改进和润饰，运些改进和润饰也应 视为本发明的保护范围。
【主权项】
1. 一种图像处理方法，包括： 对当前场景进行图像采集，获取到所述当前场景的参考图像； 从所述参考图像中至少确定出满足第一特征条件的第一区域和满足第二特征条件的 第二区域； 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，计算所述 参考图像的曝光参数，得到至少两组曝光参数； 分别基于每组所述曝光参数对所述当前场景进行图像采集，得到至少两幅目标图像； 对所述参考图像以及所述至少两幅目标图像进行图像融合，得到融合后的合成图像。2. 根据权利要求1所述的方法，其特征在于，所述合成图像的信息量大于合成前的所述 参考图像或者所述至少两幅目标图像中的任一幅的信息量，或者所述合成图像的清晰度高 于合成前的所述参考图像或者所述至少两幅目标图像中的任一幅的清晰度。3. 根据权利要求1所述的方法，其特征在于，从所述参考图像中至少确定出满足第一特 征条件的第一区域和满足第二特征条件的第二区域，包括： 计算所述参考图像的亮度直方图； 根据所述参考图像的亮度直方图，从所述参考图像中至少确定出具有第一亮度值的第 一区域和具有第二亮度值的第二区域。4. 根据权利要求3所述的方法，其特征在于，所述根据所述参考图像的亮度直方图，从 所述参考图像中至少确定出具有第一亮度值的第一区域和具有第二亮度值的第二区域，包 括： 根据所述参考图像的亮度直方图，至少从所述参考图像中确定出具有最高亮度值的第 一区域和具有最低亮度值的第二区域。5. 根据权利要求1至4任一项所述的方法，其特征在于，所述分别将所述第一区域和所 述第二区域作为所述参考图像的感兴趣区域，计算所述参考图像的曝光参数，包括： 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，为所述感 兴趣区域ROI和所述参考图像中所述感兴趣区域ROI之外的其他区域分配不同的权重，并依 据所述感兴趣区域ROI和所述其他区域的权重，对所述参考图像进行曝光参数的加权计算， 其中，所述感兴趣区域的权重最大。6. 根据权利要求5所述的方法，其特征在于，当所述第一区域和第二区域分别为具有第 一亮度值的第一区域和具有第二亮度值的第二区域时，则所述依据所述感兴趣区域和所述 其他区域的权重，对所述参考图像进行曝光参数的加权计算，包括： 依据所述感兴趣区域和所述其他区域的权重，计算所述参考图像的亮度平均值； 基于所述亮度平均值和预设的亮度标准值，确定所述参考图像的曝光参数。7. 根据权利要求1至4任一项所述的方法，其特征在于，所述曝光参数包括以下一种或 多种： 曝光时间或曝光增益。8. 根据权利要求1所述的方法，其特征在于，所述对所述参考图像以及所述至少两幅目 标图像进行图像融合，包括： 分别将所述参考图像和所述至少两幅目标图像划分为多个图像块，其中，同一坐标位 置处分别对应有来自于所述参考图像和所述至少两幅目标图像的至少三个不同的图像块； 从同一坐标位置处的至少三个不同图像块中，确定具有最大图像熵的候选图像块； 对于每一个所述候选图像块，确定所述候选图像块中各个像素点的融合权值，其中，所 述候选图像块的中心位置的像素点的融合权值最大，且所述候选图像块中像素点距离所述 中心位置的距离越大，像素点的融合权值越小； 依据所述候选图像块中各个像素点的融合权值，将不同坐标位置处的所述候选图像块 进行融合，得到融合后的图像。9. 一种电子设备，包括： 图像采集器，用于对当前场景进行图像采集，获取到所述当前场景的参考图像； 处理器，用于从所述参考图像中至少确定出满足第一特征条件的第一区域和满足第二 特征条件的第二区域;分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区 域ROI，计算所述参考图像的曝光参数，得到至少两组曝光参数； 所述图像采集器还用于，分别基于所述处理器得到的每组所述曝光参数对所述当前场 景进行图像采集，得到至少两幅目标图像； 所述处理器，还用于对所述参考图像以及所述至少两幅目标图像进行图像融合，得到 融合后的合成图像。10. 根据权利要求9所述的电子设备，其特征在于，所述处理器融合后的所述合成图像 的信息量大于合成前的所述参考图像或者所述至少两幅目标图像中的任一幅的信息量，或 者所述合成图像的清晰度高于合成前的所述参考图像或者所述至少两幅目标图像中的任 一幅的清晰度。11. 根据权利要求9所述的电子设备，其特征在于，所述处理器从所述参考图像中至少 确定出满足第一特征条件的第一区域和满足第二特征条件的第二区域，具体为，计算所述 参考图像的亮度直方图；根据所述参考图像的亮度直方图，从所述参考图像中至少确定出 具有第一亮度值的第一区域和具有第二亮度值的第二区域。12. 根据权利要求11所述的电子设备，其特征在于，所述处理器根据所述参考图像的亮 度直方图，从所述参考图像中至少确定出具有第一亮度值的第一区域和具有第二亮度值的 第二区域，具体为： 根据所述参考图像的亮度直方图，至少从所述参考图像中确定出具有最高亮度值的第 一区域和具有最低亮度值的第二区域。13. 根据权利要求9至12任一项所述的电子设备，其特征在于，所述处理器分别将所述 第一区域和所述第二区域作为所述参考图像的感兴趣区域，计算所述参考图像的曝光参 数，具体为： 分别将所述第一区域和所述第二区域作为所述参考图像的感兴趣区域ROI，为所述感 兴趣区域ROI和所述参考图像中所述感兴趣区域ROI之外的其他区域分配不同的权重，并依 据所述感兴趣区域ROI和所述其他区域的权重，对所述参考图像进行曝光参数的加权计算， 其中，所述感兴趣区域的权重最大。14. 根据权利要求13所述的电子设备，其特征在于，当所述第一区域和第二区域分别为 具有第一亮度值的第一区域和具有第二亮度值的第二区域时，则所述处理器依据所述感兴 趣区域和所述其他区域的权重，对所述参考图像进行曝光参数的加权计算，具体为： 依据所述感兴趣区域和所述其他区域的权重，计算所述参考图像的亮度平均值； 基于所述亮度平均值和预设的亮度标准值，确定所述参考图像的曝光参数。15. 根据权利要求9至12任一项所述的电子设备，其特征在于，所述曝光参数包括以下 一种或多种： 曝光时间或曝光增益。16. 根据权利要求9所述的电子设备，其特征在于，所述处理器对所述参考图像以及所 述至少两幅目标图像进行图像融合，具体为： 分别将所述参考图像和所述至少两幅目标图像划分为多个图像块，其中，同一坐标位 置处分别对应有来自于所述参考图像和所述至少两幅目标图像的至少三个不同的图像块； 从同一坐标位置处的至少三个不同图像块中，确定具有最大图像熵的候选图像块； 对于每一个所述候选图像块，确定所述候选图像块中各个像素点的融合权值，其中，所 述候选图像块的中心位置的像素点的融合权值最大，且所述候选图像块中像素点距离所述 中心位置的距离越大，像素点的融合权值越小； 依据所述候选图像块中各个像素点的融合权值，将不同坐标位置处的所述候选图像块 进行融合，得到融合后的图像。
【文档编号】H04N5/235GK105847703SQ201610184664
【公开日】2016年8月10日
【申请日】2016年3月28日
【发明人】卢晓鹏
【申请人】联想(北京)有限公司