超分辨率图像的获取方法和获取装置的制造方法
【技术领域】
[0001] 本申请涉及图像处理技术领域，特别是涉及一种超分辨率图像的获取方法和获取 装置。
【背景技术】
[0002] 图像分辨率是评价图像质量的重要指标之一。为了提高图像分辨率，可由多 张对同一场景拍摄得到的内容相似但空间（Spatio)和/或时间（Temporal)等信息 不完全相同的多张低分辨率（Low-Resolution)图像进行软件处理，生成一超分辨率 (Super-Resolution)图像。超分辨率图像的应用广泛，例如可应用但不限于：恢复不同采 集场景中损失的高频信息，如失焦、运动模糊、非理想采样等等，甚至可用于恢复超过光学 系统散射极限（Diffraction Limit)的高频空间信息。
[0003] 随着成像技术的不断发展，基于相机阵列获取超分辨率图像的技术引起研究人员 的高度关注。所述相机阵列也可称为阵列式相机或阵列相机，相对于传统的单个相机而言， 视野更宽，通常包括多个阵列分布的相机，其中，每个相机具有独立的光学镜头和图像传感 器。采用相机阵列对待摄场景进行图像采集时，相机阵列中的每个相机都可以分别拍摄该 场景的一副图像，不同相机所拍摄得到的图像之间存在一定的视野偏移，这样，就得到了内 容相似但具有景象视野的多幅图像，根据这些多幅图像可获取一超分辨率图像，该超分辨 率的图像的分辨率均大于各相机获取的单幅图像的分辨率，例如：对于一个NXN个相机构 成的相机阵列而言，假设每个相机的图像传感器的像素点为DXD个，则在理想情况下，根 据所述相机阵列各相机获取的图像可生成分辨率为ND X ND。
【发明内容】
[0004] 在下文中给出了关于本申请的简要概述，以便提供关于本申请的某些方面的基本 理解。应当理解，这个概述并不是关于本申请的穷举性概述。它并不是意图确定本申请的 关键或重要部分，也不是意图限定本申请的范围。其目的仅仅是以简化的形式给出某些概 念，以此作为稍后论述的更详细描述的前序。
[0005] 本申请提供一种超分辨率图像的获取方法和获取装置。
[0006] -方面，本申请实施例提供了一种超分辨率图像的获取方法，包括：
[0007] 确定相机阵列中至少一相机的图像传感器的待调节区，所述待调节区为所述至少 一相机的图像传感器对应第一区的成像区域，所述第一区为待摄场景的至少局部；
[0008] 调节所述至少一相机的图像传感器的像素点分布，以增加分布在所述待调节区的 像素点数量；
[0009] 基于调节后的所述相机阵列的各相机分别获取所述待摄场景的图像；
[0010] 根据获取的各图像获取所述待摄场景的一超分辨率图像。
[0011] 另一方面，本申请实施例还提供了一种超分辨率图像的获取装置，包括：
[0012] -待调节区确定模块，用于确定相机阵列中至少一相机的图像传感器的待调节 区，所述待调节区为所述至少一相机的图像传感器对应第一区的成像区域，所述第一区为 待摄场景的至少局部；
[0013] -像素点分布调节模块，用于调节所述至少一相机的图像传感器的像素点分布， 以增加分布在所述待调节区的像素点数量；
[0014] 一图像获取模块，用于基于调节后的所述相机阵列的各相机分别获取所述待摄场 景的图像；
[0015] -超分辨率图像获取模块，用于根据获取的各图像获取所述待摄场景的一超分辨 率图像。
[0016] 本申请实施例提供的技术方案，可充分利用相机阵列的至少一相机的图像传感 器的整体像素来差异化采集待摄场景稍有视野偏差的多幅图像，具体而言，可调节相机阵 列中至少一相机的图像传感器的像素点分布，使得所述至少一相机的图像传感器与第一区 (即待摄场景的至少局部）对应的成像区域的像素点数量较多、较为密集，基于调节后的相 机阵列对所述待摄场景进行图像采集，则所述至少一相机的图像传感器获取到的与所述第 一区对应的子图像的细节更为丰富，分辨率越高，图像采集的效率也越高。基于相机阵列的 各相机分别获取的图像获取一超分辨率图像的过程中，对应所述第一区的子图像的像素点 数量增加了，由此有利于提高获取的超分辨率图像中与所述第一区对应的子图像的分辨率 和信噪比，提高该子图像的成像质量，更好的满足用户多样化的实际应用需求。
[0017] 通过以下结合附图对本申请的可选实施例的详细说明，本申请的这些以及其它的 优点将更加明显。
【附图说明】
[0018] 本申请可以通过参考下文中结合附图所给出的描述而得到更好的理解，其中在所 有附图中使用了相同或相似的附图标记来表示相同或者相似的部件。所述附图连同下面的 详细说明一起包含在本说明书中并且形成本说明书的一部分，而且用来进一步举例说明本 申请的可选实施例和解释本申请的原理和优点。在附图中：
[0019] 图la为本申请实施例提供的一种超分辨率图像的获取方法流程图；
[0020] 图lb为本申请实施例提供第一种像素密度可调的图像传感器的结构示意图；
[0021] 图lc为本申请实施例提供第二种像素密度可调的图像传感器的结构示意图；
[0022] 图Id为本申请实施例提供第三种像素密度可调的图像传感器的结构示意图；
[0023] 图le为本申请实施例提供第四种像素密度可调的图像传感器的结构示意图；
[0024] 图If为本申请实施例提供图像传感器在不均匀光场激励情形时进行像素密度调 整的场景例；
[0025] 图lg为本申请实施例提供第五种像素密度可调的图像传感器的结构示意图；
[0026] 图lh为本申请实施例提供第六种像素密度可调的图像传感器的结构示意图；
[0027] 图li为本申请实施例提供第七种像素密度可调的图像传感器的结构示意图；
[0028] 图lj为本申请实施例提供第八种像素密度可调的图像传感器的结构示意图；
[0029] 图2为本发明实施例提供的一种调节后图像传感器的像素点分布示例；
[0030] 图3a为本发明实施例提供的一种超分辨率图像的生成示例；
[0031] 图3b为本发明实施例提供的另一种超分辨率图像的生成示例；
[0032] 图4a为本发明实施例提供的一种相机阵列各相机的图像传感器像素分布示例；
[0033] 图4b为本发明实施例提供的一种相邻相机的图像传感器相应逻辑像素点的偏移 示例；
[0034] 图4c为本发明实施例提供的另一种相邻相机的图像传感器相同逻辑像素点的偏 移示例；
[0035] 图4d为本发明实施例提供的又一种相邻相机的图像传感器相应逻辑像素点的偏 移示例；
[0036] 图5为本申请实施例提供的一种超分辨率图像的获取装置的逻辑框图；
[0037] 图6为本申请实施例提供的另一种超分辨率图像的获取装置的逻辑框图；
[0038] 图7为本申请实施例提供的一种第一区确定模块的逻辑框图；
[0039] 图8为本申请实施例提供的一种像素点分布调节模块的逻辑框图；
[0040] 图9为本申请实施例提供的又一种超分辨率图像的获取装置的逻辑框图。
[0041] 本领域技术人员应当理解，附图中的元件仅仅是为了简单和清楚起见而示出的， 而且不一定是按比例绘制的。例如，附图中某些元件的尺寸可能相对于其他元件放大了，以 便有助于提高对本申请实施例的理解。
【具体实施方式】
[0042] 在下文中将结合附图对本申请的示范性实施例进行详细描述。为了清楚和简明起 见，在说明书中并未描述实际实施方式的所有特征。然而，应该了解，在开发任何这种实际 实施例的过程中必须做出很多特定于实施方式的决定，以便实现开发人员的具体目标，例 如，符合与系统及业务相关的那些限制条件，并且这些限制条件可能会随着实施方式的不 同而有所改变。此外，还应该了解，虽然开发工作有可能是非常复杂和费时的，但对得益于 本公开内容的本领域技术人员来说，这种开发工作仅仅是例行的任务。
[0043] 在此，还需要说明的一点是，为了避免因不必要的细节而模糊了本申请，在附图和 说明中仅仅描述了与根据本申请的方案密切相关的装置结构和/或处理步骤，而省略了对 与本申请关系不大的、本领域普通技术人员已知的部件和处理的表示和描述。
[0044] 下面结合附图（若干附图中相同的标号表示相同的元素）和实施例，对本申请的
【具体实施方式】作进一步详细说明。以下实施例用于说明本申请，但不用来限制本申请的范 围。
[0045] 本领域技术人员可以理解，本申请中的"第一"、"第二"等术语仅用于区别不同步 骤、设备或模块等，既不代表任何特定技术含义，也不表示它们之间的必然逻辑顺序。
[0046] 本申请发明人在实践本申请实施例的过程中发现，通常基于相机阵列进行待摄场 景的图像采集时，所述相机阵列的各相机的图像传感器的像素均匀分布，基于各图像传感 器采集可得到该场景稍有视野偏差的多幅图像，基于这些图像可获取一超分辨率图像。然 而在某些场景下，该场景的不同区域通常对用户而言具有不同的意义和/或重要性，即用 户对待摄场景不同区域的成像质量要求不尽相同。例如：在人物拍摄场景下，用户对场景中 人脸的感兴趣程度要高于场景中的景物，故对获取的超分辨率图像中关于人脸部分成像的 图像空间分辨率、信噪比等要求较高；等等。为此，本申请实施例提供了一种超分辨率图像 的获取方法，可充分利用相机阵列的各图像传感器的整体像素来差异化采集待摄场景稍有 视野偏差的多幅图像，由此更好满足用户多样化的应用需求。下面结合附图进一步说明技 术方案。
[0047] 图la为本申请实施例提供的一种超分辨率图像的获取方法流程图。本申请实施 例提供的超分辨率图像的获取方法的执行主体可为某一超分辨率图像的获取装置，所述超 分辨率图像的获取装置可在但不限于拍照、摄像、摄影、视频监控等应用过程中通过执行该 超分辨率图像的获取方法进行静态或动态的图像处理控制。所述超分辨率图像的获取装置 的设备表现形式不受限制，例如所述超分辨率图像的获取装置可为某一独立的部件，该部 件与相机阵列配合通信；或者，所述超分辨率图像的获取装置可作为某一功能模块集成在 一相机阵列中，本申请实施例对此并不限制。
[0048] 具体如图la所示，本申请实施例提供的一种超分辨率图像的获取方法包括：
[0049] S101 :确定相机阵列中至少一相机的图像传感器的待调节区，所述待调节区为所 述至少一相机的图像传感器对应第一区的成像区域，所述第一区为待摄场景的至少局部。
[0050] 所述相机阵列可包括阵列分布的NXM个相机，其中，N为大于或等于1的整数、且 Μ为大于1