与第一典型实施例的相同。
[0086] 参考图14的流程图，说明根据本典型实施例的相关性判断处理。在孤立点判断处 理之后，相关性判断单元208基于各方向的评价值进行评价值的相关性判断处理。相关性 判断单元208首先对于包括关注像素的周边像素中的各像素，计算H方向评价值一V方向 评价值（S1401)。接着，根据该计算结果，判断是否满足关系：H方向评价值一V方向评价 值>0(S1402)。根据本典型实施例，使用5X5区域。然而，还可以使用3X3或者7X7区域 (或者其它不同大小的区域）。当然，本发明的实施例不局限于此。
[0087] 作为结果，如果满足关系：H方向评价值一V方向评价值>0,则相关性判断单元 208将H方向像素确定为扫描像素，并且定义hdet= 1 (S1403)。另一方面，如果满足关系：H方向评价值一V方向评价值< 0,则相关性判断单元208在不将H方向像素确定为扫描像 素的情况下，定义hdet= 0 (S1404)。相关性判断单元208使用像素的值hdet和预先存储 在存储器112中的预定模板映射，判断在5X5区域（或者，不同大小的区域）中的值是否 与模板映射的数据相一致（S1405)。图16示出表示模板映射的数据的四个例子。根据本实 施例，对于模板映射，使用水平方向、垂直方向和两种类型的对角方向。然而，本发明的实施 例不局限于此。当然，可以在一个以上的实施例中使用模板映射，而不在方向上和数量上限 制模板映射。作为结果，如果图16所示的模板映射中的一个与像素值相一致，则判断为针 对关注像素的评价值具有相关性（S1406)。
[0088] 相关性判断单元208对所有像素进行S1401~S1406的处理。类似于H方向评价 值，相关性判断单元208对于具有V方向评价值的所有像素，进行与S1401~S1406相同的 处理（图15中的S1501~S1506)。
[0089] 由于以后的处理与第一典型实施例的相同，因而省略说明。这样，根据第二典型实 施例，使用预先所准备的模板映射进行相关性判断。如果评价值之间不存在相关性，则使用 关注像素的周边像素来校正关注像素的评价值。因此，如第一典型实施例一样，可以适当校 正由评价值的错误计算所导致的伪分辨率。
[0090] 其它实施例
[0091] 本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质 将执行上述实施例的功能的软件（程序）提供给系统或装置，该系统或装置的计算机或是 中央处理单元（CPU)、微处理单元（MPU)读出并执行程序的方法。
[0092] 尽管参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典 型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功 能。
【主权项】
1. 一种图像处理设备，其特征在于，包括： 插值单元，用于对摄像装置所生成的马赛克图像信号进行多个规定方向中的各方向上 的插值处理，其中，所述摄像装置针对各像素输出与多个颜色滤波器的颜色中的一种颜色 相对应的图像信号； 评价单元，用于针对经过了所述插值单元的所述插值处理的图像信号的各像素，获取 表示所述多个规定方向的各方向上的相关性的评价值；以及 输出单元，用于在至少一个关注像素满足预定条件的情况下，基于所述至少一个关注 像素的周边像素的评价值，校正所述至少一个关注像素的评价值，并且基于校正后的评价 值输出对所述至少一个关注像素进行插值之后的图像信号， 其中，所述预定条件包括所述至少一个关注像素是孤立点这一条件。2. 根据权利要求1所述的图像处理设备，其中，还包括孤立点判断单元，所述孤立点判 断单元用于判断所述至少一个关注像素是否是孤立点。3. 根据权利要求2所述的图像处理设备，其中， 在判断为所述至少一个关注像素的评价值和所述周边像素的评价值之间的相关性低、 或者不存在相关性的情况下，所述孤立点判断单元判断为所述至少一个关注像素是孤立 点。4. 根据权利要求2所述的图像处理设备，其中， 所述孤立点判断单元比较所述规定方向的各方向上的评价值的大小，并且在所述至少 一个关注像素在第一规定方向上的评价值高于在第二规定方向上的评价值、并且所述周边 像素中阈值以上数量的像素在所述第二规定方向上的评价值高于在所述第一规定方向上 的评价值的情况下，判断为所述至少一个关注像素是孤立点。5. 根据权利要求1所述的图像处理设备，其中， 所述预定条件还包括以下条件：所述至少一个关注像素的评价值和所述周边像素的评 价值在所述多个规定方向的所有方向上都不存在相关性。6. 根据权利要求5所述的图像处理设备，其中，还包括相关性判断单元，所述相关性判 断单元用于判断所述至少一个关注像素的评价值和所述周边像素的评价值在所述多个规 定方向中的一个方向上是否存在相关性。7. 根据权利要求6所述的图像处理设备，其中， 在所述多个规定方向中的一个方向上，在第一规定方向上的评价值高于在第二规定方 向上的评价值的连续像素的数量在阈值以上的情况下，所述相关性判断单元判断为在所述 多个规定方向的所述一个方向上存在相关性。8. 根据权利要求2所述的图像处理设备，其中， 在所述至少一个关注像素满足所述预定条件的情况下，所述输出单元基于所述周边像 素中未被所述孤立点判断单元判断为孤立点的像素的评价值，校正所述至少一个关注像素 的评价值。9. 根据权利要求8所述的图像处理设备，其中， 所述输出单元通过使用所述周边像素中未被所述孤立点判断单元判断为孤立点的像 素的评价值的中央值或者平均值，校正所述至少一个关注像素的评价值。10. 根据权利要求1所述的图像处理设备，其中， 所述输出单元比较所述至少一个关注像素在所述多个规定方向上的评价值，并且输出 经过了所述插值单元在所述多个规定方向上的所述插值处理的图像信号中的、经过了评价 值较高的规定方向上的所述插值处理的图像信号。11. 一种摄像设备，其特征在于，包括： 摄像装置，用于针对各像素输出与多个颜色滤波器的颜色中的一种颜色相对应的图像 信号； 插值单元，用于对所述摄像装置所生成的马赛克图像信号进行多个规定方向中的各方 向上的插值处理； 评价单元，用于针对经过了所述插值单元的所述插值处理的图像信号的各像素，获取 表示所述多个规定方向的各方向上的相关性的评价值；以及 输出单元，用于在至少一个关注像素满足预定条件的情况下，基于所述至少一个关注 像素的周边像素的评价值，校正所述至少一个关注像素的评价值，并且基于校正后的评价 值输出对所述至少一个关注像素进行插值之后的图像信号， 其中，所述预定条件包括所述至少一个关注像素是孤立点这一条件。12. -种图像处理方法，其特征在于，包括以下步骤： 对摄像装置所生成的马赛克图像信号进行多个规定方向中的各方向上的插值处理，其 中，所述摄像装置针对各像素输出与多个颜色滤波器的颜色中的一种颜色相对应的图像信 号； 针对经过了所述插值处理的图像信号的各像素，获取表示所述多个规定方向的各方向 上的相关性的评价值；以及 在至少一个关注像素满足预定条件的情况下，基于所述至少一个关注像素的周边像素 的评价值，校正所述至少一个关注像素的评价值，并且基于校正后的评价值输出对所述至 少一个关注像素进行插值之后的图像信号， 其中，所述预定条件包括所述至少一个关注像素是孤立点这一条件。
【专利摘要】提供至少一种图像处理设备、摄像设备和图像处理方法。所述图像处理设备允许对彩色图像信号高精度地进行去马赛克处理。所述至少一种图像处理设备对于马赛克图像信号进行多个规定方向中各方向上的插值处理，并且对于经过了所述插值处理的图像信号的多个像素中的各个，获取表示水平方向和垂直方向各方向上的相关性的评价值。如果满足预定条件，则基于周边像素的评价值校正至少一个关注像素的评价值，其中，所述预定条件包括所述至少一个关注像素是孤立点这一条件。然后，基于校正后的评价值，输出对所述至少一个关注像素进行插值之后的图像信号。
【IPC分类】H04N9/64, H04N9/04
【公开号】CN105049820
【申请号】CN201510204878
【发明人】山中阳平
【申请人】佳能株式会社
【公开日】2015年11月11日
【申请日】2015年4月27日
【公告号】US20150310588