到每个像素的差分值；滤波处理部15，其针对该差分值进行基于图像的空间频率的滤波处理；以及图像合成部17，其根据差分值和滤波处理输出，在第I图像数据中的至少一部分上合成第2图像数据中的至少一部分。因此，在存在突发性像素缺陷的情况下，也能够高效进行检测并去除像素缺陷的影响。
[0102]另外，在本发明的各实施方式和变形例中，使用RGB图像数据进行图像数据的减法处理、数值转换、滤波处理等。但是不限于此，也可以根据RGB图像数据生成亮度(Y)图像数据，使用该亮度图像数据进行减法处理、数值转换、滤波处理等，并且，也可以一部分利用RGB图像数据进行，其余利用亮度图像数据进行。在RGB图像数据的情况下，在相同颜色像素彼此之间进行运算，与此相对，通过采用亮度图像数据，能够进行处理而与是否是不同颜色像素无关。
[0103]并且，在进行比较亮合成时，也可以在关注像素的电平高于比较合成图像的情况下，确认周边像素的电平，对电平高于合成中(比较对象)的图像的像素的个数进行计数，在为预先设定的个数以上的情况下，对关注像素进行合成处理。由于考虑了周围像素的电平，所以，能够高精度地检测突发性像素缺陷。并且，针对识别为突发性像素缺陷的像素，也可以单纯使用不实施合成处理的方法或使用周围像素信息进行补充的手法。
[0104]并且，在本实施方式中，作为拍摄用的设备，使用数字照相机进行了说明，但是，作为照相机，可以是数字单反照相机，也可以是小型数字照相机，还可以是摄像机、摄影机这样的动态图像用的照相机，进而，还可以是内置于便携电话、智能手机、便携信息终端(PDA:Personal Digital Assist)、个人计算机(PC)、台式计算机、游戏设备等中的照相机。任意情况下，只要是使用多个图像数据进行图像合成的设备，则能够应用本发明。
[0105]并且，关于本说明书中说明的技术中主要利用流程图说明的控制，多数情况下能够利用程序进行设定，有时也收纳在记录介质或记录部中。关于记录在该记录介质、记录部中的记录方法，可以在产品出厂时进行记录，也可以利用发布的记录介质，还可以经由因特网进行下载。
[0106]并且，关于权利要求书、说明书和附图中的动作流程，即使为了简便而使用“首先”、“接着”等表现顺序的词语进行了说明，在未特别说明的部分，不是必须按照该顺序进行实施。
[0107]本发明不限于上述实施方式，能够在实施阶段在不脱离其主旨的范围内对结构要素进行变形而具体化。并且，通过上述实施方式所公开的多个结构要素的适当组合，能够形成各种发明。例如，也可以删除实施方式所示的全部结构要素中的若干个结构要素。进而，还可以适当组合不同实施方式中的结构要素。
【主权项】
1.一种图像合成装置，其中，该图像合成装置包括: 图像取得部，其取得第I图像数据和第2图像数据； 减法处理部，其针对所述第I图像数据中的至少一部分和所述第2图像数据中的至少一部分得到每个像素的差分值； 滤波处理部，其针对所述差分值进行基于图像的空间频率的滤波处理；以及图像合成部，其根据滤波处理输出，在所述第I图像数据中的至少一部分上合成所述第2图像数据中的至少一部分。
2.根据权利要求1所述的图像合成装置，其中， 所述图像合成装置包括数值转换部，该数值转换部根据所述每个像素的差分值是否超过规定阈值而赋予数值，或者基于所述每个像素的差分值并根据规定的转换特性赋予数值， 在合成处理的判断中，所述滤波处理部使用由所述数值转换部赋予的数值和周围像素的由所述数值转换部赋予的数值。
3.根据权利要求1所述的图像合成装置，其中， 所述滤波处理部针对所述第I图像数据和所述第2图像数据，进行对图像数据全体附加不同增益的处理、以及进行与到进行滤波处理的像素的距离对应的加权的处理中的至少任意一方。
4.根据权利要求1所述的图像合成装置，其中， 所述减法处理部得到每个相同颜色像素的差分值。
5.根据权利要求1所述的图像合成装置，其中， 所述第I图像数据和所述第2图像数据中的至少一方是拜尔排列的图像数据， 所述图像合成装置还包括: 显影处理部，其对所述拜尔排列的图像数据进行插值处理；以及 颜色空间转换部，其得到所述插值处理后的像素的至少亮度值， 所述减法处理部至少取得所述显影处理部输出的像素值的差分、或者取得所述颜色空间转换部输出的每个像素的亮度值的差分。
6.根据权利要求1所述的图像合成装置，其中， 所述图像合成部中的合成是使用多个所述图像数据的合成，是通常合成、加法合成、加法平均合成、比较亮合成、减光合成、屏幕合成、叠加合成和比较暗合成的图像处理中的至少一方。
7.根据权利要求1所述的图像合成装置，其中， 所述图像合成装置还包括显示部，该显示部输出并显示所述图像合成部得到的已合成图像数据。
8.根据权利要求1所述的图像合成装置，其中， 所述图像合成装置还包括: 记录部，其保持并输出所述图像数据； 光学系统，其形成被摄体像；以及 摄像部，其对由所述光学系统形成的被摄体像进行摄像并作为第2图像数据进行输出， 所述记录部记录所述图像合成部得到的已合成图像数据。
9.一种图像合成装置，其中，该图像合成装置包括: 图像取得部，其取得第I图像数据和第2图像数据； 滤波处理部，其针对所述第I图像数据和所述第2图像数据进行基于空间频率的滤波处理； 减法处理部，其针对所述滤波处理部得到的所述第I图像数据的滤波处理输出中的至少一部分和所述第2图像数据的滤波输出，得到每个像素的差分值；以及 图像合成部，其根据所述差分值，在所述第I图像数据中的至少一部分上合成所述第2图像数据中的至少一部分。
10.一种图像合成方法，其中，该图像合成方法包括以下步骤: 图像取得步骤，取得第I图像数据和第2图像数据； 差分值取得步骤，取得所述第I图像数据中的至少一部分与所述第2图像数据中的至少一部分的每个像素的差分值； 滤波处理步骤，针对所述差分值进行基于图像的空间频率的滤波处理；以及合成步骤，根据所述差分值和所述滤波处理的结果，在所述第I图像数据中的至少一部分上合成所述第2图像数据中的至少一部分。
11.根据权利要求10所述的图像合成方法，其中， 所述第I图像数据和所述第2图像数据中的至少一方是拜尔排列的图像数据， 所述图像合成方法还包括以下步骤: 插值处理步骤，对所述拜尔排列的图像数据进行插值处理；以及 亮度值取得步骤，取得所述插值处理后的像素的至少亮度值， 在所述差分值取得步骤中，执行每个相同颜色相同像素的差分值的取得、基于是否超过规定阈值的差分值的取得、基于规定函数的差分值的取得、所述插值处理后的每个像素的RGB值的取得、以及所述每个像素的亮度值的差分值的取得中的至少一方， 在所述滤波处理步骤中，进行与到进行滤波处理的像素的距离对应的加权， 所述合成步骤是使用多个图像数据的合成，执行通常合成、加法合成、比较亮合成、加法平均合成、减光合成、屏幕合成、叠加合成和比较暗合成的图像处理中的至少一方。
12.根据权利要求10所述的图像合成方法，其中， 所述图像合成方法执行以下步骤中的至少一个步骤: 显示步骤，输出并显示所述合成步骤中的已合成图像数据；以及输出步骤，保持并输出所述第I图像数据，对被摄体像进行摄像并作为所述第2图像数据进行输出，输出所述已合成图像数据。
【专利摘要】本发明提供图像合成装置和图像合成方法，即使在存在突发性像素缺陷的情况下也能够高效进行检测并去除像素缺陷的影响。该图像合成装置具有：图像取得部(12)，其取得第1图像数据和第2图像数据；减法处理部(13)，其针对第1图像数据中的至少一部分和第2图像数据中的至少一部分得到每个像素的差分值；滤波处理部(15)，其针对该差分值进行基于图像的空间频率的滤波处理；以及图像合成部(17)，其根据滤波处理输出，在第1图像数据中的至少一部分上合成第2图像数据中的至少一部分。
【IPC分类】H04N5-232, H04N5-367, H04N9-04, H04N5-21
【公开号】CN104796600
【申请号】CN201510023593
【发明人】细野兼矢, 岩崎宏明, 松桥贵之, 市川学
【申请人】奥林巴斯株式会社
【公开日】2015年7月22日
【申请日】2015年1月16日
【公告号】US20150206296