图像处理设备及其控制方法
【专利说明】图像处理设备及其控制方法
[0001]本申请是申请日为2011年4月22日、申请号为201110103630.8、发明名称为“图像处理设备及其控制方法”的申请的分案申请。
技术领域
[0002]本发明涉及图像处理设备及其控制方法。
【背景技术】
[0003]对静止图像的编辑利用了 RAW显影处理，该RAW显影处理可以在用户针对通过记录由摄像装置生成的图像信号而获得的RAW格式的图像数据、指定各种显影参数时，获得与显影参数相对应的图像。注意，显影参数是例如对比度、曝光校正、白平衡和色相等的调整图像(的图像质量)所需的信息。
[0004]另外，近来，随着数字摄像机的普及和个人计算机的性能的改善，对运动图像进行编辑也成为通常的做法。在这种情况下，与静止图像一样，针对运动图像处理RAW格式的图像数据。也就是说，认为将会广泛地使用能够记录RAW格式的文件的数字摄像机。
[0005]与静止图像数据不同，运动图像数据包括许多帧的图像数据(图像帧)。为了适当地表示RAW格式的运动图像数据(RAW运动图像数据)，需要预先在构成RAW运动图像数据的全部RAW图像帧中记录(添加)显影参数。然而，在一个运动图像内容中，特别在同一场景中，显影参数几乎不会以帧为单位显著变化，因此针对构成运动图像内容的全部RAW图像帧记录显影参数不是有效率的。
[0006]因此，日本特开2009-55335提出了一种当记录RAW运动图像数据时，仅针对预定间隔的RAW图像帧记录显影参数的技术。日本特开2009-55335中公开的技术在对RAW运动图像数据进行再现(显影)时，通过使用预定间隔的RAW图像帧的显影参数进行插值处理来生成没有记录显影参数的RAW图像帧的显影参数。
[0007]图12是示出现有技术中要被记录的RAW运动图像数据的图，其中，沿时间轴配置构成RAW运动图像数据的RAW图像帧和显影参数(色温)。根据现有技术，如图12所示，仅针对多个RAW图像帧中以预定间隔出现的RAW图像帧FjP F ?记录显影参数P P ?。
[0008]当对这种RAW运动图像数据进行再现时，可以通过使用显影参数PjP P ?进行插值处理，针对RAW图像帧FjP RAW图像帧F ?之间的区间Z i中的RAW图像帧来生成适当的显影参数。
[0009]然而，针对RAW图像帧Fni和最终RAW图像帧F f之间的区间Z 2中的RAW图像帧，没有记录插值处理所需的显影参数(用于最终RAW图像帧Ff的显影参数)。因此，不能生成用于对区间Z2中的RAW图像帧进行显影的适当的显影参数，因此不能以所期望的图像质量对RAW运动图像数据进行再现。
【发明内容】
[0010]本发明提供一种能够记录可以生成与构成RAW运动图像数据的多个RAW图像帧相对应的显影参数的RAW运动图像数据的技术。
[0011]根据本发明的一个方面，提供一种图像处理设备，用于记录由多个RAW图像帧构成的RAW运动图像数据，所述图像处理设备包括:生成单元，用于生成与在所述RAW运动图像数据中包括的RAW图像帧相对应的显影参数；记录单元，用于将所述RAW运动图像数据和由所述生成单元针对在所述RAW运动图像数据中包括的RAW图像帧而生成的显影参数记录在记录介质上；以及控制单元，用于控制所述生成单元的操作和所述记录单元的操作，其中，所述控制单元控制所述生成单元和所述记录单元，以将如下显影参数与所述RAW运动图像数据一起记录在所述记录介质上:与满足预定条件的数个RAW图像帧相对应的显影参数；以及与所述多个RAW图像帧中与所述RAW运动图像数据的最终图像帧相对应的最终RAff图像帧相对应的显影参数。
[0012]根据本发明的第二方面，提供一种图像处理设备，用于将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧中的部分RAW图像帧相关联的RAW运动图像数据分割成第一 RAW运动图像数据和第二 RAW运动图像数据，所述图像处理设备包括:指定单元，用于从所述多个RAW图像帧中指定与所述第一 RAW运动图像数据的最终图像帧相对应的最终RAW图像帧，或者从所述多个RAW图像帧中指定与所述第二 RAW运动图像数据的开头图像帧相对应的开头RAW图像帧；生成单元，用于通过使用与所述部分RAW图像帧相关联的显影参数进行插值处理，生成与所述第一 RAW运动图像数据的最终RAW图像帧相对应的显影参数和与所述第二 RAW运动图像数据的开头RAW图像帧相对应的显影参数；以及分割单元，用于在将所述第一RAW运动图像数据的最终RAW图像帧与由所述生成单元生成的与该最终RAW图像帧相对应的显影参数相关联、并且将所述第二RAW运动图像数据的开头RAW图像帧与由所述生成单元生成的与该开头RAW图像帧相对应的显影参数相关联的情况下，将所述RAff运动图像数据分割成所述第一 RAW运动图像数据和所述第二 RAW运动图像数据。
[0013]根据本发明的第三方面，提供一种控制图像处理设备的方法，所述图像处理设备记录由多个RAW图像帧构成的RAW运动图像数据，所述方法包括以下步骤:生成步骤，用于生成与在所述RAW运动图像数据中包括的RAW图像帧相对应的显影参数；记录步骤，用于将所述RAW运动图像数据和在所述生成步骤中针对在所述RAW运动图像数据中包括的RAW图像帧而生成的显影参数记录在记录介质上；以及控制步骤，用于控制所述生成步骤和所述记录步骤，其中，在所述控制步骤中，控制所述生成步骤和所述记录步骤，以将如下显影参数与所述RAW运动图像数据一起记录在所述记录介质上:与满足预定条件的数个RAW图像帧相对应的显影参数；以及与所述多个RAW图像帧中与所述RAW运动图像数据的最终图像帧相对应的最终RAW图像帧相对应的显影参数。
[0014]根据本发明的第四方面，提供一种控制图像处理设备的方法，所述图像处理设备将由多个RAW图像帧构成的、显影参数与所述多个RAW图像帧中的部分RAW图像帧相关联的RAW运动图像数据分割成第一 RAW运动图像数据和第二 RAW运动图像数据，所述方法包括以下步骤:指定步骤，用于从所述多个RAW图像帧中指定与所述第一 RAW运动图像数据的最终图像帧相对应的最终RAW图像帧，或者从所述多个RAW图像帧中指定与所述第二 RAW运动图像数据的开头图像帧相对应的开头RAW图像帧；生成步骤，用于通过使用与所述部分RAW图像帧相关联的显影参数进行插值处理，生成与所述第一 RAW运动图像数据的最终RAff图像帧相对应的显影参数和与所述第二 RAW运动图像数据的开头RAW图像帧相对应的显影参数；以及分割步骤，用于在将所述第一 RAW运动图像数据的最终RAW图像帧与在所述生成步骤中生成的与该最终RAW图像帧相对应的显影参数相关联、并且将所述第二 RAW运动图像数据的开头RAW图像帧与在所述生成步骤中生成的与该开头RAW图像帧相对应的显影参数相关联的情况下，将所述RAW运动图像数据分割成所述第一 RAW运动图像数据和所述第二 RAW运动图像数据。
[0015]通过以下参考附图对典型实施例的说明，本发明的其它特征将变得明显。
【附图说明】
[0016]图1是示出用作作为本发明的一个方面的图像处理设备的摄像设备的结构的示意框图。
[0017]图2是用于说明图1中示出的摄像设备在第一实施例中的操作的流程图。
[0018]图3A和3B是示出通过图1中示出的摄像设备在第一实施例中的操作所记录的RAW运动图像数据的图。
[0019]图4A和4B是用于说明当对图3A和3B中示出的RAW运动图像数据进行再现(显影)时进行的插值处理的图。
[0020]图5是用于说明图1中示出的摄像设备在第二实施例中的操作的流程图。
[0021]图6A和6B是用于说明通过图1中示出的摄像设备在第二实施例中的操作所记录的RAW运动图像数据的图。
[0022]图7是用于说明图1中示出的摄像设备在第三实施例中的操作的流程图。
[0023]图8A和8B是用于说明通过图1中示出的摄像设备在第三实施例中的操作所记录的RAW运动图像数据的图。
[0024]图9是示出作为本发明的一个方面的图像处理设备的结构的示意框图。
[0025]图10是用于说明图9中示出的图像处理设备的操作的流程图。
[0026]图1lA和IlB是用于说明通过图9中示出的图像处理设备的操作所记录的RAW运动图像数据的图。
[0027]图12是示出现有技术中所记录的RAW运动图像数据的图。
【具体实施方式】
[0028]以下将参考附图来说明本发明的优选实施例。注意，在图中相同的附图标记表示相同的构件，并且不给出其重复的说明。
[0029]在该实施例中，将以RAW格式记录的运动图像数据称为RAW运动图像数据或RAW运动图像文件。另外，将构成RAW运动图像数据或RAW运动图像文件的图像帧称为RAW图像帧或RAW图像数据。
[0030]第一实施例
[0031]图1是示出用作作为本发明的一个方面的图像处理设备的摄像设备100的结构的示意框图。摄像设备100是有选择地生成和记录RAW格式的运动图像数据(RAW运动图像数据)和RAW格式的静止图像数据(RAW静止图像数据)的摄像设备，并且在本实施例中具体实现为数字摄像机。注意，RAW运动图像数据是由多个RAW图像帧构成的图像数据。
[0032]摄像设备100包括摄像单元101、A/D转换单元102、参数生成单元103、RAff运动图像文件生成单元104和显影参数文件生成单元105。摄像设备100还包括操作单元106、记录/再现单元107、控制单元108、存储器109和记录介质110。
[0033]摄像单元101包括包含摄像透镜和可以改变焦距的调焦透镜的摄像光学系统、可以改变光圈值的光圈机构和诸如CCD或CMOS装置(光电转换装置)等的摄像装置。摄像单元101将来自被摄体的光(入射光)转换成电信号。A/D转换单元102将以帧为单位从摄像单元101顺序地输出的电信号转换(数字转换)成RAW图像数据。
[0034]参数生成单元103基于从A/D转换单元102输出的RAW图像数据、针对各帧来生成对RAW图像数据进行再现(显影)所需要的显影参数。换句话说，参数生成单元103生成分别与构成RAW运动图像数据的多个RAW图像帧相对应的显影参数。更具体地，显影参数包括诸如对比度、白平衡、颜色空间、色调曲线和轮廓强调等的用于调整图像(的图像质量)的信息。
[0035]