专利名称：图像信号处理设备和图像信号处理方法
技术领域：
本发明涉及一种图像信号处理设备和图像信号处理方法。
背景技术：
具有拾取功能的机构——诸如数字照像机、数字摄像机(video camera)和具有照像机功能的移动电话——包括显示单元，所述显示单元包括液晶显示器(LCD)或有机电致发光(EL)设备。例如，使用所述显示单元，在拍摄时确定对象(subject)的画面组成，或者在拍摄后立即显示图像数据。近来，例如，可以通过在上述的机构中安装可装拆存储器并且读取存储器中的图像数据而显示在过去拍摄的图像数据或由其他机构拍摄的图像数据。当在所述显示单元上显示图像数据时，已经提出了放大或再现图像数据的一部分的技术。
在JP-A-2000-232598中，公开了一种电子照像机(still camera)，它能够改变在放大/再现模式中被放大和再现的区域。
发明内容
但是，因为用于记录图像数据的记录介质的记录容量有限，因此适当地删除在记录介质中的不必要的图像数据。例如，图像数据从记录介质被读取，并且使用放大/再现模式被放大和再现。然后，通过被放大和再现的图像数据的细节来查看是否完成了聚焦。接着，确定是否存储所述图像数据，并且进行用于删除不必要的图像数据的删除处理。
当在于放大/再现模式中放大和再现图像数据的状态中操纵删除键等时，执行所述删除处理以从记录介质删除图像数据。只有通过操纵删除键等，才可能容易地从记录介质删除图像数据。但是，因为被放大和再现的图像数据是原始图像数据的一部分，因此可能未考虑到原始图像数据的内容而误删除图像数据。为了避免这个问题，当禁止在放大/再现模式中删除图像数据时，在正常的再现模式中再现原始图像数据，然后进行删除处理，由此增加了操纵步骤的数量。因此，可能需要很多的时间来删除不必要的图像数据。
因此，期望提供一种图像信号处理设备和图像信号处理方法，其中，当例如在放大/再现模式中指令(instruct)删除时在正常模式中显示图像以选择是否删除图像数据。
按照本发明的一个实施例，提供了一种图像信号处理设备，包括图像数据产生部件，用于产生在正常再现时显示的第一再现图像数据，以及通过对原始图像数据或第一再现图像数据执行预定处理而产生以与在正常再现时使用的显示形式不同的显示形式显示的第二再现图像数据；显示部件，用于选择性地显示该第一再现图像数据和第二再现图像数据；以及，控制部件，用于当在所述显示部件上显示第二再现图像数据并且指令删除时，允许在所述显示部件上显示所述第一再现图像数据，并且允许原始图像数据处于可删除状态中。
按照本发明的另一个实施例，提供了一种图像信号处理方法，包括步骤产生在正常再现时显示的第一再现图像数据，以及通过对原始图像数据或第一再现图像数据执行预定处理而产生以与在正常再现时使用的显示形式不同的显示形式显示的第二再现图像数据；显示该第二再现图像数据；当在所述显示步骤显示第二再现图像数据并且指令删除时，允许显示所述第一再现图像数据，并且允许原始图像数据处于可删除状态中。
按照本发明，可以即使当例如在放大/再现模式中放大和再现图像数据时也查看在正常再现模式中的图像数据，并且执行删除处理，而不增加操纵步骤的数量。因此，可以防止误删除图像数据。
图1是示出按照本发明的一个实施例的拾取设备的配置的方框图。
图2是示出按照本发明的实施例的拾取设备的壳体的一侧的配置的示意图。
图3是示出按照本发明实施例的用于产生再现图像数据和放大图像数据的处理的示意图。
图4A～4E是示出按照本发明实施例的当执行删除处理时LCD的显示形式的示意图。
图5是示出按照本发明实施例的当执行删除处理时的处理的流程图。
具体实施例方式
以下，将参见附图来说明本发明的实施例。在本实施例中，将说明本发明应用于拾取设备的情况。
图1是示出按照本发明实施例的拾取设备101的配置的方框图。拾取设备101包括照像机单元1、照像机数字信号处理器(DSP)2、同步动态随机存取存储器(SDRAM)3、介质接口(以下称为介质I/F)4、作为控制部件的示例的控制单元5、操纵单元6、LCD控制器7、作为显示单元的LCD 8、外部接口(以下称为外部I/F)9。记录介质10可以被附接到拾取设备101或从拾取设备101卸下。
记录介质10可以是使用半导体存储器的存储卡、诸如可记录数字通用盘(DVD)或可记录致密盘(CD)之类的光记录介质、磁盘等。在所述记录介质10中，按照设计规则照像机文件系统(design rule camera file system，DCF)来记录基于被称为交换图像文件格式(exchange image file format，Exif)的图像文件格式而以联合图像编码专家组(joint photographic coding expert group，JPEG)格式而压缩编码的多个图像数据。
将详细说明每个单元的配置。如图1中所示的照像机单元1包括光学块11、作为拾取元件的示例的电荷耦合设备(CCD)12、预处理电路13、光学块驱动器14、CCD驱动器15和定时产生电路16。光学块11包括透镜、聚焦机构、快门机构和光圈(iris)机构。作为拾取元件，可以使用互补金属氧化物半导体(CMOS)传感器，而不是CCD。
控制单元5是微计算机，其中，中央处理单元(CPU)51、随机存取存储器(RAM)52、快闪只读存储器(ROM)53和时钟电路54通过系统总线55而彼此连接。控制单元5控制拾取设备101的各个单元。
RAM 52用作当CPU 51执行程序时使用的操作区域或用于暂时存储处理的中途结果的操作区域。快闪ROM 52存储在CPU 51中执行的各种程序或处理所需要的数据。时钟电路54可以提供当前日期、当前星期几、当前时间或拍摄日期和时间。
当拍摄图像时，光学块驱动器14根据控制单元5的控制而产生光学块11的驱动信号，并且向光学块11提供该驱动信号，以操作光学块11。在光学块11中，聚焦机构、快门机构和光圈机构由从光学块驱动器14接收的驱动信号控制。光学块11接收对象的图像，并且向CCD 12提供所述图像。
CCD 12光电转换和输出从光学块11输出的图像。CCD 12按照从CCD驱动器15输出的驱动信号来操作，并且从光学块11接收对象的图像。CCD 12将所接收的对象的图像(图像信息)转换为电子信号，并且根据从控制单元5所控制的定时产生电路16输出的定时信号向预处理电路13提供电子信号。
定时产生电路16按照控制单元5的控制来产生用于提供预定定时的定时信号。CCD驱动器15根据从定时产生电路16输出的定时信号来产生提供给CCD 12的驱动信号。
预处理电路13对所接收的图像信息的电子信号执行相关双采样(correlated double sampling，CDS)处理，以去除复位噪声、I/F(接口)噪声和热阻噪声，从而保持良好的S/N(信噪)比。预处理电路13也执行自动增益控制(automatic gain control，AGC)处理以控制增益，并且执行模/数(A/D)转换处理以产生数字化的图像数据。
从预处理电路13输出的数字化图像数据被提供到DSP 2。DSP 2包括数字信号处理单元21、压缩/扩展单元22、作为图像数据产生单元的示例的分辨率转换/插值单元(resolution converting/interpolating unit)23和用于控制SDRAM 3的SDRAM控制器24。数字信号处理单元21对被提供到DSP 2的图像数据执行照像机信号处理，诸如自动聚焦(auto focus，AF)、自动曝光(sutoexposure，AE)和自动白平衡(auto white balance，AWB)。所处理的图像数据例如以JPEG格式在压缩/扩展单元22中被压缩编码，并且通过系统总线55和介质接口4被提供和记录到在拾取设备101中安装的记录介质10中。
在记录介质10中记录的图像数据中，按照通过包括触摸板或控制键的操纵单元6接收的用户的操纵输入，通过介质接口4从记录介质10读取期望的图像数据，并且提供到DSP 2。
DSP 2的压缩/扩展单元22扩展从记录介质10读取并且通过介质接口4提供的压缩图像数据，并且如果必要的话，分辨率转换/插值单元23对图像数据执行分辨率转换处理，以产生再现图像数据。所产生的再现图像数据通过系统总线55而被提供到LCD控制器7。LCD控制器7根据所提供的图像数据驱动LCD驱动电路。从而，基于在记录介质10中记录的图像数据在LCD8上显示图像。
图像显示格式依赖于ROM中所记录的显示处理程序。即，该显示处理程序是关于文件系统如何被记录或图像如何被再现的程序。
在根据本发明的拾取设备101中，提供了外部接口9。拾取设备101例如通过外部接口9而连接到外部个人计算机，以便从个人计算机接收图像数据，并且将其记录在所安装的记录介质10中，或者将所安装的记录介质10中记录的图像数据提供到所述外部个人计算机。
通过将外部接口9连接到通信模块，拾取设备101连接到诸如因特网之类的网络，以便通过网络来获取各种图像数据或其他信息，并且将其记录在记录介质10中，或者将在记录介质10中记录的图像数据通过网络发送到期望的接收侧。
诸如通过外部个人计算机或网络而获取并且被记录在记录介质10中的图像数据之类的信息也被拾取设备101读取和再现，并且被显示在LCD 8上，由此使得用户可以使用所述信息。
外部接口9可以是有线接口——诸如电气和电子工程师协会(IEEE)1394或通用串行总线(USB)——或使用光或电波的无线接口。即，外部接口9可以是有线和无线接口的任何一种。
根据本实施例的拾取设备101可以拍摄对象的图像，并且在拾取设备101中安装的记录介质10中记录所述图像，以及可以读取在记录介质10中记录的图像数据并且再现和使用所述图像数据。另外，拾取设备101可以通过外部个人计算机或网络来接收图像数据，并且在记录介质10中记录该图像数据，或者读取和再现该图像数据。
图2示出了根据本实施例的在拾取设备101的壳体的后表面上布置的操纵单元6和LCD 8的示例。在拾取设备101的壳体的后表面上，提供了LCD8和在LCD 8附近的包括多个键的操纵单元6。操纵单元6包括变焦(zoom)键61、用于打开/关闭LCD 8的显示的屏幕键62、用于在LCD 8上显示菜单屏幕的菜单键63。操纵单元6还包括方向键64a-64d、位于方向键64a-64d的中心部分的判定键65和用于执行删除处理的删除键66。在图2中所示的操纵单元6仅仅是一个示例，键的位置和种类并不局限于这个示例。LCD 8可以由触摸板形成，它通过触摸LCD 8的预定位置来执行各种操作。
接着，在拾取设备101中，将说明用于在LCD 8上显示在记录介质10中记录的图像数据的处理。
在本实施例中，记录在可装卸记录介质10中或存储在拾取设备中所安装的非易失性存储器中的图像数据被称为原始图像数据。通过——如果必要的话——对原始图像数据执行分辨率转换处理而产生以便显示在拾取设备中所包括的显示单元上的第一再现图像数据被称为再现图像数据。用于在LCD 8上显示再现图像数据的模式被称为正常再现模式。当显示该再现图像数据时，用户可以通过LCD 8来确定图像的整体内容。
该再现图像数据是通过对原始图像数据执行分辨率转换处理以便适合于显示单元的显示区域而获得的。该再现图像数据和原始图像数据在图像内容上彼此相同，而在图像大小上彼此不同。从而，因为在观看所显示的再现图像数据的同时执行了删除处理并且删除了在记录介质10中的原始图像数据，所以可以抑制用户本意不希望的删除处理被执行。
以与在正常再现模式中显示的再现图像数据不同的显示形式而显示的图像数据是第二再现图像数据。第二再现图像数据是通过对原始图像数据或再现图像数据执行预定处理而产生的。在本实施例中，通过放大和显示再现图像数据的一部分而获得第二再现图像数据，因此所述第二再现图像数据被称为放大图像数据。用于在LCD 8上显示该放大图像数据的模式被称为放大再现模式。
图3示意地示出了使用原始图像数据而产生再现图像数据和放大图像数据的处理。当该操纵单元6被操纵并且正常再现模式被指令时，CPU 51从记录介质10读取以JPEG格式压缩的原始图像数据PD1，并且在RAM 52中存储该原始图像数据。该原始图像数据PD1被提供到DSP 2，并且由DSP 2的压缩/扩展单元22进行扩展处理，并且经扩展的原始图像数据PD2被存储在RAM 52的预定区域中。
该原始图像数据PD2被提供到DSP 2，由DSP 2的分辨率转换/插值单元23进行分辨率转换处理，并且进行非放大处理(放大率是1)，由此产生再现图像数据PD3。因为依赖于文件来改变原始图像数据PD2的图像大小。因此分辨率转换/插值单元23对于该原始图像数据PD2执行分辨率转换处理以适合于LCD 8的显示区域，由此改变图像大小。例如，产生具有VGA(水平方向640像素，垂直方向480像素)大小或QVGA(水平方向320像素，垂直方向240像素)大小的再现图像数据PD3。当原始图像数据PD2的图像大小等于LCD 8的显示区域的大小时，不执行所述分辨率转换处理。
再现图像数据(例如VGA数据)PD3被存储在RAM 52的预定区域中。CPU 51读取在RAM 52中存储的再现图像数据PD3，并且向LCD控制器7提供再现图像数据PD3。LCD控制器7根据所提供的再现图像数据PD3来驱动LCD驱动电路，并且在LCD 8上显示再现图像数据PD3。因此，在正常再现模式中执行显示处理。
在放大再现模式中，执行下面的处理。当在显示再现图像数据PD3的状态中指令放大再现模式时，指定将被放大的所显示的再现图像数据PD3的区域，并且设置放大率。例如，通过操纵变焦键61来设置放大率。再现图像数据PD3的切除区域的大小是例如被划分为9个的区域的大小。在观看在LCD8上显示的再现图像数据PD3的同时，可以使用方向键64a-64d和判定键65来适当地指定所述区域。
CPU 51读取在RAM 52中存储的经扩展的原始图像数据PD2，并且向DSP 2的分辨率转换/插值单元23提供所述原始图像数据PD2。分辨率转换/插值单元23从原始图像数据PD2产生再现图像数据PD3。切除再现图像数据PD2的指定区域，并且使用由CPU 51设置的放大率来放大所述切除的图像，然后，所述切除的图像然后被插值以适合于LCD 8的显示区域，由此产生放大图像数据PD4。CPU 51读取在RAM 52中存储的放大图像数据PD4，并且向LCD控制器7提供所述放大图像数据PD4。
LCD控制器7根据所提供的放大图像数据PD4来驱动LCD驱动器电路，并且在LCD 8上显示该放大图像数据PD4。因此，在放大再现模式中执行放大显示。再现图像数据PD3可以被保存在RAM 52中，以便在放大再现模式中使用所保存的再现图像数据PD3来产生放大图像数据PD4，而不产生再现图像数据PD3。为此，根据模式而在LCD 8上选择性地显示再现图像数据PD3和放大图像数据PD4。
随后，将参见图4来说明当执行放大再现模式时，对在记录介质10中记录的原始图像数据执行的删除处理。在图4A中所示的状态中，在放大再现模式中，字符“A”被放大并且被显示在LCD 8上。
在这种状态中，按压在拾取设备101中提供的删除键66，以指令删除，如在图4B中所示，其“A”未被放大的再现图像数据被显示在LCD 8上，而不是放大显示。另外，删除菜单7同时被显示在LCD 8上。
当按下删除键66时，因为在执行所述删除处理之前显示未被放大的再现图像数据，因此有可能查看图像的整体内容，并且确定是否删除原始图像数据。在该删除菜单71中，通过使用例如方向键64a和方向键64d而选择“删除”或“结束”并且按下判定键65来确定要执行的处理。当LCD 8是触摸板时，可以通过触摸所显示的删除菜单71的任何一个来确定“删除”或“结束”。
当在图4B中所示的状态中选择删除菜单71的“删除”时，LCD 8的显示过渡到在图4C中所示的状态。在图4C中所示的状态中，例如，显示诸如“访问中(accessing)”或“删除中”之类的字符信息。在此状态中，CPU 51例如使用文件名等通过介质接口4来访问在记录介质10中记录的原始图像数据，并且删除所述原始图像数据。此时，可以同时删除经压缩的原始图像数据、经扩展的原始图像数据、再现图像数据，它们都被存储在RAM 52中。
在结束所述删除处理后，读取在记录介质10中记录的下一个原始图像数据。然后，通过上述的处理来产生再现图像数据，并且将其显示在LCD 8上。在图4D中所示的状态中，例如，未经放大的字符“B”被显示，当在记录介质10中不存在下一个原始图像数据时，在LCD 8上显示要显示的图像不存在的消息。
在图4B中所示的状态中，当选择删除菜单71的“结束”时，不执行删除处理，并且LCD 8的显示过渡到在图4E中所示的状态。当LCD 8处于图4E中所示的状态中时，删除菜单消失，并且连续地显示未经放大的字符“A”。此时，在放大再现模式中显示“A”，而不是在正常再现模式中显示它。
图5是示出按照本发明的所述实施例的用于删除处理的显示操作的流程图。下面的处理例如通过CPU 51而实现。在步骤S1中，当按下删除键66以便执行删除处理时，删除处理开始。当删除处理开始时，所述处理进行到步骤S2。
在步骤S2中，确定LCD 8上所显示的图像是否处于放大再现模式中。通过确定由CPU 51控制的操作模式的信息是正常再现模式还是放大再现模式而进行该确定。当图像在正常再现模式而不是放大再现模式中时，处理进行到步骤S4。当图像在放大再现模式中时，处理进行到步骤S3。
在步骤S3中，放大再现被关闭。在步骤S3中，产生在LCD 8上显示的再现图像数据。CPU 51读取在RAM 52中存储的经扩展的原始图像数据。并且向DSP 2的分辨率转换/插值单元23提供该经扩展的原始图像数据，由此产生再现图像数据。该所产生的再现图像数据被存储在RAM 52中。
随后，处理进行到步骤S4。在步骤S4中，产生作为选择显示的删除菜单。当按下删除键66时，CPU 51接收所产生的删除指令信号，并且产生在LCD 8上显示的删除菜单。
随后，处理进行到步骤S5。在所述步骤S5中，在以叠加的方式来在LCD8上显示在步骤S3中产生的再现图像数据和在步骤S4中产生的删除菜单，并且该处理然后结束。
步骤S3和步骤S4的顺序可以反转。但是，因为执行产生正常再现模式的再现图像数据的步骤所需要的时间大于用于执行产生删除菜单的步骤所需要的时间，因此优选地在产生再现图像数据期间保持删除菜单。从而，如上所述，优选的是，在产生再现图像数据后产生删除菜单。
虽然详细说明了本发明的实施例，但是本发明不限于所述实施例，而是可以根据本发明的技术精神而被修改。虽然在上述的实施例中，从记录介质读取的原始图像数据被存储在RAM 52中，但是所述原始图像数据也可以被直接地提供到DSP 2，然后被处理。在DSP 2中，可以同时执行扩展处理和分辨率转换处理，所述压缩格式不限于JPEG，可以使用采用小波变换的JPEG2000。
本发明可应用到诸如数字摄像机或数字照像机之类的拾取设备、具有拾取功能的移动电话、个人数字助理(PDA)或者不具有拾取功能的称作图像察看器的图像浏览设备。
虽然在上述的实施例中，将放大图像数据描述为第二再现图像数据的示例，但是本发明可应用于其他图像数据。例如，作为第二再现图像数据，可以使用通过缩小再现图像数据而获得的缩小图像数据、通过将再现图像数据旋转预定角度而获得的旋转图像数据、通过修改再现图像数据的一部分而获得的修改图像数据、通过校正再现图像数据的灰度或颜色而获得的图像数据或通过提取再现图像数据的轮廓而获得的图像数据。在所述图像数据产生单元中，产生第二再现图像数据。
可以使用经压缩的原始图像数据来直接执行所述分辨率转换处理。例如，当以JPEG格式来压缩编码原始图像数据时，可以通过向作为用于JPEG的正交变换的离散余弦变换(DCT)的DCT系数加上0或选择低频的DCT系数并且执行逆DCT以校正亮度(如果必要的话而)执行分辨率转换处理。
可以通过专用硬件电路或编程的计算机来实现用于配置根据本发明的图像信号处理设备的各个单元。可以通过用于操作计算机或专用硬件电路的软件(程序)来实现根据本发明的图像信号处理方法。可以在诸如磁记录设备、光盘、磁光盘、半导体存储器之类的计算机可读记录介质中记录包括处理内容的程序。
本领域内的技术人员应当明白，可以根据设计要求和其他因素来进行各种修改、组合、子组合和替代，只要它们在所附的权利要求及其等同内容的范围内。
本申请包含与2005年9月7日在日本专利局提交的日本专利申请JP2005-258932号相关联的主题，其整体内容通过引用被包含在此。
权利要求
1.一种图像信号处理设备，包括图像数据产生部件，用于产生在正常再现时显示的第一再现图像数据，以及通过对原始图像数据或第一再现图像数据执行预定处理而产生以与在正常再现时使用的显示形式不同的显示形式显示的第二再现图像数据；显示部件，用于选择性地显示该第一再现图像数据和第二再现图像数据；以及，控制部件，用于当在所述显示部件上显示第二再现图像数据并且指令删除时，允许在所述显示部件上显示所述第一再现图像数据，并且允许原始图像数据处于可删除状态中。
2.按照权利要求1的图像信号处理设备，其中，所述第二再现图像数据是通过放大和显示该第一再现图像数据的一部分而获得的。
3.按照权利要求1的图像信号处理设备，其中，所述预定处理包括用于切除该第一再现图像数据的一部分、并且对切除的图像数据执行插值的处理。
4.按照权利要求1的图像信号处理设备，其中，所述可删除状态是在显示部件上与第一再现图像数据一起显示用于选择原始图像数据的删除的选择显示的状态。
5.按照权利要求1的图像信号处理设备，其中，所述控制部件当不删除原始图像数据时，允许连续地显示第一再现图像数据，以及当删除原始图像数据时，允许在显示部件上显示与第一再现图像数据不同的再现图像数据，或者允许在显示部件上显示不存在要显示的再现图像数据的消息。
6.一种图像信号处理方法，包括下述步骤产生在正常再现时显示的第一再现图像数据，以及通过对原始图像数据或第一再现图像数据执行预定处理而产生以与在正常再现时使用的显示形式不同的显示形式显示的第二再现图像数据；显示该第二再现图像数据；当在所述显示步骤显示第二再现图像数据并且指令删除时，允许显示所述第一再现图像数据，并且允许原始图像数据处于可删除状态中。
7.按照权利要求6的图像信号处理方法，其中，所述第二再现图像数据是通过放大和显示该第一再现图像数据的一部分而获得的。
8.按照权利要求6的图像信号处理方法，其中，所述预定处理包括用于切除该第一再现图像数据的一部分、并且对切除的图像数据执行插值的处理。
9.按照权利要求6的图像信号处理方法，其中，所述可删除状态是与第一再现图像数据一起显示用于选择原始图像数据的删除的选择显示的状态。
10.按照权利要求6的图像信号处理方法，其中，所述控制步骤还包括当不删除原始图像数据时，允许连续地显示第一再现图像数据，以及当删除原始图像数据时，允许显示与第一再现图像数据不同的再现图像数据，或者允许显示不存在要显示的再现图像数据的消息。
11.一种图像信号处理设备，包括图像数据产生单元，其产生在正常再现时显示的第一再现图像数据，并且通过对原始图像数据或第一再现图像数据执行预定处理而产生以与在正常再现时使用的显示形式不同的显示形式而显示的第二再现图像数据；显示单元，其选择性地显示该第一再现图像数据和第二再现图像数据；以及，控制单元，其当在所述显示单元上显示第二再现图像数据并且指令删除时，允许在所述显示单元上显示所述第一再现图像数据，并且允许原始图像数据处于可删除状态中。
全文摘要
本发明公开了一种图像信号处理设备，它包括图像数据产生单元，用于产生在正常再现时显示的第一再现图像数据，并且通过对原始图像数据或第一再现图像数据执行预定处理而产生以与在正常再现时使用的显示形式不同的显示形式显示的第二再现图像数据；显示单元，用于选择性地显示第一再现图像数据和第二再现图像数据；以及，控制单元，用于当在所述显示单元上显示第二再现图像数据并且指令删除时，允许在所述显示单元上显示所述第一再现图像数据，并且允许原始图像数据处于可删除状态中。
文档编号G03B17/18GK1929557SQ200610151619
公开日2007年3月14日 申请日期2006年9月7日 优先权日2005年9月7日
发明者冈崎崇 申请人:索尼株式会社