图像处理装置、图像处理方法和程序的制作方法

专利名称：图像处理装置、图像处理方法和程序的制作方法
技术领域：
本发明涉及图像处理装置、图像处理方法和程序，具体而言，本 发明涉及可以通过简单操作、利用小存储量来决定当对图像施加处理 时所用的最优参数的图像处理装置、图像处理方法和程序。
背景技术：
迄今为止，在由摄像机等拍摄的图像被编辑的情况下，采用的是 线性编辑，其中在原始图像的图像数据被再现的同时执行用于施加各 种处理的操作，并且处理得到的图像被记录在另 一记录介质中。
根据现有技术中的方法，编辑操作是在原始图像数据被再现的同 时执行的，因此难以对图像执行复杂的处理。另一方面，提出了一种 编辑装置，其中编辑操作被脱机决定以加上时间码的标签，并且在最 终阶段根据时间码来机械地施加编辑处理。然而，这一情况导致了过 程复杂的问题。因此，在现有技术中，还难以实现能够通过简单操作 (过程)实现复杂处理的装置。
另夕卜，在原始图像的数据是一次拷贝(COPY ONCE)的情况下， 存在以下问题 一次记录在记录介质上的数据被再现，并且经受进一 步编辑的视频不允许被记录。为了应对这一问题，提出了一种存储用 于指示图像编辑处理的操作的方法(例如，见日本未实审专利申请公 布No. 2003-202944 ) 0
迄今为止，关于图像编辑， 一般使用这样的编辑，即在不同位置 拍摄的多个图像素材(视频剪辑)被组合以产生一项内容。近年来， 随着数字图像处理技术的发展，类似于从一个素材中产生多个空间剪 切(例如，变焦)，正执行从多个视角对一个素材进行处理的编辑。
图l是用于描述现有技术中的图像处理装置(图像编辑装置)的说明图，该装置被配置为针对一个素材利用不同变焦因子执行变焦处 理(放大处理)。
现有技术中的图像处理装置1将从记录介质再现原始图像得到 的处理图像(该图像已受到不同变焦因子下的变焦处理)临时存储在
图像处理装置l内的存储器1M中。然后，所存储的多个处理图像被 用户依次检查以决定最终采用的变焦因子，并且图像被显示为呈现图 像。

发明内容
因此，在现有技术的图像处理装置1中，利用各个候选参数处理 的所有处理图像都被存储以决定最优参数，并且在图像处理装置1中 准备了一定程度的存储容量。另外，在临时存储所有候选处理图像并 且依次读出这些图像之后做出决定，但该方法并不适用于以交互方式 执行处理的编辑。
考虑到上述情形提出了本发明，并且希望通过简单操作、利用小 存储量来决定当处理图像时所用的最优参数。
根据本发明的一个实施例，提供了一种图像处理装置，包括被配 置为针对施加到图像上的一种处理的一个参数生成多个不同值的生 成单元、被配置为呈现通过利用参数的多个不同值对图像执行处理而 获得的多个处理图像的呈现单元、以及被配置为选择所呈现的多个处 理图像中的一个最优图像的选择单元，其中通过重复执行以下过程来 决定参数的最终值生成单元进一步基于与选择单元所选择的处理图 像相对应的参数的值来生成参数的多个不同值，呈现单元呈现通过利 用所生成的参数的多个不同值对图像执行处理而获得的多个处理图 像，并且选择单元选择所呈现的多个处理图像中的一个最优图像。
在图像处理装置中，根据本发明的又一实施例，在处理图像的呈 现次数是n的情况下，生成单元可以将利用与选择单元所选择的处理 图像相对应的参数值作为中心值、将预定范围划分为n-l个均等部分 而获得的边界处的值设置为该参数的新的多个不同值。
6在图像处理装置中，根据本发明的又一实施例，生成单元可以生 成多种类型的参数并且根据用户过去执行的操作过程的趋势来改变 生成这多种类型参数的顺序。
根据本发明又一实施例的图像处理装置还可包括被配置为提取 图像的特征量的特征量提取单元以及被配置为将所决定的参数的最 终值作为设置信息以与图像的特征量相关联的方式进行存储的存储 单元。
根据本发明又一实施例的图像处理装置还可包括被配置为从存 储单元读取与所提取的图像的特征量相关联地存储的设置信息的设
置信息读取单元，其中图像处理装置具有记录模式和再现模式，在记 录模式中，存储单元以与图像的特征量相关联的方式存储设置信息， 并且在再现模式中，特征量提取单元提取图像的特征量，设置信息读 取单元从存储单元读取与所提取的图像的特征量相关联地存储的设 置信息，并且呈现单元呈现通过利用所读取的设置信息对图像执行处 理而获得的处理图像。
根据本发明的另一个实施例，提供了一种用于包括生成单元、呈 现单元和选择单元的图像处理装置的图像处理方法，该图像处理方法 包括以下步骤在生成单元中为施加到图像上的处理的一个参数生成 多个不同值；在呈现单元中呈现通过利用参数的多个不同值对图像执 行处理而获得的多个处理图像；以及在选择单元中选择所呈现的多个 处理图像中的一个最优图像，其中通过重复执行以下过程来决定参数 的最终值生成单元进一步基于与选择单元所选择的处理图像相对应 的参数的值来生成参数的多个不同值，呈现单元呈现通过利用所生成 的参数的多个不同值对图像执行处理而获得的多个处理图像，并且选 择单元选择所呈现的多个处理图像中的一个最优图像。
根据本发明的另 一个实施例，提供了 一种用于使计算机用作以下 单元的程序被配置为针对施加到图像上的处理的一个参数生成多个 不同值的生成单元、被配置为呈现通过利用参数的多个不同值对图像 执行处理而获得的多个处理图像的呈现单元、以及被配置为选择所呈现的多个处理图像中的一个最优图像的选择单元，其中通过重复执行
以下过程来决定参数的最终值生成单元进一步基于与选择单元所选 择的处理图像相对应的参数的值来生成参数的多个不同值，呈现单元 呈现通过利用所生成的参数的多个不同值对图像执行处理而获得的 多个处理图像，并且选择单元选择所呈现的多个处理图像中的一个最 优图像。
根据本发明的另 一个实施例，通过重复执行以下过程来决定参数 的最终值基于与所选的处理图像相对应的参数值生成参数的多个不 同值，利用所生成的参数的多个不同值对图像执行处理而获得多个处 理图像，并且选择所呈现的多个处理图像中的一个最优图像。
图像处理装置可以是独立的装置或者被配置为执行装置的闺像 处理的模块。
根据本发明的另 一个实施例，可以决定对图像施加处理所采用的 最优参数。
另外，根据本发明的另一个实施例，可以通过简单操作、利用小 存储量来决定对图像施加处理所采用的最优参数。


图l是用于描述现有技术中的图像处理装置的说明图2是用于描述应用本发明的实施例的图像处理装置所执行的 图像处理的概况的说明图3是应用本发明的实施例的图像处理系统的配置例的框图4是特征提取单元的详细配置的框图5是同步检测单元的详细配置的框图6是用于描述同步检测处理的说明图7是反映单元的详细配置的框图8是用于描述特征量累积处理的流程图9是用于描述将设置信息和特征量存储到设置信息记录单元 中的操作的说明图；图IO是用于描述特征量提取处理的流程图ll是用于描述设置信息决定处理的流程图12图示了设置信息表的例子；
图13是用于描述候选值的新生成过程的说明图14是用于描述反映处理的流程图15图示了设置信息的例子；
图16图示了合成图像的例子；
图17图示了显示在显示装置上的画面例子；
图18是用于描述再现模式处理的流程图19是用于描述同步检测处理的流程图20是用于描述反映处理的流程图21图示了再现模式中的显示例子；
图22图示了具有强相关性的两个参数的例子；
图23是用于描述通过轴转换来决定参数的例子的说明图24图示了参数的呈现顺序的转变；
图25图示了参数的省略；
图26是用于描述在结束步骤数方面对呈现顺序进行比较的说明
图27图示了时分显示的显示例子；
图28是用于描述时分显示处理的流程图29是用于描述现有技术中编辑处理的问题的说明图；以及
图30是应用本发明的实施例的计算机的配置框图。
具体实施例方式
首先，将参考图2描述由应用本发明的实施例的图像处理装置执
行的图像处理的概况。
图像处理装置11具有两种模式，包括记录模式和再现模式。 记录模式是这样一种模式，其中从记录介质再现的各个运动图像
被设置为原始图像，通过为处理参数设置相互不同的值而获得的多个
9处理图像被呈现，并且在所呈现的多个处理图像中决定对用户而言最 优的参数。
应当注意，记录模式具有两种类型的呈现方法，包括分屏显示和 时分显示，在分屏显示中，多个处理图像以合成为一屏画面的方式被 同时显示，而在时分显示中，多个处理图像以时分方式被顺序显示。
图2图示了分屏显示的例子，其中以用作处理参数的不同变焦因子来 显示多个处理图像。
另一方面，再现模式是这样一种模式，其中利用在记录模式中决 定的对用户而言最优的参数来对从预定记录介质再现的原始图像施 加处理，并且作为结果获得的处理图傳二故呈现在整个屏幕(一屏画面) 上。
在记录模式中，与以上参考图l所描述的现有技术中的图像处理 装置1不同，图像处理装置11并不在存储器11M中存储利用参数的 不同值获得的多个处理图像，而是存储参数值(变焦因子)作为设置 信息。因此，与图像处理装置l相比，可以减少存储容量。
另外，在记录模式中，图像处理装置11重复地进一步基于用户 所选的参数值来生成多个参数值以缩窄参数值，并且决定对用户而言 最优的值。因此，使用在记录模式中呈现的多个参数值的公用处理图 像在开头被呈现给所有用户。从第二次起，根据用户的选择来呈现不 同处理图像。利用这一配置，可以决定与用户偏好更加匹配的参数。
图3图示了使用根据本发明实施例的图像处理装置11的图像处 理系统的配置例子。
应当注意，根据本实施例，在记录模式中，将描述以分屏显示执 行显示的例子，而时分显示将在后面描述。
图3的图像处理系统由图2中所示的图像处理装置11、被配置 为再现记录介质12以向图像处理装置ll提供运动图像作为原始图像 的再现装置13、以及被配置为显示从图像处理装置11送来的处理图 像的显示装置14组成。应当注意，图像处理装置11具有能够从远处 指示操作的遥控器IIR。图像处理装置11由特征量提取单元41、同步检测单元42、累积 块43、光接收单元44、操作信息识别单元45、设置信息决定单元46、 延迟单元47以及反映单元48组成。如上参考图2所述，根据包括记 录模式和再现模式在内的各个模式，预定处理被施加于从再现装置13 输送的图像，并且作为结果获得的处理图像被显示在显示装置14上。
应当注意，累积块43由设置信息记录单元61、设置信息累积单 元62以及设置信息读取单元63组成。
遥控器11R由键和按钮组成。遥控器IIR根据用户的操作生成 操作信号，并且还根据这样生成的操作信号生成由红外线等组成的发 光脉冲以发射到图像处理装置11。
再现装置13对先前记录并以预定格式编码在记录介质12中的图 像数据进行解码，并顺序地将作为结果获得的图像输送到图像处理装 置11。应当注意，在下文中由再现装置13再现并提供的图像也被称 为再现图像。
在记录模式和再现模式中，特征量提取单元41提取从再现装置 13依次送来的图像的特征量，并将特征量输送到同步检测单元42和 累积块43的设置信息记录单元61。应当注意，特征量提取单元41的 详细配置将在下面参考图4描述。
在再现模式中，同步检测单元42搜索在设置信息累积单元62 中累积的特征量(搜索位置特征量，这将在下面描述)，以寻找与从 特征量提取单元41送来的再现图像的特征量相匹配的特征量(再现 位置特征量，这将在下面描述)。在再现图像的特征量与在设置信息 累积单元62中累积的特征量相匹配的情况下，同步检测单元42将匹 配的特征量作为同步位置信息提供给设置信息读取单元63。应当注 意，同步检测单元42的详细配置将在下面参考图5和6详细描述。
在记录模式中，累积块43的设置信息记录单元61将从设置信息 决定单元46送来的设置信息与从特征量提取单元41送来的再现图像 的特征量相关联，以累积(记录)在设置信息累积单元62中。如上 所述，设置信息是用于对再现图像执行处理的参数的值。设置信息累积单元62存储从设置信息记录单元61输送来的设置信息和特征量， 并根据情形需要将特征量和设置信息输送到设置信息读取单元63。
在设置信息读取单元63将从同步检测单元42送来的特征量作为 同步位置信息的情况下，设置信息读取单元63从设置信息累积单元 62读取与送来的特征量关联存储的设置信息，以输送到设置信息决定 单元46。
光接收单元44接收遥控器IIR的发光图案以转换为操作信号， 并将操作信号输送到操作信息识别单元45。操作信息识别单元45基 于从光接收单元44送来的操作信号来识别与用户所指示的对图像的 处理有关的操作信息，并将操作信息输送到设置信息决定单元46。
在记录模式中，设置信息决定单元46将用于生成呈现在显示装 置14的屏幕上的多个处理图像的多条设置信息提供给反映单元48。 另外，基于从操作信息识别单元45送来的操作信息，设置信息决定 单元46将用户从送给反映单元48的多条操作信息中选择的设置信息 提供给设置信息记录单元61，并且还基于用户所选择的设置信息来生 成接下来的多条操作设置信息以提供给反映单元48。
另一方面，在再现模式中，设置信息决定单元46将从设置信息 读取单元63送来的设置信息提供给反映单元48。
延迟单元47将从再现装置13送来的再现图像延迟一段时间，其 等于特征量提取单元41、同步检测单元42、累积块43和设置信息决 定单元46的处理时间，之后，延迟单元47将再现图像输送到反映单 元48。基于从设置信息决定单元46送来的设置信息，反映单元48对 再现图像施加预定的处理，并在显示装置14上显示处理之后的图像 (处理图像)。应当注意，反映单元48并不对从延迟单元47送来的 再现图像执行处理，并且可以在显示装置14上原样显示原始图像。
图4是特征量提取单元41的详细配置的框图。
特征量提取单元41至少包括DFF(D型触发器)81、加法器82、 DFF (D型触发器)83以及输出单元84。
DFF 81存储最近输入的信号，并且在时钟信号(clk)被从时钟
12信号发生器(未示出)输入的时刻向加法器82输出该信号。另外， 在DFF 81中，当输入信号是图像数据区域外的信号时，复位信号 (reset)被输入，并且输入信号被删除和输出。换句话说，DFF 81 仅与时钟信号同步地向加法器82输送输入信号(再现图像的信号) 中的图像数据区域内的数据。
加法器82将从DFF 81送来的信号与从DFF 83送来的信号相加 然后输出到DFF83。更具体而言，加法器82提取从DFF 81送来的 信号和从DFF 83送来的信号的相加结果中的低8位以输送到DFF 83。
DFF83在时钟信号(clk)被从时钟信号发生器(未示出)输入 的时刻将从加法器82送来的信号输送到加法器82和输出单元84。利 用该配置，DFF 83仅向输出单元84输送一个仅仅图像数据区域中的 数据被加法器82累加到的值。
当从DFF 83送来一帧中的值时，输出单元84将该值作为该帧 中图像的特征量输出。换句话说，输出单元84输出仅仅图像数据区 域中的数据被加法器82累加到的数值的低8位作为该帧中的特征量。 应当注意，特征量可以是以一帧为单位识别图像的信息。因而，不只 是仅仅图像数据区域中的数据(仅仅像素值)被累加到的数值的低8 位可以原样使用，而且例如仅仅图像数据区域的中心附近的预定区域 中的像素值也可以原样使用。应当注意，如上所述，根据本实施例， 图像的特征量是以帧为单位计算的，但是图像的特征量也可以以场为 单位来计算。
接下来，参考图5，将描述同步检测单元42的详细配置。 同步检测单元42由特征量緩冲器101-1至101-3、再现位置特征
量生成单元102、搜索位置特征量读取单元103、比较单元104以及
检测单元105组成。
特征量緩冲器101-1至101-3被配置为临时存储送来的特征量并
且还将迄今所存储的特征量顺序输出到再现位置特征量生成单元102
以及后级的特征量緩冲器101-2和101-3。应当注意，特征量緩冲器101-3不具有后级的特征量緩冲器101，并且因此仅向再现位置特征量 生成单元102输出特征量。
再现位置特征量生成单元102将最近四帧的特征量作为再现位 置特征量输送给比较单元104，在最近四帧的特征量中，输送给同步 检测单元42的最新帧和从特征量緩冲器101-1至101-3送来的过去三 帧的特征量相加。
搜索位置特征量读取单元103以连续的四条为单位顺序读取累 积在设置信息累积单元62中的特征量，以作为搜索位置特征量提供 给比较单元104和检测单元105。比较单元104将从再现位置特征量 生成单元102送来的再现位置特征量与从搜索位置特征量读取单元 103依次送来的搜索位置特征量进行比较。在搜索到与再现位置特征 量相匹配的搜索位置特征量的情况下，比较单元104认为检测到同步 并且将该结果通知给检测单元105。根据比较单元104通知检测到同 步的时间，检测单元105提供同步位置信息。
参考图6，将进一步描述由同步检测单元42执行的同步检测处理。
在图6中，图中的垂直方向较长的矩形框表示一帧的特征量，并 且图6的下部表示再现位置特征量生成单元102将最近四帧的特征量 作为再现位置特征量提供给比较单元104。
另外，在图6的上部的横向方向上排列的大量的矩形框表示存储 在设置信息累积单元62中的大量帧的特征量。然后，搜索位置特征 量读取单元103从前端开始每次四帧地读取这大量帧的特征量，且一 帧接一帧地向后移位，得到例如搜索位置特征量GO、 Gl、 G2、 G3......
例如，在搜索位置特征量G7 (它是由图6中的斜钱所指示的从 最前面数第8帧到第11帧的特征量)与再现位置特征量相匹配的情 况下，比较单元104向检测单元105通知检测到同步，并且在该时刻， 检测单元105将从搜索位置特征量读取单元103送来的搜索位置特征 量的最前面位置处的特征量(也就是说，从最前面位置起的第8特征 量)作为同步位置信息提供给设置信息读取单元63。
14接下来，参考图7，将描述反映单元48的详细配置例子。
反映单元48由分发单元121、处理单元122-1至122-4、以及集 成单元123组成。
从再现装置13送来的再现图像的图像信号被从延迟单元47输送 到分发单元121,并且施加于再现图像的处理的设置信息也作为控制 信号被从设置信息决定单元46输送到分发单元121。
分发单元121将作为图像信号和控制信号提供的再现图像和设 置信息输送到各个处理单元122-1至122-4。在记录模式中，设置信 息例如是在如上参考图2所描述的例子中的四个不同变焦因子的值。 在再现模式中，设置信息是由用户在记录模式中决定的一个最优变焦 因子的值。
在记录才莫式中，与处理单元122-1至122-4分别对应的四个参数 值作为设置信息被一同输送到各个处理单元122-1至122-4。因而， 各个处理单元122-1至122-4从所提供的参数中识别它自身的参数， 并且对再现图像执行基于所识别的参数的处理。然后，处理之后的处 理图像被从各个处理单元122-1至122-4输送到集成单元123。
另一方面，在再现模式中，相同的(单个)参数值被输送到各个 处理单元122-1至122-4。因而，各个处理单元122-1至122-4对再现 图像执行相同的处理并且将处理之后的处理图像输送到集成单元 123。
集成单元123向显示装置14输送合成图像，该合成图像是在记 录模式中通过在经由将屏幕划分为四个均等部分而获得的各个小屏 幕上显示由各个处理单元122-1至122-4利用不同参数处理的处理图 像而获得的。
另一方面，在再现模式中，集成单元123被各个处理单元122-1 至122-4提供给相同的处理图像。因而，集成单元123仅向显示装置 14原样提供从处理单元122-1至122-4送来的处理图像之一。
因此，在再现模式中，各个处理单元122-1至122-4执行相同的 处理，并且仅有经各个处理单元122-1至122-4处理的处理图像之一被利用。因而，处理单元122-1至122-4中仅有一个可以被操作。
接下来，将针对包括记录模式和再现模式的各个模式来描述图像 处理装置11中的处理。
首先，将描述在记录模式下图像处理装置11中的处理。 应当注意，在记录模式中，记录在记录介质12中的所有运动图 像或者由用户指定的运动图像的一部分被从再现装置13重复再现(重 复再现)，并且再现图像被输送到图像处理装置11。
在记录模式中，图像处理装置11定期检测(提取)从再现装置 13送来的再现图像的特征量。另外，当通过利用四个不同参数值对显 示在显示装置14上的再现图像进行处理而获得的四个处理图像中的 任何一个被用户选择时，执行将与所选的处理图像相对应的参数值作 为设置信息与检测到的特征量相关联地存储在累积块43的设置信息 累积单元62中的处理。
更具体而言，在图像处理装置11中，在从再现装置13送来的再 现图像的特征量被定期检测(提取)时，在用户选择了一个预定参数 值的情况下，以下两种处理被同时执行，包括特征量累积处理和设置 信息决定处理特征量累积处理用于在与特征量相关联的情况下存储 所选的设置信息，设置信息决定处理用于显示通过利用四个不同参数 值对再现图像进行处理而获得的四个处理图像，并且在这四个处理图 像中的任何一个被用户选择时向特征量累积处理通知所选的参数值。 考虑到以上内容，首先参考图8的流程图来描述特征量累积处理。
当图像处理装置11的模式被设定为记录模式时，首先，在步骤 Sl中，图像处理装置11判断下一再现图像(新的再现闺像)是否被 输入。在步骤Sl中，处理被重复执行，直到确定下一再现图像被输 入为止，并且在确定下一再现图像被输入的情况下，处理进行到步骤 S2。
在步骤S2中，图像处理装置11将输入的再现图像输送到特征量 提取单元41和延迟单元47。延迟单元47将所提供的再现图像延迟一预定时间段，然后将再现图像输送到反映单元48。
在步骤S3中，特征量提取单元41执行特征量提取处理，以提取 (检测)所提供的再现图像的特征量。特征量提取处理的细节将参考 图9的流程图来描述。利用该配置，再现图像(帧图像)的特征量被 提供给同步检测单元42和设置信息记录单元61。
在步骤S4中，设置信息记录单元61确定是否从设置信息决定单 元46提供了设置信息。
在步骤S4中，在确定从设置信息决定单元46提供了设置信息的 情况下，也就是说，在通过利用四个不同参数值对再现图像进行处理 而获得的四个处理图像中的一个处理图像被用户选择，并且与所选的 处理图像相对应的参数值被作为设置信息提供给设置信息记录单元 61的情况下，处理进行到步骤S5。设置信息记录单元61将从设置信 息决定单元提供来的设置信息与从特征量提取单元41提供来的特征 量相关联地存储在设置信息累积单元62中。
例如，如图9所示，在特征量Cl被存储在预定地址上的情况下， 设置信息记录单元61将与特征量Cl相关联的设置信息El存储在倍 乘m的地址处，即地址mxA处。
以类似的方式，当特征量C2被存储在地址B处时，设置信息记 录单元61将相应的设置信息存储在地址mxB处。此外，当特征量 C3 ,皮存储在地址C处时，设置信息记录单元61将相应的设置信息 E3存储在地址mxC处。由于设置信息以这种方式与特征量相关联地 存储，因此如果决定了特征量，就可以由特征量的地址识别设置信息 的地址。因而，可以在设置信息累积单元62中顺利地搜索每个特征 量的设置信息。
返回图8，在步骤S4中，在确定没有从设置信息决定单元46提 供设置信息的情况下，步骤S5中的处理将被跳过。
然后，在步骤S6中，图像处理装置ll判断是否指示操作结束。 这里，用于结束操作的指示例如表示记录模式的结束、用于关闭图像 处理装置11的电源的操作，等等。在步骤S6中，在确定没有指示操作结束的情况下，处理返回到 步骤Sl，并且步骤Sl至S6中的上述处理被重复执行。另一方面， 在步骤S6中，在确定指示了操作结束的情况下，处理结束。
接下来，参考图10的流程图，将描述在特征量累积处理中的步 骤S3中的特征量提取处理的细节。
在步骤S21中，特征量提取单元41复位DFF 83中保存的数据 (比特)。
在步骤S22中，特征量提取单元41选择再现图像的像素中未经 处理的像素。在步骤S23中，判断所选的像素是否在图像数据区域外。 也就是说，特征量提取单元41按光栅扫描顺序依次读取一帧的再现 图像中未经处理的像素，判断该像素是否在图像数据区域外。
在步骤S23中，在确定所选的像素在图像数据区域外的情况下， 处理进行到步骤S24，在步骤S24中，DFF 81被复位并且0作为像素 值被输出到加法器82。另一方面，在步骤S23中，在确定所选的像素 在图像数据区域内的情况下，处理进行到步骤S25，在步骤S25中， DFF 81在生成时钟信号的时刻向加法器82输送像素值。
在步骤S26中，加法器82将输入像素值与从DFF 83送来的信 号彼此相加以输送给DFF 83。
在步骤S27中，DFF 83将在生成时钟信号的时刻从加法器82 提供来的加法结果的低8位返回到加法器82。此时，DFF 83还将加 法结果输送到输出单元84，但是输出单元84并不输出该加法结果。
在步骤S28中，特征量提取单元41判断是否存在未经处理的像 素。在确定仍然存在未经处理的像素的情况下，处理返回到步骤S22。 利用该配置，除非一帧的所有像素都已被处理，否则步骤S22至S28 中的处理被重复执行。然后，在步骤S28中，在确定不存在未经处理 的像素的情况下，也就是说，在一帧的所有像素都已被处理的情况下， 处理进行到步骤S29，在步骤S29中，输出单元84输出从DFF83送 来的加法结果，即，输出属于图像数据区域中的像素值的累加结果的 低8位，作为一帧中图像的特征量。利用上述处理， 一帧的再现图像的图像数据区域中的所有像素值
的累加结果的低8位被提取作为再现图像的特征量。
接下来，将描述作为记录模式中的其他处理的设置信息决定处理。
图ll是设置信息决定处理的流程图。
首先，在步骤S41中，设置信息决定单元46将用于识别设置信 息的类型的设置信息类型号M设定为1。
如图12所示，设置信息决定单元46存储各种设置信息，例如与
图像质量的调节值有关的设置信息(包括图像亮度、颜色深度、分辨 率和噪声消除)、与图像帧有关的设置信息(包括视频格式和变焦图
像帧)、以及与音频量的调节值有关的设置信息(包括音量和噪声消 除)，设置信息决定单元46将这各种设置信息存储为与设置信息类 型号M相关联的一个表(下文中也称为设置信息表)。在图12的例 子中，利用设置信息类型号1 (M = l),由变焦中心坐标和变焦因子 决定的变焦图像帧被存储，并且图像的亮度被存储为设置信息类型号 2(M = 2)。类似地，图像的颜色深度、图像的颜色遮蔽、噪声降低、 分辨率和音频滤波器分别被存储为设置信息标识号3、 4、 5、 6和7。 设置信息决定单元46顺序地改变设置信息类型号M，并且重复执行 步骤S42至S51中的处理(这将在下面描述)。以这种方式，针对所 有设置信息决定对用户最优的设置信息。
在步骤S42中，设置信息决定单元46将重复次数N设定为1, 重复次数N是缩窄由设置信息类型号M标识的当前设置信息的参数 值的次数。
在步骤S43中，设置信息决定单元46判断重复次数N是否等于
在步骤S43中，在确定重复次数N等于1的情况下，也就是说， 在对于由设置信息类型号M标识的当前设置信息的选择是第一次的 情况下，在步骤S44中，设置信息决定单元46计算由设置信息类型 号M标识的当前设置信息的四个候选值的初始值。计算初始值的方法将在下面与对步骤S45中的处理的描述一起描述。
另一方面，在步骤S43中，在确定重复次数N不等于1的情况 下，由于存在用户所选择的初始值，因此在下面将描述的步骤S49中， 设置信息决定单元46在步骤S45中基于用户选择的候选值来计算四 个新的候选值。
例如，在某一设置信息类型号M的设置信息的值范围是Vmin^ V S Vmax的情况下，设置信息决定单元46可以通过下面的表达式(1) 来计算第N次的四个候选值VN(x) ( x = 0至3 )。
表达式(1)<formula>formula see original document page 20</formula>
在表达式(l)中，X表示候选值(4)的数目减1而获得的值(X
=候选值的数目-1)，并且Vn自x和VNmin分别表示第N次的最大 值和最小值。
表达式(1)可以通过类似表达式(2)的递归式来表达。 表达式(2)、/ "、 x.VNmax+(X-X) .VNmin V(X) =-^-
VN(x) =VN—一 maxn Nmin (2x-X) …(2)
vmin^vn—vmax乂i國 i,厶......，/
根据表达式(2)，可以理解，通过从用户给出的四个候选值中 重复地选择一个值，参数值被缩窄。
将描述具体的数值例。例如，在VminS V《Vmax为 的情况下，第一次的四个候选值V!(O)至V,(3)可以按如下方式获得。
表达式(3)
Vi(0),-，…=0 Vl(" = 1'99+(33-".0=33
，=2.9"一2).0=66 ，=3，普0=99
因此，具有参数值O、 33、 66和99的四个处理图像被送给显示 装置14。接下来，如果用户从具有参数值0、 33、 66和99的四个处 理图像中选择与参数值33相对应的处理图像，则第二次的四个候选 值V2(0)至V2(3)可以按如下方式获得。
表达式(4)V2(0) V2(1) V2(2) V2(3)
=33-
=33.
33
=33.
99-0
1^
99-0
99-0 2'32 99-0
2.3
2
(2.0-3) (2'1-3) (2'2-3) (2'3—3)
=33-
=33.
=33-
=33.
99'3
99
卯 2'32
99.3
16.5 27.5 38.5 49.5
17 28 39 50
第一次的四个候选值V"O)至V"3)和第二次的四个候选值V2(0) 至V2(3)变为如图13所示。如参考图13所理解的，设置信息决定单 元46决定当在第一次选择的候选值33被用作中心值时的预定范围 (17和50之间的范围)被划分为三个均等部分("候选数目-l"个 均等部分)时的边界值，来作为新的参数值。因此，随着重复次数的 增大，候选值的范围缩窄，并且可以进行细调。
在步骤S46中，设置信息决定单元46将在步骤S44或步骤S45 中计算出的所有候选值提供给反映单元48。
在步骤S47中，反映单元48执行反映处理，以利用显示在显示 装置14上的再现图像来反映从设置信息决定单元46送来的四个候选 值。该处理的细节将在下面参考图14描述。
在步骤S48中，基于从操作信息识别单元45送来的操作信息， 设置信息决定单元46判断在四个呈现的候选值中是否有哪个候选值 被用户选择，并且流程持续直到确定有一个候选值被选择为止。
在步骤S48中，在确定有一个候选值被用户选择的情况下，设置 信息决定单元46在步骤S49中将所选的候选值确认为第N次的所选 值VN。
在步骤S50中，设置信息决定单元46判断与由设置信息类型号 M标识的当前设置信息有关的设置(缩窄)是否要结束。在步骤S50 中，在用户执行了结束操作的情况下(例如，难以生成新的候选值或 者重复次数N达到了预先设定的预定数)，确定与当前设置信息有关
22的设定要结束。
在步骤S50中，在确定与当前设置信息有关的设定不是要结束的 情况下，设置信息决定单元46在步骤S51中使重复次数N递增1, 并且之后处理返回到步骤S43。利用该配置，步骤S43至S50中的处 理再次^皮重复执4亍。
另一方面，在步骤S50中，在确定与当前设置信息有关的设定要 结束的情况下，处理进行到步骤S52，在步骤S52中，设置信息决定 单元46判断是否对于所有设置信息决定了最优参数值。
在步骤S52中，在确定还未对所有设置信息决定最优参数值的情 况下，设置信息决定单元46在步骤S53中使设置信息类型号M递增 1，并且处理返回到步骤S42。利用该配置，上述步骤S42至S52中 的处理被重复执行。
另一方面，在步骤S52中，在确定已对所有设置信息决定了最优 参数值的情况下，处理结束。
图14是用于描述上述步骤S47中的反映处理的详细处理的流程图。
在步骤S61中，反映单元48的分发单元121分发从设置信息决 定单元46送来的设置信息。更具体而言，分发单元121将从设置信 息决定单元46送来的四个候选值输送给各个处理单元122-1至122-4。 另外，分发单元121还将从延迟单元47送来的再现图像输送给各个 处理单元122-1至122-4。
在步骤S62中，各个处理单元122-1至122-4基于设置信息执行 处理。例如，在图15所示的变焦图像帧中的参数被提供作为设置信 息的情况下，处理单元122-1针对再现图像利用候选值号1的参数执 行处理。处理单元122-2针对再现图像利用候选值号2的参数执行处 理。处理单元122-3和处理单元122-4以类似的方式执行处理。然后， 处理之后的处理图像(处理之后的处理图像的图像信号)被输送到集 成单元123。
在步骤S63中，集成单元123对从各个处理单元122-1至122-4输送来的处理图像进行合成以创建四元屏幕，并且在步骤S64中，合 成图像(合成图像的图像信号)被输出并显示在显示装置14上，并 且处理返回。
图16图示了与用作图15中所示的设置信息的四个候选值相对应 生成的合成图像的例子。另外，图17图示了显示在显示装置14上的 画面的例子。在显示画面上，供用户执行选择的光标CL也重叠在图 16的合成图像上。
如上所述，在记录模式中，由于图8的特征量累积处理和图11 的设置信息决定处理被同时执行，因此对于从再现装置13提供来的 再现图像决定了对用户最优的参数值，并且该参数值与特征量相关联 地被累积在设置信息累积单元62中。
应当注意，在上述设置信息决定处理的例子中，关于由设置信息 类型号M标识的各条设置信息，最优参数值被从同一初始值起定期 缩窄。在第二次和之后的设置信息决定处理中，先前决定的值可以变 为初始值(或者初始值之一)。
接下来，将参考图18的流程图描述再现模式中的处理(再现模 式处理)。
首先，在步骤S101中，图像处理装置ll判断下一再现图像(新 的再现图像)是否被输入。除非确定下一再现图像被输入，否则步骤 S101中的处理被重复执行。在确定下一再现图像被输入的情况下，处 理进行到步骤S102。
在步骤S102中，图像处理装置11将输入的再现图像输送到特征 量提取单元41和延迟单元47。在延迟单元47将送来的再现图像延迟 一预定时间段之后，延迟单元47将再现图像输送到反映单元48。
在步骤S103中，特征量提取单元41执行特征量提取处理，以提 取(检测)所提供的再现图像的特征量。特征量提取处理的细节与如 上所述的图9中的上述处理类似，并且其描述将被省略。
在步骤S104中，同步检测单元42执行同步检测处理，以从累积 在设置信息累积单元62中的特征量(搜索位置特征量)当中搜索出与从特征量提取单元41提供来的再现图像的特征量(再现位置特征 量)相匹配的特征量。同步检测处理的细节将在下面参考图19描述。 在累积在设置信息累积单元62中的特征量当中存在与从特征量提取 单元41提供来的再现图像的特征量相匹配的特征量的情况下，同步 检测单元42将在匹配的搜索位置特征量的最前面位置上的特征量作 为同步位置信息提供给设置信息读取单元63。
在步骤S105中，设置信息读取单元63判断是否提供了同步位置 信息。在步骤S105中，在确定未提供同步位置信息的情况下，步骤 S106至S108中的处理被跳过。
另一方面，在步骤S105中，在确定提供了同步位置信息的情况 下，在步骤S106中，设置信息读取单元63读取与作为同步位置信息 而提供的特征量相关联的、存储在设置信息累积单元62中的设置信 息，并将该设置信息提供给设置信息决定单元46。
在步骤S107中，设置信息决定单元46将从设置信息读取单元 63提供来的设置信息作为控制信号提供给反映单元48。
在步骤S108中，反映单元48执行用于在要显示的再现图像上反 映所提供的设置信息的反映处理。该处理的细节将在下面参考图20 描述。
在步骤S109中，图像处理装置ll判断是否指示了操作的结束。 在步骤S109中，在确定未指示操作结束的情况下，处理返回到步骤 S101，并且步骤S101至S109中的上述处理4皮重复执行。另一方面， 在步骤S109中，在确定指示了操作结束的情况下，处理结束。
参考图19的流程图，将描述步骤S104中的上述同步检测处理的细节。
在步骤S121中，搜索位置特征量读取单元103将用于标识搜索 位置的计数器i设为0。
在步骤S122中，再现位置特征量生成单元102将最近四帧的特 征量作为再现位置特征量输送到比较单元104,在最近四帧的特征量 中，被输送到同步检测单元42的最新一帧的特征量和保存在特征量緩冲器101-1至101-3中的过去三帧的特征量彼此相加。
在步骤S123中，搜索位置特征量读取单元103读取在从累积在 设置信息累积单元62中的特征量的最前面位置起的第i位置处的连续 四帧的特征量作为搜索位置特征量，并将该特征量输送到比较单元 104和检测单元105。
在步骤S124中，比较单元104将从再现位置特征量生成单元102 送来的再现位置特征量与从搜索位置特征量读取单元103送来的搜索 位置特征量进行比较。
在步骤S125中，比较单元104判断再现位置特征量是否与搜索 位置特征量相匹配。
在步骤S125中，在确定再现位置特征量不与搜索位置特征量相 匹配的情况下，处理进行到步骤S126，在步骤S126中，比较单元104 判断是否累积在设置信息累积单元62中的所有特征量都与再现位置 特征量进行了比较。然后，在步骤S126中，在确定并不是所有特征 量都已被比较的情况下，比较单元104在步骤S127中使计数器i递增 1，并且处理返回到步骤S123。利用该配置，在累积在设置信息累积 单元62中的特征量被移位一帧间隔的情况下，由四个连续帧的特征 量組成的搜索位置特征量与再现位置特征量的比较被重复执行。
另一方面，在步骤S126中，在确定所有特征量都已被比较的情 况下，处理返回到图18。
另一方面，在步骤S125中，在确定再现位置特征量与搜索位置 特征量相匹配的情况下，处理进行到步骤S128，在步骤S128中，比 较单元104向检测单元105通知再现位置特征量匹配。基于该通知， 检测单元105将在当前从搜索位置特征量读取单元103提供来的搜索 位置特征量的最前面位置处的特征量，即在从最前面位置起第i位置 处的特征量，作为同步位置信息提供给设置信息读取单元63，并且处 理返回到图18中的处理。
利用上述处理，可以建立累积在设置信息累积单元62中的特征 量和再现图像的特征量之间的同步。换句话说，为了抑制由于同步检
26测单元42仅对再现图像帧的特征量与累积在设置信息累积单元62中 的特征量进行比较而导致的特征量偶然匹配并且在错误位置处检测 到同步的可能性，执行四帧的比较，这四帧不仅包括当前被再现的帧 的特征量，还包括含再现帧的过去三帧的特征量。因而，更准确地执 行了同步检测。另外，通过以这种方式使用特征量，可以以各个帧为 单位来设置特征量，而不是时间码。因而，在不使用时间码的情况下， 可以以帧为单位执行同步检测。
接下来将参考图20的流程图来描述图18的步骤S108中的反映 处理的细节。
首先，在步骤S141中，反映单元48的分发单元121分发从设置 信息决定单元46送来的设置信息。更具体而言，分发单元121将从 设置信息决定单元46送来的一个候选值输送到各个处理单元122-1 至122-4。另外，分发单元121将从延迟单元47送来的再现图像输送 到各个处理单元122-1至122-4。
在步骤S142中，各个处理单元122-1至122-4基于设置信息执 行处理。由于输送给各个处理单元122-1至122-4的是相同的参数值， 所以各个处理单元122-1至122-4对再现图像执行相同的处理。各个 处理单元122-1至122-4将处理之后的处理图像(处理之后的处理图 像的图像信号)输送到集成单元123。
在步骤S143中，集成单元123将从各个处理单元122-1至122-4 送来的任一个处理图像，例如来自处理单元122-1的处理图像(处理 图像的图像信号)原样输出到显示装置14,并且该处理图像被显示。
图21图示了在再现模式中显示在显示装置14上的处理图像例子。
例如，在记录模式中，在通过图17中的光标CL从与图15中所 示的四种类型的变焦图像帧的参数值相对应的处理图像中选择了处 理图像的情况下，也就是说，在选择了候选号为3的参数值的情况下， 在再现模式中，同样通过建立再现图像的特征量处的同步，对于同一 图像，显示利用候选号为3的参数值(即，变焦中心坐标(300,600)和变焦因子250%)执行处理的处理图像。
如上所述，在再现模式中，当从再现图像中检测到与累积在设置 信息累积单元62中的特征量相同的特征量时，与检测到的特征量相 关联地存储在设置信息累积单元62中的设置信息被用于对再现图像 施加处理。通过利用用户所选择的参数值(在记录模式中被确定为最 优值)对再现图像执行处理而获得的处理图像可以被再现并显示。
应当注意，根据上述再现模式处理，并不是对于所有再现图像(所 有再现图像的帧)与设置信息相关联的特征量都被累积在设置信息累 积单元62中。因而，直到检测到下一特征量为止，显示的是(保持) 使用先前设定的设置信息的处理图像，但是对于所有再现图像，特征 量和设置信息可以累积在设置信息累积单元62中，并且对于每个帧 可以读出设置信息以施加处理并且显示处理图像。在这种情况下，在 记录模式中，在确定在图8的特征量累积处理的步骤S4中没有提供 设置信息的情况下，当前设置信息可以与从特征量提取单元41送来 的特征量相关联地存储在设置信息累积单元62中。
另外，根据上述实施例，在记录模式中，多条设置信息被用户决 定的顺序，即用户决定的设置信息的顺序是基于设置信息决定单元46 所存储的设置信息表而固定的(设置信息表中设置信息类型号M的 顺序)，如图12所示。
然而，取决于设置信息的类型，认为在参数之间存在相关，因为 参数的属性是彼此类似的。如果决定了某一参数，则例如在某些情况 下可以估计另一参数。
决定参数最优值是用户接口单元的基础部分，并且用户决定参数 最优值的容易程度是很重要的。
考虑到以上内容，在图像处理装置ll中，可以采用下面将示出 的各种呈现方法，以使用户可以决定图12中所示的多种类型的设置 信息(参数)。
例如，如果通过多次缩窄操作用户分别决定了预定参数P和预 定参数Q，则在如图22所示在参数P和参数Q的最终参数值之间存在强相关的情况下，当用户决定了参数P时，通过从参数P和参数Q 之间的相关获得参数Q，用户可以省略对参数Q的选择。
更精确地说，在参数P和参数Q的相关系数r的绝对值足够大 并且可以由最小二乘法等导出关系表达式Q = f(P)的情况下，当决定 了参数P的最优值P，时，图像处理装置11由Q， = f(P，)获得参数Q 的最优值Q，，并且用户可以省略对参数Q的选择。或者，通过Q， = f(P，) 获得的参数Q的值Q，并不被直接设定为最优值，而是在用于选择参 数Q的最优值的处理中，呈现的初始值可以械:设置为参数Q，。在这 种情况下，随着供用户决定参数Q的最优值的缩窄操作的次数减少， 可以更容易地执行设置。
在某些情况下，参数P和参数Q的相关系数r的绝对值相对较 大，但是还未执行从其他参数的类似应用，并且在参数被调节之后， 存在其他参数应当被重新调节的平衡关系。更具体而言，在某些情况 下，在参数值按照参数P和参数Q的顺序被调节之后，由于来自参数 Q的值的改变的影响，参数P的值应当被重新调节。
在这种情况下，图像处理装置11可以抑制这种重新调节，因为 用户利用在要调节的参数的轴被转换之后的值来执行调节。更精确地 说，如图23所示，关于参数P和参数Q之间的关系，图像处理装置 ll通过最小二乘法等获得关系表达式Q-f(P)，并且导出平行于这样 获得的关系表达式的轴R和垂直于轴R的轴S。然后，图像处理装置 11允许用户调节参数R和参数S的值，而不是参数P和参数Q的值。 轴R和轴S具有相对小的相关性。在利用轴R执行了粗调之后，利 用轴S执行细调。因此，在不执行重新调节的情况下，可以决定参数 的最优值。另外，由于轴S的值范围很窄，因此有利于最优值的缩窄。
接下来，用户被认为对相似类型的参数执行类似的设置。因而， 如果连续执行对具有强相关性的参数的设置，则可以更容易地设置最 优值。
考虑到以上内容，如图24的上部所示，按原始呈现顺序，用户 按照参数A、参数B、参数C和参数D的顺序来调节参数。在参数A和参数C具有强相关性的情况下，图像处理装置11交换参数B和参 数C的呈现顺序，如图24的下部所示，按照所述顺序来呈现参数A 和参数C。也就是说，可以连续调节具有相关性的参数A和参数C。 应当注意，在图24中，在"参数B+D的最优值决定，，中，参数B和D 也具有强相关性。在利用上述关系表达式D = f(B)来决定参数B的情 况下，参数D的值也是基于参数B的值决定的。
另外，对于其值没有在过去参数设置中改变或者其值在一预定时 间段内没有改变的参数，图像处理装置11也可以省略参数调节。例 如，如图25所示，在参数A、参数B、参数C和参数D中迄今为止 参数C的值没有被用户改变的情况下，不执行对参数C的调节，而 是仅可以执行对参数A、参数B和参数D的调节。
此外，尽管因果关联并不明显，但是取决于参数的呈现顺序，步 骤数目(时间长度、操作的数目等等)被改变，直到在某些情况下最 终决定了参数的所有最优值为止。考虑到以上内容，图像处理装置ll 按情形需要来切换参数呈现的呈现顺序，并对步骤的数目(结束步骤 数)计数，直到决定了此时的所有参数为止。因而，有可能设置这样 一种呈现顺序，按照该顺序可以用更少的结束步骤数来决定所有的参 数。
例如，如图26的上部所示，当用户按参数A、参数B、参数C 和参数D的顺序执行调节时的步骤数目是总共40个步骤，分别由10 个步骤、20个步骤、5个步骤和5个步骤组成。如图26的下部所示， 当用户按参数B、参数A、参数C和参数D的顺序执行调节时的步骤 数目是总共45个步骤，分别由5个步骤、IO个步骤、15个步骤和15 个步骤组成。在这种情况下，图像处理装置11可以允许用户利用如 图26的上部所示的较小的结束步骤数来按照参数A、参数B、参数C 和参数D的顺序执行调节。这种改变并不是通用于所有用户的，而是 在对用户有大的依赖度(例如参数之间的关联)的情况下有效。
另外，谈到与参数调节有关的个体之间的差异，某些用户偏好这 样一种调节方式其中严格调节各个参数，之后执行对参数的下一次调节，而其他用户偏好另一种调节方式其中粗略地调节所有的各个 参数，并且再次对每个参数执行最终的严格调节。考虑到以上内容， 闺像处理装置11记录各个用户的过去调节方式。在下一次和之后要 执行的调节中，还可以在用户偏好的调节方式中呈现参数的候选值。 例如，获得对各个参数的连续候选选择操作的次数的平均值。在该平 均值等于或大于预定值的情况下，决定了用户偏好前一种调节方式， 并且在该平均值小于预定值的情况下，决定了用户偏好后一种调节方
式。应当注意，在粗调所有的各个参数并且再次对每个参数执行最终 的严格调节的调节方式中，应当呈现使用用于粗调的值作为执行严格
调节的阶段的初始值的处理图像。
如上所述，在图像处理装置ll中，提取直到用户决定参数的最 优值为止的过去操作过程的典型趋势，并且改变根据该特征下一次执 行参数调节的操作过程。因而，操作过程可以被简化或改变，并且用 户可以简单地或者在短时间内决定参数的最优值。也就是说，在图像 处理装置11中，通过改变专用于用户的参数调节的操作过程，可以 减小用户的工作小时数。
接下来，将描述在记录模式中以时分方式呈现处理图像，而不是 以分屏显示呈现多个处理图像的情况。在时分显示中，例如在如图27 所示的变焦图像帧的参数例子中，与四种类型的不同图像相对应的处 理图像以预定顺序按预定的时间间隔被重复显示。
图28是在反映单元48的集成单元123中执行的时分显示处理的 流程图。
首先，在步骤S161中，反映单元48将用于标识与在显示装置 14上显示的处理图像相对应的候选号的变量j设置为1。
在步骤S162中，集成单元123显示候选号j的处理图像以确定
一预定时间段(换句话说，当前时刻Tcwt和基准时刻Tbase之差 Tcurrent - Tbase )是否超过用于显示处理图像一次的显示时间Tthreshold。
在步骤S162中，在确定从候选号j的图像被显示起经过了该预 定时间段的情况下，在步骤S163中，集成单元123用当前时刻Tcurrent
31来替换基准时刻Tbase。在步骤S164中，通过向当前候选号j除以候 选值的数目(候选数)得到的余数加1而获得的值((j mod候选数) + 1)被设置为新的候选号j。
在步骤S162中，在确定从候选号j的处理图像被显示起没有经 过预定时间段的情况下，或者在步骤S164中的处理之后，在步骤S165 中，集成单元123显示利用候选号j的参数值进行处理的处理图像。
在步骤S166中，集成单元123判断处理是否要结束。在步骤S166 中，在确定处理不是要结束的情况下，处理返回到步骤S162，并且重 复执行之后的处理。另一方面，在步骤S166中，在确定处理要结束 的情况下，即，例如在记录模式结束或者执行了用于关闭图像处理装 置11的电源的操作的情况下，时分显示结束。
如上所述，利用图像处理装置ll，通过在显示于显示装置14上 的多个处理图像被目视比较的同时、用户执行用于选择所需的处理图 像的简单操作，可以执行诸如对变焦帧和图像质量的调节之类的复杂 编辑。也就是说，可以通过简单操作实现复杂的线性编辑。
在现有技术的编辑处理中，在生成临时处理图像之后，如果要施 加进一步的处理，则例如存在信息丢失并且难以执行再次处理的问 题。例如，如图29所示，显然可以对原始图像执行变焦处理以具有 处理图像B的状态，但是一旦对原始图像执行了变焦处理以具有处理 图像A的状态，之后就设定了过高的变焦因子。当想要通过设置略小 的变焦因子来创建处理图像B时，从处理图像A仅能生成信息丢失的 处理闺像B，，并且难以生成处理图像B。这样，在现有技术的编辑处 理中，当处理累积时存在局限性。另一方面，在图像处理装置ll中， 并不触及原始图像，并且编辑操作可以以交互方式被取消或重新进 4亍，而且可以容易地累积处理。
此外，如上参考图2所述，利用被用户选为最优值的参数处理的 处理图像不被存储，而是仅仅与特征量相对应的设置信息(参数)被 存储，并且因此存在可以减少存储容量的效果。
本申请人在日本专利申请No. 2007-187879或日本专利申请No.2007-187880中提出了 一种图像处理装置，该装置用于以屏分或时分
方式呈现具有不同处理参数的多个处理图像并且通过将多个处理图
像相互比较来选择最优参数。根据在日本专利申请No. 2007-187879
或日本专利申请No. 2007-187880中提出的方法，参数的提议值是预
先准备的。因此，准备呈现候选(处理图像的候选)的变化是很麻烦
的，另外呈现候选实际上可能并不包括用户所需的图像。在某些情况
下，难以实现用户满意的编辑。另外，没有针对用户专门定制并且改 变参数调节的操作过程的处理。
在图像处理装置ll中，从参数的值范围中决定初始值，并且根 据用户所选择的候选值来缩窄参数。因此，可以设定用户所期望的值。 另外，如上所述，可以针对用户专门定制并且改变参数调节的操作过 程。
应当注意，在上述例子中，描述了这样一种情况，其中在记录模 式中，要处理的处理图像的数目是4，但是要呈现的处理图像的数目 可以是2、 3、 5或更大。
上述处理系列可以用硬件执行，也可以用软件执行。在该处理系 列用软件执行的情况下，构成软件的程序被从程序记录介质安装到含 在专用硬件内的计算机中或者能够例如通过安装各种程序来执行各 种功能的通用个人计算机中。
图30是被配置为通过软件执行上述处理系列的计算机的硬件配 置例子的框图。
在计算机中，CPU (中央处理单元)201、 ROM(只读存储器) 202和RAM (随才几访问存储器)203经由总线204彼此连接。
此外，输入和输出接口 205连接到总线204。连接到输入和输出 接口 205的有由键盘、鼠标、麦克风等组成的输入单元206，由显示 器、扬声器等组成的输出单元207，由硬盘、非易失性存储器等组成 的存储单元208，由网络接口等组成的通信单元209，用于驱动诸如 磁盘、光盘、磁光盘或半导体存储器之类的可移动介质211的驱动器 210。
33在如上所述构造的计算机中，CPU201经由输入和输出接口 205 与总线204将例如存储在存储单元208中的程序加载到RAM 203上 以供执行，从而执行上述处理系列。
由计算机(CPU 201)执行的程序例如在记录在可移动介质211 上，或者经由诸如局域网、因特网或数字卫星广播之类的有线或无线 传输介质提供，其中可移动介质211是由磁盘(包括柔性盘)、光盘 (CD-ROM (压缩盘-只读存储器)、DVD (数字多功能盘)等等)、 磁光盘、半导体存储器等组成的封装介质。
应当注意，由计算机执行的程序可以是按照在本申请中描述的顺 序以时间串行方式执行处理的程序，或者是并行地或者以期望时序 (例如在执行调用时)执行处理的程序。
在本申请中，在流程图中描述的步骤显然包括按所述顺序以时间 串行方式执行的处理，并且还包括不是按时间串行方式执行、而是并 行或单独执行的处理。
应当注意，在本申请中，系统表示由多个装置组成的整个装置。
本发明的实施例并不限于上述实施例。
本申请包含与2008年5月14日向日本专利局提交的日本在先专 利申请JP 2008-126958有关的主题，上述申请的全部内容通过引用而 结合于此。
本领域技术人员应当理解，取决于设计需求和其他因素可以发生 各种修改、组合、子组合和变更，只要这些修改、组合、子组合和变 更在权利要求或其等同物的范围内。
权利要求
1.一种图像处理装置，包括生成单元，被配置为针对施加于图像的处理的一个参数生成多个不同值；呈现单元，被配置为呈现通过利用所述参数的多个不同值对所述图像执行处理而获得的多个处理图像；以及选择单元，被配置为选择所呈现的多个处理图像中的一个最优图像，其中通过重复执行以下过程来决定所述参数的最终值所述生成单元进一步基于与所述选择单元所选择的处理图像相对应的所述参数的值来生成所述参数的多个不同值，所述呈现单元呈现通过利用所生成的所述参数的多个不同值对所述图像执行处理而获得的多个处理图像，并且所述选择单元选择所呈现的多个处理图像中的一个最优图像。
2. 如权利要求1所述的图像处理装置， 其中在所述处理图像的呈现次数是ii的情况下， 所述生成单元将利用与所述选择单元所选择的处理图像相对应的所述参数的值作为中心值、将预定范围划分为n-l个均等部分而获 得的边界处的值设置为所述参数的新的多个不同值。
3. 如权利要求2所述的图像处理装置，其中所述生成单元生成多种类型的参数并且根据用户过去执行 的操作过程的趋势来改变生成所述多种类型的参数的顺序。
4. 如权利要求2所述的图像处理装置，还包括 特征量提取单元，被配置为提取所述图像的特征量；以及 存储单元，被配置为将所决定的所述参数的最终值作为设置信息与所述图像的特征量相关联地进行存储。
5. 如权利要求4所述的图像处理装置，还包括设置信息读取单元，被配置为从所述存储单元读取与所提取的所 述图像的特征量相关联存储的设置信息，其中所述图像处理装置具有记录模式和再现模式，在所述记录模式中，所述存储单元以与所述图像的特征量相关联 的方式存储设置信息，并且在所述再现模式中，所述特征量提取单元提取所述图像的特征所述设置信息读取单元从所述存储单元读取与所提取的所述图 像的特征量相关联存储的设置信息，并且所述呈现单元呈现通过利用所读取的设置信息对所述图像执行 处理而获得的处理图像。
6. —种用于包括生成单元、呈现单元和选择单元的图像处理装 置的图像处理方法，该图像处理方法包括以下步骤在所述生成单元中为施加于图像的处理的一个参数生成多个不同值；在所述呈现单元中呈现通过利用所述参数的多个不同值对所述图像执行处理而获得的多个处理图像；以及在所述选择单元中选择所呈现的多个处理图像中的一个最优图像，其中通过重复执行以下过程来决定所述参数的最终值所述生成单元进一步基于与所述选择单元所选择的处理图像相对应的所述参数的值来生成所述参数的多个不同值，所述呈现单元呈现通过利用所生成的所述参数的多个不同值对所述图像执^f亍处理而获得的多个处理图像，并且所述选择单元选择所呈现的多个处理图像中的一个最优图像。
7. —种程序，用于使计算机用作生成单元，被配置为针对施加于图像的处理的一个参数生成多个 不同值；呈现单元，被配置为呈现通过利用所述参数的多个不同值对所述图像执行处理而获得的多个处理图像；以及选择单元，被配置为选择所呈现的多个处理图像中的一个最优围像，其中通过重复执行以下过程来决定所述参数的最终值所述生成单元进一步基于与所述选择单元所选择的处理图像相对应的所述参数的值来生成所述参数的多个不同值，所述呈现单元呈现通过利用所生成的所述参数的多个不同值对所述图像执行处理而获得的多个处理图像，并且所述选择单元选择所呈现的多个处理图像中的一个最优图像。
8. —种图像处理设备，包括生成装置，被配置为针对施加于图像的处理的一个参数生成多个 不同值；呈现装置，被配置为呈现通过利用所述参数的多个不同值对所述 图像执行处理而获得的多个处理图像；以及选择装置，被配置为选择所呈现的多个处理图像中的一个最优图像，其中通过重复执行以下过程来决定所述参数的最终值所述生成装置进一步基于与所述选择装置所选择的处理图像 相对应的所述参数的值来生成所述参数的多个不同值，所述呈现装置呈现通过利用所生成的所述参数的多个不同值 对所述图像执行处理而获得的多个处理图像，并且 所述选择装置选择所呈现的多个处理图像中的一个最优图像。
全文摘要
本发明公开了图像处理装置、图像处理方法和程序。该图像处理装置包括用于为施加到图像上的处理的一个参数生成多个不同值的生成单元、用于呈现通过利用参数的多个不同值对图像执行处理而获得的多个处理图像的呈现单元、以及用于选择所呈现的多个处理图像中的一个最优图像的选择单元，其中通过重复执行以下过程来决定参数的最终值生成单元进一步基于与所选择的处理图像相对应的参数值来生成参数的多个不同值，呈现单元呈现通过利用所生成的参数的多个不同值对图像执行处理而获得的多个处理图像，并且选择单元选择所呈现的多个处理图像中的一个最优图像。
文档编号G11B27/031GK101583006SQ20091014086
公开日2009年11月18日 申请日期2009年5月14日 优先权日2008年5月14日
发明者赤尾雅人, 近藤哲二郎 申请人:索尼株式会社