拍摄装置的制作方法

专利名称：拍摄装置的制作方法
技术领域：
本发明涉及一种输出多个分辨率的图像的拍摄装置。
背景技术：
众所周知的是，现有的拍摄装置中，以改变传感器的驱动方法输
出不同分辨率图像的技术。这种技术，例如，在特开2003-134386号公 报中公开。
此外，配置有分辨率转换电路的拍摄装置也在，例如，特开 2004-112579号公报中公开。
图15表示现有拍摄装置的结构图。如图所示，拍摄装置包括拍摄 电路1501，存储电路1502， YC处理电路1503，分辨率转换电路1504, 压縮转换电路1505，记录电路1506及显示电路1507。 YC处理电路 1503，读出存储电路1502存储的RAW数据，转换为YC数据，输出 给分辨率转换电路1504。
分辨率转换电路1504对YC处理电路1503生成的输入图像进行 分辨率转换处理，从而生成显示用图像和记录用图像两个图像数据。 分辨率转换电路1504，将这两个图像数据分别写入存储电路1502的两 个区域。同时，用户预先在分辨率转换电路1504的内部设定输入图像、 显示用图像以及记录用图像的像素数和行数。
分辨率转换电路1504构成为对输入图像按每一行进行处理。分辨 率转换电路1504每处理一行输入图像，决定是生成显示用图像还是记 录用图像，进而进行图像生成处理。例如，显示用图像的行L生成后，
5分辨率转换电路1504决定生成显示用图像还是记录用图像，其结果，
假定生成了记录用图像的行M。接下来，分辨率转换电路1504决定是 生成显示用图像的行(L+l)还是生成记录用图像的行(M+l)。
然而，在前面说明的现有拍摄装置中，通过改变传感器的驱动获 得多个分辨率的图像。这种情况下，不能同时输出不同分辨率的多个 图像。在另一种现有拍摄装置中，分辨率转换电路将多个不同分辨率 的图像保存到存储电路，压縮转换电路从存储器读出多个图像进行压 縮。这种情况下，拍摄装置需要构成为，压縮转换电路访问被分辨率 转换电路输出了图像数据的存储电路。这意味着多个电路访问单一存 储电路，需要设置内存访问的仲裁，因此这种结构是希望避免的。

发明内容
本发明是在上述背景下产生的。本发明的目的是提供一种可同时 输出不同分辨率的多个图像的恰当的拍摄装置。
本发明的拍摄装置包括拍摄部，其由拍摄器件来拍摄被摄对象， 生成图像信号；以及分辨率转换部，对拍摄部拍摄的图像信号的分辨 率进行转换，输出转换后的图像信号，分辨率转换部将由拍摄部输入 的图像缩小为多个不同大小的图像，并输出在来自拍摄部的输入图像 大小中嵌入有多个不同大小的縮小图像的嵌入图像。
本发明的另一种方式是一种图像处理方法，其对输入的图像信号 的分辨率进行转换，生成转换后的图像信号，其中，将输入图像縮小 为多个不同大小的图像，生成在输入图像大小中嵌入有多个不同大小 的縮小图像的嵌入图像。
如下述说明，本发明还存在其他的方式。因此，本发明的公开只 是提供本发明的一部分方式，但并不意味着对在此陈述和主张的发明 的范围构成限制。


图1是本发明第一实施方式的拍摄装置的结构图。
图2是本发明第一实施方式的拍摄装置的水平LPF部的结构图。
图3是本发明第一实施方式的拍摄装置的垂直LPF部的结构图。 图4是表示本发明第一实施方式的拍摄装置的分辨率转换部的水
平处理动作的说明图。
图5是表示本发明第一实施方式的拍摄装置的分辨率转换部的垂
直处理动作的说明图。
图6A是表示本发明第一实施方式的拍摄装置的分辨率转换部的
输入图像的说明图。
图6B是表示本发明第一实施方式的拍摄装置的分辨率转换部的
输出图像的说明图。
图7是本发明第二实施方式的拍摄装置的分辨率转换部的结构图。 图8是表示本发明第二实施方式的分辨率转换部的动作的说明图。 图9A是在本发明第二实施方式中，选择原始图像时的输出图像的
说明图。
图9B是在本发明第二实施方式中，选择嵌入图像时的输出图像的 说明图。
图IO是本发明第三实施方式的拍摄装置的结构图。
图11是表示本发明第三实施方式的编码部的动作的流程图。
图12是表示本发明第四实施方式的编码部的动作的流程图。
图13是本发明第五实施方式的拍摄装置的结构图。
图14是表示本发明第五实施方式的编码部的动作的流程图。
图15是现有拍摄装置的结构图。
标记说明
101 拍摄部
110 分辨率转换部
1001 编码部1004 通信网络部
具体实施例方式
以下对本发明进行详细说明。但是以下的详细说明和附加的附图 并不对发明构成限定。而是，发明的范围由附加的权利要求书所规定。
本发明的拍摄装置包括拍摄部，其用拍摄器件拍摄被摄对象， 生成图像信号；分辨率转换部，其对拍摄部拍摄的图像信号的分辨率 进行转换，输出转换后的图像信号，分辨率转换部将由拍摄部输入的 图像縮小为多个不同大小的图像，输出在来自拍摄部的输入图像大小 中嵌入有多个不同大小的縮小图像的嵌入图像。根据此结构，可同时 输出不同大小的多个图像，使输出不同分辨率的多个图像成为可能。
此外，在输入图像大小中可并列设置多个嵌入区域，该嵌入区域 用于分别嵌入多个不同大小的縮小图像。分辨率转换部通过对输入图 像进行多阶段的縮小处理，生成多个不同大小的縮小图像，依次输出 多个不同大小的縮小图像的信号，从而输出将多个不同大小的縮小图 像嵌入到多个嵌入区域的嵌入图像。根据此结构，可恰当地生成使不 同分辨率的多个图像能够同时输出的本发明的嵌入图像。
此外，分辨率转换部可切换输出嵌入图像和与由拍摄部输入的大 小一样的原始图像，并且，可在图像信息上附加表示输出的是嵌入图 像还是原始图像的附加信息并输出。
该结构适用于分辨率转换部将嵌入图像和原始图像两图像交替地 或者随机地输出的情况。在这种情况下，图像信号接收侧也可以判断 输出信号是嵌入图像还是原始图像。据此，图像信号接收侧可判断是 否需要提取来自嵌入图像的縮小图像。
此外，拍摄装置可包括压縮编码部，其输入有来自分辨率转换部的图像，进行压縮编码，输出压縮图像信息；以及通信网络部，其 将来自压缩编码部的压縮图像信息输出给通信网络。压縮编码部可从 来自分辨率转换部的嵌入图像中提取出多个縮小图像，进行编码。
根据此结构，可以用与拍摄部的拍摄帧速率相同的帧速率，对多 个縮小图像进行压縮编码并向网络进行输出。
此外，压縮编码部可根据附加在来自分辨率转换部的图像上的附 加信息，对输入的图像进行判别。压縮编码部可根据判别结果，判断 是否需要进行縮小图像的提取处理。而且，压縮编码部在进行提取处 理时，可在提取处理完成后进行编码，在不进行提取处理时，可进行 输入图像的编码。
根据此结构，分辨率转换部在交替输出嵌入图像和原始图像时， 可用拍摄部的拍摄帧速率的一半的帧速率，对多个縮小图像以及原始 图像进行压縮编码并向网络进行输出。
而且，压縮编码部可在从嵌入图像提取出多个大小的图像进行编 码的过程中，根据某个大小的图像的编码结果，调整其他大小的图像 的编码的编码参数。
此结构适用于需要使编码后的数据大小控制在按照各个图像大小 所规定的范围内的情况。根据此结构，可根据某个图像大小的编码的 量化参数与编码后的数据大小的关系，调整其他的图像大小的量化参 数。据此，可提高数据大小在决定的范围内的概率。
而且，压縮编码部在进行多个不同大小的图像的编码时，可从大 小较小的图像开始依次进行编码。
此结构适用于需要使编码后的数据大小控制在按照各个图像大小规定的范围内的情况。由于从大小较小的图像开始进行编码，对需要处理时间的大的图像大小，可减少用于控制在规定数据大小范围内的再编码处理。据此，可縮短编码的处理时间。
而且，压縮编码部可按每个图像大小变更编码的帧速率。根据此结构，能够以与通过网络连接在拍摄装置上的显示终端相符的图像大小进行编码。此外，通过对较小的图像大小用高帧速率进行编码，对较大的图像大小用低帧速率进行编码，可降低编码处理的负荷，并削减输出数据量。
而且，压縮编码部对应于多个编码方法，可按照每个图像大小来选择编码方法。根据此结构，能够以与通过网络连接在拍摄装置上的显示终端相符的编码方法进行编码。
本发明不仅限于上述拍摄装置的方式。本发明另外的方式，例如是在上述拍摄装置中实施的进行分辨率转换的图像处理方法。所说明的有关拍摄装置的各种要素，也适用于图像处理方法。
以下，参照附图对本发明的实施方式进行说明。
(第一实施方式)
用图1 图6说明本发明第一实施方式的拍摄装置。图l表示本实
施方式的拍摄装置的结构。图2表示水平LPF部的结构，图3表示垂直LPF部的结构。另外，图4表示分辨率转换部的水平处理时的动作，图5表示分辨率转换部的垂直处理时的动作。图6A以及图6B表示分辨率转换部的输入图像以及输出图像。
如图1所示，拍摄装置包括拍摄部101和分辨率转换部110。拍摄部101用拍摄器件拍摄被摄对象，生成图像信号。并且，分辨率转换部110，对拍摄部101拍摄的图像信号的分辨率进行转换，输出转换后的图像信号。拍摄部101包括镜头102， CCD103， CDS/AGC部104，A/D部105，数字信号处理部106以及驱动控制部107。分辨率转换部llO包括控制部lll，第一水平LFP部112，第一FIFO部113，第二水平LPF部114，第二 FIFO部115， MUX部116以及垂直LPF部117。
图1中的拍摄部101中，透过镜头102的光由CCD103进行光电转换，生成模拟视频信号。在CDS/AGC部104中，对图像信号进行CDS(correlate double sampling,相关双采样)以及增益控制。A/D部105将图像信号从模拟信号转换为数字信号，生成数字图像信号。在数字信号处理部106中进行白平衡控制，伽马转换等众所周知的照相机信号处理，将输入信号转换为亮度信号(Y)、色差信号(Cb， Cr)的图像信号109。画像信号109与同步信号108—起被输出。驱动控制部107进行CCD103的驱动控制。
拍摄部101生成的图像信号109在分辨率转换部110中被输入到水平LPF部112。由水平LFP部112对图像信号进行水平方向的低通滤波处理，将处理过的信号写入FIFO部113。从FIFO部113读出的信号，输入到水平LPF部U4。在水平LPF部114进行水平方向的低通滤波处理，将处理过的信号写入FIFO部115。从FIFO部115读出的信号以及从FIFO部113读出的信号被输入到MUX部116。在MUX部116选择某一方的信号，将所选择的信号输入到垂直LPF部117。垂直LPF部117进行垂直方向的低通滤波处理，输出输出图像信号。
控制部111由所输入的同步信号108生成用于向FIFO部113写入的写使能信号118、用于从FIFO部113读出的读使能信号119、用于向FIFO部115写入的写使能信号120、用于从FIFO部115读出的读使能信号121、对MUX部116的MUX选择信号122(选择信号)、对垂直LPF部117的滤波器的系数选择信号123。此外，控制部111生成输出同步信号124。这些控制信号分别输出给相应的构成要件。
11如图2所示，在水平LPF部112以及水平LPF部114中，由4个触发器201对输入图像信号进行延迟处理，生成1时钟延迟，2时钟延迟，3时钟延迟及4时钟延迟的信号。输入图像信号和4时钟延迟信号用加法器202相加。并且，1时钟延迟信号和3时钟延迟信号用另一个加法器202相加。将各个加法器202的输出，与滤波系数部203输出的滤波系数由乘法器204相乘，将相乘得到的信号输出给加法器205。2时钟延迟信号也与从滤波系数部303输出的滤波系数由乘法器204相乘，输出给加法器205。加法器205将输入的3个信号相加，输出输出图像信号。如此进行水平低通滤波的处理。
如图3所示，在垂直LPF部117中，由4个行存储器(line memory)301对输入图像信号进行延迟处理，生成1行延迟，2行延迟，3行延迟，4行延迟的信号。输入图像信号和4行延迟信号用加法器302相加。并且，1行延迟信号和3行延迟信号用另一个加法器302相加。将各个加法器302的输出，与从滤波系数部303输出的滤波系数由乘法器304相乘，将相乘得到的信号输出给加法器305。 2行延迟信号也与滤波系数部303输出的滤波系数由乘法器304相乘，输出给加法器305。加法器305将输入的3个信号相加，输出输出图像信号。如此进行垂直低通滤波的处理。滤波系数部303根据输入的系数控制信号，可变更输出的滤波系数。
下面，用图4及图5对拍摄装置的动作进行说明。此例，是从图6A的输入图像来生成图6B的输出图像。
说明水平方向的动作如图4所示，输入图像的水平有效像素数是1280，相对于输入图像，水平LPF部112的输出是2时钟延迟。控制部111使对FIFO部113的写使能信号118，从考虑了该延迟的时刻开始每隔1时钟有效。据此，水平方向的640个信号被写入FIFO部113。并且同时，控制部111使对FIFO部113的读使能信号119与输入水平同步信号在同时刻有效，并在640时钟内有效。据此，可读出前一行写入的640个数据。
从FIFO部113读出的信号被输入到水平LPF部114。水平LPF 部114以2时钟延迟输出信号。控制部111使对FIFO部115的写使能 信号121，从考虑了该延迟时间的时刻开始每隔1时钟有效。据此，水 平方向的320个信号被写入到FIFO部115。另夕卜，控制部111从FIFO 部113的读使能信号失效时刻开始，使FIFO部115的读使能信号121 在320时钟内有效。据此，控制部111从FIFO部115读出在该行写入 的320个信号。
此外，控制部111对MUX部116输出MUX选择信号122，以控 制MUX部116。 MUX选择信号122是如下控制MUX部116的信号 在FIFO部113的读使能信号有效的期间内，选择来自FIFO部113的 信号，并且，在FIFO部115的读使能信号有效的期间内，选择来自 FIFO部115的信号。MUX部116根据MUX选择信号122选择信号并 输出。控制部111将与MUX选择信号122相同的信号，作为对垂直 LPF部117的系数选择信号123输出。根据系数选择信号123，垂直 LPF部117在来自FIFO部113的信号输入期间，对图像信号进行1/2 抽取(skip)用滤波，在来自FIFO部115的信号输入期间，对图像信 号进行1/4抽取用滤波。
通过以上的处理，进行了抽取的640像素的图像信号与再次进行 了抽取的320像素的图像信号，连续地配置在水平方向。
垂直方向的动作，如图5所示，由于对FIFO部113的写入、读出， 信号延迟了 l行。而且，由于垂直LPF部117的处理，信号延迟2行。 其结果，以共计3行的延迟来输出信号。因此，控制部111生成相对 输入垂直同步信号延迟了 3行的垂直同步信号。该信号生成为输出垂 直同步信号124，并从分辨率转换部110输出。
13根据这样的本发明的第一实施方式，从图6A的输入图像生成图6
的输出图像。输入图像是水平为1280像素，垂直为960行的图像，艮口， 4VGA图像。输出图像是嵌入有水平640像素，垂直480行的图像(VGA 图像)与水平320像素，垂直240行的图像(QVGA图像)的图像。 两个縮小图像被嵌入到输入图像大小中。具有这种特征的本发明的图 像，称为"嵌入图像"。
以下进一步详细说明图例中的嵌入图像，输入图像的有效图像区 域(输入图像大小)，是水平方向为1280像素，垂直方向为960行的 区域。在这个有效图像区域内并列设定有VGA图像嵌入区域与QVGA 图像嵌入区域。VGA图像嵌入区域的宽度是640像素，QVGA图像嵌 入区域的宽度是320像素。其余的区域是虚拟区域，其宽度为320像 素。各区域的纵向宽度是960行。VGA图像可每2行被嵌入到输出图 像的VGA图像嵌入区域，QVGA图像可每4行嵌入到输出图像的 QVGA图像嵌入区域。这样，输出图像信号成为VGA图像信号和QVGA 图像分别嵌入到各自的嵌入区域的图像。
以上对本发明的第一实施方式进行了说明。根据本实施方式，分 辨率转换部以上述嵌入图像的形式输出图像。据此，可一次输出不同 大小的多个图像，因此，可一次输出不同分辨率的多个图像。并且， 能够以输入帧速率输出多个分辨率的图像。
此外，在本实施方式中，在输入图像大小中，并列设定了用于分 别嵌入多个不同大小的縮小图像的多个嵌入区域。分辨率转换部110 通过对输入图像进行多阶段的縮小处理，更具体地说是抽取处理，生 成多个不同大小的縮小图像，将多个不同大小的縮小图像的信号依次 输出。据此，分辨率转换部110输出在多个嵌入区域嵌入了多个不同 大小的縮小图像的嵌入图像。根据此结构，可适当地生成使不同分辨 率的多个图像同时输出的本发明的嵌入图像。(第二实施方式)
以下对本发明的第二实施方式用图7、图8、图9进行说明。图7 表示本实施方式的拍摄装置的分辨率转换部的结构。图8表示分辨率 转换部的动作。图9A以及图9B表示本实施方式的输出图像。与上述 实施方式相同的事项，在以下的说明中不再赘述。
在图7的分辨率转换部701中，与图1的分辨率转换部110的不 同点是，追加了延迟部702， MUX部703及信息附加部704。输入图 像信号被输入到延迟部702，延迟部702使输入图像信号延迟，输出给 MUX部706。
垂直LPF部117的输出和延迟部702的输出被输入到MUX部703。
前者是第一实施方式的嵌入图像，后者是分辨率转换前的原始图像。 并且，MUX部703根据来自控制部705的MUX选择信号706，选定 某一信号并输出。控制部705也可以使MUX部703交替输出嵌入图像 和原始图像。此外，控制部705也可使MUX部703随机地输出嵌入图 像和原始图像。
信息附加部704输入有MUX部703的输出。信息附加部704根 据来自控制部705的信息附加指示信号707，将附加信息附加到图像信 号并输出。附加信息是判别在MUX部703选择的图像的信息，g卩，判 别嵌入图像和原始图像的信息。此外，在控制部705中，相对于第一 实施方式的控制部111，追加了对上述MUX部703以及信息附加部704 的控制功能。
接下来，参照图8，对本实施方式的拍摄装置的动作进行说明。从 输入图像信号被输入到水平LPF部112，直到从垂直LPF部117输出 为止的动作，如同第一实施方式说明的那样。垂直LPF117的输出信号 比输入信号延迟3行。同时，输入图像信号由延迟部702延迟3行， 输入给MUX部703。控制部705在帧切换的时刻，将MUX选择信号706转换为想要 输出的图像。据此，MUX部703选择输入图像原样的原始图像或嵌入 了縮小图像的嵌入图像。图8表示在帧开始时选择延迟部702的原始 图像输出时的动作。
此外，信息附加部704根据来自控制部705的信息附加指示信号 707，在MUX部703的输出信号上追加附加信息。如上所述，附加信 息是表示输出的是来自垂直LPF117的嵌入图像，还是来自延迟部702 的原始图像的信息。附加信息附加在第IIOO行的行上。例如，输出来 自延迟部702的输出信号时，1100行的所有像素值为0 (零)。输出 来自垂直LPF部117的输出信号时，所有像素值为1 (一)。
此外，附加信息可以是能区别2种图像的任意的信息。附加信息 也可以是其他的值。而且，也可以不像上述示例那样将附加信息附加 到行上的全部的像素上。
图9A及图9B表示分辨率转换部701的输出图像。本实施方式中， 输出的是图9A或图9B之一的图像。图9A是输入图像原样的原始图 像。但是，在信息附加行上附加有像素值O作为附加信息。图9B是嵌 入图像，在信息附加行上附加有像素值1作为附加信息。
本发明的第二实施方式适用于本拍摄装置将原始图像或嵌入图像 交替或随机输出的情况。即使在这种情况下，图像信号的接收侧也能 判断输出信号是嵌入图像或原始图像(输入画像)。因此，图像信号 接收侧可判断是否有必要从嵌入图像中取出縮小图像。
(第三实施方式)
以下，用图IO及图ll对本发明的第三实施方式进行说明。图10 表示本实施方式的拍摄装置的结构，图ll表示本实施方式的编码部的动作。与上述实施方式相同的事项，在以下的说明中不再赘述。
图IO相对于图1，追加了编码部1001及通信网络部1004。拍摄 部101及分辨率转换部110的结构与图1所示的第一实施方式相同。 编码部1003输入来自分辨率转换部110的图像，进行压縮编码，输出 压縮图像信息。通信网络部1004将来自编码部1001的压縮图像信息 输出给通信网络。
编码部1001由图像处理DSP 1002及SDRAM 1003构成。SDRAM 1003连接到图像处理DSP 1002的总线。通信网络部1004由CPU 1005、 连接在CPU 1005总线上的SDRAM 1006、 FLASH存储器1007及以太 网芯片1008构成。FLASH存储器1007保存有程序。以太网芯片1008 由用于与以太网(注册商标)连接的以太网MAC及PHY构成。此外， 图像处理DSP 1002也与CPU 1005的总线连接。
接下来，对本实施方式的拍摄装置的动作进行说明。拍摄部101 及分辨率转换部110的动作与第一实施方式相同。来自拍摄装置101 的图像信号由分辨率转换部IIO转换为图6B的输出图像并输出。编码 部1001中如图11所示，图像被捕获(S101),从图6B的图像取出 QVGA图像(S102) 。 QVGA图像是水平320像素，垂直240行的较 小的縮小图像。在步骤S102，每4行取出从图像左端第641像素开始 的320个像素的信号，据此，从QVGA图像嵌入区域取出QVGA图像。 对取出的QVGA图像进行压縮编码(S103),将编码结果输出给CPU 1005 (S104)。
接下来，从图6B的图像取出VGA图像(S105) 。 VGA图像是水 平640像素，垂直480行的较大的縮小图像。在步骤S105中，每2行 取出从图像的左端开始的640个像素的信号。据此，从VGA图像嵌入 区域取出VGA图像。将取出的VGA图像进行压縮编码(S106)，将 编码结果输出给CPU 1005 (S107)。CPU 1005以从编码部1001接收到的编码结果为基础，读出存储 在SDRAM 1003里的编码后的图像信号。CPU 1005利用SDRAM 1006， 按照TCP/IP或UDP/IP协议，生成数据包，通过以太网芯片1008将数 据包输出给以太网(注册商标)。CPU 1005对请求VGA图像的用户 输出VGA图像，对请求QVGA图像的用户输出QVGA图像。
此外，编码部1001的编码方法可以是JPEG等的静止图像编码， 也可以是MPEG等的动画编码。对QVGA图像和VGA图像的编码方 法可相同，也可不同。优选编码部1001构成为与多个编码方法对应。 并且，编码部1001构成为可根据每个图像大小选择编码方法，根据CPU 1005的指示选择编码方法。此结构，可同样适用于任意的其他实施方 式。
根据上述本发明的第三实施方式，配置有编码部1001及通信网络 部1004。编码部1001从来自分辨率转换部110的嵌入图像取出多个縮 小图像，对这些多个縮小图像进行编码。据此，可使用与拍摄部的拍 摄帧速率相同的帧速率，对多个縮小图像进行压縮编码并向网络进行 输出。
此外，编码部1001与多个编码方法对应，可根据每个图像大小选 择编码方法。根据此结构，可以用与通过网络连接到拍摄装置的显示 终端相符的编码方法进行编码。
此外，在本实施方式中，编码部1001构成为可根据每个图像大小 变更编码的帧速率。根据此结构，可以用与通过网络连接到拍摄装置 的显示终端相符的图像大小进行编码。此外，可对小的图像大小用高 帧速率编码，对大的图像大小用低帧速率编码。据此，可降低编码处 理的负荷，削减输出的数据量。此结构，也可适用其他的实施方式。
18(第四实施方式)
接下来对本发明的第四实施方式进行说明。本实施方式的拍摄装 置具有与图IO所示的第三实施方式相同的结构。但是，如下述说明， 编码部1001上追加了与嵌入图像的压縮编码处理相适的编码参数的调 整功能。图12表示本实施方式的编码部的动作。与上述实施方式相同 的事项，在以下的说明中不再赘述。
来自拍摄装置101的图像信号由分辨率转换部110，转换为图6B 的输出图像并输出。编码部1001中，如图12所示，图像被捕获(S201)， 并且，从图6B的图像取出QVGA图像(S202)。取出处理如前述。 并且，对QVGA图像进行压縮编码(S203)，对编码的结果，进行判 断处理，判断产生的编码量是否在被指定的范围内(S204)。编码量 不在指定范围内时，进行量化参数的调整(S205)，再次进行QVGA 图像的编码(S203)。在步骤S204中，编码量在指定范围内时，将编 码结果向CPU 1005输出(S206)。
接下来，根据QVGA图像的编码中的量化参数和产生编码量的关 系，将对VGA图像的量化参数进行调整(S207) 。 QVGA图像的量化 参数和产生编码量的关系在上述的QVGA图像的取出及编码的过程中 获得。假设在QVGA图像的编码中，通过使量化的值比当初的量化参 数高，让编码量在指定范围内。这种情况下，在VGA的编码之前，在 VGA的编码中使用的量化的值也得以提高。假设在QVGA图像的编码 中，量化参数降低。这种情况下，VGA的编码中使用的量化的值也下 降。这种编码参数的调整处理在步骤S207中进行。
接下来，从图6B的图像取出VGA图像(S208)。取出处理如前 述。并且，进行VGA图像的编码(S209)。这里，使用在步骤S207 调整过的参数。并进行判断处理，判断VGA图像的产生编码量是否在 指定范围内(S210)。编码量在指定范围外时，进行量化参数的调整 (S211)，再次进行VGA图像的编码(S209)。在步骤S210中，编
19码量在指定范围内时，将编码结果输出给CPU 1005 (S212)。并且， 通过通信网络部1004，将图像信号输出给网络。通信网络部1004的动 作与第三实施方式相同。
以上，对本发明的第四实施方式的拍摄装置进行了说明。根据本 实施方式，在从嵌入图像取出多个大小的图像进行编码的过程中，压 縮编码部基于某个大小的图像的编码结果，调整其他大小的图像的编 码中的编码参数。此结构适用于上述示例那样的需要使编码后的数据 大小控制在按照各个图像大小所规定的范围内的情况。根据此结构， 可以根据某图像大小的编码中的量化参数与编码后的数据大小的关 系，调整其他图像大小的量化参数。据此，可提高数据大小在决定的 范围内的概率。
而且，在本实施方式中，编码部1001在进行多个不同大小的图像 的编码时，从大小较小的图像开始依次进行编码。此结构也适用于本 实施方式这样的需要使编码后的数据大小控制在按照各个图像大小所 规定的范围内的情况。由于从大小较小的图像开始进行编码，可减少 对需要处理时间的大的图像大小进行的、为了在规定数据大小的范围 内的再编码处理。据此，可縮短编码的处理时间。
(第五实施方式)
以下，用图13及图14对本发明的第五实施方式进行说明。图13 表示本实施方式的拍摄装置的结构，图14表示编码部的动作。
如图14所示，本实施方式的拍摄装置中，由分辨率转换部701取 代了图10中的分辨率转换部101。分辨率转换部701的结构如图7说 明那样。而且，本实施方式中，为了处理从分辨率转换部701输出的 嵌入图像和原始图像的两种图像，编码部1001构成为可实现以下的功 能。与上述实施方式相同的事项，在以下的说明中不再赘述。
20来自拍摄装置101的图像信号由分辨率转换部701进行处理，输
出图9A的原始图像和图9B的嵌入图像。本实施方式中，由分辨率转 换部701交替输出原始图像与嵌入图像。即，如果在某一帧中输出原 始图像，接下来的一帧则输出嵌入图像，再接下来的帧输出原始图像。
在编码部1001，如图14所示，图像被捕获(S301)，读入附加 信息(S302)。附加信息如图9A以及图9B所示，是图像的最上面一 行的数据。编码部1001根据附加信息，判断捕获的图像是4VGA图像 (水平1280像素，垂直960行的图像)(图9A)，还是VGA和QVGA 的嵌入图像(图9B) (S303)。
捕获图像为嵌入图像时，编码部1001取出QVGA图像(水平320 像素，垂直240行)(S304)，进行QVGA图像的压縮编码(S305), 将编码结果输出给CPU 1005 (S306)。接下来，编码部1001取出VGA 图像(S307)，进行VGA图像的压縮编码(S308)，将编码结果输出 给CPU 1005 (S309)。
在步骤S303中，捕获图像是4VGA图像时，编码部1001取出4VGA 图像(S310)，进行4VGA图像的编码(S311)，将4VGA图像的编 码结果输出给CPU 1005 (S312)。通信网络部1003的动作，与第三 实施方式相同。但是，通信网络部1003除了处理QVCA编码图像、 VGA图像之外，还处理4VGA图像。通信网络部1003从编码部读出 QVGA编码图像，VGA编码图像，4VGA编码图像，对请求4VGA的 用户输出4VGA编码图像，对请求VGA图像的用户输出VGA编码图 像，对请求QVGA图像的用户输出QVGA编码图像。
根据本发明的第五实施方式，编码部1001根据在来自分辨率转换 部701的图像中附加的附加信息，进行输入图像的判别。编码部701 根据判别结果，判断是否进行縮小图像的取出处理。并且，编码部701 在进行取出处理时，则在取出处理完成后，对多个缩小图像进行编码；
21在不进行取出处理时，进行输入图像的编码。根据此结构，分辨率转 换部在交替输出嵌入图像和原始图像时，能够以拍摄部的拍摄帧速率 的一半的帧速率，对多个縮小图像及原始图像进行压縮编码并向网络 输出。
另外，也可将第四实施方式的结构组合到第五实施方式中。这种 情况下，嵌入图像被输入到编码部1001时，按照QVGA图像的编码结
果调整VGA图像的编码的量化参数。
以上对目前能考虑到的本发明最佳实施方式进行了说明，可理解 为对本实施方式有多种多样的变化方式，并且，意味着在本发明的实 质精神和范围内的所有变化，均包含在附加的权利要求书的范围内。
工业利用可能性
综上所述，本发明的拍摄装置作为可输出多个分辨率图像的照相 机等是非常有用的。
权利要求
1. 一种拍摄装置，其特征在于，包括拍摄部，其由拍摄器件拍摄被摄对象，生成图像信号；以及，分辨率转换部，其对所述拍摄部拍摄的所述图像信号的分辨率进行转换，输出转换后的图像信号，所述分辨率转换部，将由所述拍摄部输入的图像缩小为多个不同大小的图像，输出在来自所述拍摄部的输入图像大小中嵌入有多个不同大小的缩小图像的嵌入图像。
2. 根据权利要求l所述的拍摄装置，其特征在于， 在所述输入图像大小中，并列设定有多个用于分别嵌入多个不同大小的缩小图像的嵌入区域，所述分辨率转换部，通过对输入图像进 行多阶段缩小处理，生成多个不同大小的縮小图像，依次输出所述多 个不同大小的縮小图像的信号，由此输出在所述多个嵌入区域里嵌入 有所述多个不同大小的縮小图像的所述嵌入图像。
3.根据权利要求l所述的拍摄装置，其特征在于， 所述分辨率转换部，对所述嵌入图像的输出与从所述拍摄部输入 的大小原样的原始图像输出进行切换，并将表示输出的是所述嵌入图 像或所述原始图像的附加信息附加在图像信息中输出。
4.根据权利要求l所述的拍摄装置，其特征在于，包括 压縮编码部，其输入有来自所述分辨率转换部的图像，进行压縮编码，输出压縮图像信息；以及，通信网络部，其将来自所述压縮编码部的所述压縮图像信息，输出给通信网络，所述压縮编码部，从来自所述分辨率转换部的所述嵌入图像中， 取出多个縮小图像，进行编码。
5. 根据权利要求3所述的拍摄装置，其特征在于，包括压縮编码部，其输入有来自所述分辨率转换部的图像，进行压縮编码，输出压縮图像信息；以及，通信网络部，其将来自压縮编码部的所述压縮图像信息输出给通信网络；所述压縮编码部，根据在来自所述分辨率转换部的图像上附加的所述附加信息，进行所输入的图像的判别，根据判别结果，判断是否需要进行縮小图像的取出处理，在进行取出处理的情况下，则在取出处理后，进行编码，在不进行取出处理的情况下，则对输入图像进行编码。
6. 根据权利要求4所述的拍摄装置，其特征在于，所述压縮编码部，在从所述嵌入图像取出多个大小的图像进行编码的过程中，根据某个大小的图像的编码结果，调整其它大小的图像的编码中的编码参数。
7. 根据权利要求6所述的拍摄装置，其特征在于，所述压縮编码部，在对所述多个不同大小的图像进行编码时，由大小较小的图像开始依次进行编码。
8. 根据权利要求5所述的拍摄装置，其特征在于，所述压縮编码部，在从所述嵌入图像取出多个大小的图像进行编码的过程中，根据某个大小的图像的编码结果，调整其它大小的图像的编码中的编码参数。
9. 根据权利要求8所述的拍摄装置，其特征在于，所述压縮编码部，在对所述多个不同大小的图像进行编码时，由大小较小的图像开始依次进行编码。
10. 根据权利要求4所述的拍摄装置，其特征在于，所述压縮编码部，根据每个图像大小，改变编码的帧速率。
11. 根据权利要求5所述的拍摄装置，其特征在于，所述压縮编码部，根据每个图像大小，改变编码的帧速率。
12. 根据权利要求4所述的拍摄装置，其特征在于，所述压縮编码部，与多个编码方法对应，可根据每个图像大小选择编码方法。
13. 根据权利要求5所述的拍摄装置，其特征在于，所述压縮编码部，与多个编码方法对应，可根据每个图像大小选择编码方法。
14. 一种图像处理方法，其对输入的图像信号的分辨率进行转换，生成转换后的图像信号，其特征在于，将输入图像縮小为多个不同大小的图像，生成在输入图像大小中嵌入有多个不同大小的縮小图像的嵌入图像。
全文摘要
本发明提供一种可输出多个分辨率的图像的拍摄装置。拍摄装置包括拍摄部(101)，其由拍摄器件(103)拍摄被摄对象，生成图像信号；以及分辨率转换部(110)，其对拍摄部(101)拍摄的图像信号的分辨率进行转换并输出。分辨率转换部(110)将由拍摄部(101)输入的图像缩小为多个不同大小的图像，对来自拍摄部(101)的输入图像大小中嵌入有多个大小的缩小图像的嵌入图像进行输出。据此，可同时输出多个图像大小的图像。
文档编号H04N5/232GK101467439SQ200780021960
公开日2009年6月24日 申请日期2007年3月9日 优先权日2006年6月13日
发明者樋口学 申请人:松下电器产业株式会社