摄像装置及再生装置的制作方法

专利名称：摄像装置及再生装置的制作方法
技术领域：
涉及能够进行声音及影像的记录的摄像装置，以及能够进行声音及影像的再生的 再生装置。特别地，涉及基于摄影时摄像装置的状态及摄影取得的影像，记录声音的摄像装 置和处理输出的声音的再生装置。
背景技术：
目前，作为能够进行影像以及声音的记录的摄像装置，摄像机得到广泛普及。在 这种摄像机中，包括具有监视器的显示部，该监视器显示摄像机的摄像部捕捉的摄影区域 (被摄体)。摄影者使用该显示部的监视器确认摄影区域，同时进行构图的设定、对焦控制等。一般而言，监视器显示图像的方向是摄影者侧，即与摄影方向(被摄体侧)相反的 一侧。但是，近年来，能够进行旋转显示部以使监视器的显示方向朝向与摄影方向相同的方 向，摄影者在确认监视器上显示的摄影区域的同时对自身进行摄影的所谓“自拍”的摄像机 也有很多。在进行“自拍”的情况下，假设摄影者希望进行以自身或包含自身的多个人物为 中心的运动图像的摄影，关于声音的收音，增强摄影方向的声音进行收音是较为理想的。例如，提出了如下方法，即在显示部上安装有麦克风(下面记作麦克)的相机中， 根据麦克的朝向(是摄影方向，还是其相反方向)进行麦克收音的声音的听感补正，由此抑 制记录的声音随着摄影时麦克的朝向而发生变化的情况。在进行“自拍”的情况下，能够进行各种各样的摄影方法，例如，将摄像机固定到三 角架上进行摄影的方法，或者摄影者持有摄像机同时将摄像部朝向自己自身进行摄影的方 法等。即，相对于摄像机的被摄体(摄影者)的状态(例如摄像机与被摄体的距离)会出 现各种各样的状态。但是，在上述方法中，对于麦克收音的声音，进行仅仅根据麦克朝向的 听感补正。因此，根据相对于摄像机的被摄体的状态的不同，在进行“自拍”的情况下，有时 无法得到符合摄影者意图的声音。此外例如还提出了以下方法，即基于摄影区域内包含的特定对象的大小改变麦克 的方向性，进行增强收音的声音的特定频带等的声音处理，由此进行符合摄影者意图的声
首记录。在该方法中，能够根据摄影区域内包含的被摄体的大小和变焦倍率，补正麦克收音 的声音。但是，在该发明中，无论是“自拍”还是通常的摄影，都进行相同的声音处理。因此， 根据声音处理的内容的不同，在进行“自拍”的情况下，有时无法得到符合摄影者意图的声音。

发明内容
本发明的摄像装置包括以下部件
至少一个摄像部，通过摄影取得图像； 至少一个收音部，与所述摄像部的摄影同时进行收音以取得声音；特定被摄体检测部，从所述图像中检测特定被摄体；至少一个显示部，显示所述图像；方向关系检测部，检测所述显示部显示所述图像的方向与所述摄像部摄影的方向 的相对关系；以及声音补正部，根据所述特定被摄体检测部的特定被摄体的检测结果和所述方向关 系检测部检测出的关系，对所述收音部取得的所述声音进行声音补正处理。本发明的再生装置包括以下部件再生部，对摄影取得的图像和与该图像的摄影同时进行收音取得的声音进行再 生；方向关系检测部，检测所述图像摄影的方向与摄像时所述图像显示的方向的相对 关系；以及声音补正部，根据所述图像中的特定被摄体和所述方向关系检测部检测出的关 系，对所述再生部再生的所述声音进行声音补正处理。


图1是表示本发明涉及的摄像装置的结构的概要的模块图。图2A是表示本发明涉及的摄像装置的外观的概要的解说图。图2B是表示本发明涉及的摄像装置的外观的概要的解说图。图3是表示本发明涉及的摄像装置的运动图像摄影时的基本动作的概要的流程 图。图4是表示本发明涉及的摄像装置的运动图像摄影时的运动图像记录处理的基 本动作的概要的流程图。图5是表示本发明涉及的摄像装置的转动部25的内部结构的概要的模块图。图6是表示面部检测装置的结构的概要的模块图。图7是表示由缩小图像生成部得到的层次图像的一个例子的解说图。图8是表示面部检测处理的处理动作的解说图。图9是表示本发明的实施例1涉及的声音处理部11的内部结构的概要的模块图。图10是表示本发明的实施例1涉及的立体声麦克的收音方向的示意图。图11是表示本发明涉及的立体声化处理部的内部结构的概要的模块图。图12A是表示麦克与声源的位置关系的示意图。图12B是表示麦克与声源的位置关系的示意图。图13是表示方向性控制部115的内部结构的概要的模块图。图14是表示麦克与声源的位置关系的示意图。图15是表示本发明的实施例2涉及的再生装置的内部结构的模块图。图16是表示本发明的实施例3涉及的摄像装置的结构的概要的模块图。图17是表示本发明的实施例3涉及的摄像装置的外观的概要的解说图。图18是表示本发明的实施例3涉及的摄像装置的主要部分结构的模块图。
图19A是表示本发明的实施例4涉及的摄像装置的外观的概要的解说图。图19B是表示本发明的实施例4涉及的摄像装置的外观的概要的解说图。图20是表示本发明的实施例5涉及的摄像装置的结构的概要的模块图。图21是表示本发明的实施例5涉及的摄像装置的外观的概要的解说图。图22是表示本发明的实施例6涉及的摄像装置包括的控制切换部112的主要部分结构的模块图。
具体实施例方式本发明的意义和效果通过以下所示的实施方式的说明变得更为明确。但是，以下的实施方式只不过是本发明的实施方式的一种，本发明和各结构要件的词语的意义不受以 下的实施方式中记载的内容的限制。<实施例1>参照

在能够进行声音或影像的记录、再生的数码相机或数码摄像机等摄 像装置中实施本发明的方式。该摄像装置如果是能够对运动图像进行摄影的装置，则也可 以是能够进行静止图像的摄影的装置。(摄像装置的结构)图1是表示本发明涉及的摄像装置的内部结构的概要的模块图。图1的摄像 装置包括将入射的光转换为电信号的CCD(Charge CoupledDevice，电荷耦合设备)或 CMOS (Complementary Metal OxideSemiconductor，互补型金属氧化物半导体)传感器等图 像传感器(固体摄像元件)1 ；透镜部3，具有使被摄体的光学像在图像传感器1上成像的变 焦透镜、使变焦透镜的焦距即光学变焦倍率发生变化的电机、和用于使变焦透镜的焦点与 被摄体一致的电机；AFE (Analog Front End，模拟前端)5，将从图像传感器1输出的模拟图 像信号转换为数字图像信号；立体声麦克7，由将到来的声音独立收音并转换为模拟声音 信号的麦克7L及7R构成；图像处理部9，对从AFE5输出的数字图像信号进行灰度补正等各 种图像处理；声音处理部11，将从立体声麦克7输出的模拟声音信号转换为数字声音信号， 根据摄影时的状况进行声音补正处理等；压缩处理部13，在对静止图像进行摄影的情况下 对来自图像处理部9的图像信号进行JPEG (Joint Photographic Experts Group，联合图像 专家组)等压缩编码处理，在对运动图像进行摄影的情况下对从图像处理部9输出的图像 信号和来自声音处理部11的声音信号进行MPEG (Moving Picture Experts Group，运动图 像专家组)等压缩编码处理；驱动器部49，将由压缩处理部13压缩编码的压缩编码信号记 录到SD(SeCure Digital，安全数字)存储卡等外部存储器47中；扩展处理部17，对由驱动 器部49从外部存储器47读出的压缩编码信号进行扩展解码；视频输出电路部19，将扩展 处理部17解码得到的图像信号转换为模拟信号；视频输出端子21，输出由视频输出电路部 19转换了的信号；显示部23，具有进行基于来自视频输出电路部19的信号的图像显示的 LCD(Liquid Crystal Display，液晶显示器)等监视器；转动部25，用于使显示部23转动； 声音输出电路部29，将由扩展处理部17解码得到的声音信号转换为模拟信号；声音输出端 子31，输出由声音输出电路部29转换了的信号；扬声器部33，基于来自声音输出电路部29 的声音信号对声音进行再生输出；定时产生器(TG)35，输出用于使各模块的动作定时一致 的定时控制信号；CPU (Central Processing Unit，中央处理器)37，控制摄像装置内整体的驱动动作；存储器39，记录用于各个动作的各个程序，同时进行程序执行时的数据的暂时 保管；操作部41，包含用于输入录像的开始及停止的指示的按钮，输入来自摄影者的指示； 总线线路43，用于在CPU37与各模块之间进行数据的交换；以及总线线路45，用于在存储器 39与各模块之间进行数据的交换。另外，CPU37也可以根据图像处理部9检测的图像信号， 驱动透镜部3的电机进行焦点、快门的控制。(摄像装置的基本动作运动图像摄影、再生时)接着，说明该摄像装置的运动图像摄影时的基本动作。图2A及图2B是表示本发 明涉及的摄像装置的外观的概要的解说图。该摄像装置有通常摄影模式和自拍模式这两种 摄影模式。在用通常摄影模式进行运动图像摄影的情况下，如图2A所示，显示部23的监视器 (图2B的灰色部分)朝向的方向(显示图像的方向。在图2A中是纸面内侧方向。以下记 作显示方向)与透镜部3朝向的方向(摄影方向。在图2A中是纸面外侧方向。以下记作 摄影方向)是相反的方向(显示方向与摄影方向以指定程度(例如角度)以上相分离的状 态。下同)。另一方面，在用自拍模式进行运动图像摄影的情况下，如图2B所示，显示方向(纸 面外侧方向)与摄影方向(纸面外侧方向)是大致相同的方向(显示方向与摄影方向比指 定程度(例如角度)更接近的状态。下同)。图3及图4是表示该摄像装置的运动图像摄影时的基本动作的概要的流程图。首 先，摄影者将摄像装置设定为用于运动图像摄影并打开电源后，将摄像装置的驱动模式即 图像传感器1的驱动模式设定为预览(preview)模式(S400)。在预览模式中，作为通过图 像传感器1的光电转换动作得到的模拟信号的图像信号在AFE5中转换为数字信号，由图像 处理部9进行图像处理，在显示部23上显示。图5是表示转动部25的内部结构的模块图。转动部25包括检测显示部23的转 动的转动检测部251以及根据显示部23的转动角度进行监视器的显示控制的监视器显示 控制部252。转动检测部251例如能够通过使用特开平6-302169号公报中揭示的杠杆式 微型开关来实现。此外，转动部25也可以包括用于检测显示部23的转动角的旋转编码器 (rotary encoder)，逐次检测显示部23的转动角，在该转动角超过指定值的情况下判断为 显示部23发生了转动。在预览模式时，显示部23通过转动部25进行转动，朝向与图2B所 示的透镜部3朝向的方向大致相同的方向(S402中“是”)后，选择自拍模式(S404)，将表 示选择了自拍模式的摄影模式信息输出到声音处理部11 (S406)。
在自拍模式的情况下，显示部23的监视器作为结果显示相对于通常摄影模式时 上下方向及左右方向分别逆转了的图像。为此，监视器显示控制部252控制显示部23以使 预览用的图像的上下方向及左右方向分别逆转后在显示部23的监视器上显示(S408)。另 夕卜，在选择了自拍模式的情况下，将表示摄影模式已设定为自拍模式的信息显示在显示部 23上，同时显示表示对由立体声麦克7收音的声音进行的声音补正处理的内容的信息。所 述信息例如是表示立体声录音或单声道录音等录音方式的信息，或者表示声音增强处理的 内容的信息等。这些信息的显示可以用文字进行，也可以用图标等对象显示。此外，可以使 摄影者能够任意设定选择自拍模式所必需的显示部23的转动角度。在显示部23未转动的 情况下(S402中“否”)，认为选择了通常摄影模式(S410)，将表示已选择通常摄影模式的摄影模式信息输出到声音处理部11(S412)。此时，也可以将表示已设定为通常摄影模式的信 息显示在显示部23上。接着，摄影者设定光学变焦的变焦倍率，以使摄影区域成为对作为摄影对象的被 摄体(在自拍模式的情况下是摄影者自身)而言所需的摄影区域(S414)。此时，基于输 入到图像处理部9的图像信号，由CPU37控制透镜部3进行最佳的曝光控制(Automatic Exposure ；AE,自动曝光)和对焦控制(Auto Focus ；AF,自动对焦)(S416)。
随后，按下操作部41的录像开始按钮，指示进行录像动作后(S418中“是”)，执行 运动图像记录处理(S420)。随后，到操作部41的录像停止按钮(也可以兼用作录像开始按 钮)被按下(S422中“是”)为止，反复进行运动图像记录处理。图4是表示运动图像记录中的声音收音处理动作的流程图。利用立体声麦克7收音的声音(S500)作为模拟声音信号输出到声音处理部11，利 用A/D转换被转换为数字声音信号(S502)。在正在使用通常摄影模式进行摄影的情况下 (S504中“否”)，A/D转换后的数字声音信号输出到压缩处理部13，基于压缩编码方式(例 如MP3 :MPEG-l/2Audio Layer-3等方式)进行压缩编码(S506)，与摄影的运动图像一起通 过驱动器部49记录到外部存储器47中(S508)。在正在使用自拍模式进行摄影的情况下(S504中“是”)，在摄影区域内检测出面 部后(S510中“是”)，对数字声音信号进行根据检测出的面部的位置、大小以及透镜部3的 变焦倍率等的声音补正处理(S512)。此时，也可以与进行了声音补正处理的声音信号一起，记录未进行声音补正处理 的声音信号和作为索引的取得该声音信号时的变焦倍率信息、摄影模式信息(也可以解释 为表示转动部25的转动状态的信息)等。此外，在图3所示的流程图中，在运动图像记录 过程中不能进行摄影模式的变更，但也可以使得在录像过程中能够切换通常摄影模式和自 拍模式。在此情况下，可以在每个指定时间(例如每一帧)时检测显示部23的转动状态， 根据检测结果切换摄影模式。在以此方式进行摄像动作时，通过TG35对AFE5、图像处理部9、声音处理部11、压 缩处理部13以及扩展处理部17提供定时控制信号，进行与由图像传感器1进行的每一帧 的摄像动作同步的动作。此外，再生外部存储器47中记录的运动图像是在通过操作部41进行指示后，通过 驱动器部49读出外部存储器47中记录的压缩信号并提供给扩展处理部17。并且，在扩展 处理部17中，基于例如MPEG等压缩编码方式进行扩展解码，取得图像信号及声音信号。并 且，将图像信号提供给显示部23以再生图像，同时将声音信号经由声音输出电路部29提供 给扬声器部33以再生声音。据此，基于外部存储器47中记录的压缩信号的运动图像与声 音一起得到再生。(面部检测处理)在此，说明该摄像装置的面部检测处理。图像处理部9包括面部检测装置91，能够 从输入的图像信号中检测出人物的面部。面部检测装置91的结构及动作在下面进行说明。图6是表示面部检测装置91的结构的概要的模块图。面部检测装置91包括缩 小图像生成部911，基于通过AFE5得到的图像信号生成一个或多个缩小图像；面部判断部 912，使用由输入图像及其缩小图像构成的各个层次图像和存储器18中记录的面部检测用的权重表，判断输入图像中是否存在面部；以及检测结果输出部913，输出面部判断部912 的检测结果。检测结果输出部913在检测出面部的情况下，输出检测出的面部的以输入图 像为基准的大小与位置以及根据面部的大小估计的从透镜部3到面部的距离。此外，存储器18中记录的权重表将与用于从摄影区域中检测面部的判断区域具 有相同大小的各边缘(edge)特征图像(例如水平方向边缘图像和垂直方向边缘图像等) 的像素位置用边缘特征图像的种类、边缘特征图像的各像素的行编号及列编号进行定义。 这种权重表是从大量的教师样本(面部及非面部的样本图像)中求出的。这种权重表例 如能够利用称为Adaboost的公知的学习方法来生成(Yoav Freund, Robert Ε. Schapire, “Adecision-theoretic generalization of on-line learning and an application toboosting",European Conference on Computational Learning Theory,September 20, 1995.)。
另外，Adaboost是适应性推进(boosting)学习方法的一种，是以大量教师样本为 基础，从多个弱识别器候补中选择多个对识别有效的弱识别器，对它们赋予权重以进行结 合，由此实现高精度的识别器的学习方法。在此，所谓弱识别器，是指与完全偶然相比识别 能力高，但并非满足足够精度的高精度的识别器。在进行弱识别器的选择时，在存在已经 选择了的弱识别器的情况下，对于由已选择的弱识别器作出误识别的教师样本进行重点学 习，由此从剩余的弱识别器候补中选择效果最好的弱识别器。图7表示由缩小图像生成部911得到的层次图像的一个例子。所谓层次图像，是指 将摄像装置取得的图像按照任意的缩小率R(0 < R < 1，理想地，最好是0. 8或0. 9等接近 1的值)缩小了的多个图像。在图7中，Pl表示输入图像，P2 P5分别表示缩小为R倍、 R2倍、R3倍、R4倍的缩小图像。Fl表示判断区域。判断区域例如设定为纵24像素、横24像 素的大小。判断区域的大小在输入图像及其缩小图像中都是相同的。面部检测处理使用与 各层次图像中设定的判断区域对应的多个边缘特征图像和权重表进行。在本实施例中，如 箭头所示，在层次图像上使判断区域从左向右移动的水平方向扫描从图像的上方开始向下 方进行，由此进行模式匹配，进行与判断区域匹配的面部图像的检测。不过，扫描顺序并不 限定于此。除了输入图像Pl之外生成多个缩小图像P2 P5是因为使用一种权重表来检 测大小不同的多个面部。图8是用于说明面部检测处理的图。由面部判断部912进行的面部检测处理对各 层次图像进行，但处理方法相同，因此在此仅说明对输入图像Pl进行的面部检测处理。图 8中表示输入图像Pl和在输入图像内设定的判断区域F1。在每个层次图像中进行的面部检测处理使用与图像内设定的判断区域对应的图 像和权重表进行。面部检测处理包括从较粗略的判断依次向较精细的判断转移的多个判断 步骤，在某个判断步骤中，在未检测出面部的情况下，不转至下面的判断步骤，而判断为该 判断区域中不存在面部。在所有判断步骤中，仅在检测出面部的情况下，判断为该判断区域 中存在面部，扫描判断区域并转至下一判断区域中的判断。并且，在检测出面部时，根据使 用了哪一个层次图像，能够估计以输入图像为基准的面部的大小及从透镜部3到面部的距 离。通过采用这种方式，检测出的面部的位置、大小及到具有该面部的人物的距离由检测结 果输出部913输出。另外，关于这种面部检测处理，特开2007-257358号公报中进行了详细 揭示。
(声音补正处理)接着，说明本实施例涉及的声音补正处理。图9是表示本实施例的声音处理部11 的结构的模块图。如图9所示，声音处理部11包括A/D转换部110，将作为从麦克7L及7R输出的 模拟声音信号的声音信号L及声音信号R转换为数字声音信号；控制方法决定部111，接收 来自图像处理部9的面部检测信号以及来自转动检测部251的摄影模式信息以决定声音补 正处理的必要性和内容；控制切换部112，接收从控制方法决定部111输出的表示声音补正 处理的必要性和内容的信号，切换从麦克7L及7R输出的两个声音信号的输出目的地；特定 频带增强部113，增强从控制切换部112输出的两个声音信号的特定频带；立体声感增强部 114，增强从控制切换部112输出的两个声音信号的立体声感；方向性控制部115，在从控制 切换部112输出的两个声音信号内，增强从特定的方向到来的声音；以及声音加法部116， 将分别在立体声感增强部114和方向性控制部115中进行了处理的各个声音信号L及R以 指定比例(例如11等)进行相加。图10是立体声麦克7的收音方向性的示意图。麦克7L及7R分别是全方向性(无 方向性)的麦克。图10所示的L及R分别模拟麦克7L及7R的收音方向性。全方向性麦 克具有与麦克的方向和角度无关地仅反映从麦克周围到来的声音的大小的性质。因此，到 来的全部声音按照其大小(音量)进行收音。在声音补正处理开始后，控制方法决定部111参照从转动检测部251输出的摄影 模式信息，判断是否选择自拍模式。此外，判断是否从图像处理部9输出面部检测信号。在选择通常摄影模式的情况下，或者在选择自拍模式、并且未从图像处理部9输 出面部检测信号的情况下，控制方法决定部111向控制切换部112输出不对收音的声音进 行声音补正处理的命令，控制切换部112将从A/D转换部110输出的声音信号L及R输出 到压缩处理部13。在选择自拍模式、并且从图像处理部9输出面部检测信号的情况下，根据通过面 部检测处理检测出的面部在图像中的位置及在图像中所占的大小，输出方向性控制的命 令。在从图像处理部9输出多个面部检测信号(换言之，通过面部检测处理检测出多 个人物的面部)的情况下，假设摄影者希望对人物大小最大的人物进行摄影，因此进行方 向性控制以增强从人物大小最大的人物存在的方向到来的声音。关于该方向性控制在后面 描述。图像中最大出现的人物可以通过在面部检测装置91中哪一个层次图像中检测出了 面部来求出。具体而言，在本实施例中的面部检测方法中，如上所述，通过使用了各层次图 像和判断区域的模式匹配来检测人物的面部。判断区域的大小在对任一层次图像进行模式 匹配的情况下都是相同的大小，因此，在缩小率较高的层次图像中检测出的面部是摄影图 像中较大的面部。此外，也可以预先对希望摄影的人物的面部进行摄影 并记录到外部存储器47中， 作为摄影对象人物进行登记，由此在面部检测处理时比较与该静止图像中包含的人物相同 的人物是否包含在摄影图像中，在一致的人物包含在摄影图像中的情况下，增强从该人物 存在的方向到来的声音。关于是对从人物大小最大的人物存在的方向到来的声音进行方向 性控制，还是对从预先登记的摄影对象人物存在的方向到来的声音进行方向性控制，摄影者在摄影前及摄影过程中能够适当地切换优先级。此外，也可以对这两者进行方向性控制。在通过面部检测处理检测出的面部的大小大于等于指定大小(例如，图像中的面部所占的面积为30%或50%等)的情况下，假设摄影者希望主要对从该人物发出的声音进 行收音，因此控制方法决定部111向控制切换部112输出指示如下动作的命令在从立体声 麦克7收音的声音内，进行与人类的声音相对应的声音频带(例如，800 1200Hz)的增强 处理，同时对从影像中拍摄的人物存在的方向到来的声音进行方向性控制。控制切换部112将从A/D转换部110输出的声音信号L及R输出到特定频带增强 部113以及方向性控制部115。特定频带增强部113以及方向性控制部115对输出的声音 信号分别进行特定频带增强处理及方向性控制，并输出到声音加法部116。声音加法部116 将从特定频带增强处理部113以及方向性控制部115分别输出的声音信号以指定比例(例 如1 1的比例)进行相加，并输出到压缩处理部13。此外，在人物的大小小于指定大小的情况下，假设摄影者希望将周围的环境与人 物一起进行收音，因此控制方法决定部111向控制切换部112输出指示如下动作的命令对 从立体声麦克7收音的声音进行立体声感增强处理，同时对从影像中拍摄的人物存在的方 向到来的声音进行方向性控制。控制切换部112将从A/D转换部110输出的声音信号L及R分别输出到立体声感 增强部114以及方向性控制部115。立体声感增强部114以及方向性控制部对输出的声音 信号分别进行立体声感增强处理及方向性控制，并输出到声音加法部116。声音加法部116 将从立体声感增强处理部114以及方向性控制部115分别输出的声音信号以指定比例(例 如1 1的比例)进行相加，并输出到压缩处理部13。另外，在本实施例中，由特定频带增强部113、立体声感增强部114以及方向性控 制部115进行了处理的声音信号由声音加法部116进行适当相加，但也可以例如对由特定 频带增强部113进行了处理的声音信号由方向性控制部116进行方向性控制。以上述方式，对与图像同时取得的声音进行与显示方向及摄影方向的关系(例如 摄影模式)和图像中的特定被摄体的状态(例如人物的位置及面部的大小)相适应的声音 补正处理，因此能够得到与摄影者的摄影意图相适应的声音。(关于立体声感增强处理)在此，说明实施例1中的立体声化处理的一个例子。在此，作为立体声化处理，说 明利用加法型方向性控制增强左右两个方向的声音的处理。图11是表示该情况的立体声感增强部114的内部结构的概要的模块图。立体声 感增强部114包括延迟从左声道(Lch)输入的声音信号的延迟电路114L和延迟从右声道 (Rch)输入的声音信号的延迟电路114R，将输入原样的右声道的声音信号与延迟电路114L 延迟了的左声道的声音信号合成后作为右声道的声音信号输出，并将输入原样的左声道的 声音信号与延迟电路114R延迟了的右声道的声音信号合成后作为左声道的声音信号输 出ο如图12A所示，在声音从相对于两个麦克7L及7R而言右侧的声源A到来的情况 下，声音从声源起到分别到达麦克7L及7R为止，偏差了路程差Da。在此情况下，如果对于 由离声源较近的麦克7R收音的右声道的声音信号，通过延迟电路114R添加与路程差Da相 对应的延迟，与由离声源较远的麦克7L收音的左声道的声音信号相加，则对声源方向的声音进行同步相加，增强从声源A所在的方向到来的声音。相反，如果减去添加了延迟的声音 信号，则抵消从声源所在的方向到来的声音。另外，如图12B所示，在声音从相对于两个麦克7L及7R而言左侧的声源B到来的 情况下，如果对于由麦克7L收音的声音信号，通过延迟电路114L添加与路程差Db相对应 的延迟，与由麦克7R收音的声音信号相加或相减，则增强或抵消从声源B所在的方向到来
的声音。
(关于方向性控制处理)接着，说明实施例1中的方向性控制的一个例子。关于方向性控制处理提出了各 种各样的方法。上述立体声化处理中说明的加法型、减法型这样的包括声音信号的延迟与 加法处理、减法处理的方法也是其中一种。除此之外，有使用麦克风阵列的波束形成(Ε — Λ 7才一 S > ^ )或二维扇形滤波器等方法。在此，说明基于用两个麦克检测出的声音信 号之间的相位信息增强从特定方向到来的声音的方法。图13是该方法中能够使用的方向性控制部115的模块图。如图13所示，方向性 控制部115包括两个FFT部61L、61R，对右声道声音信号及左声道声音信号独立进行高速 傅立叶变换(Fast Fourier Transform ；FFT)；相位差检测部62，检测由FFT部61L、61R进 行了 FFT的右声道声音信号及左声道声音信号的相位差；各频带控制量决定部63，根据由 相位差检测部62检测出的相位差信息为各个频带决定方向性的控制量；两个各频带增益 控制部64L、64R，基于各频带控制量决定部663决定的控制量，独立地对进行了 FFT的右声 道声音信号及左声道声音信号进行各频带增益控制；以及IFFT部65L及65R，对由各频带 增益控制部64L、64R进行了增益控制的各个右声道声音信号及左声道声音信号进行逆高 速傅立叶变换(Inverse Fourier Transform ；IFFT)。在FFT部61L、61R中，右声道声音信号及左声道声音信号输入后进行FFT，并为每 个频带计算相位信息。如图14所示，到声音分别到达麦克7L及7R为止，存在时间差。在 相位差检测部62中根据右声道声音信号及左声道声音信号的相位信息计算相位差。根据 该相位差，能够导出声音分别到达麦克7L及7R为止的时间差。声音分别到达麦克7L及7R 为止的时间差根据声音的到来方向而不同，因此能够根据该时间差确定声音的到来方向。 具体而言，根据该时间差导出路程差d，根据该路程差d和麦克7L及7R的设置间隔w导出 角度Θ。根据该角度θ能够确定声音的到来方向。在各频带控制量决定部63中，判断由 相位差检测部62计算的声音成分的到来方向是否是目的方向，例如图像中的指定被摄体 的方向。被摄体的方向能够根据透镜部3的透镜角(换言之，对摄影方向能够摄影的左右 方向的范围)和检测出图像中的被摄体的位置来确定。在各频带控制量决定部63中，判断 为是来自目的方向以外方向的声音成分(换言之，声音的到来方向与图像中的被摄体的位 置大致一致的情况)的情况下，使进行了 FFT的频谱在各频带增益控制部64L、64R中减少， 在判断为是来自目的方向的声音成分的情况下使之增大。随后，对变化了的频谱在IFFT部 65L、65R中进行IFFT，恢复为时间信号并输出。在该方法中，通过将两个麦克的设置间隔w为半波长的频率作为声音增强处理的 上限频率，能够根据相位差计算正确的声音成分的到来方向即声源方向。
(关于索引)记录变焦倍率信息的索引在压缩记录声音信号时，为作为其处理单位的每一帧进行记录。例如在按照MPEG-AAC作为48kHz的采样信号进行记录的情况下，作为处理单 位的一帧根据作为1024个样本的1024+(48 X IO3) 2. 13X10—2，相当于约21. 3毫秒。 因此，可以与记录开始同步地每21. 3毫秒记录一次影像的变焦倍率信息。此外，在杜比 (Dolby)数字方式中一帧为1536个样本，在作为48kHz的采样信号进行记录的情况下，根据 1536+(48X IO3) = 3. 2X 10_2，可以每32毫秒记录一次影像的变焦倍率信息。〈实施例2>
在实施例1中，以图1所示的结构的摄像装置为例说明了本发明中的声音处理方 法，但并不限定于摄像装置，在与液晶显示器或等离子体电视等连接的DVD播放器或录像 机等能够进行声音及影像的输出的再生装置中，也能利用本发明中的声音处理方法。图15 中，作为例子表示包括执行本发明中的声音处理方法的声音处理装置(相当于“声音处理 部11”)的再生装置。与图1所示的摄像装置同样，图15所示的再生装置包括驱动器部49、扩展处理 部17、视频输出电路部19、视频输出端子21、显示部23、声音输出电路部29、声音输出端子 31、扬声器部33、TG35、CPU37、存储器39、操作部41、总线线路43、总线线路45以及外部存 储器47。并且，与图1的摄像装置不同，代替图像处理部9，包括处理由扩展处理部17取得 的图像信号的图像处理装置9a ；代替声音处理部11，包括处理由扩展处理部17取得的声音 信号的声音处理装置11a。图像处理装置9a包括图6所示的面部检测装置91，声音处理装 置Ila与图9的声音处理部11具有相同的结构。外部存储器47不仅能够保存实施例1及 后述的实施例3 5中记录的图像信号及进行了声音补正处理的声音信号，而且能够保存 摄影模式信息(也可以解释为表示转动部25的转动状态的信息、表示实施例3及4的显示 系统转动部25A及光学系统转动部25B的转动状态的信息、表示实施例5的进行摄影的摄 像部511、512及进行显示的显示部23的信息)以及未进行声音补正处理的声音信号和作 为索引的取得该声音信号时的变焦倍率信息等。并且，根据从图像处理装置9a的面部检测 装置91输出的面部检测信号、摄影模式信息以及从外部存储器47输出的未进行声音补正 处理的声音信号与变焦倍率信息，在声音处理装置Ila中能够进行本发明中的声音处理方 法。另外，在外部存储器47中记录的图像信号及声音信号如实施例1及后述的实施例 3 5以外的摄像装置中记录的运动图像那样不包含变焦倍率信息的情况下，在声音处理 装置Ila中可以基于成为对象的被摄体在图像中的大小进行声音补正处理。此外，在实施例1或后述的实施例3 5的摄像装置中，可以在摄影时由图像处理 部9进行面部检测，将检测结果记录在外部存储器47上。在此情况下，本实施例的再生装 置中，声音处理装置Ila能够从外部存储器47中取得面部检测信号，所以图像处理装置9a 可以不进行面部检测。〈实施例3>在实施例1中，示意了在显示部23能够进行转动的摄像装置中实施本发明的例 子，但能够实施本发明的摄像装置的结构并不限定于该例子。具体而言，例如，对于显示部 23以外的部件转动的摄像装置也能实施本发明。首先，作为实施例3，参照

在显示 部23与图像传感器1和透镜部3等光学系统部件(以下记作摄像部51)分别能够转动的 摄像装置中实施本发明的例子。
图16是表示本实施例涉及的摄像装置的内部结构的概要的模块图，是与关于实 施例1所示的图1相对应的图。此外，图17是表示本实施例涉及的摄像装置的外观的概要 的解说图，是与关于实施例1所示的图2A及图2B相对应的图。另外，对于图16中与图1 相同的部分、图17中与图2A及图2B相同的部分赋予相同的符号，省略其详细说明。如图16所示，与图1所示的摄像装置同样，本实施例的摄像装置包括图像传感器 1、透镜部3、AFE5、立体声麦克7、图像处理部9、声音处理部11、压缩处理部13、扩展处理部 17、视频输出电路部19、视频输出端子21、显示部23、声音输出电路部29、声音输出端子31、 扬声器部33、TG35、CPU37、存储器39、操作部41、总线线路43、总线线路45、外部存储器47 以及驱动器部49。并且，与图1的摄像装置不同，包括使显示部23转动的显示系统转动部 25A和使摄像部51转动的光学系统转动部25B。此外，如图17所示，与上述的转动部25(参照图2A及图2B)同样，显示系统转动 部25A是使显示部23能够转动的部件。另一方面，光学系统转动部25B是使摄像部51能 够转动的部件。另外，在图17中，显示系统转动部25A的转动轴A与光学系统转动部25B 的转动轴B表示为大致垂直，但也可以是大致平行或其他的关系。此外，图18是表示本实施例涉及的摄像装置的主要部分结构的模块图，是表示与 声音处理部11能够进行的声音补正处理有关的部分的图。除了上述显示系统转动部25A 以及光学系统转动部25B，本实施例的摄像装置还包括检测显示部23及摄像部51的相对关 系的方向关系检测部253、和根据方向关系检测部253检测出的关系进行监视器的显示控 制的监视器显示控制部252。此外，显示系统转动部25A使用与上述转动部25相同的方法 检测显示部23的转动(例如，指定角度以上的转动的有无或转动角)。此外，光学系统转动 部25B也使用与上述转动部25相同的方法检测摄像部51的转动(例如，指定角度以上的 转动的有无或转动角)并输出。方向关系检测部253通过参照显示系统转动部25A以及光学系统转动部25B的输 出结果，求出显示方向(在图17中是纸面内侧方向)与摄影方向(在图17中是纸面外侧 方向)的相对关系。此外，方向关系检测部253可以使用与实施例1的转动检测部251相同的方法来 进行摄影模式的选择。具体而言，例如，在显示方向与摄影方向是相反的方向的情况(例如 图17所示的状态的情况)下，选择通常摄影模式。另一方面，在显示方向与摄影方向是大 致相同的方向的情况(例如，从图17所示的状态开始，显示部23及摄像部51中的任一方 发生了转动的情况)下，选择自拍模式。监视器显示控制部252及声音处理部11根据方向关系检测部253选择的摄影模 式，执行与实施例1相同的动作(例如，显示部23中显示的预览用的图像的上下方向及左 右方向的控制、表示摄影模式的信息的显示、声音补正处理等)。此外，图像处理部9也执行 与实施例1相同的动作(例如面部检测处理等)。如上所述，在不仅显示部23能够转动，而且摄像部51能够转动的情况下，也能够 对与图像同时取得的声音进行与显示方向及摄影方向的关系(例如摄影模式)、和图像中 的特定被摄体的状态(例如，人物的位置及面部的大小)相适应的声音补正处理。因此，能 够得到符合摄影者的摄影意图的声音。另外，也可以将本实施例的方向关系检测部253及监视器显示控制部252解 释为CPU37的一部分。〈实施例4>接着，作为实施例4，参照

在摄像部51能够转动(包括实施例3中描述的光学系统转动部25B)，显示部23不转动(不包括实施例1中描述的转动部25及实施例3 中描述的显示系统转动部25A)的摄像装置中实施本发明的例子。图19A及图19B是表示本实施例涉及的摄像装置的外观的概要的解说图，是与关 于实施例1所示的图2A及图2B和关于实施例3所示的图17相对应的图。另外，在图19A 及图19B中，对于与图2A及图2B和图17相同的部分赋予相同的符号，省略其详细说明。另 外，本实施例的摄像装置的结构解释为从图16所示的实施例3的摄像装置中去除了显示系 统转动部25A的结构，省略其详细说明和图示。此外，本实施例的摄像装置包括的光学系统 转动部25B解释为与关于实施例1所示的转动部25 (参照图5)相同的结构，省略其详细说 明和图示。如图19A及图19B所示，本实施例的摄像装置包括转动轴B与监视器(图中的灰色 部分)大致平行的光学系统转动部25B，是使摄像部51能够转动的装置。另外，图19A及图 19B中例示了光学系统转动部25B的转动轴B与监视器的上边及下边大致平行(纸面的左 右方向)的结构，但也可以是大致垂直(纸面的上下方向)或其他的关系。此外，在图19A 及图19B中，例示了在摄像装置的与设置监视器的面相反侧的面上设置立体声麦克7的结 构，但在摄像装置的任一面上设置立体声麦克7都是可以的。例如，与光学系统转动部25B的转动检测部251 (参照图5)相对应的部分如图19A 所示在显示方向(纸面外侧方向)与摄影方向(纸面内侧方向)为相反方向的情况下选择 通常摄影模式。另一方面，如图19B所示，在显示方向(纸面外侧方向)与摄影方向(纸面 外侧方向)为大致相同方向的情况下选择自拍模式。此外，与光学系统驱动部25B的监视器显示控制部252 (参照图5)相对应的部分 及声音处理部11根据与光学系统驱动部25B的转动检测部251 (参照图5)相对应的部分 选择的摄影模式，执行与实施例1相同的动作(例如，显示部23中显示的预览用图像的上 下方向及左右方向的控制、表示摄影模式的信息的显示、声音补正处理等)。此外，图像处理 部9也执行与实施例1相同的动作(例如面部检测处理部等)。如上所述，在摄像部51能够转动的情况下，也能够对与图像同时取得的声音进行 与显示方向及摄影方向的关系(例如摄影模式)、和图像中的特定被摄体的状态(例如，人 物的位置及面部的大小)相适应的声音补正处理。因此，能够得到符合摄影者的摄影意图
的声音。〈实施例5>接着，作为实施例5，参照

在摄像部和显示部23不转动(不包括实施例1 中描述的转动部25和实施例3中描述的显示系统转动部25A及光学系统转动部25B)、包括 能够切换是否需要摄影的多个摄像部的摄像装置中实施本发明的例子。图20是表示本实施例涉及的摄像装置的内部结构的概要的模块图，是与关于实 施例1所示的图1相对应的图。此外，图21是表示本实施例涉及的摄像装置的外观的概要 的解说图，是与关于实施例1所示的图2A及图2B相对应的图。另外，对图20中与图1相 同的部分和图21中与图2A及图2B相同的部分赋予相同的符号，省略其详细说明。
如图20所示，与图1所示的摄像装置同样，本实施例的摄像装置包括AFE5、立体声麦克7、图像处理部9、声音处理部11、压缩处理部13、扩展处理部17、视频输出电路部 19、视频输出端子21、显示部23、声音输出电路部29、声音输出端子31、扬声器部33、TG35、 CPU37、存储器39、操作部41、总线线路43、总线线路45、外部存储器47以及驱动器部49。 并且，与图1的摄像装置不同，包括包括图像传感器101及透镜部301的第一摄像部511、 和包括图像传感器102及透镜部302的第二摄像部512。第一摄像部511及第二摄像部512例如按照经由操作部41输入的用户指示，由任 一方进行摄影。具体而言，CPU37基于经由操作部41输入的用户指示，决定第一摄像部511 及第二摄像部512分别是否需要摄影。如图21所示，显示部23的显示方向(纸面外侧方向)与第一摄像部511的摄影 方向(透镜部301朝向的方向。纸面内侧方向)是相反的方向。即，第一摄像部511摄影 的情况相当于上述各实施例中的通常摄影模式。另一方面，显示部23的显示方向(纸面外 侧方向)与第二摄影部512的摄影方向(透镜部301朝向的方向。纸面外侧方向)是大致 相同的方向。即，第二摄像部512摄影的情况相当于上述各实施例中的自拍模式。另外，在 图21中，例示了在摄像装置的与设置监视器的面相反侧的面上设置立体声麦克7的结构， 但在摄像装置的任一面上设置立体声麦克7都是可以的。在本实施例中，例如CPU37进行与实施例1的转动检测部251及监视器显示控制 部252(参照图5)相同的动作。即，CPU37进行显示部23中显示的预览用的图像的上下方 向及左右方向的控制、表示摄影模式的信息的显示指示、对声音处理部11的摄影模式的通 知等。此外，声音处理部11进行基于例如CPU37通知的摄影模式的声音补正处理等处理。 此外，图像处理部9执行与实施例1相同的动作(例如面部检测处理等)。如上所述，在能够切换不转动的多个摄像部(第一摄像部511及第二摄像部512) 是否需要动作的情况下，也能对与图像同时取得的声音进行与显示方向及摄影方向的关系 (例如摄影模式)和图像中的特定被摄体的状态(例如人物的位置及面部的大小)相适应 的声音补正处理。因此能够得到与摄影者的摄影意图相适应的声音。另外，作为本实施例，示意了在包括两个摄像部(第一摄像部511及第二摄像部 512)的摄像装置中实施本发明的例子，对于包括大于等于三个的摄像部的摄像装置，也同 样可以实施本发明。此外，本实施例是在包括能够切换是否需要摄影的多个摄像部511、512的摄像装 置中实施本发明的例子，对于包括能够切换是否需要显示的多个显示部的摄像装置，也能 与本实施例同样地实施本发明。此外，对分别包括能够切换是否需要摄影的多个摄像部和 能够切换是否需要显示的多个显示部的摄像装置，也能与本实施例同样地实施本发明。它 们与对显示部及摄像部中的一方或双方能够转动的摄像装置能够实施本发明(参照实施 例1、实施例3及实施例4)是同样的，因此省略详细的说明。此外，并不限定于摄像部及显示部，也可以包括多个能够切换是否需要收音的立 体声麦克。进而，还可以与进行摄影的摄像部或进行显示的显示部的切换或它们的转动联 动地切换进行收音的立体声麦克。〈实施例6>如图17、图19A及图19B、图21所示的摄像装置那样，在摄像部51独立于立体声麦克 转动或切换是否摄影的情况下，会出现摄像部51取得的图像与立体声麦克7取得的各 个声音的声道不对应的情况。例如，在使图19Α及图19Β的纸面左侧的麦克收音的声音属 于右声道，纸面右侧的麦克收音的声音属于左声道的情况下，在图19Α所示的状态(显示方 向与摄影方向是相反的方向。通常摄影模式。)下，图像与声音的声道相对应，但在图19Β 所示的状态(显示方向与摄影方向为大致相同的方向。自拍模式。)下，变得不对应。具体说明该情况。在上述例子中图19Α的通常摄影模式的情况下，朝向摄影方向 (纸面内侧方向)时左侧(纸面左侧)的麦克收音的声音成为左声道，右侧(纸面右侧)的 麦克收音的声音成为右声道。即，图像与声音的声道是对应的。与此相对，在图19Β的自拍 模式的情况下，朝向摄影方向(纸面外侧方向)时右侧(纸面左侧)的麦克收音的声音成 为左声道，左侧(纸面右侧)的麦克收音的声音成为右声道。即，图像与声音的声道变得不 对应。
对此，作为实施例6参照

解决该问题的结构的例子。另外，本实施例可以 解释为上述的实施例1及实施例3 5的变形例。在本实施例中，例如上述的控制切换部112(参照图9)进行控制声音的声道的处 理。参照图22说明该控制切换部112的具体例子。图22是表示本实施例涉及的摄像装置 中包括的控制切换部112的主要部分结构的模块图。如图22所示，控制切换部112基于作 为表示摄像部51的摄影方向与立体声麦克7收音的方向的关系的信息的图像声音关系信 息，决定对输入的各声道的声音(Lch输入、Rch输入)进行输出的声道(Lch输出、Rch输 出)。图像声音关系信息可以由例如CPU37基于摄影模式信息(也可以解释为表示转动 部25、显示系统转动部25Α及光学系统转动部25Β的转动状态的信息、表示进行摄影的摄像 部511、512及进行显示的显示部23的信息)和进行收音的立体声麦克的配置等生成。另 夕卜，在如图17、图19Α及图19Β、图21所示的摄像装置那样，通过摄影模式决定图像与声音 的声道是否对应的情况下，也可以将图像声音关系信息作为摄影模式信息。例如，在上述的例子中图19Α的通常摄影模式的情况下，图像与声音的声道相对 应，因此不互换输入声道与输出声道地(将Lch输入作为Lch输出，将Rch输入作为Rch输 出)进行输出。与此相对，在图19Β的自拍模式的情况下，图像与声音的声道变得不对应， 因此互换输入声道与输出声道地(将Lch输入作为Rch输出，将Rch输入作为Lch输出) 进行输出。以上述方式，在由于摄像部及显示部的转动或多个摄像部的摄影及多个显示部的 显示的切换，会产生图像与声音的声道不对应的结构中，也能在收音后进行补正以使图像 与声音的声道相对应。另外，如实施例5所述，通过包括能够切换是否需要收音的多组立体声麦克，根据 摄影模式切换收音的立体声麦克，也能够使图像与声音的声道相对应。此外，通过采用实施例1所示的摄像装置那样只有显示部23转动的结构，或者摄 像部51与立体声麦克7联动地转动的结构，能够无须适用本实施例。〈变形例〉对于本发明的实施方式的摄像装置及再生装置，可以由微计算机等控制装置执行 图像处理部9或图像处理装置9a、声音处理部11、声音处理装置Ila等的动作。进而，可以通过将这种控制装置实现的功能的全部或一部分作为程序记载，并在程序执行装置(例如 计算机)上执行该程序，来实现该功能的全部或一部分。此外，并不限定于上述情况，图1、图16及图20所示的摄像装置，图1、图6、图16、 图18及图20所示的图像处理部9，图1、图9、图16、图18及图20所示的声音处理部11， 图15所示的再生装置15、图像处理装置9a及声音处理装置Ila可以由硬件或硬件 与软件 的组合实现。此外，在使用软件构成摄像装置、图像处理部9、图像处理装置9a、声音处理部 11及声音处理装置Ila的一部分的情况下，关于由软件实现的部件的模块表示该部件的功 能模块。以上对本发明的一实施例进行了说明，本发明并不限定于这些实施例，在其主旨 范围内可以进行变形及变更。
权利要求
1.一种摄像装置，其特征在于包括以下结构 至少一个摄像部，通过摄影取得图像；至少一个收音部，与所述摄像部的摄影同时进行收音以取得声音； 特定被摄体检测部，从所述图像中检测特定被摄体； 至少一个显示部，显示所述图像；方向关系检测部，检测所述显示部显示所述图像的方向与所述摄像部摄影的方向的相 对关系；以及声音补正部，根据由所述特定被摄体检测部得到的特定被摄体的检测结果和所述方向 关系检测部检测出的关系，对所述收音部取得的所述声音进行声音补正处理。
2.根据权利要求1所述的摄像装置，其特征在于，还包括转动部，该转动部能够使所述显示部及所述摄像部中的至少一个转动； 在所述方向关系检测部基于该转动部检测出所述显示部显示所述图像的方向与所述 摄像部摄影的方向比指定程度更加接近，并且所述特定被摄体检测部从所述图像中检测出 特定被摄体的情况下，所述声音补正部对所述收音部取得的所述声音进行所述声音补正处理。
3.根据权利要求1所述的摄像装置，其特征在于， 还包括通知部，该通知部通知所述声音补正处理的内容；在所述声音补正部对所述收音部取得的所述声音进行所述声音补正处理时，所述通知 部通知该声音补正处理的内容。
4.根据权利要求1所述的摄像装置，其特征在于，所述声音补正部进行对所述收音部取得的所述声音中从所述特定被摄体存在的方向 到来并被收音的成分进行增强的处理，作为所述声音补正处理之一。
5.根据权利要求1所述的摄像装置，其特征在于，还包括确定部，该确定部在所述特定被摄体检测部检测出多个特定被摄体的情况下， 确定该多个特定被摄体中最大的特定被摄体；所述声音补正部进行对所述收音部取得的所述声音中从所述确定部确定的特定被摄 体存在的方向到来并被收音的成分进行增强的处理，作为所述声音补正处理之一。
6.根据权利要求1所述的摄像装置，其特征在于，还包括比较部，该比较部在所述特定被摄体检测部检测出多个特定被摄体的情况下， 对该多个特定被摄体的各自的特征与预先取得的特定被摄体图像的特征进行比较；在由所述比较部确定特征一致的特定被摄体存在的情况下，所述声音补正部进行对所 述收音部取得的所述声音中从该特定被摄体存在的方向到来的成分进行增强的处理，作为 所述声音补正处理之一。
7.根据权利要求1所述的摄像装置，其特征在于，所述声音补正部进行如下处理中的至少一个处理，作为所述声音补正处理之一 信号水平调整处理，对所述收音部取得的所述声音中从特定位置到来并被收音的成分 的水平进行调整；频带水平调整处理，对所述声音的特定频带的水平进行调整。
8.根据权利要求1所述的摄像装置，其特征在于，所述特定被摄体是人物的面部。
9.根据权利要求1所述的摄像装置，其特征在于，还包括图像声音关系检测部，该图像声音关系检测部检测所述摄像部摄影的方向与至 少两个所述收音部收音的各个方向的相对关系；在所述收音部对属于不同声道的各个所述声音进行收音时，所述声音补正部根据所述图像声音关系检测部检测出的关系，补正所述收音部取得的 声音所属的声道。
10.根据权利要求9所述的摄像装置，其特征在于，还包括转动部，该转动部能够使所述摄像部独立于所述收音部地转动； 所述图像声音关系检测部基于该转动部检测相对于所述摄像部摄影的方向至少两个 所述收音部收音的各个方向有无互换，在所述图像声音关系部检测出所述互换的情况下，所述声音补正部将检测出所述互换 的各个所述收音部取得的所述声音所属的声道互换。
11.一种再生装置，其特征在于，包括以下结构再生部，对摄影取得的图像和与该图像的摄影同时进行收音取得的声音进行再生； 方向关系检测部，检测所述图像摄影的方向与摄像时所述图像显示的方向的相对关 系；以及声音补正部，根据所述图像中的特定被摄体和所述方向关系检测部检测出的关系，对 所述再生部再生的所述声音进行声音补正处理。
12.根据权利要求11所述的再生装置，其特征在于， 还包括以下结构至少一个摄像部，通过摄影取得所述图像；至少一个收音部，与所述摄像部的摄影同时进行收音以取得所述声音； 至少一个显示部，显示所述图像；转动部，能够使所述显示部及所述摄像部中的至少一个转动； 记录部，将表示该转动部的转动状态的转动信息与所述图像及所述声音一起进行记 录；以及特定被摄体检测部，从所述图像中检测特定被摄体，在所述方向关系检测部根据所述记录部中记录的所述转动信息检测出所述显示部显 示所述图像的方向与所述摄像部摄影的方向比指定程度更加接近，并且所述特定被摄体检 测部从所述图像中检测出特定被摄体的情况下，所述声音补正部对所述再生部再生的所述声音进行所述声音补正处理。
全文摘要
本发明提供一种摄像装置及再生装置，摄像装置包括至少一个摄像部，通过摄影取得图像；至少一个收音部，与摄像部的摄影同时进行收音以取得声音；以及至少一个显示部，显示图像。并且，根据显示部显示图像的方向与摄像部摄影的方向的相对关系和图像中的特定被摄体的检测结果，对收音部取得的声音进行声音补正处理。
文档编号H04N5/232GK102006403SQ20101026498
公开日2011年4月6日 申请日期2010年8月26日 优先权日2009年8月28日
发明者奥智岐 申请人:三洋电机株式会社