降噪处理装置、摄像装置及降噪处理程序的制作方法

文档序号:7851977阅读:174来源:国知局
专利名称:降噪处理装置、摄像装置及降噪处理程序的制作方法
技术领域
本发明涉及从声音信号减去噪音的降噪处理装置、摄像装置及降噪处理程序。本申请基于2011年5月27日提交的日本专利申请第2011-119758号并要求其优先权,并将其内容引用于此。
背景技术
例如,为了将连续产生的周围音作为噪音除去,根据声音信号计算对应于周围音的噪音(声音信号中包含的噪音成分),并将该噪音从声音信号减去(例如,参照专利文献I)。专利文献I特开2005-195955号公报在设置于摄像装置的光学系统中,在驱动透镜的齿轮列等驱动系统的旋转方向反转等时,有时噪音的音量会暂时地增大。这样,在根据工作部的工作状态通过驱动而产生的噪音的音量和/或定时不同的情况下,若进行使用了专利文献I的技术的降噪处理,则存在着拾音对象即目标音会劣化的问题。

发明内容
本发明的方式目的在于提供减轻降噪处理中的目标音的劣化的降噪处理装置、摄像装置及降噪处理程序。本发明的方式具备定时信号检测部,其检测表示工作部进行工作的定时的工作定时信号;声音信号取得部,其取得声音信号;以及降噪处理部,其检测所述工作定时信号,计算在因所述工作部的工作而产生的噪音产生的可能性高的期间取得的声音信号的第I频谱和在不产生所述噪音的可能性高的期间取得的声音信号的第2频谱,并基于将所述计算的第I频谱的至少一部分置换为所述计算的第2频谱的对应部分而得到的频谱,计算对所述声音信号进行了降噪的降噪声音信号。根据本发明的方式,能够减轻降噪处理中的目标音的劣化。


图I是表示包含本发明实施例所涉及的降噪处理部的摄像装置的结构的一例的框图。图2是用于说明本发明实施例所涉及的工作部的工作定时信号与声音信号的关系的一例的参考图。图3是用于说明图2所示的声音信号与窗函数的关系的参考图。图4是用于说明本发明实施例所涉及的冲击音降噪处理部取得的第I频谱和第2频谱的一例的图。图5是表示图3所示的各频谱的频率分量的一例的图。图6是用于说明本实施例所涉及的冲击音降噪处理的一例的图。
图7是用于说明本实施例所涉及的降噪处理方法的一例的流程图。图8A是表不目标音为男声的情况下的频谱的一例的图。图SB是表示目标音为女声的情况下的频谱的一例的图。图9是表不编码器的输出和麦克风声音信号的一例的图。图10是表不命令输出、编码器的输出和麦克风声音信号的一例的图。图11是用于说明本发明实施例所涉及的工作部的工作定时信号与声音信号的关系的另一例的参考图。

图12是用于说明图11所示的声音信号与窗函数的关系的参考图。图13是用于说明本发明实施例所涉及的冲击音降噪处理部取得的第I频谱和第2频谱的另一例的图。
具体实施例方式参照附图关于本发明的实施例详细地进行说明。图I示出表示本实施例所涉及的摄像装置的结构的框图。如图I所示,摄像装置100拍摄由光学系统形成的像,使所得到的图像数据存储于存储介质200,并且对通过麦克风拾取的麦克风声音信号进行降噪处理,使降噪处理后的声音信号存储于存储介质200。该摄像装置100具备降噪处理部250。该降噪处理部250进行从通过麦克风拾取的声音降低噪音的降噪处理。本实施例所涉及的降噪处理部250执行用于降低因工作部工作而产生的噪音(以下称为工作音)的降噪处理。例如,在摄像装置100中,在AF(Auto Focus 自动对焦)和/或VR (Vibration Reduction :抖动修正)等处理中驱动光学系统的情况下,会因马达和/或光学系统工作而产生噪音(工作音)。此外,在马达转换旋转方向的情况下,会暂时地产生大的噪音(工作音)。这样,将在工作部的工作状态发生变化的情况下暂时地产生的大的声音称为冲击音。另一方面,将比该冲击音小的、在光学系统和/或马达工作时产生的声音称为驱动音。也就是说,驱动音是冲击音以外的噪音。本实施例所涉及的降噪处理部250进行从麦克风声音信号降低由冲击音形成的噪音的冲击音降噪处理,并且进行从麦克风声音信号降低由驱动音形成的噪音的驱动音降噪处理。以下,关于摄像装置100和降噪处理部250的结构的一例详细地进行说明。另外,在本实施例中,说明降噪处理部250内置于摄像装置100的例子,但本发明并不受此限制。例如,降噪处理部250也可为摄像装置100的外部装置。摄像装置100具备摄像部110、缓冲存储器部130、图像处理部140、显示部150、存储部160、通信部170、操作部180、CPU190 (控制部)、计时部220、麦克风230 (声音信号取得部)、A/D转换部240、降噪处理部250和电池260。摄像部110具备光学系统111、摄像元件119和A/D (Analog/Digital,模拟/数字)转换部120,且按照根据设定的摄像条件(例如光圈值、曝光值等)而预先确定的驱动模式由CPU190进行控制。该摄像部110使由光学系统111形成的光学像成像于摄像元件119,生成基于通过A/D转换部120变换为了数字信号的光学像的图像数据。光学系统111具备焦点调整透镜(以下称为“AF透镜”)112、抖动修正透镜(以下称为“VR透镜”)113、变焦透镜114、变焦编码器115 (工作检测部)、透镜驱动部116(驱动部)、AF编码器117 (工作检测部)和抖动修正部118 (驱动部)。光学系统111的这些构成在由CPU190进行的焦点调整处理、抖动修正处理以及变焦处理中,按照各自的驱动模式进行驱动。也就是说,光学系统111是摄像装置100的工作部。光学系统111将从变焦透镜114入射、按顺序通过了变焦透镜114、VR透镜113、AF透镜112的光学像导引至摄像元件119的受光面。透镜驱动部116从CPU190输入用于控制AF透镜112和变焦透镜114的位置的驱动控制信号(命令)。该透镜驱动部116根据输入的驱动控制信号控制AF透镜112和变焦透镜114的位置。也就是说,该驱动控制信号从CPU190输入到透镜驱动部116,使透镜驱动部116进行驱动,由此使AF透镜112及变焦透镜114移动(工作)。在本实施例中,将CPU190输出 驱动控制信号的定时称为AF透镜112和变焦透镜114的工作开始的工作开始定时。变焦编码器115检测表示变焦透镜114的位置的变焦位置,并输出到CPU190。该变焦编码器115检测变焦透镜114的移动,例如,在变焦透镜114在光学系统111内移动的情况下对CPU190输出脉冲信号。另一方面,在停止的情况下,变焦编码器115停止脉冲信号的输出。AF编码器117检测表示AF透镜112的位置的焦点位置,并输出到CPU190。该AF编码器117检测AF透镜112的移动,例如,在AF透镜112在光学系统111内移动的情况下对CPU190输出脉冲信号。另一方面,在停止的情况下,AF编码器117停止脉冲信号的输出。另外,变焦编码器115也可以为了检测变焦位置而检测变焦透镜114的驱动方向。此外,AF编码器117也可以为了检测焦点位置而检测AF透镜112的驱动方向。例如,通过由透镜驱动部116驱动的驱动机构(例如马达和/或凸轮等)顺时针(CW)或逆时针(CCW)旋转,由此变焦透镜114和/或AF透镜112在光轴方向移动。变焦编码器115和AF编码器117可以分别通过检测驱动机构的旋转方向(这里称为顺时针或逆时针),而检测出变焦透镜114和AF透镜112在移动。抖动修正部118具备例如振动回转仪机构,检测由光学系统111形成的像的光轴抖动,使VR透镜113向抵消该光轴抖动的方向移动。该抖动修正部118例如在使VR透镜113移动的状态下对CPU190输出高电平的信号。另一方面,在使VR透镜113停止的状态下,抖动修正部118停止低电平信号的输出。摄像元件119例如具备光电转换面,将在其受光面成像的光学像转换为电信号,并输出到A/D转换部120。该摄像元件119将在经由操作部180接收到拍摄指示时获得的图像数据作为静止图像或运动图像的图像数据经由A/D转换部120存储于存储介质200。另一方面,摄像元件119在没有经由操作部180接收到摄像指示的状态下,将连续获得的图像数据作为通行图像数据,经由A/D转换部120输出到CPU190和显示部150。A/D转换部120将由摄像元件119变换得到的电信号数字化,并将数字信号即图像数据输出到缓冲存储器部130。缓冲存储器部130暂时存储由摄像部110拍摄的图像数据。此外,缓冲存储器部130暂时存储与麦克风230拾取的麦克风检测音相应的麦克风声音信号。另外,缓冲存储器部130也可以将麦克风检测音的拾音时刻与缓冲存储器部130中的位置相对应地存储与麦克风检测音相应的麦克风声音信号。图像处理部140参照存储部160中存储的图像处理条件,对缓冲存储器部130中暂时存储的图像数据进行图像处理。图像处理后的图像数据经由通信部170存储于存储介质200。另外,图像处理部140也可以对存储介质200中存储的图像数据进行图像处理。显示部150是例如液晶显示器,显示由摄像部110得到的图像数据和/或操作画面等。存储部160存储由CPU190在场景判定时所参照的判定条件和/或与通过场景判定而判断的每个场景相对应的摄像条件等。通信部170与存储卡等可以取下的存储介质200连接,执行对该存储介质200的 信息(图像数据和/或声音数据等)的写入、读出或擦除。操作部180具备例如电源开关、快门按钮、复式选择器(十字键)或其它操作键,由使用者操作由此接受使用者的操作输入,并将与操作输入相应的操作信息输出到CPU190。该操作部180在被使用者按下时会发出物理的工作音。在本实施例中,将与使用者的操作输入相应的操作信息从操作部180输入至CPU190的定时,称为操作部180的工作开始的工作开始定时。存储介质200是相对于摄像装置100可以装卸地连接的存储部,存储例如由摄像部110生成的(拍摄的)图像数据和/或由降噪处理部250进行了声音信号处理的声音信号。总线210与摄像部110、缓冲存储器部130、图像处理部140、显示部150、存储部160、通信部170、操作部180、CPU190、计时部220、A/D转换部240和降噪处理部250连接,
传送从各构成部输出的数据等。计时部220进行日期和/或时刻的计时并输出表示所计时的日期时间的日期时间信息。麦克风230拾取周围的声音,并将该声音的麦克风声音信号输出到A/D转换部240。在通过该麦克风230拾取的麦克风检测音中主要包含作为拾音对象的目标音和由工作部产生的工作音(噪音)。这里,关于通过麦克风230取得的麦克风声音信号,例如以在AF透镜112工作时获得的麦克风声音信号为例,参照图2、3进行说明。图2(A)表不AF编码器117的输出与时间的关系的一例。图2(B)表不麦克风声音信号与时间的关系的一例。另外,为了便于说明,图2(B)在麦克风声音信号中仅不出工作音的声音信号,省略了目标音的声音信号的图不。图2(A)和图2(B)所不的AF透镜112的驱动模式表示进行例如以焦点距离a而对焦的AF处理的情况下的驱动模式。在图2 (A)中,纵轴表示根据AF编码器117输出求出的、驱动AF透镜112的驱动机构的旋转方向。在该进行以焦点距离a而对焦的AF处理的驱动模式中,如图2(A)所示,驱动AF透镜112的驱动机构在时刻tl(Tt20顺时针CW旋转,然后静止。也就是说,时刻tlO表示AF透镜112的工作开始定时,时刻t20表示AF透镜112的工作停止定时。另外,在本实施例中,工作开始定时的时刻tlO表示CPU190输出用于控制AF透镜112的位置的驱动控制信号的定时。工作停止定时的时刻t20表示来自AF编码器117的脉冲信号的输出停止的定时。因此,如图2(B)所示,在时刻tlO t20的期间,在麦克风声音信号上重叠(产生)了由AF透镜112产生的工作音,或者重叠工作音的可能性高。以下,在本实施例中,关于在时刻tl(Tt20的期间产生由AF透镜112产生的工作音即噪音的情况进行说明。此外,如图2(B)所示,在时刻tlO、t20,分别有高的产生冲击音的可能性。以下,在本实施例中,关于在时刻tlO、t20产生由AF透镜112产生的冲击音的情况进行说明。此外,在产生了冲击音的情况下,该冲击音产生的可能性高的时间根据各驱动模式预先确定。在进行以焦点距离a而对焦的AF处理的驱动模式中,确定图3所示的冲击音的产生时间。图3表示在进行以焦点距离a而对焦的AF处理的驱动模式下驱动AF透镜112 时,由麦克风230拾取的麦克风声音信号的一例。图3所示的曲线,纵轴表示由麦克风230拾取的麦克风声音信号,横轴表不时间。另外,为了便于说明,图3仅不出麦克风声音信号中的工作音的声音信号,省略了目标音的声音信号的图不。在进行以焦点距离a而对焦的AF处理的驱动模式中,预先确定为时刻的时间和时刻t2(Tt21的时间分别为冲击音的产生时间。在本实施例中,如图3所示,关于在该冲击音的产生期间产生冲击音的例子进行说明。返回到图1,继续说明摄像装置100的各构成部。CPU190按照与所设定的摄像条件(例如光圈值、曝光值等)相应的驱动模式来控制摄像部110。该CPU190基于从变焦编码器115输出的变焦位置和从AF编码器117输出的焦点位置来生成驱动透镜驱动部116的驱动控制信号,并输出到透镜驱动部116。其生成算法可以根据需要适宜使用已有的算法。定时信号检测部191检测摄像装置100所具备的工作部的工作状态发生变化的定时。作为该工作状态发生变化的定时,例如有工作部开始工作的工作开始定时和工作部的工作停止的工作停止定时。此处所说的工作部,是例如上述的光学系统111或操作部180,是摄像装置100所具备的构成部中通过进行工作或被工作而产生工作音的(或者有产生工作音的可能性的)构成部。换言之,工作部是摄像装置100所具备的构成部中通过工作部进行工作而产生的工作音或者通过工作部被工作而产生的工作音被麦克风230拾音(或者有被拾音的可能性的)构成部。例如,该定时信号检测部191可以基于使工作部工作的驱动控制信号检测工作部的工作状态发生变化的定时。该驱动控制信号是对于使工作部工作的驱动部,设定为使工作部工作的驱动控制信号,或是使该驱动部驱动的驱动控制信号。例如,定时信号检测部191基于为了驱动变焦透镜114、VR透镜113或AF透镜112而输入于透镜驱动部116或抖动修正部118的驱动控制信号,检测变焦透镜114、VR透镜113或AF透镜112的工作开始的工作开始定时。在这种情况下,定时信号检测部191可以基于在CPU190生成驱动控制信号的情况下在CPU190内部执行的处理和/或命令来检测工作开始定时。此外,定时信号检测部191可以基于从操作部180输入的、表示驱动变焦透镜114或AF透镜112的操作信号来检测工作开始定时。此外,定时信号检测部191也可以基于表示工作部被工作的信号来检测工作部的工作状态发生变化的定时。例如,定时信号检测部191可以基于变焦编码器115或AF编码器117的输出,检测出变焦透镜114或AF透镜112被驱动,由此检测出变焦透镜114或AF透镜112的工作开始定时。此外,定时信号检测部191可以基于变焦编码器115或AF编码器117的输出检测出变焦透镜114或AF透镜112被停止,由此检测出变焦透镜114或AF透镜112的工作停止定时。此外,定时信号检测部191可以基于来自抖动修正部118的输出检测出VR透镜 113被驱动,由此检测出VR透镜113的工作开始定时。该定时信号检测部191可以基于来自抖动修正部118的输出检测出VR透镜113被停止,由此检测出VR透镜113的工作停止定时。进而,定时信号检测部191可以基于来自操作部180的输入检测出操作部180被操作,由此检测出工作部进行工作的定时。定时信号检测部191检测摄像装置100所具备的工作部的工作开始定时,并将表示所检测的工作开始定时的工作开始定时信号(工作检测信号)输出到降噪处理部250。此外,定时信号检测部191检测工作停止定时,并将表示该检测的工作停止定时的工作停止定时信号(工作检测信号)输出到降噪处理部250。在本实施例中,定时信号检测部191将使AF透镜112移动的驱动控制信号从CPU190输出到透镜驱动部116的定时判定为AF透镜112的工作开始定时。定时信号检测部191输出表示例如由图3的例子所示的冲击音产生的时刻的信息作为工作开始定时信号。此外,定时信号检测部191基于从AF编码器117输出的脉冲信号,将该脉冲信号的输出停止之时判定为AF透镜112的工作停止的工作停止定时。定时信号检测部191输出表示例如由图3的例子所示的冲击音产生的时刻t2(Tt21的信息作为工作停止定时信号。A/D转换部240将从麦克风230输入的模拟信号的麦克风声音信号转换成数字信号的麦克风声音信号。该A/D转换部240将数字信号的麦克风声音信号输出到降噪处理部250。此外,A/D转换部240也可以是将数字信号的麦克风声音信号存储在缓冲存储器部130或存储介质200的结构。降噪处理部250对于由A/D转换部240转换为了数字信号的麦克风声音信号执行降低由例如AF透镜112、VR透镜113、变焦透镜114等工作部产生的工作音即噪音等的降噪处理,并将进行了该降噪处理的声音信号存储于存储介质200。该降噪处理部250包含声音信号处理部251、冲击音降噪处理部252、驱动音降噪处理部253和逆傅立叶变换部254。声音信号处理部251对从A/D转换部240输出的麦克风声音信号按每个预先确定的区间用窗函数进行加权,并且将该每个区间的麦克风声音信号变换为以频域表示的频谱,并将该以频域表示的频谱输出到冲击音降噪处理部252和驱动音降噪处理部253。该声音信号处理部251例如通过对麦克风声音信号进行傅立叶变换或快速傅立叶变换(FFT:Fast Fourier Transform),将麦克风声音信号变换到频域。声音信号处理部251例如通过对麦克风声音信号进行傅立叶变换而计算与窗函数的各区间对应的频谱。这里,窗函数中预先确定的区间是信号处理的单位(帧),是以一定间隔反复的区间。这些窗函数的各区间与其它窗函数的各区间各重叠一半。另外,窗函数可以使用例如汉宁窗(Hanning Window)函数。参照上述的图3,说明由声音信号处理部251计算的与窗函数的各区间对应的频 谱的一例。声音信号处理部251,如上所述,对从A/D转换部240输出的麦克风声音信号,用如图3所不与其它区间各重叠一半的窗函数Wl W14进行加权。由此,麦克风声音信号被分割成窗函数的大小。该声音信号处理部251按用窗函数Wl W14进行了加权的各区间的麦克风声音信号的每一个进行例如傅立叶变换,计算频域的频谱Sf S14。也就是说,由声音信号处理部251计算的频谱Sl S14是与窗函数Wl W14的区间对应的频谱。如图3所示,时刻11 (Tt 11的区间、时刻t2(Tt21的区间是冲击音产生的区间。另夕卜,时刻tlft20的区间是驱动音产生的区间。在本实施例中,与窗函数W2 W4对应的频谱S2 S4是包含与AF透镜112的工作开始定时tlO对应的冲击音产生期间的声音信息。另外,与窗函数W9 W12对应的频谱S9 S12是包含与AF透镜112的工作停止定时t20对应的冲击音产生期间t2(Tt21的声音信息。与窗函数W5 W8对应的频谱S5 S8是与由AF透镜112产生的驱动音的产生期间对应的声音信息。声音信号处理部251,例如计算频谱Sf S14,并将与冲击音产生期间对应的频谱的频率分量的总和与预先确定的阈值进行比较。该预先确定的阈值是设定为目标音相对于冲击音越大则由冲击音引起的声音劣化越小的目标音频谱的频率分量的总和。在判定为与冲击音产生期间对应的频谱的频率分量的总和低于预先确定的阈值的情况下,声音信号处理部251将所计算的频谱Sf S14输出到冲击音降噪处理部252,并进行控制使得执行冲击音降噪处理。另一方面,在判定为与冲击音产生期间对应的频谱的频率分量的总和为预先确定的阈值以上,声音信号处理部251将所计算的频谱Sf S14输出到驱动音降噪处理部253,并进行控制使得执行驱动音降噪处理。冲击音降噪处理部252基于从定时信号检测部191输入的工作定时信号(工作检测信号),根据例如从声音信号处理部251输出的频谱Sf S14,取得与冲击音产生的可能性高的期间对应的频谱(以下称为第I频谱)。例如,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得与存在冲击音产生可能性的期间对应的频谱S2 S4作为第I频谱。冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得与存在冲击音产生可能性的期间对应的频谱S9 S12作为第I频谱。另外,冲击音降噪处理部252基于从定时信号检测部191输入的工作定时信号,根据从声音信号处理部251输出的频谱Sf S14取得与不产生冲击音的可能性高的期间对应的频谱(以下称为第2频谱)。该冲击音降噪处理部252按每个包含冲击音的可能性高的第I频谱取得包含该冲击音的可能性低的第2频谱。在本实施例中,冲击音降噪处理部252取得与第I频谱在时间轴方向最近的频谱作为第2频谱。也就是说,冲击音降噪处理部252取得与第I频谱在时间轴方向相邻或重叠的频谱作为第2频谱。另外,在本实施例中,第2频谱是与不产生冲击音的可能性高的期间对应的频谱。但是,本发明不受此限制,第2频谱优选是与不产生因工作部的工作而产生的噪音的可能性高的期间对应的频谱。另外,也可以是与不产生工作音的可能性高的期间对应的频谱。这里,参照图4说明冲击音降噪处理部252取得的第I频谱与第2频谱的关系的一例。图4是用于说明冲击音降噪处理部252取得的第I频谱和第2频谱的一例的图。例如,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频谱S2、S3的在时间轴的过去方向最近的频谱SI作为与频谱S2、S3对应的第2频谱。另外,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频 谱S4的在时间轴的未来方向最近的频谱S5作为与频谱S4对应的第2频谱。另外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得作为第I频谱的频谱S9、S10的在时间轴的过去方向最近的频谱S8作为与频谱S9、SlO对应的第2频谱。另外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得作为第I频谱的频谱SI I、S12的在时间轴的未来方向最近的频谱S13作为与频谱SI I、S12对应的第2频P曰。进而,冲击音降噪处理部252将第I频谱的至少一部分置换成第2频谱的对应部分。例如,冲击音降噪处理部252将第I频谱中预先确定的阈值频率以上的频谱与第2频谱中预先确定的阈值频率以上的频谱按每个频率分量进行比较,在判定为第2频谱比第I频谱小的情况下,将第I频谱中的该频率分量置换为第2频谱的频率分量。参照图5详细地进行说明。图5是用于说明一部分频谱的频率分量的一例的图。另外,在本实施例中,为了便于说明,关于图3所不的麦克风声音信号中与窗函数Wl、W3、W5、W7、Wll、W13 对应的频谱 SI、S3、S5、S7、SI I、S13 进行说明。如图5所示,频谱SI、S3、S5、S7、SlU S13分别包含频率分量fl f9的频率分量。例如,冲击音降噪处理部252预先确定作为各频谱的阈值频率以上的频率分量,关于频率分量f3 f9将第I频谱与第2频谱进行比较。因此,冲击音降噪处理部252关于频率分量H、f2不将第I频谱与第2频谱进行比较。这里,参照图6说明关于频谱SI和S3由冲击音降噪处理部252执行的冲击音降噪处理的一例。图6是用于说明按频谱SI和S3的每个频率分量进行振幅比较的图。例如,冲击音降噪处理部252将频谱SI的频率分量f3的振幅与频谱S3的频率分量f3的振幅进行比较。在此情况下,频谱SI的频率分量f3的振幅小于频谱S3的频率分量f3的振幅。因此,冲击音降噪处理部252将频谱S3的频率分量f3置换为频谱SI的频率分量f3。另外,冲击音降噪处理部252将频谱SI的频率分量f4的振幅与频谱S3的频率分量f4的振幅进行比较。在此情况下,频谱SI的频率分量f4的振幅大于频谱S3的频率分量f4的振幅。因此,冲击音降噪处理部252不将频谱S3的频率分量f4置换为频谱SI的频率分量f4。这样,冲击音降噪处理部252仅在频谱SI的频率分量的振幅比频谱S3的频率分量的振幅小的情况下,将频谱S3的频率分量置换为频谱SI的频率分量。在图6所示的情况下,冲击音降噪处理部252将频谱S3的频率分量f3、f6^f9置换为频谱SI的频率分量f3、f6 f9。返回到图1,继续对降噪处理部250的各构成部进行说明。
驱动音降噪处理部253基于从定时信号检测部191输入的工作定时信号,根据例如从声音信号处理部251输出的频谱Sf S14,取得与驱动音产生的可能性高的期间对应的频谱(以下称为第3频谱)。例如,驱动音降噪处理部253基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号和表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得与存在驱动音产生的可能性的期间对应的频谱S2 S12作为第3频谱。该驱动音降噪处理部253,对取得的第3频谱进行降低根据驱动模式预先确定的噪音的驱动音降噪处理。例如,驱动音降噪处理部253使用频谱减去法,该频谱减去法从第3频谱的频率分量减去表示根据驱动模式预先确定的噪音的频谱的频率分量。另外,根据驱动模式预先确定的噪音的频谱,由驱动音降噪处理部253作为设定值预先设定。但是,本发明不受此限制,驱动音降噪处理部253也可以基于过去的麦克风声音信号,从驱动音产生的区间的频谱减去不产生驱动音的区间的频谱,由此按每个驱动模式计算推断的驱动音的噪音频谱。逆傅立叶变换部254对从驱动音降噪处理部253输入的频谱例如进行逆傅立叶变换或逆快速傅立叶变换(IFFT: Inverse Fast Fourier Transform),由此将其变换到时域。该逆傅立叶变换部254使变换到了时域的声音信号存储于存储介质200。另外,逆傅立叶变换部254可以使变换到了时域的声音信号与由摄像元件119拍摄的图像数据按具有对应的日期时间信息的彼此相对应而存储于存储介质200,也可以作为包含声音信号的运动图像进行存储。接着,参照图7说明本实施例所涉及的降噪处理方法的一例。图7是表示本实施例所涉及的降噪处理方法的一例的流程图。例如,若操作部180的电源开关被设定为0N,则对摄像装置100接入电源,从电池260对各构成部供电。在本实施例中,对于摄像装置100预先设定使摄像时的图像数据与声音数据对应地存储于存储介质200。(步骤STl)麦克风230,例如若电源被设定为0N,则将所拾取的麦克风声音信号输出到A/D转换部240。A/D转换部240对降噪处理部250输出对模拟信号的麦克风声音信号进行了数字转换的麦克风声音信号。降噪处理部250从A/D转换部240输入麦克风声音信号。
在此,在由使用者按下操作部180的释放按钮的情况下,CPU190在AF处理中将用于执行例如以焦点距离a而对焦的AF处理的驱动控制信号输出到透镜驱动部116和定时信号检测部191。该透镜驱动部116基于输入的驱动控制信号,按照以焦点距离a而对焦的驱动模式使AF透镜112移动。例如,透镜驱动部116使AF透镜112的驱动机构顺时针旋转预定量而使AF透镜112移动。另外,使该驱动机构旋转的旋转量和/或速度作为以焦点距离a而对焦的驱动模式被预先确定。若AF透镜112移动,在AF编码器117对CPU190的定时信号检测部191输出脉冲信号。若移动的AF透镜112停止,在AF编码器117停止脉冲信号输出。定时信号检测部191基于输入的驱动控制信号和/或AF编码器117的脉冲信号,按照以焦点距离a而对焦的驱动模式生成工作定时信号,并输出到降噪处理部250。
例如,在输入了用于执行以焦点距离a而对焦的AF处理的驱动控制信号的情况下,定时信号检测部191生成表示与AF透镜112的工作开始定时tlO对应的冲击音产生期间的工作开始定时信号,并输出到降噪处理部250。然后,在从AF编码器117输入的脉冲信号被停止的情况下,定时信号检测部191生成表示与AF透镜112的工作停止定时t20对应的冲击音产生期间t20、21的工作停止定时信号,并输出到降噪处理部250。(步骤ST2)降噪处理部250判定是否从定时信号检测部191输入了工作定时信号。(步骤ST3)在工作定时信号被输入的情况下,降噪处理部250的声音信号处理部251对于从A/D转换部240输出的麦克风声音信号按每个预先确定的区间用窗函数进行加权,并且将该每个区间的麦克风声音信号变换为以频域表示的频谱。声音信号处理部251例如对用窗函数进行了加权的声音信号进行傅立叶变换而计算频谱Sf S14。(步骤ST4)然后,声音信号处理部251基于工作定时信号,将与冲击音产生期间对应的频谱的频率分量的总和与预先确定的阈值进行比较。例如,声音信号处理部251基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S2 S4。并
且,声音信号处理部251按每个频谱S2 S4判定频率分量的总和是否小于预先确定的阈值。此外,声音信号处理部251基于表示与工作停止定时t20对应的冲击音产生期间t2(Tt21的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S9 S12。并且,声音信号处理部251按每个频谱S9 S12判定频率分量的总和是否小于预先确定的阈值。然后,声音信号处理部251将频率分量的总和小于预先确定的阈值的频谱输出到冲击音降噪处理部252,并且控制冲击音降噪处理部252,使其对该频谱执行冲击音降噪处理。(步骤ST5)接着,冲击音降噪处理部252基于来自声音信号处理部251的执行冲击音降噪处理的控制,对从A/D转换部240输入的麦克风声音信号执行冲击音降噪处理。
例如,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S2 S4作为第I频谱。然后,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频谱S2、S3之前的频谱SI,作为与频谱S2、S3对应的第2频谱。此外,冲击音降噪处理部252基于 表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频谱S4之后的频谱S5,作为与频谱S4对应的第2频谱。另外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S9 S12作为第I频谱。然后,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得作为第I频谱的频谱S9、S10之前的频谱S8,作为与频谱S9、S10对应的第2频谱。另外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得作为第I频谱的频谱Sll、S12之后的频谱S13,作为与频谱SI I、S12对应的第2频谱。(步骤ST6)接着,冲击音降噪处理部252,作为各频谱的阈值频率以上的频率分量,关于频率分量f3l9将第I频谱与第2频谱进行比较。例如,冲击音降噪处理部252将频谱SI的频率分量f3的振幅与频谱S2的频率分量f3的振幅进行比较。在此情况下,频谱SI的频率分量f3的振幅比频谱S2的频率分量f3的振幅小。因此,冲击音降噪处理部252将频谱S3的频率分量f3置换为频谱SI的频率分量f3。另外,冲击音降噪处理部252将频谱SI的频率分量f4的振幅与频谱S2的频率分量f4的振幅进行比较。在此情况下,频谱SI的频率分量f4的振幅比频谱S2的频率分量f4的振幅大。因此,冲击音降噪处理部252不将频谱S3的频率分量f4置换为频谱SI的频率分量f4。这样,冲击音降噪处理部252仅在频谱SI的频率分量的振幅比频谱S3的频率分量的振幅小的情况下将频谱S3的频率分量置换为频谱SI的频率分量。然后,冲击音降噪处理部252将频谱S3的频率分量f3、f6 f9置换为频谱SI的频率分量f3、f6^f9,并对驱动音降噪处理部253输出冲击音降噪处理后的频谱S' 3。冲击音降噪处理部252同样地进行作为第I频谱的频谱S2与第2频谱SI的比较以及作为第I频谱的频谱S4与第2频谱S5的比较。并且,仅在第2频谱SI、S5的频率分量的振幅分别比频谱S2、S4的频率分量的振幅小的情况下,分别将频谱S2、S4的频率分量置换为频谱SI、S5的频率分量,并对驱动音降噪处理部253输出冲击音降噪处理后的频谱S' 2、S' 4。另外,冲击音降噪处理部252同样地进行作为第I频谱的频谱S9、S10与第2频谱S8的比较以及作为第I频谱的频谱S11、S12与第2频谱S13的比较。并且,仅在第2频谱S8的频率分量的振幅分别比频谱S9、SlO的频率分量的振幅小的情况下,分别将频谱S9、SlO的频率分量置换为频谱S8的频率分量,并对驱动音降噪处理部253输出冲击音降噪处理后的频谱S' 9、S/ 10。同样地,仅在第2频谱S13的频率分量的振幅分别比频谱S11、S12的频率分量的振幅小的情况下,分别将频谱Sll、S12的频率分量置换为频谱S13的频率分量,并对驱动音降噪处理部253输出冲击音降噪处理后的频谱S' 11、S' 12。(步骤ST7)接着,驱动音降噪处理部253基于从声音信号处理部251输入的麦克风声音信号的频谱和从冲击音降噪处理部252输入的冲击音降噪处 理后的频谱,执行驱动音降噪处理。例如,驱动音降噪处理部253基于表示与工作开始定时tlO对应的冲击音产生期间
的工作定时信号和表示与工作停止定时t20对应的冲击音产生期间t20、21的工作定时信号,取得与存在驱动音产生的可能性的期间对应的频谱S2 S12作为第3频谱。该驱动音降噪处理部253将取得的第3频谱S2飞12中与冲击音降噪处理后的频谱对应的频谱S2飞4、S9 S12置换为冲击音降噪处理后的频谱S' 2、S' 3、S' 4、S' 9、
S,10、S' 11、S' 12。并且,驱动音降噪处理部253对冲击音降噪处理后的频谱S' 2、S' 3、S' 4、S' 9、S' 10、S' 11、S' 12和频谱S5 S7执行驱动音降噪处理。也就是说,驱动音降噪处理部253从冲击音降噪处理后的第3频谱S' 2 S' 4、S5 S7、S' 9^S/ 12的频率分量分别减去表示根据驱动模式预先确定的噪音的频谱的频率分量。驱动音降噪处理部253将该驱动音降噪处理后的频谱输出到逆傅立叶变换部254。(步骤ST8)逆傅立叶变换部254对从驱动音降噪处理部253输入的驱动音降噪处理后的频谱进行例如逆傅立叶变换,由此变换到时域。该逆傅立叶变换部254使变换到了时域的声音信号存储于存储介质200。如以上说明,本实施例所涉及的摄像装置100通过定时信号检测部191检测工作部的工作状态发生变化的定时,并且基于该工作定时信号执行将存在冲击音重叠的可能性的麦克风声音信号的频谱的一部分置换为存在不重叠冲击音的可能性的麦克风声音信号的频谱的一部分的冲击音降噪处理。由此,即使是频谱的频带很宽的冲击音,也能够取得目标音的不连续性不明显且冲击音降低了的声音信号。另外,本实施例所涉及的摄像装置100优选将满足以下(1) (4)中任一项条件的频谱作为不重叠冲击音的可能性高的麦克风声音信号的第2频谱的一部分与冲击音重叠的可能性高的麦克风声音信号的一部分的第I频谱进行置换。(I)基于下述声音信号的第2频谱,该声音信号在与冲击音产生的可能性高的期间在时间轴方向相邻或重叠的不产生冲击音的可能性高的期间取得。(2)基于在不产生冲击音和驱动音的可能性高的期间取得的声音信号的第2频谱。(3)第2频谱中预先确定的阈值以上的频率分量。(4)第2频谱中频谱的频率分量的总和中预先确定的比例以上的频率分量。进而,冲击音降噪处理部252在第2频谱的频率分量的振幅比第I频谱的频率分量小的情况下,进行该部分的置换。也就是说,冲击音降噪处理部252仅置换满足条件(Ir(4)的第2频谱中(5)比第I频谱的频率分量小的第2频谱的频率分量。这样,通过置换第I频谱中与满足(1广(4)的至少任意一项条件的第2频谱对应的部分,能够取得目标音的不连续性不明显且冲击音降低了的声音信号。上述的条件(3),也可以例如根据目标音的种类而确定。
图8A是表示目标音为男声的情况下的频谱的一例的图。另外,图8B是表示目标音为女声的情况下的频谱的一例。如图8A所示,在目标音为男声的情况下,频谱中频率低的频率分量比目标音为女声的情况多,优选设定作为第I频谱与第2频谱的置换范围。这里,在目标音为男声的情况下,冲击音降噪处理部252不对频率分量fl、f2进行置换,而仅关于频率分量f3l9比较与第I频谱的各频率分量的大小关系。然后,在第2频谱的频率分量的振幅比第I频谱的频率分量的振幅小的情况下,将该第I频谱的频率分量与第2频谱的频率分量进行置换。同样地,在目标音为女声的情况下,冲击音降噪处理部252不对频率分量fl、f2、f3进行置换,而仅关于频率分量f4l9比较与第I频谱的各频率分量的大小关系。这是因为与女声相比,男声的主导性的频谱包含更多的频率低的频率分量。另夕卜,该主导性的频谱指更多地包含表示目标音的特征的频谱的部分。这样,通过不进行主导 性的频谱的置换,能够防止目标音的劣化。因此,能够使目标音的不连续性不明显,并且降低冲击音。上述的条件⑷也可以预先确定为例如相对于频谱的频率分量的总和,例如为60%的频率高的频率分量。在这种情况下,冲击音降噪处理部252将第I频谱的频率分量的全体的和设定为100%,关于40%的频率低的(fl、f2*)的频率分量不进行与第2频谱的比较。冲击音降噪处理部252关于60%的频率高的(f9、f8*)的频率分量进行与第2频谱的比较。由此,能够防止关于频谱中频率低的频率分量的、目标音的劣化。接着,参照图9、10说明由定时信号检测部191检测的工作开始定时的一例。图9是表不例如AF编码器117的输出和麦克风230输出的麦克风声音信号的一例的图。如图9所示,关于将AF编码器117的输出反复高电平和低电平的期间确定为产生由工作部形成的工作音的期间的情况的一例进行说明。在这种情况下,AF编码器117的输出最初成为高电平的时刻为工作开始定时tl。因此,从该时刻11开始冲击音产生的期间。另外,在AF编码器117的输出最后在成为高电平时返回到低电平的时刻为工作停止定时t2。因此,从该时刻t2开始冲击音产生的期间。但是,在这种情况下,在AF透镜112的驱动系统(齿轮列等)的后冲()气,W)'> 二)的影响下,有时AF编码器117的输出会与实际的AF透镜112的驱动系统的工作开始定时偏离。关于这种情况,参照图10进行说明。在图10中,是示出例如AF编码器117的输出和麦克风230输出的麦克风声音信号的另一例的图。如图10所示,实际的AF透镜112的驱动系统的工作开始定时在时间轴方向产生于AF编码器117的输出反复高电平和低电平的期间之前(过去)。在这种情况下,工作开始定时为时刻t3,而冲击音在时刻t3后的一定期间内产生。因此,在将时刻tl设定为工作开始定时的情况下,冲击音降噪处理部252将时刻tl后的一定期间作为冲击音产生的可能性高的期间来对待。在这种情况下,在由冲击音降噪处理部252取得的第I频谱中不包含冲击音的可能性高。因此,定时信号检测部191,为了避免如使用图10所说明驱动系统的实际的开始定时与AF编码器117的输出偏离的情况的不良状况,生成表不向工作部输出驱动控制信号(命令)的时刻的工作开始定时信号作为工作开始定时。[变形例]接着,参照图11 13说明本实施例所涉及的摄像装置100的驱动模式的另一例。图11 (A)表不根据AF编码器117输出求得的旋转方向与时间的关系的一例。图11 (B)表不麦克风声音信号与时间的关系的一例。另外,为了便于说明,图Il(B)在麦克风声音信号中仅不出工作音的声音信号,省略了目标音的声音信号的图不。图Il(A)和图Il(B)所示的AF透镜112的驱动模式表示例如进行以焦点距离P而对焦的AF处理的情况下的驱动模式。在图Il(A)中,其纵轴作为AF编码器117的输出,表示驱动AF透镜112的驱动机 构的旋转方向。在该进行以焦点距离P而对焦的AF处理的驱动模式中,如图Il(A)所示,驱动AF透镜112的驱动机构在时刻tl(Tt20顺时针CW旋转,之后静止。然后驱动AF透镜112的驱动机构在时刻t3(Tt40再次顺时针CW旋转,之后将旋转方向反转,在时刻t4(Tt50逆时针CCW旋转,然后静止。也就是说,时刻tlO、t30分别表示AF透镜112的工作开始定时,时刻t20、t50分别表示AF透镜112的工作停止定时。另外,时刻t40表示AF透镜112的驱动方向成为反向旋转的定时。因此,如图11⑶所示,在时刻tl(Tt20的期间和时刻t3(Tt50的期间,在麦克风声音信号上重叠(产生)有由AF透镜112形成的工作音或工作音重叠的可能性高。以下,在本实施例中,关于在时刻tl(Tt20的期间、时刻t3(Tt50的期间产生由AF透镜112形成的工作音即噪音的情况进行说明。另外,如图Il(B)所示,在时刻七10、七20330340、七50分别有产生冲击音的高可能性。以下,在本实施例中,关于在时刻tlO、t20、t30、t40、t50产生由AF透镜112形成的冲击音的情况进行说明。另外,在产生了冲击音的情况下,该冲击音产生的可能性高的时间根据各驱动模式预先确定。在进行以焦点距离P而对焦的AF处理的驱动模式中,确定图12所示的冲击音的产生时间。图12表示在进行以焦点距离P而对焦的AF处理的驱动模式下驱动AF透镜112时,由麦克风230拾取的麦克风声音信号的一例。另外,为了便于说明,图12在麦克风声音信号中仅不出工作音的声音信号,省略了目标音的声音信号的图不。在进行以焦点距离P而对焦的AF处理的驱动模式中,时刻的时间、时刻t20、21的时间、时刻t30、31的时间、时刻t40、41的时间、时刻t50、51的时间分别被预先确定为冲击音的产生时间。在本实施例中,如图12所示,关于在该冲击音的产生期间产生了冲击音的例子进行说明。声音信号处理部251对从A/D转换部240输出的麦克风声音信号,用如图12所不与其它区间各重叠一半的窗函数WO W32进行加权。由此,麦克风声音信号被分割为窗函数的大小。该声音信号处理部251按用窗函数WO W32进行了加权的各区间的麦克风声音信号的每一个进行例如傅立叶变换,计算频域的频谱S(TS32。在本实施例中,与窗函数W2 W4对应的频谱S2 S4是包含与AF透镜112的工作开始定时tlO对应的冲击音产生期间的声音信息。另外,与窗函数W9 W12对应的频谱S9 S12是包含与AF透镜112的工作停止定时t20对应的冲击音产生期间t2(Tt21的声音信息。进而,与窗函数W16 W18对应的频谱S16飞18是包含与AF透镜112的工作开始定时t30对应的冲击音产生期间t30、31的声音信息。此外,与窗函数W22 W24对应的频谱S22 S24是包含与AF透镜112的工作反转定时t40对应的冲击音产生期间t4(Tt41的声音信息。进而,与窗函数W28 W30对应的频谱S28 S30是包含与AF透镜112的工作停止定时t50对应的冲击音产生期间t50、51的声音信息。这里,参照图13说明冲击音降噪处理部252取得的第I频谱与第2频谱的关系的一例。图13是表示冲击音降噪处理部252取得的第I频谱与第2频谱的关系的一例的图。冲击音降噪处理部252基于从定时信号检测部191输入的工作定时信号,例如根据从声音信号处理部251输出的频谱S(TS32,基于表示与工作开始定时tlO对应的冲击 音产生期间的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S2^S4作为第I频谱。此外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t2(Tt21的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S9 S12作为第I频谱。进而,冲击音降噪处理部252基于表示与工作开始定时t30对应的冲击音产生期间t3(Tt31的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S16 S18作为第I频谱。此外,冲击音降噪处理部252基于表示与工作反转定时t40对应的冲击音产生期间t4(Tt41的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S22 S24作为第I频谱。进而,冲击音降噪处理部252基于表示与工作停止定时t50对应的冲击音产生期间t50、51的工作定时信号,取得与存在冲击音产生的可能性的期间对应的频谱S28 S30作为第I频谱。此外,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频谱S2之前的频谱SO作为与频谱S2对应的第2频谱。该冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频谱S3之前的频谱SI作为与频谱S3对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作开始定时tlO对应的冲击音产生期间的工作定时信号,取得作为第I频谱的频谱S4之后的频谱S5作为与频谱S4对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t20 t21的工作定时信号,取得作为第I频谱的频谱S9之前的频谱S8作为与频谱S9对应的第2频谱,取得作为第I频谱的频谱SlO之前的频谱S8作为与频谱SlO对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作停止定时t20对应的冲击音产生期间t2(Tt21的工作定时信号,取得作为第I频谱的频谱Sll之后的频谱S13作为与频谱Sll对应的第2频谱,取得作为第I频谱的频谱S12之后的频谱S13作为与频谱S12对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作开始定时t30对应的冲击音产生期间t3(Tt31的工作定时信号,取得作为第I频谱的频谱S17之前的频谱S15作为与频谱S17对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作开始定时t30对应的冲击音产生期间t3(Tt31的工作定时信号,取得作为第I频谱的频谱S16之前的频谱S15作为与频谱S16对应的第2频谱,取得作为第I频谱的频谱S18之后的频谱S19作为与频谱S18对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作反转定时t40对应的冲击音产生期间t40、41的工作定时信号,取得作为第I频谱的频谱S23之前的频谱S21作为与频谱S23对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作反转定时t40对应的冲击音产生期间t40、41的工作定时信号,取得作为第I频谱的频谱S22之前的频谱S21作为与频谱S22对应的第2频谱,取得作为第I频谱的频谱S24之后的频谱S25作为与频谱S24对应的第2频谱。 此外,冲击音降噪处理部252基于表示与工作停止定时t50对应的冲击音产生期间t50、51的工作定时信号,取得作为第I频谱的频谱S29之后的频谱S31作为与频谱S29对应的第2频谱。此外,冲击音降噪处理部252基于表示与工作停止定时t50对应的冲击音产生期间t50、51的工作定时信号,取得作为第I频谱的频谱S28之前的频谱S27作为与频谱S28对应的第2频谱,取得作为第I频谱的频谱S30之后的频谱S31作为与频谱S30对应的第2频谱。进而,冲击音降噪处理部252将第I频谱的至少一部分置换为第2频谱的对应部分。例如,冲击音降噪处理部252将第I频谱中预先确定的阈值频率以上的频谱与第2频谱中预先确定的阈值频率以上的频谱按每个频率分量进行比较,在判定为第2频谱比第I频谱小的情况下,将第I频谱的该频率分量置换为第2频谱的频率分量。这样,冲击音降噪处理部252关于在时间轴方向与第I频谱相邻的第2频谱,执行冲击音降噪处理。在这种情况下,冲击音降噪处理部252,在时间轴方向与第I频谱相邻的频谱中有不含驱动音的相邻频谱的情况下,进行与该不含驱动音的频谱的比较。另外,在时间轴方向相邻的频谱是包含驱动音的频谱和包含冲击音的频谱的情况下,冲击音降噪处理部252取得包含驱动音的频谱作为第2频谱。此外,在如与工作反转定时t40对应的冲击音产生期间t40、41那样在时间轴方向与第I频谱相邻的频谱均为包含驱动音的频谱的情况下,冲击音降噪处理部252取得任一方的频谱作为第2频谱。在这种情况下,冲击音降噪处理部252取得与第I频谱在时间轴方向更近的频谱作为第2频谱。此外,也可以将用于实现由定时信号检测部191或降噪处理部250等执行的处理过程的程序存储于计算机可读的记录介质,并使计算机系统读取并执行该记录介质记录的程序,由此进行执行处理。另外,此处所说的“计算机系统”可以包括OS (Operating System,操作系统)和/或外围设备等硬件。
此外,在利用了万维网(WWW)系统的情况下,“计算机系统”也包括主页提供环境(或显示环境)。此外,所谓“计算机可读的记录介质”指软盘、磁光盘、ROM、闪存等可写入的非易失性存储器、CD-ROM等可移动介质、内置于计算机系统的硬盘等存储装置。进而,“计算机可读的记录介质”还包括如经由互联网等网络和/或电话线路等通信线路发送程序的情况下的作为服务器和/或客户机的计算机系统内部的易失性存储器(例如DRAM (Dynamic Random Access Memory :动态随机存储器))那样在一定时间保持程序的装置。此外,上述程序可以从在存储装置等中存储有该程序的计算机系统经由传送介质或通过传送介质中的传送波传送到其它计算机系统。这里,传送程序的“传送介质”指如互联网等网络(通信网)和/或电话线路等通信线路(通信线)那样具有传送信息的功能的介质。
此外,上述程序也可以是用于实现前述的功能的一部分的程序。进而,也可以是能够以与已经记录于计算机系统的程序的组合实现前述功能的所谓差异文件(差异程序)。
权利要求
1.一种降噪处理装置,其特征在于,具备 定时信号检测部,其检测表示工作部进行工作的定时的工作定时信号; 声音信号取得部,其取得声音信号;以及 降噪处理部,其基于所述工作定时信号,计算在因所述工作部的工作而产生的噪音产生的可能性高的期间取得的声音信号的第I频谱和在不产生所述噪音的可能性高的期间取得的声音信号的第2频谱,并基于将所述计算的第I频谱的至少一部分置换为所述计算的第2频谱的对应部分而得到的频谱,计算对所述声音信号进行了降噪的降噪声音信号。
2.如权利要求I所述的降噪处理装置,其特征在于, 所述降噪处理部基于在与所述噪音产生的期间在时间轴方向最近的不产生所述噪音的可能性高的期间取得的声音信号计算所述第2频谱。
3.如权利要求I或2所述的降噪处理装置,其特征在于, 所述降噪处理部基于在不产生冲击音的可能性高的期间取得的声音信号计算所述第2频谱,所述冲击音在所述工作部的工作时因所述工作部的状态发生变化而产生。
4.如权利要求广3中任一项所述的降噪处理装置,其特征在于, 所述降噪处理部将在所述噪音产生的可能性高的期间取得的声音信号中预先确定的频率分量的范围中包含的所述第I频谱的频率分量置换为所述频率分量的范围中包含的所述第2频谱的频率分量。
5.如权利要求广4中任一项所述的降噪处理装置,其特征在于, 所述降噪处理部将所述第I频谱的振幅与所述第2频谱的振幅按每个频率分量进行比较,并在判定为所述第I频谱的频率分量的振幅比所述第2频谱的频率分量的振幅小的情况下,将所述第I频谱的所述频率分量置换为所述第2频谱的所述频率分量。
6.如权利要求1飞中任一项所述的降噪处理装置,其特征在于, 所述降噪处理部判定构成所述第2频谱的多个频率分量的总和是否为预先确定的阈值以上,在小于所述阈值的情况下,将所述第I频谱的至少一部分置换为所述第2频谱的对应部分。
7.如权利要求1飞中任一项所述的降噪处理装置,其特征在于,还具备 控制部,其对驱动部输出用于驱动所述工作部的命令;以及 工作检测部,其检测所述工作部在工作的情况,并输出表示所述工作部在工作的工作检测信号; 其中,所述降噪处理部基于表不所述控制部输出命令的定时的第I工作定时信号和表示所述工作检测部停止所述工作检测信号的输出的定时的第2工作定时信号,判定所述噪音产生的可能性高的期间。
8.如权利要求广7中任一项所述的降噪处理装置,其特征在于, 所述降噪处理部, 在基于所述工作定时信号判定为所述工作部的工作开始时,基于在工作开始时所述噪音产生的可能性高的期间之前的不产生所述噪音的可能性高的期间取得的声音信号计算所述第2频谱, 在基于所述工作定时信号判定为所述工作部的工作结束时,基于在工作结束时所述噪音产生的可能性高的期间之后的不产生所述噪音的可能性高的期间取得的声音信号计算所述第2频谱。
9.一种摄像装置,其特征在于,包括上述权利要求广8中任一项所述的降噪处理装置。
10.一种降噪处理程序,其使计算机作为以下部件发挥作用 定时信号检测部,其检测表示工作部进行工作的定时的工作定时信号; 声音信号取得部,其取得声音信号;以及 降噪处理部,其检测所述工作定时信号,计算在因所述工作部的工作而产生的噪音产生的可能性高的期间取得的声音信号的第I频谱和在不产生所述噪音的可能性高的期间取得的声音信号的第2频谱,并基于将所述计算的第I频谱的至少一部分置换为所述计算的第2频谱的对应部分而得到的频谱,计算对所述声音信号进行了降噪的降噪声音信号。
全文摘要
本发明提供降噪处理装置、摄像装置及降噪处理程序。降噪处理装置具备定时信号检测部,其检测表示工作部进行工作的定时的工作定时信号;声音信号取得部,其取得声音信号;以及降噪处理部,其计算所述工作定时信号,计算在因所述工作部的工作而产生的噪音产生的可能性高的期间取得的声音信号的第1频谱和在不产生所述噪音的可能性高的期间取得的声音信号的第2频谱,并基于将所述计算的第1频谱的至少一部分置换为所述计算的第2频谱的对应部分而得到的频谱,计算对所述声音信号进行了降噪的降噪声音信号。
文档编号H04N5/232GK102801911SQ20121016473
公开日2012年11月28日 申请日期2012年5月24日 优先权日2011年5月27日
发明者冈崎光宏, 龙泽孝雄 申请人:株式会社尼康
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1