指向性控制系统及声音输出控制方法

指向性控制系统及声音输出控制方法
【专利摘要】本发明提供指向性控制系统及声音输出控制方法。在从麦克风阵列装置朝向声音位置的指向方向上形成指向性，在声音位置为隐私保护区域时，对由麦克风阵列装置收音到的声音的声音数据的输出进行控制，或中止对声音的收音。指向方向算出部(34)根据显示器装置(36)显示的影像数据的任意的位置指定，算出从全方位麦克风阵列装置(2)朝向影像数据的指定位置A’所对应的声音位置A的指向方向。输出控制部(35)使用由全方位麦克风阵列装置收音到的声音的声音数据在所算出的指向方向上形成指向性。在声音位置A包含于隐私保护区域PRA时，输出控制部对由全方位麦克风阵列装置收音到的声音的输出进行控制，或使全方位麦克风阵列装置中止收音。
【专利说明】指向性控制系统及声音输出控制方法

【技术领域】
[0001]本发明涉及在存在于收音空间内的隐私保护区域内对收音到的声音数据的输出进行控制的指向性控制系统及声音输出控制方法。

【背景技术】
[0002]以往，在工厂、企业、店铺(例如小卖店、银行)或公共场所(例如图书馆)的规定位置(例如顶棚)上设置的监控系统中，经由网络而连接多个相机装置(例如摇摄倾转相机装置或全方位相机装置)，由此实现监控对象的规定范围的影像数据(包括静止图像及动画。以下同样)的广视场角化。
[0003]另外，在仅是影像的监控中获得的信息量无论如何都存在极限，因此迫切要求如下的监控系统:不仅配置相机装置，还配置麦克风阵列装置，由此获得相机装置对特定的被拍摄体进行拍摄的方向(以下，称为“拍摄方向”)上的声音数据。
[0004]在此，已知有对相机装置及麦克风阵列装置的各动作进行控制而获得存在于相机装置的拍摄方向上的被拍摄体的声音数据的控制装置(例如参照专利文献I)。专利文献I所示的控制装置设置在例如能够利用TV会议系统的会议室内，控制能够沿左右方向(摇摄方向)进行动作的相机装置和能够变更集音范围的麦克风阵列装置的各动作。
[0005]专利文献I所示的控制装置使用相机装置的位置与通过相机装置取得的映入到影像中的被拍摄体的位置之间的距离、相机装置的摇摄方向、相机装置的位置与麦克风阵列装置的位置之间的距离、以相机装置的位置为基准的麦克风阵列装置的位置的方向，来变更麦克风阵列装置的集音范围。
[0006]专利文献1:日本特开2012-186551号公报


【发明内容】

[0007]在专利文献I中，例如假定电视会议系统中的使用方式，以相机装置、麦克风阵列装置、被拍摄体(例如讲话者)存在于同一平面上为前提。然而，在上述的监控系统中，相机装置、麦克风阵列装置、被拍摄体(例如店铺的店员、消费者)这全部实际存在于同一平面上的情况少。
[0008]例如相机装置及麦克风阵列装置从被拍摄体向上方(例如店铺的顶棚面)设置的情况多，因此相机装置、麦克风阵列装置及被拍摄体不存在于平面性的二维坐标上，反而存在于立体性的三维坐标上的情况较多。
[0009]因此，在上述的监控系统中，在麦克风阵列装置对相机装置正进行拍摄的影像中的被拍摄体的谈话进行收音的情况下，当使用专利文献I的方法时，存在无法适当地算出表示麦克风阵列装置收音的方向的坐标(水平角、垂直角)的问题。
[0010]另外，根据监控系统的引进目的地(例如企业)的不同，例如在企业内的董事会议室那样进行使用隐匿性高的公司内部信息的会议的场所中，当麦克风阵列装置收音的声音的声音数据由除参与者以外的第三者再现时，也存在信息的泄漏的问题。
[0011]为了解决上述以往的问题，本发明目的在于提供指向性控制系统及声音输出控制方法:在由麦克风阵列装置所指定的朝向声音位置的指向方向上，形成对所收音到的声音的指向性，在声音位置为规定的隐私保护区域的情况、或者收音时刻或录音时刻处于规定的隐私保护时间内的情况下，控制由麦克风阵列装置所收音到的声音或收音并形成了指向性的声音的输出，或者中止对声音的收音。
[0012]本发明涉及一种指向性控制系统，具备:拍摄影像的至少一个摄像部；对声音进行收音的收音部；显示部，对由所述至少一个摄像部拍摄的影像数据进行显示；指向方向算出部，根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；及控制部，在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；在判定为所述声音位置包含于预先设定的保护区域时，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0013]另外，本发明涉及一种指向性控制系统，具备:拍摄影像的至少一个摄像部；对声音进行收音的收音部；记录部，对由所述收音部收音到的声音进行录音；显示部，对由所述至少一个摄像部拍摄的影像数据进行显示；指向方向算出部，根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；控制部，在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；在判定为所述收音部的收音时刻或所述记录部的录音时刻包含于预先设定的保护时间时，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0014]另外，本发明涉及一种声音输出控制方法，是包括拍摄影像的至少一个摄像部和对声音进行收音的收音部的指向性控制系统的声音输出控制方法，所述声音输出控制方法具有如下步骤:对由所述至少一个摄像部拍摄的影像数据进行显示；根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；判定所述声音位置是否包含于预先设定的保护区域；及在判定为所述声音位置包含于所述保护区域时，对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0015]另外，本发明涉及一种声音输出控制方法，是包括拍摄影像的至少一个摄像部、对声音进行收音的收音部和对由所述收音部收音到的声音进行录音的记录部的指向性控制系统的声音输出控制方法，所述声音输出控制方法具有如下步骤:对由所述至少一个摄像部拍摄的影像数据进行显示；根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；判定所述收音部的收音时刻或所述记录部的录音时刻是否包含于预先设定的保护时间；及在判定为所述收音时刻或所述录音时刻包含于所述保护时间时，对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0016]发明效果
[0017]根据本发明，在从麦克风阵列装置朝向指定的声音位置的指向方向上形成收音到的声音的指向性，在声音位置为规定的隐私保护区域时，或者在收音时刻或录音时刻处于规定的隐私保护时间内时，能够对由麦克风阵列装置收音到的声音或收音并形成了指向性的声音的输出进行控制，或者中止对声音的收音。

【专利附图】

【附图说明】
[0018]图1是表示第一实施方式的指向性控制系统的系统结构的框图。
[0019]图2(A)?图2(E)是全方位麦克风阵列装置的外观图。
[0020]图3是说明全方位麦克风阵列装置在规定方向Θ上形成指向性作为声音的指向方向的内容的原理图。
[0021]图4(A)是设有第一实施方式的指向性控制系统的收音空间K内的隐私保护区域PRA的说明图，图4(B)是表示在从显示器装置上显示的影像之中由用户的手指FG指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA的情况下，抑制由全方位麦克风阵列装置收音的声音的输出的情况的图。
[0022]图5(A)是说明第一实施方式的指向性控制系统的初始设定的动作顺序的流程图，图5(B)是表示用于算出全方位麦克风阵列装置的指向方向的基准点O和指定位置A’的在显示器装置的画面上所处的位置的图。
[0023]图6是说明在第一实施方式的指向性控制系统中根据表示指向方向的坐标来切换声音的输出控制的动作顺序的流程图。
[0024]图7是说明在第一实施方式的指向性控制系统中根据表示指向方向的坐标来切换声音的输出控制的动作顺序的另一例的流程图。
[0025]图8是说明在第一实施方式的指向性控制系统中根据收音时刻或录音时刻来切换声音的输出控制的动作顺序的流程图。
[0026]图9是说明在第一实施方式的指向性控制系统中根据收音时刻或录音时刻来切换声音的输出控制的动作顺序的另一例的流程图。
[0027]图10是说明在第一实施方式的指向性控制系统中根据表示指向方向的坐标来切换声音的收音处理的继续或中止的动作顺序的流程图。
[0028]图11是说明在第一实施方式的指向性控制系统中根据收音时刻来切换声音的收音处理的继续或中止的动作顺序的流程图。
[0029]图12(A)是表示相机装置、全方位麦克风阵列装置、基准点O及声音位置A的各位置的立体图，图12(B)是从图12(A)的铅垂上方观察铅垂下方而得到的水平方向俯视图，图12(C)是沿着图12(B)的K-K’线的垂直方向剖视图。
[0030]图13(A)是表示相机装置、全方位麦克风阵列装置、基准点O及声音位置A的各位置的立体图，图13(B)是从图13(A)的铅垂上方观察铅垂下方而得到的水平方向俯视图，图13(C)是沿着图13 (B)的Q-Q’线的垂直方向剖视图。
[0031]图14(A)是表示相机装置、全方位麦克风阵列装置、基准点O及声音位置A的各位置的立体图，图14(B)是从图14(A)的铅垂上方观察铅垂下方而得到的水平方向俯视图，图14(C)是沿着图14⑶的R-R’线的垂直方向剖视图。
[0032]图15是表示第二实施方式的指向性控制系统的系统结构的框图。
[0033]图16(A)是表示在设有第二实施方式的指向性控制系统的收音空间K内通过董事会议室内的人的操作来发送隐私保护信号的情况的图，图16(B)是表示根据通过图16(A)所示的董事会议室内的人的操作而从隐私保护信号发送机发送的隐私保护信号，来控制由全方位麦克风阵列装置收音到的声音、或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出，或者中止全方位麦克风阵列装置2对声音的收音的情况的图，图16(C)是表示根据通过图16(A)所示的董事会议室内的人的操作而从相机装置发送的隐私保护信号，来控制由全方位麦克风阵列装置收音到的声音、或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出，或者中止全方位麦克风阵列装置2对声音的收音的情况的图。
[0034]图17是说明第二实施方式的指向性控制系统的隐私保护信号被接收时的动作顺序的流程图。
[0035]图18是说明在第二实施方式的指向性控制系统对声音进行实时收音期间根据是否接收到隐私保护信号来切换声音的输出控制的动作顺序的流程图。
[0036]图19是说明在第二实施方式的指向性控制系统对记录的声音文件的声音数据进行再现的情况下根据是否接收到隐私保护信号来切换声音的输出控制的动作顺序的流程图。
[0037]图20是说明在第二实施方式的指向性控制系统对声音进行实时收音期间根据是否接收到隐私保护信号来切换声音的输出控制的动作顺序的另一例的流程图。
[0038]图21是说明在第二实施方式的指向性控制系统对记录的声音文件的声音数据进行再现的情况下根据是否接收到隐私保护信号来切换声音的输出控制的动作顺序的另一例的流程图。
[0039]图22是说明在第二实施方式的指向性控制系统对声音进行实时收音期间根据是否接收到隐私保护信号来切换声音的收音处理的继续或中止的动作顺序的流程图。
[0040]图23是说明在第二实施方式的指向性控制系统对记录的声音文件的声音数据进行再现的情况下根据是否接收到隐私保护信号来切换声音的收音处理的继续或中止的动作顺序的流程图。
[0041]图24(A)是表示声音数据的波形的图，图24(B)是表示图24(A)所示的波形的反相位信号的波形的图，图24(C)是表示图24(A)及图24(B)所示的各波形的合成后的波形的图。
[0042]图25(A)是表不声音变换处理前的音调所对应的波形例的图，图25 (B)是表不声音变换后的音调所对应的波形例的图。

【具体实施方式】
[0043]以下，参照附图对本发明的指向性控制系统及声音输出控制方法的各实施方式进行说明。各实施方式的指向性控制系统被用作在例如工厂、企业、公共施设(例如图书馆、比赛会场)或店铺(例如小卖店、银行)中设置的监控系统(包括有人监控系统及无人监控系统)，但是设置场所没有特别限定。在以下的各实施方式中，将各实施方式的指向性控制系统例如设置在企业内而进行说明。
[0044]此外，本发明可以表示为具有构成指向性控制系统的各装置(例如后述的指向性控制装置)、或构成指向性控制系统的各装置进行的各动作(步骤)的声音输出控制方法。
[0045](指向性控制系统的系统结构)
[0046]图1是表示第一实施方式的指向性控制系统10的系统结构的框图。图1所示的指向性控制系统10包括至少一个相机装置11?In、全方位麦克风阵列装置2、指向性控制装置3、记录器装置4。η表示相机装置的台数，为I以上的整数。相机装置11?In、全方位麦克风阵列装置2、指向性控制装置3、记录器装置4经由网络NW而相互连接。网络NW可以是有线网络(例如内部网、互联网)，也可以是无线网络(例如无线LAN (Local AreaNetwork)),在以下的各实施方式中也同样。
[0047]至少一个作为摄像部的相机装置11?In具有内置了未图示的光学系统(例如广角透镜)及摄像系统(例如影像传感器)的框体，具有例如固定设置于企业内的室内的顶棚面或规定的支架(参照图4(A))上的作为监控相机的功能。相机装置11?In与经由网络NW而连接的中央控制室(未图示)的指向性控制装置3连接，根据来自指向性控制装置3的远程操作，进行摇摄方向动作、倾转方向动作、变焦动作、拍摄动作、在显示有拍摄影像的显示器装置36 (参照后述)的画面上用于测定到与指定的位置(例如后述的指定位置A’)对应的实际位置的距离的测距动作及用于测定角度(例如水平角及垂直角)的测角动作等。此外，相机装置11将拍摄影像的时刻(拍摄时刻)与影像数据建立对应而存储。相机装置11将影像数据及拍摄时刻的数据经由网络NW向指向性控制装置3或记录器装置4发送。
[0048]另外，相机装置11?In拍摄存在于以光轴CX(参照图12(B))为中心的已定的视场角内的被拍摄体的影像(包括静止图像及动画。以下同样)。相机装置11?In取得所拍摄的影像数据和用于算出表示后述的指向方向的坐标(Θ Mh、θ Mv)(以下，有时简称为指向方向的输入参数，经由网络NW向指向性控制装置3或记录器装置4发送。
[0049]作为收音部的全方位麦克风阵列装置2具有例如在框体中心形成有开口部21a的圈型或环型(环状型)的形状的框体21C(参照图2(D))，固定设置于例如企业内的室内的顶棚面或规定的支架(参照图4(A))上。全方位麦克风阵列装置2对全方位麦克风阵列装置2自身所设置的收音空间(收音区域)的全方位的声音进行收音。而且，全方位麦克风阵列装置2可以在从全方位麦克风阵列装置2的设置位置M朝向声音位置A(参照后述)的指向方向上，高精度地形成收音的声音的指向性，将存在于指向方向上的作为被拍摄体的两个人的谈话声音(例如“你好”)增强而输出。此外，关于全方位麦克风阵列装置2的框体形状，并未限定为圈型或环型(环状型)形状，参照图2在后文叙述。
[0050]在全方位麦克风阵列装置2中，在开口部21a的周围，沿着框体21的圆周方向将多个麦克风单元22呈同心圆状地配置。麦克风单元22使用例如高音质小型驻极体电容麦克风(ECM:Electret Condenser Microphone),在以下的各实施方式中也同样。
[0051]全方位麦克风阵列装置2至少包括:与网络NW连接且包含等间隔地设置的麦克风的麦克风单元22、23(参照图2(A)?图2(E));用于控制各麦克风单元22、23的各动作的控制部(未图示)。
[0052]全方位麦克风阵列装置2使用各个麦克风单元22、23，对作为存在声音收音对象的被拍摄体的收音空间K内的全方位的声音进行收音，或者对存在被拍摄体的指向方向上的声音进行收音，并存储各个麦克风单元22、23收音到的声音数据或使用该声音数据及指向方向(Θ MAh、θ MAv)而形成了指向性的声音数据。此外，全方位麦克风阵列装置2将对声音进行收音的时刻(收音时刻)与声音数据建立对应而进行存储。而且，全方位麦克风阵列装置2将存储的声音数据及收音时刻的数据经由网络NW向指向性控制装置3或记录器装置4发送。
[0053]根据来自后述的指向性控制装置3的指向性形成指示，全方位麦克风阵列装置2在指向性形成指示所包含的指向方向(9Mh、9mv)上形成各个麦克风单元22、23的指向性。
[0054]由此，全方位麦克风阵列装置2能够相对地增大存在被拍摄体的指向方向(0Mh、θ?Αν)上的声音数据的音量水平，且能够相对地减少不存在被拍摄体的方向上的声音数据的音量水平。此外，关于指向方向(9Mh、θ?Αν)的算出方法在后文叙述。
[0055]在此，关于全方位麦克风阵列装置2的外观，参照图2(A)?图2(E)进行说明。图2(A)?图2(E)是全方位麦克风阵列装置2的外观图。图2(A)?图2(E)所示的全方位麦克风阵列装置2C、2A、2B、2、2D的外观及多个麦克风单元的配置位置不同，但是各个全方位麦克风阵列装置自身的功能是同等的。
[0056]图2 (A)所示的全方位麦克风阵列装置2C具有圆盘状的框体21。多个麦克风单元22,23呈同心圆状地配置于框体21。具体而言，多个麦克风单元22呈具有与框体21相同的中心的同心圆状且配置于框体21的外侧，多个麦克风单元23呈具有与框体21相同的中心的同心圆状且配置于框体21的内侧。各个麦克风单元22具有相互的间隔宽、直径大、适合于低音域的特性。另一方面，各个麦克风单元23具有相互的间隔窄、直径小、适合于高音域的特性。
[0057]图2 (B)所示的全方位麦克风阵列装置2A具有圆盘状的框体21。在框体21上，多个麦克风单元22隔开一样的间隔而沿着纵向和横向这两个方向配置于直线上，纵向的排列和横向的排列在框体21的中心相交。全方位麦克风阵列装置2A将多个麦克风单兀22沿纵向和横向这两个方向呈直线地配置，因此能够减少声音数据的指向性的形成处理的运算量。此外，在图2(B)所示的全方位麦克风阵列装置2A中，可以仅在纵向或横向的一列上配置多个麦克风单元22。
[0058]与图2(A)所示的全方位麦克风阵列装置2相比，图2(C)所示的全方位麦克风阵列装置2B具有直径小的圆盘状的框体21B。在框体21B上，多个麦克风单元22沿着框体21B的圆周方向隔开一样的间隔地配置。图2(C)所示的全方位麦克风阵列装置2B的各自麦克风单元22的间隔短，因此具有适合于高音域的特性。
[0059]图2 (D)所示的全方位麦克风阵列装置2具有圈型形状或环型形状的框体21C，该框体21C在框体21C的中心形成了具有规定直径的开口部21a。在本实施方式的指向性控制系统10中，使用例如图2(D)所示的全方位麦克风阵列装置2C。在框体21C中，多个麦克风单元22在框体21C的圆周方向上隔开一样的间隔地呈同心圆状配置。
[0060]图2 (E)所示的全方位麦克风阵列装置2D具有矩形形状的框体21D。在框体21D上，沿着框体21D的外周方向隔开一样的间隔地配置有多个麦克风单元22。在图2(E)所示的全方位麦克风阵列装置2D中，框体21D为矩形形状，因此在例如拐角或壁面上也能够简化全方位麦克风阵列装置2D的设置。
[0061]此外，构成各麦克风单元22、23的麦克风可以是无指向性麦克风，也可以是双指向性麦克风、单一指向性麦克风、锐角指向性麦克风、超指向性麦克风(例如枪型麦克风)或它们的组合。
[0062]指向性控制装置3可以是例如设置在企业内的中央控制室(未图示)的安置型的PC (Personal Computer),也可以是用户能够便携的便携电话机、平板终端、智能手机等数据通信终端机。
[0063]指向性控制装置3是至少包括通信部31、操作部32、信号处理部33、显示器装置36、扬声器装置37、存储器38的结构。信号处理部33至少包括指向方向算出部34、输出控制部35。
[0064]通信部31接收相机装置11?In发送的包含拍摄时刻的影像数据、或者为了算出指向方向(emh、0mv)所需的输入参数的数据、或者全方位麦克风阵列装置2发送的包含收音时刻的声音数据，并向信号处理部33输出。
[0065]操作部32是用于将用户的输入操作的内容向信号处理部33通知的用户接口(UI:User Interface),例如是鼠标、键盘等指向设备。而且,操作部32例如对应于显示器装置36的画面而配置，可以使用通过用户的手指FG或指示笔能够进行输入操作的触摸面板或触摸垫来构成。
[0066]操作部32取得显示在显示器装置36上的相机装置11的影像数据(参照图4(B))之中的、用户希望音量水平增大的位置即图4(B)或图5(B)所示的表示指定位置A’的坐标数据而向信号处理部33输出。
[0067]另外，操作部32在显示在显示器装置36上的相机装置11的影像数据之中的后述的基准点O由用户的手指FG指定时，取得基于指定的基准点O的位置的坐标数据而向信号处理部33输出。
[0068]信号处理部33 例如使用 CPU (Central Processing Unit)、MPU (Micro ProcessingUnit)或DSP(Digital Signal Processor)而构成,进行用于整体性地综合指向性控制装置3的各部的动作的控制处理、与其他的各部之间的数据的输入输出处理、数据的运算(计算)处理及数据的存储处理。
[0069]指向方向算出部34按照用户从显示在显示器装置36上的、通过任一相机装置11?In(例如为相机装置11。以下同样。)拍摄到的影像数据进行的任意位置(=指定位置A’ )的指定，根据全方位麦克风阵列装置2的设置位置M，算出表示朝向与指定位置A’对应的声音位置A的指向方向的坐标(Θ Mh、θ Mv)。
[0070]指向方向(Θ _、Θ mv)中，Θ Mh表不从全方位麦克风阵列装置2朝向声音位置A的指向方向的水平角，Θ ?W表不从全方位麦克风阵列装置2朝向声音位置A的指向方向的垂直角。此外，声音位置A是操作部32成为在显示器装置36上显示的影像数据中由用户的手指FG或指示笔指定的指定位置A’所对应的实际监控对象的现场位置。
[0071]作为控制部的输出控制部35控制相机装置11?In、全方位麦克风阵列装置2、显示器装置36及扬声器装置37的动作，使从相机装置11?In发送的影像数据向显示器装置36进行再现输出，并使从全方位麦克风阵列装置2发送的声音数据向扬声器装置37进行声音输出。在由指向方向算出部34算出的收音方向坐标(Θ _、θΜν)所对应的指向方向上，输出控制部35使声音数据的指向性形成于全方位麦克风阵列装置2。此外，输出控制部35自身可以使用全方位麦克风阵列装置2收音而向指向性控制装置3发送的声音数据进行指向性的形成处理(参照图3)，由此在由指向方向算出部34算出的收音方向坐标(0Mh、θ?Αν)所对应的指向方向上形成声音数据的指向性。
[0072]另外，输出控制部35基于由指向方向算出部34算出的表示指向方向的坐标数据，来判定声音位置A是否包含在收音空间K内的预先设定的隐私保护区域PRA (参照图4 (A))内。在判定为声音位置A包含在收音空间K内的预先设定的隐私保护区域PRA内时，输出控制部35对由全方位麦克风阵列装置2收音到的声音、或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(控制内容参照后述)，或者中止全方位麦克风阵列装置2对声音的收音。关于隐私保护区域PRA，参照图4(A)进行说明。
[0073]另外，输出控制部35也可以取代声音位置A是否包含在隐私保护区域PRA内的判定处理，而判定全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻(参照后述)是否包含在预先设定的隐私保护时间PRT内。在判定为收音时刻或录音时刻包含在隐私保护时间PRT内时，输出控制部35对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(控制内容参照后述)，或者中止全方位麦克风阵列装置2对声音的收音。此外，隐私保护时间PRT可以在输出控制部35的动作中预先规定，也可以是输出控制部35根据需要而从存储器38读出。而且，隐私保护时间PRT可以根据用户的输入操作而适当变更。
[0074]在此，作为上述的声音输出的控制处理的一例，输出控制部35对例如由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的声音信号进行静噪处理，由此来抑制由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出。或者，输出控制部35生成由全方位麦克风阵列装置2收音到的声音的声音信号波形(参照图24(A))的反相位波形(参照图24(B))，对图24(A)所示的声音信号波形与图24(B)所示的声音信号波形的反相位波形进行合成处理(也称为掩蔽处理)，由此来抑制由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出。图24(A)是表示声音数据的波形的图。图24(B)是表示图24(A)所示的波形的反相位信号的波形的图。图24(C)是表示图24(A)及图24(B)所示的各波形的合成后的波形的图。
[0075]另外，作为上述的声音输出的控制处理的另一例，输出控制部35例如可以对于由全方位麦克风阵列装置2收音到的声音的声音数据或由全方位麦克风阵列装置2收音并形成了指向性的声音的声音数据实施声音变换处理(参照图25 (A)及图25(B))。图25(A)是表不与声音变换处理前的音调对应的波形例的图。图25 (B)是表不与声音变换后的音调对应的波形例的图。此外，作为声音变换处理的一例，输出控制部35增大或减少例如由全方位麦克风阵列装置2收音到的声音的声音数据或由全方位麦克风阵列装置2收音并形成了指向性的声音的声音数据的波形(例如参照图25(A))的音调。由此，输出控制部35能够使由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音是谁的声音的确定变得困难，能够有效地保护存在于隐私保护区域PRA内的被拍摄体(例如人物)的隐私。
[0076]另外，输出控制部35将用于中止全方位麦克风阵列装置2对声音的收音的收音中止指示向全方位麦克风阵列装置2发送。全方位麦克风阵列装置2按照从指向性控制装置3发送的收音中止指示，使声音的收音临时中止。由此，例如在进行隐匿性高的内容的谈话的隐私保护区域PRA内，输出控制部35能够避免可能获得某些证据的谈话自身的记录。此夕卜，输出控制部35的声音输出的控制处理或全方位麦克风阵列装置2的声音的中止处理在以下的第二实施方式中也能够同样地适用。
[0077]而且，输出控制部35可以向用户明示地通知通过用户的手指FG或指示笔指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA、或者全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含在隐私保护时间PRT内。输出控制部35可以使例如指定位置A’所对应的声音位置A包含于隐私保护区域PRA、或者全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含于隐私保护时间PRT内的消息在显示器装置36上显示(参照图4(B))或闪烁，或者从扬声器装置37将规定的警报音进行声音输出。由此，输出控制部35能够使用户明示地认知到通过用户的手指FG或指示笔指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA、或者全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含于隐私保护时间PRT内。
[0078]作为显示部的显示器装置36将相机装置11?In拍摄到的影像数据显示在画面上。
[0079]作为声音输出部的扬声器装置37对于全方位麦克风阵列装置2收音到的声音数据、或者在指向方向算出部34算出的指向方向(0mh、θΜν)上形成了指向性的全方位麦克风阵列装置2收音到的声音数据进行声音输出。此外，显示器装置36及扬声器装置37可以与指向性控制装置3分别构成。
[0080]存储器38例如使用RAM (Random Access Memory)而构成,作为指向性控制装置3的各部的动作时的程序存储器、数据存储器、作业存储器而发挥功能。
[0081]作为记录部的一例的记录器装置4将相机装置11?In拍摄到的包含拍摄时刻的数据的影像数据与全方位麦克风阵列装置2收音到的包含收音时刻的数据的声音数据建立对应而进行记录。此外，记录器装置4例如在记录的影像数据及声音数据由指向性控制装置3再现(例如，影像数据的显示及声音数据的输出)时，将全方位麦克风阵列装置2收音到的收音时刻的数据作为记录器装置4的录音时刻的数据向指向性控制装置3发送。
[0082]图3是说明全方位麦克风阵列装置2作为声音的指向方向而在规定方向Θ上形成指向性的内容的原理图。为了使说明便于理解，麦克风在直线上形成一维排列。这种情况下，指向性成为面内的二维空间，但是为了在三维空间形成指向性，只要将麦克风形成为二维排列而进行同样的处理方法即可。在图3中，简单地说明例如使用了延迟和方式的指向性控制处理的原理。从声源80发出的声波对于在全方位麦克风阵列装置2的麦克风单元
22、23中内置的各麦克风221、222、223、?、22(n-l)、22n，以某恒定角度(入射角=(90- Θ )[度])入射。图3所示的入射角Θ可以是从全方位麦克风阵列装置2朝向声音位置A的指向方向的水平角9Mh，也可以是垂直角9mv。
[0083]声源80是例如存在于全方位麦克风阵列装置2收音的收音方向上的相机装置11的被拍摄体(例如图4(A)所示的董事会议室内的两个人、或董事会议室外的两个人)的谈话，对于全方位麦克风阵列装置2的框体21的面上,存在于规定角度Θ的方向。而且,各麦克风221、222、223、?、22 (η-1)、22η间的间隔d恒定。
[0084]从声源80发出的声波首先到达麦克风221而被收音，接着到达麦克风222而被收音，同样地不断被收音，最后到达麦克风22η而被收音。
[0085]此外,例如在声源80是人的谈话时的声音时,从全方位麦克风阵列装置2的各麦克风221、222、223、?、22(η-1)、22η的位置朝向声源80的方向与从全方位麦克风阵列装置2的各麦克风朝向用户在显示器装置36的画面上指定的指定位置A’所对应的声音位置A的方向相同。
[0086]在此，声波从到达麦克风221、222、223、?、22(11-1)的时刻起至到达最后收音的麦克风22η的时刻为止，产生到达时间差τ 1、τ2、τ 3、?、τ (η_1)。因此，各个麦克风221、222、223、?、22(η-1)、22η收音到的声音的声音数据直接相加时，由于在相位错开的状态下相加，因此声波的音量水平整体变弱。
[0087]此外，τ I是声波到达麦克风221的时刻与声波到达麦克风22η的时刻之差的时间，τ 2是声波到达麦克风222的时刻与声波到达麦克风22η的时刻之差的时间，同样，τ (η-1)是声波到达麦克风22 (η-1)的时刻与声波到达麦克风22η的时刻之差的时间。
[0088]在本实施方式中，全方位麦克风阵列装置2是具有与各麦克风221、222、223、?、22 (η-1),22η分别对应地设置的A/D转换器241、242、243、?、24 (η_1)、24η、延迟器251、252、253、?、25(η-1)、25η、加法运算器26的结构(参照图3)。
[0089]S卩，全方位麦克风阵列装置2将各麦克风221、222、223、?、22 (η_1)、22η收音到的模拟的声音数据在A/D转换器241、242、243、?、24(η-1)、24η中向数字的声音数据进行AD转换。
[0090]而且，全方位麦克风阵列装置2在延迟器251、252、253、?、25(η-1)、25η中，施加与各个麦克风221、222、222、?、22(η-1)、22η的到达时间差对应的延迟时间而使全部声波的相位对齐，之后，在加法运算器26中将延迟处理后的声音数据进行加法运算。由此，全方位麦克风阵列装置2能够针对各麦克风221、222、223、?、22(η-1)、22η而在规定角度Θ的方向上形成声音数据的指向性。
[0091]例如在图3中，在延迟器251、252、253、?、25(η-1)、25η中设定的各延迟时间D1、D2、D3、?、D (n-1)、Dn分别相当于到达时间差τ 1、τ 2、τ 3、?、τ (η_1)，由数学式(I)表
/Jn ο
[0092]【数学式I】
r πLI \cl X (η - Γ) X cos θ)
[0093]Dl =—=------------------------L
VsKv
「 ，L2 {d X O - 2) X cos 0}
[0094]D2 =——=-----L
VsVs
「 ，L3 {d X (w - 3) X cos θ)
[0095]D3 =——=-----
VsVs
[0096]，…，
「 ? r.,L{n -1) {(J X \ x cos Θ]
[0097]D(? -1) = —^-- = J----L
'VsVs
[0098]Dn = 0...(I)
[0099]LI是麦克风221与麦克风22η的声波到达距离之差。L2是麦克风222与麦克风22η的声波到达距离之差。L3是麦克风223与麦克风22η的声波到达距离之差，同样地，L(η-1)是麦克风22 (η-l)与麦克风22η的声波到达距离之差。Vs是声波的速度(音速)。L1、L2、L3、?、L(n-l)、Vs是已知的值。在图3中，设定于延迟器25η的延迟时间Dn是O (零)。
[0100]这样一来，全方位麦克风阵列装置2能够通过变更在延迟器251、252、253、?、25 (η-1)、25η中设定的延迟时间D1、D2、D3、?、Dn_l、Dn而简易地形成各个麦克风单元22、
23收音到的声音数据的指向性。
[0101]此外，图3所示的指向性的形成处理的说明是为了简化说明而以全方位麦克风阵列装置2进行的情况为前提进行记载的。但是，在指向性控制装置3的信号处理部33是具有与全方位麦克风阵列装置2的麦克风的个数相同的AD转换器24及延迟器251?25η和一个加法运算器26的结构时，指向性控制装置3的信号处理部33可以使用由全方位麦克风阵列装置2的各麦克风收音到的声音的声音数据来进行图3所示的指向性的形成处理。而且，在全方位麦克风阵列装置2的控制部(未图示)或者指向性控制装置3的信号处理部33中，延迟器以后的处理可以作为基于软件的处理来实现。
[0102]接下来，参照图4(A)及图4(B)对本实施方式的指向性控制系统10的动作概要进行说明。图4(A)是设有第一实施方式的指向性控制系统10的收音空间K内的隐私保护区域PRA的说明图。图4(B)是表示在从显示器装置36上显示的影像之中由用户的手指FG指定的指定位置Α’所对应的声音位置A包含于隐私保护区域PRA时抑制由全方位麦克风阵列装置2收音到的声音的输出的情况的图。
[0103]在图4(A)所示的指向性控制系统10中，相机装置11拍摄在相机装置11所固有的视场角的范围内映现的被拍摄体(例如图4(A)所示的董事会议室内的两个人、或董事会议室外的两个人)。此外，为了简化图4(A)的说明，相机装置11及全方位麦克风阵列装置2设置在收音空间K内的比董事会议室的高度高的位置，董事会议室为未设置顶棚的房间。因此，无论是董事会议室内的两个人，还是董事会议室外的两个人，都作为被拍摄体而由相机装置11拍摄。
[0104]在收音空间K内，全方位麦克风阵列装置2对全方位麦克风阵列装置2的设置位置M周围的声音进行收音。在图4(A)中，董事会议室内的两个人例如进行使用了隐匿性高的信息的谈话，“#$% &”是使用了隐匿性高的信息的谈话内容的一例。而且，董事会议室外的两个人例如在董事会议室外的走廊等使用隐匿性不高的信息进行日常谈话，“你好”是使用了隐匿性不高的信息的日常的谈话内容的一例。相机装置11拍摄到的影像数据显示在指向性控制装置3的显示器装置36上(参照图4(B))。
[0105]在此，当通过用户的手指FG指定显示器装置36的指定位置Α’时，指向性控制装置3使用表示指定位置Α’的坐标数据来算出表示从全方位麦克风阵列装置2的设置位置M朝向声音位置A的指向方向的坐标(0Mh、θΜν)。全方位麦克风阵列装置2或指向性控制装置3使用指向性控制装置3所算出的表示指向方向的坐标(0Mh、0mv)的坐标数据，在从全方位麦克风阵列装置2的设置位置M朝向声音位置A的指向方向MIX上形成指向性。
[0106]另外，在本实施方式中，从全方位麦克风阵列装置2的设置位置M朝向收音空间K内的规定范围PRB(参照图4(A)所示的长虚线)的四棱锥的范围被预先设定为由全方位麦克风阵列装置2收音到的声音的输出被控制(例如静噪处理，掩蔽处理或声音变换处理)或声音的收音被中止的隐私保护区域PRA。隐私保护区域PRA的初始设定例如只要在构成图4(A)所示的指向性控制系统10的相机装置11或全方位麦克风阵列装置2的设置时进行即可。
[0107]因此，在本实施方式的指向性控制系统10中，指向性控制装置3的信号处理部33的输出控制部35判定为从全方位麦克风阵列装置2通过用户的手指FG或指示笔指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA时，对存在于声音位置A即董事会议室外的走廊等的两个人的谈话声音的输出进行控制(例如静噪处理、掩蔽处理或声音变换处理)或者使全方位麦克风阵列装置2中止声音的收音。
[0108]S卩，存在于董事会议室外的走廊等的两个人的谈话声音未从扬声器装置37输出，或者即使输出了也难以确定是谁的声音(参照图4(B))。而且，在判定为通过用户的手指FG或指示笔指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA时，输出控制部35例如将声音位置A包含于隐私保护区域PRA的消息显示在显示器装置36上(参照图4⑶)。
[0109]此外，在图4(A)中，即使显示器装置36上显示的影像之中被指定了存在于董事会议室内的两个人的周围的情况下，在判定为该指定位置包含于隐私保护区域PRA时，同样地，指向性控制装置3的信号处理部33的输出控制部35对存在于声音位置A即董事会议室内的两个人的谈话声音的输出进行控制(例如静噪处理、掩蔽处理或声音变换处理)或者中止对声音的收音。
[0110]因此，在判定为通过用户的手指FG或指示笔指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA时，无论被拍摄体的人的声音是否使用隐匿性高的信息，指向性控制装置3都对存在于声音位置A的被拍摄体的人的谈话声音的输出进行控制(例如静噪处理、掩蔽处理或声音变换处理)，或者使全方位麦克风阵列装置2中止声音的收音。此夕卜，关于声音位置A是否包含于隐私保护区域PRA，参照图6详细叙述。
[0111]接下来，参照图5(A)对本实施方式的指向性控制系统10的初始设定的动作顺序进行说明。图5(A)是说明第一实施方式的指向性控制系统10的初始设定的动作顺序的流程图。初始设定包括例如对相机装置11?In或全方位麦克风阵列装置2进行初始设置的动作、取得指向方向算出部34算出指向方向所需的输入参数的动作。
[0112]在图5(A)中，以将构成指向性控制系统10的相机装置11及全方位麦克风阵列装置2固定于规定位置(例如企业内的室内的顶棚面或支架)的方式进行初始设置(STl)。相机装置11及全方位麦克风阵列装置2分别设置在不同的位置(参照图4(A))。
[0113]在对相机装置11及全方位麦克风阵列装置2进行了初始设置之后，进行指向方向算出部34算出表示指向方向的坐标(0_、0mv)所需的各输入参数的测定(ST2)。在步骤ST2中，包括用户使用测定器(例如激光测距仪)进行测定的情况，或相机装置11使用相机装置11自身的公知技术的功能进行测定并取得的情况。步骤ST2中的各输入参数按照各指向方向的算出方法而不同，详细情况参照图7?图9进行说明。
[0114]在步骤ST2之后，在步骤ST2中测定的各输入参数从相机装置11向指向性控制装置3的信号处理部33输入，或者从操作部32向信号处理部33输入(ST3)。例如相机装置11将通过相机装置11自身的公知技术的功能而取得的输入参数向指向性控制装置3的通信部31发送。通信部31将相机装置11发送的输入参数向信号处理部33输出。
[0115]信号处理部33将在步骤ST3中取得的各输入参数临时保存于存储器38 (ST4)。通过以上所述，指向性控制系统10的初始设定的动作结束。
[0116]接下来，参照图6?图11对本实施方式的指向性控制系统10的初始设定后的动作顺序进行说明。图6是说明在第一实施方式的指向性控制系统10中根据表示指向方向的坐标来切换声音的输出控制的动作顺序的流程图。此外，在图6?图11所示的流程图的开始前，全方位麦克风阵列装置2对收音空间K内的声音进行收音。
[0117]在图6中，指向性控制装置3经由操作部32而接受从图4(B)所示的显示器装置36所显示的影像数据之中对任意指定位置A’的指定(STll)。指向性控制装置3向相机装置11发送在显示于显示器装置36的影像数据之中接受到对任意指定位置A’的指定。此夕卜，在步骤STll中，指向性控制装置3将显示有影像数据的显示器装置36的指定位置A’的坐标数据向相机装置11发送。
[0118]在步骤STll之后，在从指向性控制装置3接收到接受了指定位置A’的坐标数据及指定时，相机装置11以相机装置11的设置位置C为起点，算出并取得到达与步骤STll中所指定的指定位置A’对应的声音位置A的距离、水平角及垂直角(La、0CAh> 0CAV)的坐标数据。
[0119]相机装置11以相机装置11的设置位置C为起点，将到达与步骤STll中所指定的指定位置A’对应的声音位置A的距离、水平角及垂直角(La、0CAh> 0CAv)的坐标数据向指向性控制装置3发送。
[0120]指向性控制装置3的信号处理部33的指向方向算出部34使用从相机装置11到声音位置A的距离、水平角及垂直角(La、0CAh> 0CAv)的坐标数据、图5(A)所示的在步骤ST4中临时保存于存储器38的各输入参数，来算出表示从全方位麦克风阵列装置2的设置位置M朝向声音位置A的指向方向的坐标(Θ Mh、Θ Mv) (ST12) ο关于表不指向方向的坐标(0mh, 9mv)的算出处理，参照图12?图14进行详细叙述。
[0121]指向性控制装置3将在步骤ST12中算出的包含表示指向方向的坐标(0mh、0mv)的坐标数据的指向性形成指示向全方位麦克风阵列装置2发送。全方位麦克风阵列装置2根据来自指向性控制装置3的指向性形成指示而在指向性控制装置3所算出的坐标(Θ mh、θ?Αν)的指向方向上形成声音数据的指向性(ST13)。
[0122]此外，在步骤ST13所示的收音到的声音的指向性形成处理中，说明了全方位麦克风阵列装置2按照从指向性控制装置3发送的指向性形成指示进行的情况，但指向性控制装置3自身可以进行步骤ST13所示的收音到的声音的指向性形成处理。具体而言，输出控制部35使用在步骤ST12中算出的收音方向坐标(Θ _、θ Μν)的坐标数据和由全方位麦克风阵列装置2收音到的声音的声音数据，进行参照图3说明的指向性的形成处理。由此，指向性控制装置3能够容易地获得在指向方向的坐标(Θ _、θ Μν)表示的指向方向MIX上形成了指向性的声音。
[0123]由此，全方位麦克风阵列装置2能够增大从存在被拍摄体的指向方向(θ_、0mv)收音到的声音的声音数据的音量水平，并能够减少从不存在被拍摄体的方向收音到的声音的声音数据的音量水平。
[0124]指向性控制装置3的信号处理部33的输出控制部35基于由指向方向算出部34算出的表不指向方向的坐标(Θ mh、θ Mv)的坐标数据，来判定声音位置A是否包含于收音空间K内的隐私保护区域PRA内(ST14)。
[0125]具体而言，输出控制部35判定是否由指向方向算出部34算出的表示指向方向的坐标的水平角Θ -是从规定值9hpl到Qhp2的范围的角度，且由指向方向算出部34算出的表示指向方向的坐标的垂直角Θ Mv是从规定值θ vpl到Θ -的范围的角度。
[0126]规定值及Qhp2是为了使用从全方位麦克风阵列装置2的设置位置M起的指向方向的水平角来确定图4(A)所示的隐私保护区域PRA的范围而设置的下限值及上限值。同样地，规定值θνρ1及θνρ2是为了通过从全方位麦克风阵列装置2的设置位置M起的指向方向的垂直角来确定隐私保护区域PRA的范围而设置的下限值及上限值。此外，在隐私保护区域PRA为收音空间K的整个区域时，规定值Qhpl及θνρ1为0(零)，规定值Qhp2及^vp2成为360，在以下的第二实施方式中也同样。
[0127]因此，在本实施方式中，输出控制部35在通过步骤ST12算出的表示指向方向的坐标(0MAh、θ?Αν)满足数学式(2)时，判定为通过用户的手指FG指定的指定位置Α’所对应的声音位置A包含于隐私保护区域PRA内。
[0128]【数学式2】
[0129]9hpl^ Qmh^ 0hp2
[0130]θ.ν 彡 θ νρ2...(2)
[0131]在判定为声音位置A包含于收音空间K内的预先设定的隐私保护区域PRA内时(ST14为“是”)，输出控制部35对步骤ST13中在指向方向上形成了指向性的声音的输出进行控制(例如，静噪处理或掩蔽处理等的抑制处理、或者声音变换处理。以下同样)(ST15)。而且，输出控制部35对用户明示地通知通过用户的手指FG或指示笔指定的指定位置Α’所对应的声音位置A包含于隐私保护区域PRA内(ST15)。输出控制部35例如使指定位置Α’所对应的声音位置A包含于隐私保护区域PRA内的消息在显示器装置36上显示(参照图4(B))或闪烁,或者从扬声器装置37将规定的警报音进行声音输出(ST15)。
[0132]另一方面,在判定为声音位置A未包含于收音空间K内的预先设定的隐私保护区域PRA内时(ST14为“否”)，输出控制部35使步骤ST13中在指向方向(Θ Mh、θ Mv)上形成了指向性的声音从扬声器装置37原封不动地输出(ST16)。通过以上，图6所示的指向性控制系统10的动作结束。
[0133]图7是说明在第一实施方式的指向性控制系统10中根据表示指向方向的坐标来切换声音的输出控制的动作顺序的另一例的流程图。在图7所示的流程图的说明中，对于与图6所示的流程图的说明不同的内容进行说明，省略或简化同样的内容的说明。
[0134]图7所示的流程图与图6所示的流程图的主要区别是步骤ST13中的指向性的形成处理的执行时机。即，在图7中，步骤ST13的指向性的形成处理是在步骤ST14中判定为声音位置A未包含于收音空间K内的预先设定的隐私保护区域PRA内时而进行的。输出控制部35在步骤ST13中使由全方位麦克风阵列装置2收音到的声音的声音数据在指向方向(0Mh、θ?Αν)上形成了指向性之后，从扬声器装置37原封不动地进行声音输出(ST16)。
[0135]另一方面，在步骤ST14中判定为声音位置A包含于收音空间K内的预先设定的隐私保护区域PRA内时(ST14为“是”)，输出控制部35以未在指向方向(Θ mh、θ Mv)上形成指向性的状态来控制由全方位麦克风阵列装置2所收音到的声音的输出(ST15’)。而且，输出控制部35使声音位置A包含于隐私保护区域PRA内的消息在显示器装置36上显示(参照图4(B))或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST15’)。通过以上，图7所示的指向性控制系统10的动作结束。
[0136]图8是说明在第一实施方式的指向性控制系统10中根据收音时刻或录音时刻来切换声音的输出控制的动作顺序的流程图。在图8所示的流程图的说明中，对于与图6所示的流程图的说明不同的内容进行说明，省略或简化同样的内容的说明。图8所示的流程图既可以适用于全方位麦克风阵列装置2对收音空间K的声音进行实时收音的情况，也可以适用于由全方位麦克风阵列装置2收音到的声音的声音数据从记录器装置4读出而从指向性控制装置3再现的情况。
[0137]图8所示的流程图与图6所示的流程图的主要区别是步骤ST14’ (参照图8)的判定内容与步骤ST14(参照图6)的判定内容。即，在图8中，输出控制部35判定全方位麦克风阵列装置2的收音时刻(例如当前时刻)或记录器装置4所记录的声音数据的录音时刻是否包含在预先设定的隐私保护时间PRT内(ST14’)。输出控制部35例如通过参照从记录器装置4读出的声音文件的标题区域来取得声音数据的录音时刻的数据。
[0138]在判定为收音时刻或录音时刻包含于隐私保护时间PRT内时(ST14’为“是”)，输出控制部35对步骤ST13中在指向方向(Θ _、Θ mv)上形成了指向性的声音的输出进行控制(ST15)。而且，输出控制部35使收音时刻或录音时刻包含于隐私保护时间PRT内的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST15，)。
[0139]另一方面，在判定为收音时刻及录音时刻未包含予隐私保护时间PRT内时(ST14’为“否”)，输出控制部35使步骤ST13中在指向方向(Θ Mh、θ Mv)上形成了指向性的声音从扬声器装置37原封不动地输出(ST16)。通过以上，图8所示的指向性控制系统10的动作结束。
[0140]图9是说明在第一实施方式的指向性控制系统10中根据收音时刻或录音时刻来切换声音的输出控制的动作顺序的另一例的流程图。在图9所示的流程图的说明中，对于与图7所示的流程图的说明不同的内容进行说明，省略或简化同样的内容的说明。图9所示的流程图与图8所示的流程图同样，既可以适用于全方位麦克风阵列装置2对收音空间K的声音进行实时收音的情况，也可以适用于由全方位麦克风阵列装置2收音到的声音的声音数据从记录器装置4读出而从指向性控制装置3再现的情况。
[0141]图9所示的流程图与图7所示的流程图的主要区别是步骤ST14’ (参照图9)的判定内容和步骤ST14(参照图7)的判定内容。S卩，在图9中，输出控制部35判定全方位麦克风阵列装置2的收音时刻(例如当前时刻)或记录器装置4所记录的声音数据的录音时刻是否包含于预先设定的隐私保护时间PRT内(ST14’ )。输出控制部35通过参照从例如记录器装置4读出的声音数据的文件的标题区域而取得声音数据的录音时刻的数据。
[0142]在判定为收音时刻或录音时刻包含于隐私保护时间PRT内时(ST14’为“是”)，输出控制部35以未在指向方向(0Mh、0mv)上形成指向性的状态来对由全方位麦克风阵列装置2收音到的声音的输出进行控制(ST15’)。而且，输出控制部35使收音时刻或录音时刻包含于隐私保护时间PRT内的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST15’)。
[0143]另一方面，在判定为收音时刻及录音时刻未包含于隐私保护时间PRT内时(ST14’为“否”)，输出控制部35使用由全方位麦克风阵列装置2收音到的声音而在指向方向(θ馳、θ mav)上形成指向性(ST13)。输出控制部35使在指向方向(Θ馳、θ Μν)上形成有指向性的声音从扬声器装置37原封不动地输出(ST16)。通过以上，图9所示的指向性控制系统10的动作结束。
[0144]图10是说明在第一实施方式的指向性控制系统10中根据表示指向方向的坐标来切换声音的收音处理的继续或中止的动作顺序的流程图。在图10所示的流程图的说明中，对于与图7所示的流程图的说明不同的内容进行说明，省略或简化同样的内容的说明。
[0145]图10所示的流程图与图7所示的流程图的主要区别是步骤ST15”的处理内容和步骤ST15’的处理内容。S卩，在图10中，在步骤ST14中判定为声音位置A包含于收音空间K内的隐私保护区域PRA内时，输出控制部35生成用于使全方位麦克风阵列装置2的收音临时中止的收音中止指示并向通信部31输出，使通信部31将收音中止指示向全方位麦克风阵列装置2发送。由此，全方位麦克风阵列装置2根据从指向性控制装置3发送的收音中止指示，使收音空间K内的声音的收音临时中止(ST15”)。而且，输出控制部35使声音位置A包含于隐私保护区域PRA内的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST15”)。
[0146]此外，判定为声音位置A未包含于收音空间K内的隐私保护区域PRA时的输出控制部35的动作与图7所示的步骤ST13及ST16同样，因此省略说明。通过以上，图10所示的指向性控制系统10的动作结束。
[0147]图11是说明在第一实施方式的指向性控制系统10中根据收音时刻来切换声音的收音处理的继续或中止的动作顺序的流程图。图11所示的流程图是在全方位麦克风阵列装置2对收音空间K的声音进行实时收音时而进行的。
[0148]在图11中，输出控制部35判定全方位麦克风阵列装置2的收音时刻(例如当前时刻)是否包含于预先设定的隐私保护时间PRT内(ST14”)。
[0149]在判定为收音时刻包含于隐私保护时间PRT内时(ST14”为“是”)，输出控制部35生成用于使全方位麦克风阵列装置2的收音临时中止的收音中止指示并向通信部31输出，使通信部31将收音中止指示向全方位麦克风阵列装置2发送。由此，全方位麦克风阵列装置2根据从指向性控制装置3发送的收音中止指示，使收音空间K内的声音的收音临时中止(ST15”)。而且，输出控制部35使收音时刻包含于隐私保护时间PRT的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST15”)。
[0150]另一方面，在判定为收音时刻未包含于隐私保护时间PRT内时(ST14”为“否”)，输出控制部35以未在指向方向(emh、θΜν)上形成指向性的状态而将由全方位麦克风阵列装置2收音到的声音从扬声器装置37原封不动地输出(ST16)。此外，在判定为收音时刻未包含于隐私保护时间PRT内时(ST14”为“否”)，输出控制部35可以使用由全方位麦克风阵列装置2收音到的声音，在指向方向(0mh、0mv)上形成了指向性之后从扬声器装置37输出。通过以上，图11所示的指向性控制系统10的动作结束。
[0151](表示全方位麦克风阵列装置2的收音方向的坐标(9_、9 Mv)的算出方法)
[0152]在此，关于指向性控制装置3的信号处理部33的指向方向算出部34算出全方位麦克风阵列装置2的表示指向方向的坐标(θ-、θΜν)的方法，参照图5 (B)、图12?图14详细地进行说明。
[0153]图5(B)是表示用于算出全方位麦克风阵列装置2的指向方向的基准点O和指定位置Α’的在显示器装置36在画面上所处的位置的图。图12(A)是表示相机装置11、全方位麦克风阵列装置2、基准点O及声音位置A的各位置的立体图。图12(B)是图12(A)的从铅垂上方观察铅垂下方的水平方向俯视图。图12(C)是沿着图12(B)的Κ-Κ’线的垂直方向剖视图。
[0154]图13(A)是表示相机装置11、全方位麦克风阵列装置2、基准点O及声音位置A的各位置的立体图。图13(B)是图13(A)的从铅垂上方观察铅垂下方的水平方向俯视图。图13(C)是沿着图13(B)的Q-Q’线的垂直方向剖视图。图14(A)是表示相机装置11、全方位麦克风阵列装置2、基准点O及声音位置A的各位置的立体图。图14(B)是图14(A)的从铅垂上方观察铅垂下方的水平方向俯视图。图14(C)是沿着图14(B)的R-R’线的垂直方向首1J视图。
[0155]例如，在指向方向算出部34的指向方向的算出方法(以下，称为“本算出方法”)中，例如在相机装置11的光轴CX的方向上的规定位置设置基准点O。基准点O存在于相机装置11的光轴CX的方向上，因此是与图5(B)所示的显示器装置36的画面的中心点O’对应的实际的现场位置。
[0156]指向方向算出部34根据如下内容来算出表示全方位麦克风阵列装置2的指向方向的坐标(9馳、θΜν):
[0157](I)从相机装置11到全方位麦克风阵列装置2的距离Lqi的水平分量的距离Lafc ；
[0158](2)从相机装置11到基准点O的距离Lcq及俯角Θ co ；
[0159](3)从全方位麦克风阵列装置2到基准点O的距离Lsro及俯角θ M0 ；
[0160](4)相机装置11、全方位麦克风阵列装置2、基准点O距水平面(例如企业内的楼层内的地板面)的各高度H0 Hm、H0 ；
[0161](5)从相机装置11到声音位置A的水平角θ-及垂直角0CAv;
[0162](6)声音位置A距水平面(例如企业内的楼层内的地板面)的高度Ha。
[0163]在本算出方法中，图5(A)所示的步骤ST2中的输入参数是:
[0164](I)从相机装置11到全方位麦克风阵列装置2的距离Lqi的水平分量的距离Lafc ；
[0165](2)从相机装置11到基准点O的距离Lcq及俯角Θ co ；
[0166](3)从全方位麦克风阵列装置2到基准点O的距离Lsro及俯角θ M0 ；
[0167](4)相机装置11、全方位麦克风阵列装置2、基准点O距水平面(例如企业内的楼层内的地板面)的各高度H0 HM、H。。
[0168](I)从相机装置11到全方位麦克风阵列装置2的距离Lqi的水平分量的距离Lafc是在相机装置11及全方位麦克风阵列装置2被初始设置时所确定的固定值。
[0169](2)从相机装置11到基准点O的距离Laj及俯角Θ co例如能够通过用户在基准点O的位置处使激光测距仪面向相机装置11而简易地测定。所测定出的距离Lro及俯角的数据例如根据用户的输入操作而从操作部32向信号处理部33输入。
[0170](3)从全方位麦克风阵列装置2到基准点O的距离I*及俯角ΘΜ例如能够通过用户在基准点O的位置处使激光测距仪面向全方位麦克风阵列装置2而简易地测定。所测定出的距离Lsro及俯角的数据例如根据用户的输入操作而从操作部32向信号处理部33输入。
[0171](4)相机装置11、全方位麦克风阵列装置2距水平面(例如企业内的楼层内的地板面)的各高度H。、Hm是在相机装置11、全方位麦克风阵列装置2的各初始设定时所确定的固定值，而且，基准点O距水平面(例如企业内的楼层内的地板面)的高度凡是在决定基准点O的位置时所确定的固定值。
[0172]而且，在本算出方法中，使用图6所示的步骤STll之后得到的坐标(Lca、0CAh>0CAv)中的、
[0173](5)从相机装置11朝向声音位置A的方向的水平角Θ CAh及垂直角Θ CAv，例如它们是通过相机装置11的公知技术的功能而取得的。
[0174]此外，在本算出方法中，
[0175](6)声音位置A距水平面(例如企业内的楼层内的地板面)的高度Ha是预先决定的固定值，例如在用户的手指FG指定图5 (B)所示的指定位置A’时且在声音位置A的周围存在人的情况下是将人的大小设为Ha而选择的值或输入的值。或者，在用户的手指FG指定了指定位置A’时,在指向性控制装置3在判定为所指定的指定位置A’存在人(例如大人或小孩)的情况下，也可以使用已定值(例如1.5m或0.Sm)。
[0176]在以下的本算出方法的说明中，用户的手指FG所指定的指定位置A’设为与中心点O’不同的位置(参照图5(B))。
[0177]以下，关于指向方向算出部34算出表示从全方位麦克风阵列装置2的设置位置M朝向声音位置A的指向方向的坐标(0mh、0mv)的算出方法(本算出方法)，具体地进行说明。在本算出方法中，例如在图12(B)所示的水平方向俯视图中，相机装置11及全方位麦克风阵列装置2的各水平角的O度方向基准线是将相机装置11及全方位麦克风阵列装置2相互连结的直线方向。
[0178]指向方向算出部34使用从相机装置11到基准点O的距离Lro及俯角Θ ，按照数学式⑶算出从相机装置11到基准点O的距离Lro的水平分量的距离LCQh。
[0179]【数学式3】
[0180]Lcoh = LcoX cos Θ c0...(3)
[0181]指向方向算出部34使用从全方位麦克风阵列装置2到基准点O的距离Lmq及俯角Θ ?，按照数学式(4)算出从全方位麦克风阵列装置2到基准点O的距离I*的水平分量的距尚LMQh。
[0182]【数学式4】
[0183]Llloh-LmoX cos θ M。...(4)
[0184]指向方向算出部34使用数学式(3)、(4)的各算出结果，根据图12⑶所示的对于Λ COM的余弦定理，按照数学式(5)算出从相机装置11到基准点O的俯角Θ co的水平角9 COh的余弦值COS Θ coho
[0185]【数学式5】
T 2 + T 2-L 2
[0186]CosOcm = coh CMh=^...(5)

Hcm X Lcm
[0187]指向方向算出部34使用数学式(3)、(4)的各算出结果，根据图12 (B)所示的对于Δ COM的余弦定理，按照数学式(6)算出从全方位麦克风阵列装置2到基准点O的俯角θ M0的水平角Θ MOh的余弦值COS Θ Ma。
[0188]【数学式6】
227
[0189]COS^m = 1MOH +Lcm -hm (6)

lLMOh X Lcm
[0190]指向方向算出部34使用相机装置11及基准点O距水平面(例如企业内的楼层内的地板面)的各高度Hc、％、数学式(3)及(5)的各算出结果，按照数学式(7)算出从相机装置11到基准点O的距离Laj的垂直分量的距离Lc0vo
[0191]【数学式7】
[0192]Li ,: ^j(LrollXCOiieroii)2 +(Hc - Ha)2...(I)
[0193]指向方向算出部34使用全方位麦克风阵列装置2及基准点O距水平面(例如企业内的楼层内的地板面)的各高度、数学式(4)及(6)的各算出结果，按照数学式(8)算出从全方位麦克风阵列装置2到基准点O的距离I*的垂直分量的距离LMQv。
[0194]【数学式8】
[0195]LMOv = yj(LMOh X cos 0MOh) + (Hm - H0)...(8)
[0196]指向方向算出部34使用相机装置11及全方位麦克风阵列装置2的距水平面(例如企业内的楼层内的地板面)的各高度％、％、相机装置11与全方位麦克风阵列装置2之间的距离Lcm的水平分量的距离Lafc,按照数学式(9)算出相机装置11与全方位麦克风阵列装置2的距离Lai的垂直分量的距离Lcmv ( = Lcm)。
[0197]【数学式9】
[0198]Lt.他=/(1 = I2+("M-//C )2...(9)
[0199]指向方向算出部34使用数学式(7)?(9)的各算出结果，根据图12(C)所示的对于ACOM的余弦定理，按照数学式(10)算出从相机装置11到基准点O的俯角θ ω的垂直角Θ COv的余弦值COS Θ⑶ν。
[0200]【数学式10】
[0201]COS^c0v = LCOv~ +LcJ -lMCX2


x LCMv
[0202]指向方向算出部34使用数学式(9)的算出结果、相机装置11及全方位麦克风阵列装置2距水平面(例如企业内的楼层内的地板面)的各高度H。、HM，按照数学式(11)算出图12(C)所示的从相机装置11朝向全方位麦克风阵列装置2的方向与水平面(例如企业内的楼层内的顶棚面)之间的角度θ δ的正弦值sin θ δο
[0203]【数学式11】
[0204]sinΘ? = Hc …(I I)

L j
[0205]接下来，指向方向算出部34使用数学式(10)、(11)的各算出结果、从相机装置11到声音位置A的垂直角θαν、声音位置A距水平面(例如企业内的楼层内的地板面)的高度Ha、相机装置11距水平面(例如企业内的楼层内的地板面)的高度Hc，按照数学式(12)算出相机装置11与声音位置A的距离Lca。
[0206]【数学式I2】
H-H
[0207]/ = ( "---…(12)
sin(K.-幻
[0208]指向方向算出部34使用数学式(10)?(12)的各算出结果、从相机装置11到声音位置A的垂直角Θ CAv，按照数学式(13)算出相机装置11与声音位置A的距离Lca的水平分量的距离LCAh。
[0209]【数学式I3】

H —H
[0210]lCAh= k:A xcos(0COv +ecAv-0 )=14 z — {\3)
[0211]指向方向算出部34使用数学式(5)、(13)的各算出结果、从相机装置11到声音位置A的水平角Θ eAh、相机装置11与全方位麦克风阵列装置2之间的距离Lqi的水平分量的距离Lafc，根据图12(B)所示的对于ACAM的余弦定理，按照数学式(14)算出从全方位麦克风阵列装置2到声音位置A的距离的水平分量的距离Lmh。
[0212]【数学式14】
[0213]Lmh — -J(LCAh +Lcm — ILcai X Lcklh X cos(0coh+0CAh)....(14)
[0214]指向方向算出部34使用数学式(13)、(14)的各算出结果、相机装置11与全方位麦克风阵列装置2之间的水平分量的距离Lafc，根据图12(B)所示的对于ACAM的余弦定理，按照数学式(15)算出从全方位麦克风阵列装置2到声音位置A的俯角0m的水平角
9 MAh的余弦值C0S 9 MAh。
[0215]由此，指向方向算出部34能够按照数学式(16)算出从全方位麦克风阵列装置2朝向声音位置A的指向方向的水平角0Mh。
[0216]【数学式I5】
?2^
[0217]CQ^emh = ^MAh +^CMh——...........(15)

2LMAh X Lcyfh
[0218]【数学式I6】
[0219]ΘΜΑΙ, 二 arccos(L紛、+ L(sm — )...(16)

^ ^MAh X LCMh
[0220]而且，指向方向算出部34使用数学式(14)的算出结果、全方位麦克风阵列装置2距水平面(例如企业内的楼层内的地板面)的高度HM、声音位置A距水平面(例如企业内的楼层内的地板面)的高度Ha，根据图14(C)所示的对于ΛΜΑΡ的正切，按照数学式(17)算出从全方位麦克风阵列装置2朝向声音位置A的指向方向的垂直角Θ mv的正切值tan Θ mv。
[0221]由此，指向方向算出部34能够按照数学式(18)算出从全方位麦克风阵列装置2朝向声音位置A的指向方向的垂直角θ Mv。
[0222]【数学式17】
[0223]tan ΘΧ!, ν =…(17)
[0224]【数学式18】
[0225]沒"=arctan(Η:νιΗΛ)...(18)

^MAh
[0226]通过以上，在本实施方式的指向性控制系统10中，指向性控制装置3的指向方向算出部34根据显示器装置36所显示的影像数据的由用户进行的任意的指定位置A’的指定，算出从全方位麦克风阵列装置2朝向与所指定的指定位置A’对应的声音位置A的指向方向。指向性控制装置3的输出控制部35在所算出的指向方向上对于由全方位麦克风阵列装置2收音到的声音形成指向性。而且，在判定为声音位置A包含于预先设定的隐私保护区域PRA内时，输出控制部35对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0227]由此，在指向性控制系统10中，指向性控制装置3能够在从全方位麦克风阵列装置2朝向声音位置A的指向方向上形成指向性，而且，例如在通过用户的输入操作而指定的声音位置A处于规定的隐私保护区域PRA内时，能够对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者中止全方位麦克风阵列装置2对声音的收音。
[0228]因此，在相机装置11所拍摄的被拍摄体的影像数据中，例如在作为被拍摄体的人使用隐匿性高的信息进行谈话时，在判定为该人进行谈话的空间的位置(声音位置A)从全方位麦克风阵列装置2观察下包含于隐私保护区域的情况下，指向性控制装置3能够执行对使用了隐匿性高的信息的谈话的声音的输出的抑制或声音的声音变换，或者能够中止对声音的收音，例如能够避免向除参与者以外的第三者泄漏信息或者使得难以确定谁在谈话，或者能够避免可能获得某些证据的谈话自身的记录。
[0229](第二实施方式)
[0230]在第二实施方式中，与第一实施方式同样地，指向性控制装置3A根据声音位置A是否包含于隐私保护区域PRA内的判定结果、或者收音时刻或录音时刻是否包含于隐私保护时间PRT内的判定结果，来切换由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出控制或全方位麦克风阵列装置2的声音的中止的有无。而且，在接收到从后述的隐私保护信号发送机7或相机装置11发送的隐私保护信号时，优先于声音位置A是否包含于隐私保护区域PRA的判定结果、及收音时刻或录音时刻是否包含于隐私保护时间PRT内的判定结果地，指向性控制装置3A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0231]图15是表示第二实施方式的指向性控制系统1A的系统结构的框图。图15所示的指向性控制系统1A包括至少一个相机装置11A、?、InA、全方位麦克风阵列装置2、指向性控制装置3A、记录器装置4、隐私保护信号发送机7。
[0232]指向性控制装置3A包括通信部31A、操作部32、信号处理部33A、显示器装置36、扬声器装置37、存储器38、外部信号接收部39。对于构成图15所示的指向性控制系统1A的各部的动作与构成图1所示的指向性控制系统10的各部的动作相同的结构，标注同一附图标记而省略或简化说明。
[0233]接下来，参照图15、图16(A)、图16⑶及图16(C)对本实施方式的动作概要进行说明。
[0234]图16㈧是表示在设有第二实施方式的指向性控制系统1A的收音空间K内通过董事会议室内的人的操作来发送隐私保护信号PRSl或PRS2的情况的图。图16(B)是表示根据通过图16(A)所示的董事会议室内的人的操作而从隐私保护信号发送机7发送的隐私保护信号PRS1，对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音的情况的图。图16(C)是表示根据通过图16(A)所示的董事会议室内的人的操作而从相机装置IlA发送的隐私保护信号PRS2，对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音的情况的图。
[0235]隐私保护信号发送机7是考虑了例如图16(A)所示的董事会议室内的自己的谈话声音不被除参与者以外的第三者听见的被拍摄体的人所使用的可便携的发送机。隐私保护信号发送机7根据该人的操作来发送隐私保护信号PRS1。隐私保护信号PRSl在指向性控制装置3A的外部信号接收部39处被接收。
[0236]隐私保护信号PRSl是如下信号:例如无论声音位置A包含或不包含于第一实施方式中说明的隐私保护区域PRA的哪个情况下，为了控制相机装置IlA对作为被拍摄体的人的谈话声音的输出，或者中止全方位麦克风阵列装置2对声音的收音，都从隐私保护信号发送机7进行发送。
[0237]当从隐私保护信号发送机7发送的隐私保护信号PRSl在指向性控制装置3A的外部信号接收部39处被接收时，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。而且，指向性控制装置3A的输出控制部35A使接收到隐私保护信号PRSl的消息在显示器装置36上显示或闪烁，或者通过规定的警报音的声音输出而向用户通知(参照图16(B))。
[0238]另外，在本实施方式中，相机装置IIA?InA根据例如考虑了图16⑷所示的董事会议室内的自己的谈话声音不被除参与者以外的第三者听见的被拍摄体的人使用相机装置的远程操作用的遥控RM的操作，从相机装置IlA?InA发送隐私保护信号PRS2。隐私保护信号PRS2在指向性控制装置3A的通信部31A处被接收。以下，为了简化说明，说明相机装置IlA?InA中的例如相机装置IlA发送隐私保护信号PRS2的情况。
[0239]隐私保护信号PRS2是如下信号:例如无论声音位置A包含或不包含于第一实施方式中说明的隐私保护区域PRA的哪个情况下，为了控制相机装置IlA对作为被拍摄体的人的谈话声音的输出，或者中止全方位麦克风阵列装置2对声音的收音，都根据用于使相机装置IlA作为已存的功能而具有的隐私保护功能起动的遥控RM的操作，例如从相机装置IlA进行发送。
[0240]当从相机装置IlA发送的隐私保护信号PRS2在指向性控制装置3A的通信部31A处被接收时，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。而且，指向性控制装置3A的输出控制部35A使接收到从相机装置IlA发送的隐私保护信号PRS2的消息在显示器装置36上显示或闪烁，或者通过规定的警报音的声音输出向用户通知(参照图16(C))。
[0241]接下来，参照图17对本实施方式的指向性控制系统1A的接收到隐私保护信号之后的动作顺序进行说明。图17是说明第二实施方式的指向性控制系统1A的接收到隐私保护信号PRSl或PRS2时的动作顺序的流程图。
[0242]在图17中，在从隐私保护信号发送机7发送的隐私保护信号PRSl由指向性控制装置3A的外部信号接收部39接收到时(ST21为“是”)，或者从相机装置IlA发送的隐私保护信号PRS2由指向性控制装置3A的通信部3IA接收到时(ST21为“是”)，指向性控制装置3A的动作进入步骤ST22。
[0243]此外，为了简化图17的说明，说明指向性控制装置3A的外部信号接收部39接收到从隐私保护信号发送机7发送的隐私保护信号PRSl的情况，但是指向性控制装置3A的通信部31A接收到从相机装置IlA发送的隐私保护信号PRS2的情况也同样。
[0244]S卩，指向性控制装置3A的输出控制部35A将表示接收到隐私保护信号PRSl的隐私保护信标志设定为1，而且，将接收到隐私保护信号PRSl的时刻、即开始隐私保护的时刻(隐私保护开始时刻)存储在存储器38中(ST22)。输出控制部35A将由全方位麦克风阵列装置2收音的声音的声音数据、隐私保护信号标志(=I)及隐私保护开始时刻建立对应而存储在存储器38或记录器装置4中。
[0245]在接收到隐私保护信号时，输出控制部35A开始由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出控制、或者使全方位麦克风阵列装置2对声音的收音临时中止(ST22)。
[0246]在通过指向性控制装置3A的外部信号接收部39从隐私保护信号发送机7接收到用于解除隐私保护的隐私保护解除信号时(ST23为“是”)，指向性控制装置3A的动作进入步骤ST25。而且，即使在通过指向性控制装置3A的外部信号接收部39从隐私保护信号发送机7未接收到用于解除隐私保护的隐私保护解除信号时(ST23为“否”)，在将隐私保护信号标志设定为I起经过了规定时间时(ST24为“是”)，指向性控制装置3A的动作进入步骤 ST25。
[0247]S卩，在接收到隐私保护解除信号时，或者将隐私保护信号标志设定为I起经过了规定时间时，输出控制部35A将隐私保护信号标志设定为0，而且，将接收到隐私保护解除信号的时刻、即解除(结束)了隐私保护的时刻(隐私保护结束时刻)存储在存储器38中(ST25)。输出控制部35A将由全方位麦克风阵列装置2收音到的声音的声音数据、隐私保护信号标志(=O)、隐私保护结束时刻建立对应而存储在存储器38或记录器装置4中。
[0248]在接收到隐私保护解除信号时，或者将隐私保护信号标志设定为I起经过了规定时间时，输出控制部35A结束由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出控制，或者使全方位麦克风阵列装置2再次开始对声音的临时收音(ST25)。
[0249]接下来，关于本实施方式的指向性控制系统1A实时地对声音进行收音期间的动作顺序(参照图18、图20、图22)、例如在声音收音后对记录在记录器装置4中的声音文件进行再现时的动作顺序(参照图19、图21、图23)，参照各个附图进行说明。
[0250]图18是说明在第二实施方式的指向性控制系统1A实时地对声音进行收音期间根据是否接收到隐私保护信号PRS1、PRS2来切换声音的输出控制的动作顺序的流程图。图19是说明在对记录有第二实施方式的指向性控制系统1A的声音文件的声音数据进行再现时根据是否接收到隐私保护信号PRS1、PRS2来切换声音的输出控制的动作顺序的流程图。此外，在图18及图19中，在与图6所示的各步骤的动作的内容相同的情况下，标注同一步骤编号而省略或简化说明，对不同的内容进行说明。
[0251]在图18中，输出控制部35A使用步骤ST13中由全方位麦克风阵列装置2收音到的声音的声音数据，在指向方向(θ-、θΜν)上形成了指向性之后，参照存储器38或记录器装置4，来判定与实时收音的声音的声音数据建立了对应的隐私保护信号标志是否设定为1(ST31)。S卩，在步骤ST31中，在全方位麦克风阵列装置2实时地对声音进行收音时，输出控制部35A判定是否接收到隐私保护信号PRSl或PRS2。
[0252]在判定为隐私保护信号标志设定为I时(ST31为“是”)，输出控制部35A对步骤ST13中在指向方向(emh、emv)上形成了指向性的声音的输出进行控制(ST32)。而且，输出控制部35A对用户明示地通知接收到从隐私保护信号发送机7或相机装置IlA发送的隐私保护信号PRSl或PRS2 (ST32)。输出控制部35A将接收到隐私保护信号PRSl或PRS2的消息在显示器装置36上显示(参照图16(B)或图16(C))或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST32)。
[0253]另一方面，在判定为隐私保护信号标志未设定成I时(ST31为“否”)，输出控制部35A判定是否满足图6所示的步骤ST14、图8所示的步骤ST14’及图11所示的步骤ST14”中的任一步骤。在满足任一步骤时，输出控制部35A执行步骤ST32的处理。S卩，即使在通过全方位麦克风阵列装置2实时地对声音进行收音期间未接收到隐私保护信号的情况下，在声音位置A包含于隐私保护区域PRA内时，或者在收音时刻或录音时刻包含于隐私保护时间PRT内时，也与第一实施方式同样地，输出控制部35A对在步骤ST13中在指向方向(0Mh、0MAv)上形成了指向性的声音的输出进行控制。然而，在步骤ST14、步骤ST14’及步骤ST14”中的任一步骤都不满足时，输出控制部35A将在步骤ST13中在指向方向(Θ mh、θ MAv)上形成了指向性的声音从扬声器装置37原封不动地进行声音输出(ST16)。
[0254]另外，在步骤ST32之后，输出控制部35A判定与实时收音的声音的声音数据建立了对应的隐私保护信号标志是否设定为O (ST33)。即，在步骤ST33中，全方位麦克风阵列装置2在实时地对声音进行收音时，输出控制部35A判定是否接收到隐私保护解除信号，或者从接收到隐私保护信号PRSl或PRS2起是否经过了规定时间。
[0255]在判定为隐私保护信号标志设定为O时(ST33为“是”)，结束步骤ST32的处理(ST34)，然后，输出控制部35A将步骤ST13中在指向方向(Θ mh、θ Mv)上形成了指向性的声音从扬声器装置37原封不动地进行声音输出(ST16)。另一方面,在判定为隐私保护信号标志未设定为O时(ST33为“否”)，继续步骤ST32的处理。通过以上，图18所示的指向性控制系统1A的动作的说明结束。
[0256]接下来，在图19中，例如当进行记录于记录器装置4的再现对象的声音文件的再现操作来作为用户的输入操作时(ST41)，按照图6所示的步骤ST11、步骤ST12及步骤ST13的顺序执行各处理。然后，指向性控制装置3Α的输出控制部35Α判定隐私保护开始时刻及隐私保护结束时刻的数据是否与声音文件的声音数据建立了对应(ST42)。S卩，在步骤ST42中，在声音文件的声音由全方位麦克风阵列装置2进行收音的期间,输出控制部35Α判定是否接收到隐私保护信号PRSl或PRS2。
[0257]在判定为将隐私保护开始时刻及隐私保护结束时刻的数据与声音文件的声音数据建立了对应时(ST42为“是”)，输出控制部35Α优先执行步骤ST45的处理(ST45)。关于步骤ST45的处理内容，在后文叙述。
[0258]另一方面，在判定为隐私保护开始时刻及隐私保护结束时刻的数据与声音文件的声音数据未建立对应时(ST42为“否”),与第一实施方式同样地，输出控制部35A判定声音文件的声音数据的录音时刻是否包含在规定的隐私保护时间PRT内(ST44)。在判定为声音文件的声音数据的录音时刻包含于规定的隐私保护时间PRT内时(ST44为“是”)，输出控制部35A执行步骤ST45的处理。在判定为声音文件的声音数据的录音时刻未包含于规定的隐私保护时间PRT内时(ST44为“否”)，输出控制部35A将步骤ST13中在指向方向(Θ mh、0mv)上形成了指向性的声音原封不动地从扬声器装置37输出(ST16)。
[0259]在步骤ST45中，输出控制部35A对步骤ST13中在指向方向(Θ Mh、θ Mv)上形成了指向性的声音的输出进行控制，而且对用户明示地通知接收到隐私保护信号PRSl或PRS2、或者录音时刻包含于隐私保护时间PRT内(ST45)。输出控制部35Α将例如接收到隐私保护信号PRSl或PRS2的消息在显示器装置36上显示(参照图16(B)或图16(C))或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST45)。
[0260]另外，在步骤ST45之后，输出控制部35Α判定录音时刻是否成为隐私保护时间PRT之外或隐私保护结束时刻以后(ST46)。S卩，在步骤ST46中，输出控制部35Α判定:在声音文件的再现期间，规定的隐私保护时间PRT是否结束，是否接收到隐私保护解除信号，或者从接收到隐私保护信号PRSl或PRS2起是否经过了规定时间。
[0261]在判定为录音时刻成为了隐私保护时间PRT之外或隐私保护结束时刻以后时(ST46为“是”)，输出控制部35Α结束步骤ST45的处理(ST47)，然后，将步骤ST13中在指向方向(θ MAh、θ MAV)上形成了指向性的声音从扬声器装置37原封不动地进行声音输出(ST16)。另一方面，在判定为录音时刻不是隐私保护时间PRT之外及隐私保护结束时刻以后时(ST46为“否”)，继续步骤ST45的处理。通过以上，图19所示的指向性控制系统1A的动作的说明结束。
[0262]图20是说明在第二实施方式的指向性控制系统实时地对声音进行收音期间根据是否接收到隐私保护信号来切换声音的输出控制的动作顺序的另一例的流程图。在图20所示的流程图的说明中，对于与图18所示的流程图的说明不同的内容进行说明，省略或简化同样的内容的说明。
[0263]图20所示的流程图与图18所示的流程图的主要区别是步骤ST13的指向性的形成处理的执行时机。即，在图20中，步骤ST13的指向性的形成处理是在步骤ST14、步骤ST14’及步骤ST14”中的任一步骤均不满足时而进行的。
[0264]另一方面，在步骤ST31中判定为隐私保护信号标志设定为I时(ST31为“是”)，输出控制部35A以未在指向方向(Θ _、Θ mv)上形成指向性的状态来对由全方位麦克风阵列装置2收音到的声音的输出进行控制(ST32’)。而且，输出控制部35A对用户明示地通知接收到从隐私保护信号发送机7或相机装置IlA发送的隐私保护信号PRSl或PRS2 (ST32’)。输出控制部35A将接收到隐私保护信号PRSl或PRS2的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST32’ )。
[0265]另外，在步骤ST32’之后，输出控制部35A判定与实时收音的声音的声音数据建立了对应的隐私保护信号标志是否设定为O (ST33)。即，在步骤ST33中，在全方位麦克风阵列装置2实时地对声音进行收音时，输出控制部35A判定是否接收到隐私保护解除信号，或者从接收到隐私保护信号PRSl或PRS2起是否经过了规定时间。
[0266]在判定为隐私保护信号标志设定为O时(ST33为“是”)，输出控制部35A结束步骤ST32’的处理(ST34’)，然后，使用由全方位麦克风阵列装置2收音到的声音的声音数据，将指向性形成为指向方向(Θ Mh、Θ mv) (ST13)，将形成有指向性的声音从扬声器装置37原封不动地进行声音输出(ST16)。通过以上，图20所示的指向性控制系统1A的动作的说明结束。
[0267]图21是说明在对记录有第二实施方式的指向性控制系统的声音文件的声音数据进行再现时根据是否接收到隐私保护信号来切换声音的输出控制的动作顺序的另一例的流程图。在图21所示的流程图的说明中，说明与图19所示的流程图的说明不同的内容，省略或简化同样的内容的说明。
[0268]图21所示的流程图与图19所示的流程图的主要区别是步骤STll?步骤ST13的各处理的执行时机。即，在图21中，步骤STll?步骤ST13的各处理是在步骤ST44中判定为声音文件的声音数据的录音时刻未包含于隐私保护时间PRT内时而进行的。
[0269]另一方面，在判定为将隐私保护开始时刻及隐私保护结束时刻的数据与声音文件的声音数据建立了对应时(ST42为“是”)，输出控制部35A优先执行步骤ST45’的处理(ST45’)。关于步骤ST45’的处理内容在后文叙述。
[0270]另一方面，在判定为隐私保护开始时刻及隐私保护结束时刻的数据与声音文件的声音数据未建立对应时(ST42为“否”),与第一实施方式同样地，输出控制部35A判定声音文件的声音数据的录音时刻是否包含于规定的隐私保护时间PRT内(ST44)。在判定为声音文件的声音的录音时刻包含于规定的隐私保护时间PRT内时(ST44为“是”)，输出控制部35A执行步骤ST45’的处理。在判定为声音文件的声音的录音时刻未包含于规定的隐私保护时间PRT内时(ST44为“否”)，输出控制部35A经由操作部32接受显示器装置36所显示的从影像数据之中的任意指定位置A’的指定(STll)。省略步骤STll?步骤ST13的各处理的内容的说明。
[0271]在步骤ST45’中，输出控制部35A以未在指向方向(Θ mh、Θ J上形成指向性的状态来对由全方位麦克风阵列装置2收音到的声音的输出进行控制，而且，对用户明示地通知接收到隐私保护信号PRSl或PRS2、或者录音时刻包含于隐私保护时间PRT内(ST45’ )。输出控制部35A例如将接收到隐私保护信号PRSl或隐私保护信号PRS2的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST45’ )。
[0272]另外，在步骤ST45’之后，输出控制部35A判定录音时刻是否成为隐私保护时间PRT之外或隐私保护结束时刻以后(ST46)。S卩，在步骤ST46中，输出控制部35A判定:在声音文件的再现期间，规定的隐私保护时间PRT是否结束，是否接收到隐私保护解除信号，或者从接收到隐私保护信号PRSl或PRS2起是否经过了规定时间。
[0273]在判定为录音时刻成为隐私保护时间PRT之外或隐私保护结束时刻以后时(ST46为“是”)，输出控制部35A结束步骤ST45’的处理(ST47’)，然后，执行步骤STll以后的处理。另一方面，在判定为录音时刻不是隐私保护时间PRT之外及隐私保护结束时刻以后时(ST46为“否”)，继续步骤ST45’的处理。通过以上，图21所示的指向性控制系统1A的动作的说明结束。
[0274]图22是说明在第二实施方式的指向性控制系统实时地对声音进行收音期间根据是否接收到隐私保护信号来切换声音的收音处理的继续或中止的动作顺序的流程图。在图22所示的流程图的说明中，说明与图18所示的流程图的说明不同的内容，省略或简化同样的内容的说明。
[0275]图22所示的流程图与图18所示的流程图的主要区别是步骤STll?步骤ST13的各处理的执行时机。即，在图22中，步骤STll?步骤ST13的各处理是在步骤ST31中判定为隐私保护信号标志未设定为I时而进行的。
[0276]另一方面，在判定为隐私保护信号标志设定为I时(ST31为“是”)，输出控制部35A使全方位麦克风阵列装置2对声音的收音临时中止(ST32”)。而且，输出控制部35A对用户明示地通知接收到从隐私保护信号发送机7或相机装置IlA发送的隐私保护信号PRSl或PRS2 (ST32”)。输出控制部35A将接收到隐私保护信号PRSl或PRS2的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST32”)。
[0277]另外，在步骤ST32”之后，输出控制部35A判定与实时收音的声音的声音数据建立了对应的隐私保护信号标志是否设定为O (ST33)。即，在步骤ST33中，在全方位麦克风阵列装置2实时地对声音进行收音时，输出控制部35A判定是否接收到隐私保护解除信号，或者从接收隐私保护信号PRSl或PRS2起是否经过了规定时间。
[0278]在判定为隐私保护信号标志设定为O时(ST33为“是”)，输出控制部35A结束步骤ST32”的处理而使全方位麦克风阵列装置2再次开始对声音的收音(ST34”)。然后，输出控制部35A经由操作部32接受从显示器装置36所显示的影像数据之中对任意指定位置A’的指定(ST11)。省略步骤STll?步骤ST13的各处理的内容的说明。此外，在步骤ST13之后，进行是否满足图18所示的步骤ST14、步骤ST14’及步骤ST14”中的任一步骤的判定处理，在满足任一步骤时，执行步骤ST32”的处理。通过以上，图22所示的指向性控制系统1A的动作的说明结束。
[0279]图23是说明在对记录有第二实施方式的指向性控制系统的声音文件的声音数据进行再现时根据是否接收到隐私保护信号来切换声音的收音处理的继续或中止的动作顺序的流程图。在图23所示的流程图的说明中，说明与图19所示的流程图的说明不同的内容，省略或简化同样的内容的说明。
[0280]图23所示的流程图与图19所示的流程图的主要区别是步骤STll?步骤ST13的各处理的执行时机。即，在图23中，步骤STll?步骤ST13的各处理是在步骤ST44中判定为录音时刻未包含于隐私保护时间PRT内时而进行的。
[0281]另一方面，在判定为录音时刻包含于隐私保护时间PRT内时(ST44为“是”)，或者判定为隐私保护开始时刻及隐私保护结束时刻的数据与声音文件的声音数据建立了对应时(S42为“是”)，输出控制部35A使全方位麦克风阵列装置2对声音的收音临时中止(ST45”)。而且，输出控制部35A对用户明示地通知接收到隐私保护信号PRSl或PRS2、或者录音时刻包含于隐私保护时间PRT内(ST45”)。输出控制部35A例如将接收到隐私保护信号PRSl或PRS2的消息在显示器装置36上显示或闪烁，或者从扬声器装置37将规定的警报音进行声音输出(ST45”)。
[0282]另外，在步骤ST45”之后，输出控制部35A判定录音时刻是否成为隐私保护时间PRT之外或隐私保护结束时刻以后(ST46)。即，在步骤ST46中，输出控制部35A判定:在声音文件的再现期间，规定的隐私保护时间PRT是否结束，是否接收到隐私保护解除信号，或者从接收隐私保护信号PRSl或PRS2起是否经过了规定时间。
[0283]在判定为录音时刻成为了隐私保护时间PRT之外或隐私保护结束时刻以后时(ST46为“是”)，输出控制部35A结束步骤ST45”的处理(ST47”)，然后，经由操作部32接受从显示器装置36所显示的影像数据之中对任意指定位置A’的指定(STll)。省略步骤ST11?步骤ST13的各处理的内容的说明。在步骤ST13之后，输出控制部35A使在指向方向(θ MAh、θ MAv)上形成了指向性的声音从扬声器装置37原封不动地进行声音输出(ST16)。另一方面，在判定为录音时刻不是隐私保护时间PRT之外或隐私保护结束时刻以后时(ST46为“否”)，继续步骤ST45”的处理。通过以上，图23所示的指向性控制系统1A的动作的说明结束。
[0284]通过以上，在本实施方式的指向性控制系统1A中，指向性控制装置3A的外部信号接收部39接收从作为外部设备的隐私保护信号发送机7发送的隐私保护信号PRSl。当接收到从隐私保护信号发送机7发送的隐私保护信号PRSl时，优先于声音位置A是否包含于隐私保护区域PRA内的判定结果、或者收音时刻或录音时刻是否包含于隐私保护时间PRT内的判定结果地，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者使全方位麦克风阵列装置2对声音的收音临时中止。
[0285]由此，在指向性控制系统1A中，当接收到例如通过相机装置IlA的作为被拍摄体的人的操作而从隐私保护信号发送机7发送的隐私保护信号PRSl时，即使在例如作为被拍摄体的人所处的位置未预先设定于隐私保护区域PRA内的情况下、或者收音时刻或录音时刻未包含于隐私保护时间PRT内的情况下，也与包含于隐私保护区域PRA的情况、或者收音时刻或录音时刻未包含于隐私保护时间PRT内的情况同样地，指向性控制装置3A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音，例如能够避免向除参与者以外的第三者泄漏信息。
[0286]另外，指向性控制装置3A的外部信号接收部39接收从隐私保护信号发送机7发送的用于解除隐私保护信号的内容的隐私保护解除信号。在接收到隐私保护解除信号时，或者从接收到隐私保护信号起经过了规定期间时，指向性控制装置3A的输出控制部35A结束由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出控制，或者使全方位麦克风阵列装置2再次开始对声音的收音。
[0287]由此，在指向性控制系统1A中，例如在接收到通过用户的使用了隐私保护信号发送机7的操作而从隐私保护信号发送机7发送的隐私保护解除信号时，或者从接收到隐私保护信号起经过了规定期间时，指向性控制装置3A能够输出例如使用了隐匿性高的信息的谈话结束之后的闲谈内容等、可以被除参与者以外的第三者听见的谈话内容的声音。
[0288]以下，说明上述的本发明的指向性控制系统及声音输出控制方法的结构、作用及效果。
[0289]本发明的一实施方式涉及一种指向性控制系统，具备:拍摄影像的至少一个摄像部；对声音进行收音的收音部；显示部，对由所述至少一个摄像部拍摄到的影像数据进行显示；指向方向算出部，根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；及控制部，在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；在判定为所述声音位置包含于预先设定的保护区域时，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0290]在上述的结构中，指向性控制装置3的指向方向算出部34根据显示器装置36所显示的影像数据的用户进行的任意的指定位置A’的指定，算出从全方位麦克风阵列装置2朝向与指定位置A’对应的声音位置A的指向方向。指向性控制装置3的输出控制部35在所算出的指向方向上形成由全方位麦克风阵列装置2收音到的声音的指向性。而且，在判定为声音位置A包含于预先设定的隐私保护区域PRA时,输出控制部35对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0291]由此，在指向性控制系统10中，指向性控制装置3能够在从全方位麦克风阵列装置2朝向与指定位置A’对应的声音位置A的指向方向上形成指向性，而且，例如通过用户的输入操作而指定的声音位置A处于规定的隐私保护区域PRA时，能够对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者中止全方位麦克风阵列装置2对声音的收曰?
[0292]因此，在相机装置11所拍摄的被拍摄体的影像数据中，例如作为被拍摄体的人使用隐匿性高的信息进行谈话的情况下，在判定为该人谈话的空间位置(声音位置A)在从全方位麦克风阵列装置2观察下包含于隐私保护区域的情况下，指向性控制装置3能够执行对使用了隐匿性高的信息的谈话的声音的输出的抑制或者执行声音的声音变换，或者能够中止对声音的收音，例如能够避免向除参与者以外的第三者泄漏信息或者使得难以确定谁在谈话，或者能够避免有可能获得某些证据的谈话自身的记录。
[0293]本发明的一实施方式涉及一种指向性控制系统，具备:拍摄影像的至少一个摄像部；对声音进行收音的收音部；记录部，对由所述收音部收音到的声音进行录音；显示部，对由所述至少一个摄像部拍摄到的影像数据进行显示；指向方向算出部，根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；控制部，在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；在判定为所述收音部的收音时刻或所述记录部的录音时刻包含于预先设定的保护时间时，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0294]在上述的结构中，指向性控制装置3的指向方向算出部34根据显示器装置36所显示的影像数据的用户进行的任意的指定位置A’的指定，算出从全方位麦克风阵列装置2朝向与指定位置A’对应的声音位置A的指向方向。指向性控制装置3的输出控制部35在算出的指向方向上形成由全方位麦克风阵列装置2收音到的声音的指向性。而且，在判定为全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含于预先设定的隐私保护时间PRT时，输出控制部35对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0295]由此，在指向性控制系统10中，指向性控制装置3能够在从全方位麦克风阵列装置2朝向声音位置A的指向方向上形成指向性，而且，例如通过用户的输入操作而开始的全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻处于规定的隐私保护时间PRT内时，能够对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者中止全方位麦克风阵列装置2对声音的收音。
[0296]因此，在相机装置11拍摄的被拍摄体的影像数据中，例如作为被拍摄体的人使用隐匿性高的信息进行谈话的情况下，在判定为该人谈话的声音的收音时刻或录音时刻包含于隐私保护时间PRT内的情况下，指向性控制装置3能够执行对使用了隐匿性高的信息的谈话的声音的输出的抑制或者声音的声音变换，或者能够中止对声音的收音，例如能够避免向除参与者以外的第三者泄漏信息或者使得难以确定谁在谈话，或者能够避免有可能获得某些证据的谈话自身的记录。
[0297]另外，本发明的一实施方式的指向性控制系统中，所述控制部对与所指定的所述影像数据的指定位置对应的声音位置包含于所述保护区域这一情况进行通知。
[0298]在上述的结构中，指向性控制装置3的输出控制部35向用户通知例如根据用户的输入操作而指定的指定位置A’所对应的声音位置A包含于隐私保护区域PRA，因此能够使用户明确地认知声音位置A包含于隐私保护区域PRA。
[0299]另外，本发明的一实施方式的指向性控制系统中，所述控制部对所述收音部的收音时刻或所述记录部的录音时刻包含于所述保护时间这一情况进行通知。
[0300]在上述的结构中，指向性控制装置3的输出控制部35向用户通知例如根据用户的输入操作而开始的全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含于隐私保护时间PRT内，因此能够使用户明确地认知谈话声音的收音时刻或录音时刻包含于隐私保护时间PRT内。
[0301]另外，本发明的一实施方式的指向性控制系统中，所述指向性控制系统还具备接收从外部设备发送的规定的第一保护信号的外部信号接收部，在接收到所述第一保护信号时，优先于所述声音位置是否包含于所述保护区域的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0302]在上述的结构中，指向性控制装置3A的外部信号接收部39接收从作为外部设备的隐私保护信号发送机7发送的隐私保护信号PRSl。当接收到从隐私保护信号发送机7发送的隐私保护信号PRSl时，优先于声音位置是否包含于隐私保护区域PRA的判定结果地，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0303]由此，在指向性控制系统1A中，当接收到例如通过相机装置IlA的作为被拍摄体的人的操作而从隐私保护信号发送机7发送的隐私保护信号PRSl时，即使在例如作为被拍摄体的人所处的位置(声音位置)未预先设定于隐私保护区域PRA的情况下，也与包含于隐私保护区域PRA的情况同样地，指向性控制装置3A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者能够中止全方位麦克风阵列装置2对声音的收音，能够避免例如向除参与者以外的第三者泄漏信息。
[0304]另外，本发明的一实施方式的指向性控制系统中，所述指向性控制系统还具备接收从外部设备发送的规定的第一保护信号的外部信号接收部，在接收到所述第一保护信号时，优先于所述收音部的收音时刻或所述记录部的录音时刻是否包含于所述保护时间的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0305]在上述的结构中，指向性控制装置3A的外部信号接收部39接收从作为外部设备的隐私保护信号发送机7发送的隐私保护信号PRSl。当接收到从隐私保护信号发送机7发送的隐私保护信号PRSl时，优先于收音时刻或录音时刻是否包含于隐私保护时间PRT内的判定结果地，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0306]由此，在指向性控制系统1A中，当接收到例如通过相机装置IlA的作为被拍摄体的人的操作而从隐私保护信号发送机7发送的隐私保护信号PRSl时，即使在例如作为被拍摄体的人的谈话声音的收音时刻或录音时刻未预先设定为隐私保护时间PRT的情况下，也与包含于隐私保护时间PRT内的情况同样地，指向性控制装置3A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者能够中止全方位麦克风阵列装置2对声音的收音，能够避免例如向除参与者以外的第三者泄漏信息。
[0307]另外，本发明的一实施方式的指向性控制系统中，所述控制部对从所述外部设备接收到所述第一保护信号这一情况进行通知。
[0308]在上述的结构中，指向性控制装置3的输出控制部35A能够使用户明确地认知接收到从隐私保护信号发送机7发送的隐私保护信号。
[0309]另外，本发明的一实施方式的指向性控制系统中，所述控制部在接收到从所述外部设备发送的将所述第一保护信号解除的规定的第一隐私保护解除信号时，或者从接收到所述第一保护信号起经过了第一规定时间时，结束由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出控制，或者使所述收音部再次开始对声音的收曰?
[0310]在上述的结构中，指向性控制装置3A的外部信号接收部39接收从隐私保护信号发送机7发送的用于将隐私保护信号的内容解除的隐私保护解除信号。在接收到隐私保护解除信号时，或者从接收到隐私保护信号起经过了第一规定期间时，指向性控制装置3A的输出控制部35A结束由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出抑制，或者使全方位麦克风阵列装置2再次开始对声音的收音。
[0311]由此，在指向性控制系统1A中，例如接收到通过用户的使用了隐私保护信号发送机7的操作而从隐私保护信号发送机7发送的隐私保护解除信号时，或者从接收到隐私保护信号起经过了第一规定期间时，指向性控制装置3A能够输出例如使用了隐匿性高的信息的谈话结束之后的闲谈内容等、可以被除参与者以外的第三者听见的谈话内容的声曰?
[0312]另外，本发明的一实施方式的指向性控制系统中，所述指向性控制系统还具备接收从所述至少一个摄像部发送的规定的第二保护信号的通信部，在接收到所述第二保护信号时，优先于所述声音位置是否包含于所述保护区域的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0313]在上述的结构中，指向性控制装置3A的通信部31A接收例如通过用户的遥控RM的操作而从相机装置11发送的隐私保护信号PRS2。当接收到从相机装置11发送的隐私保护信号PRS2时，优先于与所指定的指定位置A’对应的声音位置是否包含于隐私保护区域的判定结果地，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0314]由此，在指向性控制系统1A中，当接收到例如通过相机装置IlA的作为被拍摄体的人的遥控操作而从相机装置IlA发送的隐私保护信号PRS2时，即使在例如作为被拍摄体的人所处的位置(声音位置)未预先设定于隐私保护区域PRA的情况下，也与包含于隐私保护区域PRA的情况同样地，指向性控制装置3A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者能够中止全方位麦克风阵列装置2对声音的收音，能够避免例如向除参与者以外的第三者泄漏信息。
[0315]另外，本发明的一实施方式的指向性控制系统中，所述指向性控制系统还具备接收从所述至少一个摄像部发送的规定的第二保护信号的通信部，在接收到所述第二保护信号时，优先于所述收音部的收音时刻或所述记录部的录音时刻是否包含于所述保护时间的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0316]在上述的结构中，指向性控制装置3A的通信部31A接收例如通过用户的遥控RM的操作而从相机装置IlA发送的隐私保护信号PRS2。当接收到从相机装置IlA发送的隐私保护信号PRS2时，优先于收音时刻或录音时刻是否包含于隐私保护时间PRT内的判定结果地，指向性控制装置3A的输出控制部35A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0317]由此，在指向性控制系统1A中，当接收到例如通过相机装置IlA的作为被拍摄体的人的遥控操作而从相机装置IlA发送的隐私保护信号PRS2时，即使在例如作为被拍摄体的人的谈话声音的收音时刻或录音时刻未预先设定为隐私保护时间PRT的情况下，也与包含于隐私保护时间PRT内的情况同样地，指向性控制装置3A对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者能够中止全方位麦克风阵列装置2对声音的收音，能够避免例如向除参与者以外的第三者泄漏信息。
[0318]另外，本发明的一实施方式的指向性控制系统中，所述控制部对从所述至少一个摄像部接收到所述第二保护信号这一情况进行通知。
[0319]在上述的结构中，指向性控制装置3的输出控制部35A能够使用户明确地认知接收到从相机装置IlA发送的隐私保护信号。
[0320]另外，本发明的一实施方式的指向性控制系统中，在接收到从所述至少一个摄像部发送的将所述第二保护信号解除的规定的第二隐私保护解除信号时，或者从接收到所述第二保护信号起经过了第二规定时间时，所述控制部结束由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出控制，或者使所述收音部再次开始对声音的收音。
[0321]在上述的结构中，指向性控制装置3A的通信部31A接收从相机装置IlA发送的用于将隐私保护信号的内容解除的隐私保护解除信号。在接收到隐私保护解除信号时，或者从接收到隐私保护信号起经过了第二规定期间时，指向性控制装置3A的输出控制部35A结束由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出抑制，或者使全方位麦克风阵列装置2再次开始对声音的收音。
[0322]由此，在指向性控制系统1A中，例如在接收到通过用户的使用了遥控RM的操作而从相机装置IlA发送的隐私保护解除信号时，或者从接收到隐私保护信号起经过了第二规定期间时，指向性控制装置3A能够输出例如使用了隐匿性高的信息的谈话结束之后的闲谈内容等、可以使除参与者以外的第三者听见的谈话内容的声音。
[0323]另外，本发明的一实施方式的指向性控制系统中，所述控制部对由所述收音部收音到的声音的声音数据或由所述收音部收音并形成了所述指向性的声音的声音数据进行静噪处理、掩蔽处理或声音变换处理，由此对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制。
[0324]在上述的结构中，指向性控制装置3A的输出控制部35A能够对由全方位麦克风阵列装置2收音到的声音进行静噪处理、掩蔽处理或声音变换处理，由此对由全方位麦克风阵列装置2收音到的声音或形成了指向性的声音的输出进行抑制，或者使得难以确定由全方位麦克风阵列装置2收音到的声音或形成了指向性的声音是谁的声音。
[0325]另外，本发明的一实施方式的指向性控制系统中，所述控制部使与所指定的所述影像数据的指定位置对应的声音位置包含于所述保护区域这一情况通过在所述显示部上显示或闪烁，或者输出规定的警报音来进行通知。
[0326]在上述的结构中，指向性控制装置3的输出控制部35例如使通过用户的输入操作而指定的影像数据的指定位置A’所对应的声音位置A包含于隐私保护区域PRA这一情况在显示器装置36上显示或闪烁，或者将规定的警报音输出，由此能够使用户明确地认知。
[0327]另外，本发明的一实施方式的指向性控制系统中，所述控制部使所述收音部的收音时刻或所述记录部的录音时刻包含于所述保护时间这一情况通过在所述显示部上显示或闪烁，或者输出规定的警报音来进行通知。
[0328]在上述的结构中，指向性控制装置3的输出控制部35例如使通过用户的输入操作而开始的全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含于隐私保护时间PRT内这一情况在显示器装置36上显示或闪烁，或者将规定的警报音输出，由此能够让用户明确地认知。
[0329]另外，本发明的一实施方式涉及一种声音输出控制方法，是包括拍摄影像的至少一个摄像部和对声音进行收音的收音部的指向性控制系统的声音输出控制方法，所述声音输出控制方法具有如下步骤:对由所述至少一个摄像部拍摄到的影像数据进行显示；根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；判定所述声音位置是否包含于预先设定的保护区域；在判定为所述声音位置包含于所述保护区域时，对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
[0330]在上述的方法中，指向性控制装置3的指向方向算出部34根据显示器装置36所显示的影像数据的用户进行的任意的指定位置A’的指定，算出从全方位麦克风阵列装置2朝向与指定位置A’对应的声音位置A的指向方向。指向性控制装置3的输出控制部35在所算出的指向方向上形成由全方位麦克风阵列装置2收音到的声音的指向性。而且，在判定为声音位置A包含于预先设定的隐私保护区域PRA时,输出控制部35对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0331]由此，在指向性控制系统10中，指向性控制装置3能够在从全方位麦克风阵列装置2朝向所指定的声音位置A的指向方向上形成指向性，而且，例如通过用户的输入操作而指定的声音位置A处于规定的隐私保护区域PRA时，能够对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者中止全方位麦克风阵列装置2对声音的收音。
[0332]因此，在相机装置11所拍摄的被拍摄体的影像数据中，例如作为被拍摄体的人使用隐匿性高的信息进行谈话的情况下，在判定为该人谈话的空间位置(声音位置A)在从全方位麦克风阵列装置2观察下包含于隐私保护区域的情况下，指向性控制装置3能够执行对使用了隐匿性高的信息的谈话的声音的输出的抑制或者声音的声音变换，或者能够中止对声音的收音，例如能够避免向除参与者以外的第三者泄漏信息或者使得难以确定谁在谈话，或者能够避免有可能获得某些证据的谈话自身的记录。
[0333]另外，本发明的一实施方式涉及一种声音输出控制方法，是包括拍摄影像的至少一个摄像部、对声音进行收音的收音部、对由所述收音部收音到的声音进行录音的记录部的指向性控制系统的声音输出控制方法，所述声音输出控制方法具有如下步骤:对由所述至少一个摄像部拍摄到的影像数据进行显示；根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性；判定所述收音部的收音时刻或所述记录部的录音时刻是否包含于预先设定的保护时间；在判定为所述收音时刻或所述录音时刻包含于所述保护时间时，对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收曰?
[0334]在上述的方法中，指向性控制装置3的指向方向算出部34根据显示器装置36所显示的影像数据的用户进行的任意的指定位置A’的指定，算出从全方位麦克风阵列装置2朝向与指定位置A’对应的声音位置A的指向方向。指向性控制装置3的输出控制部35在算出的指向方向上形成由全方位麦克风阵列装置2收音到的声音的指向性。而且，在判定为全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻包含于预先设定的隐私保护时间PRT时，输出控制部35对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制，或者中止全方位麦克风阵列装置2对声音的收音。
[0335]由此，在指向性控制系统10中，指向性控制装置3在从全方位麦克风阵列装置2朝向所指定的声音位置A的指向方向上能够形成指向性，而且，例如通过用户的输入操作而开始的全方位麦克风阵列装置2的收音时刻或记录器装置4的录音时刻为规定的隐私保护时间PRT内时，能够对由全方位麦克风阵列装置2收音到的声音或由全方位麦克风阵列装置2收音并形成了指向性的声音的输出进行控制(例如抑制处理或声音变换处理)，或者中止全方位麦克风阵列装置2对声音的收音。
[0336]因此，在相机装置11所拍摄的被拍摄体的影像数据中，例如作为被拍摄体的人使用隐匿性高的信息进行谈话的情况下，在判定为该人谈话的声音的收音时刻或录音时刻包含于隐私保护时间PRT内的情况下，指向性控制装置3能够执行对使用了隐匿性高的信息的谈话的声音的输出的抑制或者执行声音的声音变换，或者能够中止对声音的收音，例如能够避免向除参与者以外的第三者泄漏信息或者使得难以确定谁在谈话，或者能够避免有可能获得某些证据的谈话自身的记录。
[0337]以上，参照附图，说明了各种实施方式，但是本发明当然并未限定为上述例子。只要是本领域技术人员，在权利要求书记载的范畴内，能想到各种变更例或修正例，这是不言而喻的，关于这些当然也属于本发明的技术范围。
[0338]工业实用性
[0339]本发明作为中，在从麦克风阵列装置朝向所指定的声音位置的指向方向上形成所收音到的声音的指向性，在所指定的声音位置处于规定的隐私保护区域时，或者在收音时刻或录音时刻处于规定的隐私保护时间内时，对由麦克风阵列装置收音到的声音或收音并形成了指向性的声音的输出进行控制，或者中止对声音的收音，作为这样的指向性控制系统及声音输出控制方法是有用的。
[0340]附图标记说明
[0341]2、2A、2B、2C、2D全方位麦克风阵列装置
[0342]3、3A指向性控制装置
[0343]4记录器装置
[0344]7隐私保护信号发送机
[0345]10U0A指向性控制系统
[0346]IlUnUlAUnA 相机装置
[0347]26加法运算部
[0348]3U31A 通信部
[0349]32操作部
[0350]33、33A信号处理部
[0351]34指向方向算出部
[0352]35、35A输出控制部
[0353]36显示器装置
[0354]37扬声器装置
[0355]38存储器
[0356]39外部信号接收部
[0357]241、242、243、24(n-l)、24n A/D 转换器
[0358]251、252、253、25(n-l)、25n 延迟器。
【权利要求】
1.一种指向性控制系统，具备: 拍摄影像的至少一个摄像部； 对声音进行收音的收音部； 显示部，对由所述至少一个摄像部拍摄的影像数据进行显示； 指向方向算出部，根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向；及 控制部，在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性， 在判定为所述声音位置包含于预先设定的保护区域时，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
2.一种指向性控制系统，具备: 拍摄影像的至少一个摄像部； 对声音进行收音的收音部； 记录部，对由所述收音部收音到的声音进行录音； 显示部，对由所述至少一个摄像部拍摄到的影像数据进行显示； 指向方向算出部，根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向； 控制部，在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性，在判定为所述收音部的收音时刻或所述记录部的录音时刻包含于预先设定的保护时间时，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
3.根据权利要求1所述的指向性控制系统，其中， 所述控制部对与所指定的所述影像数据的指定位置对应的声音位置包含于所述保护区域这一情况进行通知。
4.根据权利要求2所述的指向性控制系统，其中， 所述控制部对所述收音部的收音时刻或所述记录部的录音时刻包含于所述保护时间这一情况进行通知。
5.根据权利要求1所述的指向性控制系统，其中， 所述指向性控制系统还具备接收从外部设备发送的规定的第一保护信号的外部信号接收部， 在接收到所述第一保护信号时，优先于所述声音位置是否包含于所述保护区域的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
6.根据权利要求2所述的指向性控制系统，其中， 所述指向性控制系统还具备接收从外部设备发送的规定的第一保护信号的外部信号接收部， 在接收到所述第一保护信号时，优先于所述收音部的收音时刻或所述记录部的录音时刻是否包含于所述保护时间的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
7.根据权利要求5或6所述的指向性控制系统，其中， 所述控制部对从所述外部设备接收到所述第一保护信号这一情况进行通知。
8.根据权利要求5或6所述的指向性控制系统，其中， 在接收到从所述外部设备发送的将所述第一保护信号解除的规定的第一隐私保护解除信号时，或者从接收到所述第一保护信号起经过了第一规定时间时，所述控制部结束由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出控制，或者使所述收音部再次开始对声音的收音。
9.根据权利要求1所述的指向性控制系统，其中， 所述指向性控制系统还具备接收从所述至少一个摄像部发送的规定的第二保护信号的通信部， 在接收到所述第二保护信号时，优先于所述声音位置是否包含于所述保护区域的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
10.根据权利要求2所述的指向性控制系统，其中， 所述指向性控制系统还具备接收从所述至少一个摄像部发送的规定的第二保护信号的通信部， 在接收到所述第二保护信号时，优先于所述收音部的收音时刻或所述记录部的录音时刻是否包含于所述保护时间的判定结果地，所述控制部对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
11.根据权利要求9或10所述的指向性控制系统，其中， 所述控制部对从所述至少一个摄像部接收到所述第二保护信号这一情况进行通知。
12.根据权利要求9或10所述的指向性控制系统，其中， 在接收到从所述至少一个摄像部发送的将所述第二保护信号解除的规定的第二隐私保护解除信号时，或者从接收到所述第二保护信号起经过了第二规定时间时，所述控制部结束由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出控制，或者使所述收音部再次开始对声音的收音。
13.根据权利要求1或2所述的指向性控制系统，其中， 所述控制部对由所述收音部收音到的声音的声音数据或由所述收音部收音并形成了所述指向性的声音的声音数据进行静噪处理、掩蔽处理或声音变换处理，由此对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制。
14.根据权利要求1所述的指向性控制系统，其中， 对于与所指定的所述影像数据的指定位置对应的声音位置包含于所述保护区域这一情况，所述控制部通过在所述显示部上进行显示或闪烁、或者输出规定的警报音来进行通知。
15.根据权利要求2所述的指向性控制系统，其中， 对于所述收音部的收音时刻或所述记录部的录音时刻包含于所述保护时间这一情况，所述控制部通过在所述显示部上进行显示或闪烁、或者输出规定的警报音来进行通知。
16.一种声音输出控制方法，是包括拍摄影像的至少一个摄像部和对声音进行收音的收音部的指向性控制系统的声音输出控制方法，所述声音输出控制方法具有如下步骤: 对由所述至少一个摄像部拍摄的影像数据进行显示； 根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向； 在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性； 判定所述声音位置是否包含于预先设定的保护区域；及 在判定为所述声音位置包含于所述保护区域时，对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
17.一种声音输出控制方法，是包括拍摄影像的至少一个摄像部、对声音进行收音的收音部和对由所述收音部收音到的声音进行录音的记录部的指向性控制系统的声音输出控制方法，所述声音输出控制方法具有如下步骤: 对由所述至少一个摄像部拍摄的影像数据进行显示； 根据所显示的所述影像数据的任意的位置指定，算出从所述收音部朝向与所指定的所述影像数据的指定位置对应的声音位置的指向方向； 在所算出的所述指向方向上对于由所述收音部收音到的声音形成指向性； 判定所述收音部的收音时刻或所述记录部的录音时刻是否包含于预先设定的保护时间；及 在判定为所述收音时刻或所述录音时刻包含于所述保护时间时，对由所述收音部收音到的声音或由所述收音部收音并形成了所述指向性的声音的输出进行控制，或者中止所述收音部对声音的收音。
【文档编号】H04N7/18GK104243779SQ201410287673
【公开日】2014年12月24日 申请日期:2014年6月24日 优先权日:2013年6月24日
【发明者】重永信一, 泽裕隆, 林和典, 德田肇道, 吉国信太郎, 篠崎浩介 申请人:松下电器产业株式会社