267] 由此，声音处理系统能够通过信号处理部，来对在从麦克风阵列朝向与一个W上 的指定部位对应的位置的指向方向上形成了指向性的声音数据进行声音输出。
[026引另外，本发明的一种实施方式设及一种声音处理系统，其中，所述摄像部是全方位 摄像机，所述信号处理部根据在通过所述全方位摄像机进行摄像得到的所述影像数据被显 示于所述显示部的期间内被指定的所述一个W上的指定部位，对包括所述一个W上的指定 部位的影像数据的坐标系进行图像转换，所述重放部将所述图像转换后的影像数据显示于 所述显示部，对强调了从所述收音部朝向与所述一个w上的指定部位对应的位置的指向方 向的声音而得到的声音数据进行声音输出。
[0269] 根据该结构，声音处理系统能够容易地进行用于将通过全方位摄像机进行摄像得 到的影像数据中的被摄体的位置、与通过麦克风阵列收集的作为被摄体的人物的声音的方 向对应起来的坐标系的转换处理，能够减轻当在重放部中对通过摄像机进行摄像得到的影 像数据与在朝向与一个W上的指定部位对应的位置的指向方向上形成了指向性的声音数 据进行同步重放处理的情况下的处理负荷。
[0270] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述摄像部与所述收 音部在同轴上配置。
[0271] 由此，声音处理系统被设置成在声音处理系统中的全方位摄像机与麦克风阵列具 有相同的中屯、轴，所W能够使全方位摄像机10E与麦克风阵列20C的坐标系相同。
[0272] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述摄像部与所述收 音部被配置于室内的天花板。
[0273] 由此，能够简化声音处理系统的设置。
[0274] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述信号处理部根据 针对被显示于所述显示部的所述影像数据的不同的多个部位的指定，在所述影像数据中的 各指定部位显示不同的识别形状。
[0275] 根据该结构，信号处理部在针对被显示于显示器的影像数据，用户指定了不同的 多个（例如两个部位）的指定部位的情况下，在影像数据中的不同的各指定部位，显示不同 的识别形状。
[0276] 由此，声音处理系统在被显示于显示器的影像数据中，能够区分地辨别通过用户 指定的不同的多个指定部位，作为针对所区分的各指定部位而不同的识别形状，例如在一 个指定部位的周围显示矩形的识别形状，在另一个指定部位的周围显示圆形的识别形状， 从而能够在视觉上向用户明确示出区分地辨别了多个指定部位的情况。
[0277] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述声音输出部包括 第1声音输出部W及第2声音输出部，所述重放部从所述第1声音输出部对强调了从所述 收音部朝向与第1指定部位对应的位置的第1指向方向的声音而得到的第1声音数据进行 声音输出，从所述第2声音输出部对强调了从所述收音部朝向与第2指定部位对应的位置 的第2指向方向的声音而得到的第2声音数据进行声音输出。
[027引根据该结构，在声音处理系统中，设置例如两个扬声器，重放部从第1扬声器对强 调了从麦克风阵列朝向与第1指定部位对应的位置（第1声音位置）的第1指向方向的声 音而得到的第1声音数据进行声音输出，从第2扬声器对强调了从麦克风阵列朝向与第2 指定部位对应的位置（第2声音位置）的第2指向方向的声音而得到的第2声音数据进行 声音输出。
[027引 由此，声音处理系统在例如设置了两个扬声器的情况下，能够针对每个指定部位， 从各扬声器独立地对强调了从麦克风阵列朝向与各指定部位对应的声音位置的指向方向 的声音而得到的各声音数据进行声音输出。
[0280]另外，本发明的一种实施方式设及一种声音处理系统，其中，所述声音输出部包括 第1声音输出部W及第2声音输出部，所述重放部从所述第1声音输出部对将强调了从所 述收音部朝向与不同的多个指定部位对应的位置的不同的多个指向方向的声音而得到的 声音数据进行合成而得到的声音数据进行声音输出，从所述第2声音输出部对强调了从所 述收音部朝向与剩余的一个W上的指定部位对应的位置的剩余的一个W上的指向方向的 声音而得到的声音数据进行声音输出或者合成声音输出。
[0281] 根据该结构，在声音处理系统中，例如设置两个扬声器，重放部从第1扬声器对将 强调了从麦克风阵列朝向与不同的多个指定部位对应的位置（例如第1、第2声音位置） 的第1、第2指向方向的声音而得到的声音数据进行合成而得到的声音数据进行声音输出， 进而，从第2扬声器对强调了从麦克风阵列朝向与剩余的一个W上的指定部位对应的位置 (例如第3声音位置）的剩余的一个W上的指向方向的声音而得到的声音数据进行声音输 出。
[0282] 由此，声音处理系统在例如设置了两个扬声器的情况下，能够将强调了从麦克风 阵列起的多个（例如两个）的指向方向的声音而得到的各声音数据合成而从一个扬声器进 行声音输出，进而能够从另一个扬声器对强调了其他指向方向的声音而得到的声音数据进 行声音输出。
[0283] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述声音处理系统包 括一个W上的所述声音输出部，所述重放部从一个W上的所述声音输出部对将强调了从所 述收音部朝向与不同的多个指定部位对应的位置的不同的多个指向方向的声音而得到的 声音数据进行合成而得到的声音数据进行声音输出。
[0284] 根据该结构，在声音处理系统中，例如设置一个W上的扬声器，重放部从一个W上 的扬声器对将强调了从麦克风阵列朝向与第1指定部位对应的位置（第1声音位置）的第 1指向方向的声音而得到的第1声音数据、强调了从麦克风阵列朝向与第2指定部位对应的 位置（第2声音位置）的第2指向方向的声音而得到的第2声音数据、强调了从麦克风阵 列朝向与第3指定部位对应的位置（第3声音位置）的第3指向方向的声音而得到的第3 声音数据进行合成而得到的声音数据进行声音输出。
[0285] 由此，声音处理系统在例如设置了一个W上的扬声器的情况下，能够将强调了从 麦克风阵列起的多个（例如3个）的指向方向的声音而得到的各声音数据合成而从扬声器 进行声音输出，进而在设置了多个扬声器的情况下，能够同时对合成而得到的声音数据进 行声音输出。
[0286] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述信号处理部根据 预定的输入操作或者向被显示于所述显示部的所述影像数据的显示区域外的指定操作，显 示从所述声音输出部进行声音输出的所述声音数据的参数调整操作用媒体。
[0287] 根据该结构，声音处理系统通过预定的输入操作（例如鼠标的右点击操作）或者 向被显示于显示器的影像数据的显示区域外的指定操作（例如鼠标的左点击操作），能够 简单地显示受理从扬声器进行声音输出的声音数据的参数（例如，音量级）的调整操作的 调整操作用箱。
[028引另外，本发明的一种实施方式设及一种声音处理系统，其中，所述信号处理部始 终、或者根据预定的输入操作或者向被显示于所述显示部的所述影像数据的显示区域外的 指定操作，显示从所述声音输出部进行声音输出的所述声音数据的参数状态标示用媒体。 [0289] 根据该结构，声音处理系统始终、或者通过预定的输入操作（例如鼠标的右点击 操作）或者向被显示于显示器的影像数据的显示区域外的指定操作（例如鼠标的左点击操 作），能够简单地显示作为标示从扬声器进行声音输出的声音数据的参数（例如，音量级） 的状态的指示器的状态标示用框。
[0290] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述信号处理部每当 进行预定的输入操作或者向被显示于所述显示部的所述影像数据的显示区域外的指定操 作时，切换成通过所述摄像部进行摄像得到的影像数据、或者从所述声音输出部进行声音 输出的所述声音数据的参数调整操作用媒体并显示于所述显示部。
[0291] 根据该结构，声音处理系统每当进行预定的输入操作或者向被显示于显示器的影 像数据的显示区域外的指定操作（例如鼠标的左点击操作）时，能够简单地切换成受理通 过摄像机进行摄像得到的影像数据、或者从扬声器进行声音输出的声音数据的参数（例 如，音量级）的调整操作的调整操作用箱而进行显示。
[0292] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述信号处理部根据 在中屯、包括被显示于所述显示部的所述影像数据的指定部位的预定形状的描绘操作，生成 或者合成强调了从所述收音部朝向与所述指定部位对应的位置的指向方向的声音而得到 的声音数据。
[0293] 根据该结构，声音处理系统通过描绘在中屯、包括被显示于显示器的影像数据的指 定部位的预定形状（例如矩形形状）的简单描绘操作（例如触摸操作与在进行了触摸操作 的状态下的滑动操作），能够生成或者合成强调了从麦克风阵列朝向与指定部位对应的位 置的指向方向的声音而得到的声音数据。
[0294] 另外，本发明的一种实施方式设及一种声音处理系统，其中，所述信号处理部根据 对在每个所述指定部位显示的所述识别形状的再指定，生成或者合成中止了从所述收音部 朝向与显示有被再指定的所述识别形状的指定部位对应的位置的指向方向的声音的强调 而得到的声音数据。
[0295] 根据该结构，声音处理系统，如果在每个指定部位被显示的识别形状被再指定，贝U 能够简单地生成或者合成中止了从麦克风阵列朝向与显示有被再指定的识别形状的指定 部位对应的位置的指向方向的声音的强调的而得到声音数据。
[0296] 另外，本发明的一种实施方式设及一种声音处理方法，具有如下步骤；在至少一个 摄像部中对影像进行摄像；在包括多个麦克风的收音部中收集声音；将通过所述摄像部进 行摄像得到的影像数据显示于显示部；记录通过所述摄像部进行摄像得到的影像数据W及 通过所述收音部收集到的声音数据；将被记录的所述影像数据显示于所述显示部并且使声 音输出部对被记录的所述声音数据进行声音输出；受理对被显示于所述显示部的所述影像 数据的一个W上的指定部位的指定；W及基于被记录的所述声音数据，生成或者合成强调 了从所述收音部朝向与被指定的所述影像数据的一个W上的指定部位对应的位置的指向 方向的声音而得到的声音数据。
[0297] 根据该方法，声音处理系统在已经记录的影像数据的重放期间，根据来自操作部 的对预定的指定部位的指定，使用麦克风阵列的各麦克风收集到的各声音数据，来在信号 处理部中生成或者合成在从麦克风阵列朝向与一个W上的指定部位对应的位置的指向方 向上形成了指向性的声音数据。
[029引由此，声音处理系统在被记录的影像数据W及声音数据的重放期间，能够强调地 输出针对被指定的任意的重放时间的影像中的声音数据。
[0299]W上，参照【附图说明】了各种实施方式，但本发明不限定于上述例子，该不言自明。 只要是本领域技术人物员，就能够在权利要求书所记载的范畴内想到各种变更例或者修正 例，该一点是明确的，并且关于该些变更例或者修正例，当然可理解为属于本发明的技术范 围。
[0300] 此外，本申请基于2012年12月27日申请的日本专利申请（日本特愿 2012-285862) W及2013年12月5日申请的日本专利申请（日本特愿2013-252468)，作为 参照而将其内容援引到本申请中。
[0301] 产业上的可利用性
[0302] 本发明作为强调地输出朝向与在显示有摄像得到的影像数据的显示画面中被指 定的一个W上的指定部位对应的位置的指向方向的声音数据的声音处理系统W及声音处 理方法是有用的。
[0303] 标号说明
[0304] 5A、5B、5C，抓 声音处理系统
[0305] 10、10A、10B、10C 摄像机
[0306] 10E 全方位摄像机
[0307] 20、20A、20C、20D、20E、20F麦克风阵列
[030引 22、22A、22B、22C，22D、22E、22F、22a、22b、22c、22n-l、22n麦克风
[0309] 30、30A 网络
[0310] 40 声音处理装置
[0311] 45、45A 记录器
[0312]50.71 信号处理部
[0313]51a、5化、51c、51n_l、51n A/D转换器
[0314]52a、5化、52c、5化-1、5化延迟器
[0315] 55、78 操作部
[0316] 57 加算器
[0317]60、60A、60B 重放部
[031引 63、73 显示器
[0319]65、75、82、83 扬声器
[0320]101 主框体
[0321] 103 冲压金属盖
[0322]105 话筒饭金
[0323]107 基座饭金
[0324] 111 环状底部
[032引 113 话筒孔
[0326] 117 主框体外圆周壁
[0327] 127 话筒基板
[032引 129 话筒框体
[0329] 133 环状顶板部
[0330] 135 基座饭金外圆周壁
[0331] 139 主基板
[0332] 141 电源基板
[0333] 143 嵌合部
[0334] 145 外侧夹持片
[033引 147 内侧夹持片
[0336] 149 间隙
【主权项】
1. 一种声音处理系统，其特征在于，具备： 至少一个摄像部，对影像进行摄像； 显示部，显示通过所述摄像部进行摄像得到的影像数据； 收音部，包括多个麦克风，使用所述麦克风来收集声音； 声音输出部，对通过所述收音部收集到的声音数据进行声音输出； 记录部，记录通过所述摄像部进行摄像得到的所述影像数据以及通过所述收音部收集 到的所述声音数据； 重放部，将在所述记录部中记录的所述影像数据显示于所述显示部，并且使所述声音 输出部对在所述记录部中记录的所述声音数据进行声音输出； 操作部，受理对被显示于所述显示部的所述影像数据的一个以上的指定部位的指定； 以及 信号处理部，基于在所述记录部中记录的所述声音数据，生成或者合成强调了从所述 收音部朝向与被指定的所述影像数据的一个以上的指定部位对应的位置的指向方向的声 音而得到的声音数据。2. 根据权利要求1所述的声音处理系统，其特征在于， 所述重放部使所述声音输出部对强调了从所述收音部朝向与所述一个以上的指定部 位对应的位置的指向方向的声音而得到的声音数据进行声音输出。3. 根据权利要求1所述的声音处理系统，其特征在于， 所述摄像部是全方位摄像机， 所述信号处理部根据在通过所述全方位摄像机进行摄像得到的所述影像数据被显示 于所述显示部的期间内被指定的所述一个以上的指定部位，对包括所述一个以上的指定部 位的影像数据的坐标系进行图像转换， 所述重放部将所述图像转换后的影像数据显示于所述显示部，对强调了从所述收音部 朝向与所述一个以上的指定部位对应的位置的指向方向的声音而得到的声音数据进行声 音输出。4. 根据权利要求1所述的声音处理系统，其特征在于， 所述摄像部与所述收音部在同轴上配置。5. 根据权利要求1~4中的任一项所述的声音处理系统，其特征在于， 所述摄像部与所述收音部被配置于室内的天花板。6. 根据权利要求1所述的声音处理系统，其特征在于， 所述信号处理部根据针对被显示于所述显示部的所述影像数据的不同的多个部位的 指定，在所述影像数据中的各指定部位显示不同的识别形状。7. 根据权利要求6所述的声音处理系统，其特征在于， 所述声音输出部包括第1声音输出部以及第2声音输出部， 所述重放部从所述第1声音输出部对强调了从所述收音部朝向与第1指定部位对应的 位置的第1指向方向的声音而得到的第1声音数据进行声音输出，从所述第2声音输出部 对强调了从所述收音部朝向与第2指定部位对应的位置的第2指向方向的声音而得到的第 2声音数据进行声音输出。8. 根据权利要求6所述的声音处理系统，其特征在于， 所述声音输出部包括第1声音输出部以及第2声音输出部， 所述重放部从所述第1声音输出部对将强调了从所述收音部朝向与不同的多个指定 部位对应的位置的不同的多个指向方向的声音而得到的声音数据进行合成而得到的声音 数据进行声音输出，从所述第2声音输出部对强调了从所述收音部朝向与剩余的一个以上 的指定部位对应的位置的剩余的一个以上的指向方向的声音而得到的声音数据进行声音 输出或者合成声音输出。9. 根据权利要求6所述的声音处理系统，其特征在于， 所述声音处理系统包括一个以上的所述声音输出部， 所述重放部从一个以上的所述声音输出部对将强调了从所述收音部朝向与不同的多 个指定部位对应的位置的不同的多个指向方向的声音而得到的声音数据进行合成而得到 的声音数据进行声音输出。10. 根据权利要求6所述的声音处理系统，其特征在于， 所述信号处理部根据预定的输入操作或者向被显示于所述显示部的所述影像数据的 显示区域外的指定操作，显示从所述声音输出部进行声音输出的所述声音数据的参数调整 操作用媒体。11. 根据权利要求6所述的声音处理系统，其特征在于， 所述信号处理部始终显示从所述声音输出部进行声音输出的所述声音数据的参数状 态标示用媒体，或者根据预定的输入操作或者向被显示于所述显示部的所述影像数据的显 示区域外的指定操作，显示从所述声音输出部进行声音输出的所述声音数据的参数状态标 示用媒体。12. 根据权利要求6所述的声音处理系统，其特征在于， 所述信号处理部每当进行预定的输入操作或者向被显示于所述显示部的所述影像数 据的显示区域外的指定操作时，切换成通过所述摄像部进行摄像得到的影像数据或者从所 述声音输出部进行声音输出的所述声音数据的参数调整操作用媒体并显示于所述显示部。13. 根据权利要求6所述的声音处理系统，其特征在于， 所述信号处理部根据在中心包括被显示于所述显示部的所述影像数据的指定部位的 预定形状的描绘操作，生成或者合成强调了从所述收音部朝向与所述指定部位对应的位置 的指向方向的声音而得到的声音数据。14. 根据权利要求6所述的声音处理系统，其特征在于， 所述信号处理部根据对在每个所述指定部位显示的所述识别形状的再指定，生成或者 合成中止了从所述收音部朝向与显示有被再指定的所述识别形状的指定部位对应的位置 的指向方向的声音的强调而得到的声音数据。15. -种声音处理方法，其特征在于，具有如下步骤： 在至少一个摄像部中对影像进行摄像； 在包括多个麦克风的收音部中收集声音； 将通过所述摄像部进行摄像得到的影像数据显示于显示部； 记录通过所述摄像部进行摄像得到的影像数据以及通过所述收音部收集到的声音数 据； 将被记录的所述影像数据显示于所述显示部并且使声音输出部对被记录的所述声音 数据进行声音输出； 受理对被显示于所述显示部的所述影像数据的一个以上的指定部位的指定；以及 基于被记录的所述声音数据，生成或者合成强调了从所述收音部朝向与被指定的所述 影像数据的一个以上的指定部位对应的位置的指向方向的声音而得到的声音数据。
【专利摘要】记录器(45)从使用者受理对希望重放的影像的指定。信号处理部(50)在记录器(45)中的影像的重放期间或者临时停止期间，如果针对显示有影像的显示器(63)的画面，经由操作部(55)而从用户受理了对声音强调的一个以上的指定部位的指定，则对声音数据进行强调处理即使用在记录器(45)中记录的声音数据，来强调从麦克风阵列(20)朝向与被指定的指定部位对应的位置的方向的声音数据。重放装置(60)使进行了强调处理的声音数据与影像数据同步而进行重放。
【IPC分类】H04R1/40, H04N5/225, H04N5/93, H04R3/00, H04N5/232, H04N7/18
【公开号】CN104904236
【申请号】CN201380068876
【发明人】泽裕隆, 重永信一, 德田肇道, 吉国信太郎, 渡边周一, 牧直史, 田坂浩一, 小野进, 藤本圭祐, 松尾正治郎, 福田铁平, 松本宏之, 泉昭年, 辻寿嗣, 林和典, 汤下良一
【申请人】松下知识产权经营株式会社
【公开日】2015年9月9日
【申请日】2013年12月27日
【公告号】EP2941013A1, EP2941013A4, US20150350621, WO2014103331A1