输出控制系统和方法、输出控制装置和方法、程序的制作方法

专利名称：输出控制系统和方法、输出控制装置和方法、程序的制作方法
技术领域：
本发明涉及输出控制系统和方法、输出控制装置和方法、以及程 序，特别是涉及使得能进行与多显示器装置对应的音频信号处理的输 出控制系统和方法、输出控制装置和方法、以及程序。
背景技术：
从以往，提出了使用多个扬声器在围绕听众的位置上形成虚拟声 源的技术(例如，专利文献l)。
此外，近年来，利用了可缩放电视接收机的技术，该可缩放电视 接收机是把电视接收机以相同朝向左右或上下排列，不仅使这些电视 接收机分别显示个别图像，还作为整体把一个图像放大显示，或以所 需的大小分割图像而显示。
例如，在专利文献2中提出了在作为主机的电视接收机中显示 电视广播节目时，如果在主机上显示的图像数据中产生场景变化，则 场景刚变化后的帧的图像数据被显示在作为子机的电视接收机中，然 后，如果进而在主机上显示的图像数据中产生场景变化，则在子机中 显示场景刚变化后的帧的图像数据代替目前为止显示的图像数据。
如上所述，在以往，提出了很多关于在可缩放电视接收机中的图 像显示的内容。
专利文献1日本特开2005-64746号公报
专利文献2日本特开2004_289866号公报
然而，例如在专利文献2中只记载了从设置在各电视接收机的图 像显示面的左右的扬声器输出由某一个电视接收机显示的节目的声 音，而在以往的可缩放电视接收机的提案中虽然搭载有多个扬声器， 但是几乎没有提到例如像专利文献1那样的形成虚拟声源的技术等、
基于多个扬声器的声音输出。
因此，紧迫地要求关于在可缩放电视接收机中的、基于多个扬声 器的声音输出的提案。

发明内容
本发明是鉴于这样的状况作出的，使得能与在多显示器装置中显 示的图像对应地进行该图像所对应的声音的音频信号处理。
本发明的第一侧面的输出控制系统，构成为包括多个输出控制装 置，该多个输出控制装置分别控制与在多画面显示装置中显示的图像 对应的声音向二维配置扬声器中的对象扬声器的输出，其中该多画面 显示装置是把多个显示装置配置为阵列状而成的，该二维配置扬声器
是以至少在上下2个以上并且左右2个以上的方式二维配置扬声器 的，其中所述多个输出控制装置分别包括相互收发其他输出控制 装置的状态或处理结果等信息的通信部件；以及根据由所述通信部件 接收到的所述其他输出控制装置的信息，进行对所述对象扬声器输出 的音频信号的处理的信号处理部件。
还具有分别控制向构成所述多画面显示装置的所述多个显示装 置的显示的多个显示控制装置；所述通信部件还从所述多个显示控制 装置接收所述多个显示装置的状态或处理结果等信息；所述信号处理 部件能根据由所述通信部件接收到的所述多个显示装置的信息，进行 对所述对象扬声器输出的音频信号的处理。
所述多个输出控制装置进一步分别具有输入对所述扬声器输出 的音频信号的第一信号输入部件；输入对所述扬声器输出的音频信号 以外的音频信号的第二信号输入部件；以及检测从所述第二信号输入 部件输入的所述音频信号的特征的检测部件；所述信号处理部件能按 照由所述检测部件检测到的所述音频信号的特征的检测结果，进行从 所述第二信号输入部件输入的所述音频信号的处理，对所述对象扬声 器输出。
还具有分别控制向构成所述多画面显示装置的所述多个显示装 置的显示的多个显示控制装置；所述通信部件还能把由所述检测部件 检测到的所述音频信号的特征的检测结果发送给所述多个显示控制 装置。
所述信号处理部件能进行对所述对象扬声器输出的音频信号的 处理，以便使与在所述多画面显示装置上显示的图像所对应的声音的 声像定位于所述多画面显示装置的显示面上的任意位置上。
所述信号处理部件能进行对所述对象扬声器输出的音频信号的 处理，以便使与在构成所述多画面显示装置的所述多个显示装置中的 一个显示装置上显示的图像所对应的声音的声像定位于所述显示面 上的所述多画面显示装置的中央位置或以所述中央位置为中心的圆 周上。
所述信号处理部件能进行对所述对象扬声器输出的音频信号的 处理，以便使与在构成所述多画面显示装置的所述多个显示装置中的 2个以上的显示装置上显示的图像所对应的声音的声像定位于与在所 述2个以上的显示装置上显示的图像大小对应的定位位置上。
对所述扬声器分别设定对于在所述多画面显示装置中显示的图 像所对应的声音的声像提供不同的效果的任务；所述信号处理部件能 按照对所述对象扬声器设定的任务，进行对所述对象扬声器输出的音 频信号的处理。
能对所述对象扬声器设定提供紧缩声像的效果的任务。
能对所述对象扬声器设定提供扩展声像的效果的任务。
能对所述对象扬声器设定提供余音的任务。
本发明的第一侧面的输出控制系统的输出控制方法，该输出控制 系统构成为包括多个输出控制装置，该多个输出控制装置分别控制与 在多画面显示装置中显示的图像对应的声音向二维配置扬声器中的 对象扬声器的输出，其中该多画面显示装置是把多个显示装置配置为 阵列状而成的，该二维配置扬声器是以至少在上下2个以上并且左右 2个以上的方式二维配置扬声器的，其中所述多个输出控制装置中 的各个的输出控制方法包括相互收发其他输出控制装置的状态或处
理结果等信息的步骤；以及根据接收到的所述其他输出控制装置的信 息，进行对所述对象扬声器输出的音频信号的处理的步骤。
本发明的第二侧面的输出控制装置，构成由多个输出控制装置构 成的输出控制系统，该输出控制装置控制与在多画面显示装置中显示 的图像对应的声音向二维配置扬声器中的对象扬声器的输出，其中该 多画面显示装置是把多个显示装置配置为阵列状而成的，该二维配置 扬声器是以至少在上下2个以上并且左右2个以上的方式二维配置扬 声器的，该输出控制装置包括相互收发其他输出控制装置的状态或 处理结果等信息的通信部件；以及根据由所述通信部件接收到的所述 其他输出控制装置的信息，进行对所述对象扬声器输出的音频信号的 处理的信号处理部件。
本发明的第二侧面的输出控制装置的输出控制方法，该输出控制 装置构成由多个输出控制装置构成的输出控制系统，该输出控制装置 控制与在多画面显示装置中显示的图像对应的声音向二维配置扬声 器中的对象扬声器的输出，其中该多画面显示装置是把多个显示装置 配置为阵列状而成的，该二维配置扬声器是以至少在上下2个以上并 且左右2个以上的方式二维配置扬声器的，该输出控制方法包括相 互收发其他输出控制装置的状态或处理结果等信息的步骤；以及根据 接收到的所述其他输出控制装置的信息，进行对所述对象扬声器输出 的音频信号的处理的步骤。
本发明的第二侧面的程序，使构成由多个输出控制装置构成的输 出控制系统的输出控制装置执行如下处理，即控制与在多画面显示装 置中显示的图像对应的声音向二维配置扬声器中的对象扬声器的输 出，其中该多画面显示装置是把多个显示装置配置为阵列状而成的， 该二维配置扬声器是以至少在上下2个以上并且左右2个以上的方式 二维配置扬声器的，其中包括相互收发其他输出控制装置的状态或 处理结果等信息的步骤；以及根据接收到的所述其他输出控制装置的 信息，进行对所述对象扬声器输出的音频信号的处理的步骤。
在本发明的第一侧面中，利用多个输出控制装置中的各个，相互
收发其他输出控制装置的状态或处理结果等信息，根据接收到的所述 其他输出控制装置的信息，进行对所述对象扬声器输出的音频信号的 处理，其中该多个输出控制装置分别控制与在多画面显示装置中显示 的图像对应的声音向二维配置扬声器中的对象扬声器的输出，该多画 面显示装置是把多个显示装置配置为阵列状而成的，该二维配置扬声
器是以至少在上下2个以上并且左右2个以上的方式二维配置扬声器 的。
在本发明的第二侧面中，相互收发其他输出控制装置的状态或处 理结果等信息，根据接收到的所述其他输出控制装置的信息，进行对 所述对象扬声器输出的音频信号的处理。
依据本发明的第一侧面，在按照多画面显示装置上显示的图像， 能进行该图像所对应的声音的音频信号处理。
依据本发明的第二侧面，能可缩放地进行输出数的变更。此外， 能对各输出进行个别的处理。


图1是表示应用本发明的多扬声器系统的实施例的结构例的框图。
图2是表示图1的多扬声器系统的电结构例的框图。
图3是表示图2的扬声器引擎部的结构例的框图。
图4是表示图1的多显示器装置的有效画面的例子的图。
图5是表示分配给图4情况下的各扬声器的参数的例子的图。
图6是表示图1的多显示器装置的有效画面的其他例子的图。
图7是表示图1的多显示器装置的有效画面的其他例子的图。
图8是表示图1的多显示器装置的有效画面的其他例子的图。
图9是表示具有9个画面的多显示器装置的声像定位位置的例子的图。
图IO是表示具有1个放大画面和5个画面的多显示器装置的声 像定位位置的例子的图。
图11是表示具有1个放大画面和6个画面的多显示器装置的声
像定位位置的例子的图。
图12是说明放大画面设定在有效画面中时的声音表现的图。 图13是说明放大画面设定在有效画面中时的声音表现的其他例
子的图。
图14是说明放大画面设定在有效画面中时的声音表现的其他例 子的图。
图15是说明图2的扬声器引擎部的声音输出控制处理的程序流程图。
图16是说明图15的步骤S16的音频信号处理的程序流程图。 图17是表示执行图16的处理的图3的音频信号处理部的结构例 的框图。
图18是说明图15的步骤S16的音频信号处理的其他例子的程序 流程图。
图19是表示执行图18的处理的图3的音频信号处理部的结构例 的框图。
图20是表示应用本发明的个人电脑的结构例的框图。 符号的说明。
i—多显示器装置；2—多扬声器；11-1~11-9—显示器； 12L-l~12L-9、 12R-l 12R-9—扬声器；32—主控制部；33-1 33-9—扬 声器引擎部；34-1-34-9—图像引擎部；51-1、 51-2—音频输入部；53— 音频信号处理部；53a—监视处理部；54—控制部；101—频率分析部； 102—参数存储部；103—延迟操作部；104—音量操作部；151—参数 存储部。
具体实施例方式
以下，说明本发明的实施例，而如果例示本发明的构成要件与说 明书或附图中记载的实施例的对应关系，则如下。该记栽是用于确认
支持本发明的实施例记载在说明书或附图中。因此，虽然在说明书或 附图中记栽，但是即使作为与本发明的构成要件对应的实施例，存在 这里未记载的实施例，这也并不意味着该实施例与该构成要件不对 应。相反，即使作为与该构成要件对应的实施例而在这里记载，也并 不意味着该实施例与该构成要件以外的构成要件不对应。
本发明的第一侧面的输出控制系统(例如，图1的多扬声器系
统)，构成为包括多个输出控制装置(例如，图2的扬声器引擎部 33-1 33-9)，该多个输出控制装置分别控制与在多画面显示装置(例 如，图1多显示器装置1)中显示的图像对应的声音向二维配置扬声 器(例如，图1的多扬声器2)中的对象扬声器的输出，其中该多画 面显示装置是把多个显示装置(例如，图1显示器11-1~11-9)配置 为阵列状而成的，该二维配置扬声器是以至少在上下2个以上并且左 右2个以上的方式二维配置扬声器(例如图2的扬声器12L-1、 12R-1 和12B-1)的，其中所述多个输出控制装置分别包括相互收发其 他输出控制装置的状态或处理结果等信息的通信部件(例如图3的控 制部54);以及根据由所述通信部件接收到的所述其他输出控制装置 的信息，进行对所述对象扬声器输出的音频信号的处理的信号处理部 件(例如图3的音频信号处理部53 )。
还具有分别控制向构成所述多画面显示装置的所述多个显示装 置的显示的多个显示控制装置(例如图2的图像引擎部34-1~34-9);所 述通信部件还从所述多个显示控制装置接收所述多个显示装置的状 态或处理结果等信息；所述信号处理部件能根据由所述通信部件接收 到的所述多个显示装置的信息，进行对所述对象扬声器输出的音频信 号的处理。
所述多个输出控制装置进一步分别具有输入对所述扬声器输出 的音频信号的第一信号输入部件(例如图3的音频输入部51-1);输 入对所述扬声器输出的音频信号以外的音频信号的第二信号输入部 件(例如图3的音频输入部51-2 );以及检测从所述笫二信号输入部 件输入的所述音频信号的特征的检测部件(例如图3的监视处理部
53a);所述信号处理部件能按照由所述检测部件检测到的所述音频 信号的特征的检测结果，进行从所述第二信号输入部件输入的所述音 频信号的处理，对所述对象扬声器输出。
还具有分别控制向构成所述多画面显示装置的所述多个显示装 置的显示的多个显示控制装置(例如，图2的图像引擎部34-l 34-9); 所述通信部件还能把由所述检测部件检测到的所述音频信号的特征 的检测结果发送给所述多个显示控制装置。
所述信号处理部件能进行对所述对象扬声器输出的音频信号的 处理，以便使与在构成所述多画面显示装置的所述多个显示装置中的 一个显示装置(例如图9的显示器11-1)上显示的图像(例如，图9 的画面Gl)所对应的声音的声像定位于所述显示面上的所述多画面 显示装置的中央位置或以所述中央位置为中心的圆周(例如图9的圆 周Ml)上。
所述信号处理部件能进行对所述对象扬声器输出的音频信号的 处理，以便使与在构成所述多画面显示装置的所述多个显示装置中的 2个以上的显示装置(例如，图12的显示器11-l ll-9)上显示的图 像(例如图12的画面GC1)所对应的声音的声像定位于与在所述2 个以上的显示装置上显示的图像大小对应的定位位置上。
本发明的第一侧面的输出控制系统的输出控制方法，该输出控制 系统构成为包括多个输出控制装置，该多个输出控制装置分别控制与 在多画面显示装置中显示的图像对应的声音向二维配置扬声器中的 对象扬声器的输出，其中该多画面显示装置是把多个显示装置配置为 阵列状而成的，该二维配置扬声器是以至少在上下2个以上并且左右 2个以上的方式二维配置扬声器的，其中所述多个输出控制装置中 的各个的输出控制方法包括相互收发其他输出控制装置的状态或处 理结果等信息的步骤(例如，图15的步骤S11);以及根据接收到的 所述其他输出控制装置的信息，进行对所述对象扬声器输出的音频信 号的处理的步骤(例如，图15的步骤S16)。
本发明的第二侧面的输出控制装置，构成由多个输出控制装置
(例如，图2的扬声器引擎部33-1 33-9)构成的输出控制系统(例 如图l的多扬声器系统)，该输出控制装置控制与在多画面显示装置
(例如图1的多显示器装置1)中显示的图像对应的声音向二维配置 扬声器(例如，图1多扬声器2)中的对象扬声器的输出，其中该多 画面显示装置是把多个显示装置(例如图1的显示器11-1-11-9)配 置为阵列状而成的，该二维配置扬声器是以至少在上下2个以上并且 左右2个以上的方式二维配置扬声器(例如图2的扬声器12L-1、12R-1 和12B-1)的，该输出控制装置包括相互收发其他输出控制装置的 状态或处理结果等信息的通信部件(例如图3的控制部54 );以及根 据由所述通信部件接收到的所述其他输出控制装置的信息，进行对所 述对象扬声器输出的音频信号的处理的信号处理部件(例如图3的音 频信号处理部53)。
本发明的第二侧面的输出控制装置的输出控制方法或程序，该输 出控制装置构成由多个输出控制装置构成的输出控制系统，该输出控 制装置控制与在多画面显示装置中显示的图像对应的声音向二维配 置扬声器中的对象扬声器的输出，其中该多画面显示装置是把多个显 示装置配置为阵列状而成的，该二维配置扬声器是以至少在上下2个 以上并且左右2个以上的方式二维配置扬声器的，该输出控制方法或 程序包括相互收发其他输出控制装置的状态或处理结果等信息步骤
(例如，图15的步骤S11);以及根据接收到的所述其他输出控制装 置的信息，进行对所述对象扬声器输出的音频信号的处理的步骤(例 如，图15的步骤S16)。
下面参照

本发明的实施例。
图l是表示应用本发明的多扬声器系统(系统是指多个装置逻辑 地集合，无论各构成的装置是否在同一筐体中)的实施例的结构的图.
在图1的例子中，多扬声器系统构成为包括由9个显示器 11-1~11-9构成的多显示器装置1以及由9对扬声器12L-l 12L-9和 扬声器12R-l~12R-9 (L:左用，R:右用，是l对)构成的多扬声器 2，是控制与多显示器装置1上显示的图像所对应的声音的输出的系
统。再者，以下，为了便于说明，向着多扬声器系统的正面，把配置 在左侧的扬声器设为左用扬声器，把配置在右侧的扬声器设为右用扬 声器而进行说明。
多显示器装置1例如在把它们的显示面配置为3行x3列的阵列 状(矩阵状)的各显示器11-1 11-9上分别显示不同的节目的图像， 或者用9台显示器11-1~11-9或其中至少2台显示器，作为一个放大 图像而显示节目。
显示器11-1-11-9的箧体配置为各显示面成为3行x3列的阵列 状。即在上层从左开始配置显示器11-1-11-3的箧体，在中层从左开 始配置显示器11-4-11-6的箧体，在下层从左开始配置显示器 11-7 11-9的箧体。再者，关于显示器11-1-11-9，没必要分别区分时， 只称作显示器ll。此外，这些显示器11的台数可以是任意台，显示 器11的篋体可以在横向配置几列，在纵向配置几层。
在多扬声器系统中，在多个或一个显示器11中显示的图像(以 下，也称作显示器11的画面)中用户可操作的画面(以下称作有效 画面)为一个。用户能通过操作未图示的遥控器，从多个画面中选择 有效画面，或对有效画面进行音量或选台、缩放等指示。然后，把该 有效画面作为多扬声器2中的声音输出的对象画面。
多扬声器2控制9对扬声器12L-l~12L-9和扬声器12R-l~12R-9 的声音输出，以便能从多显示器装置1的显示面上的有效画面附近听 到与有效画面对应的声音，换言之，把该声音的声像定位在有效画面 上。即，多扬声器2把与有效画面所对应的声音从9对扬声器 12L-l 12L-9和扬声器12R-l 12R-9中配置于与有效画面的位置或大 小所对应的位置上的扬声器输出。
再者，没必要分别区分左用的扬声器12L-l 12L-9和右用的扬声 器12R-l 12R-9时，也称作扬声器12L和扬声器12R，还概括它们， 简单地称作扬声器12。此外，这些扬声器12的数量是几对都可以， 没必要与显示器11的数量对应。
以包围配置为3行x3列的阵列状的显示器11-l ll-9的方式二维 地配置9对扬声器12L-l 12L-9和扬声器12R-l 12R-9，即，使扬声 器12的前面与显示器11-1-11-9的显示面一致地在显示器11-1 11-9 的上下侧分别排列6个，并且在显示器11-1~11-9的左右侧分别排列 3个。
即，扬声器12L-1和12R-1分别排列配置在上层、左端的显示器 11-1的上部，扬声器12L-2和12R-2分别排列配置在上层、中央的显 示器11-2的上部，扬声器12L-3和12R-3分别排列配置在上层、右端 的显示器11-3的上部。扬声器12L-4和12R-4分别配置在夹着上层的 显示器11-1~11-3的左右的位置，扬声器12L-5和12R-5分别配置在 夹着中层的显示器11-4-11-6的左右的位置，扬声器12L-6和12R-6 分别配置在夹着下层的显示器11-7-11-9的左右的位置。
此外，扬声器12L-7和12R-7分别排列配置在下层、左端的显示 器11-7的下部，扬声器12L-8和12R-8分别排列配置在下层、中央的 显示器11-8的下部，扬声器12L-9和12R-9分别排列配置在下层、右 端的显示器11-9的下部。再者，扬声器12的配置并不局限于图1的 情形，只要至少上下2个以上、并且左右2个以上这样地二维配置就 可以。
而且，各扬声器12输出与按照有效画面的位置或画面的大小、 以及自身的配置位置而进行信号处理后的有效画面所对应的声音。
如上所述，在多扬声器系统中，利用以包围多显示器装置1的周 围(上下左右)的方式配置的各扬声器12，输出按照多显示器装置l 的显示面(即二维配置多扬声器2的平面)上的有效画面的位置或大 小、以及自身的配置位置而进行信号处理后的声音。由此，能把有效 画面的声音的声像定位在上下左右任意位置的有效画面上，所以使用 户能直观地认识有效画面的位置。
图2是表示图1的多扬声器系统的电结构例的图。再者，在图2 的例子中，把左用的扬声器12L-l 12L-9、右用的扬声器12R-l~12R-9、 低音用的扬声器12B-l 12B-9分别作为l对而构成。在没必要区分这 些扬声器12B-l~12B-9时，称作扬声器12B，进而概括扬声器12L、
12R、 12B，称作扬声器12。
在图2的例子中，多扬声器系统构成为包括调谐部31、主控制 部32、进行向9对扬声器12L-l 12L-9、扬声器12R-l~12R-9、扬声 器12B-l 12B-9中所对应的一对扬声器12L、 12R、 12B输出的声音 的信号处理的扬声器引擎部33-l 33-9、以及进行对显示器ll-l ll-9 中所对应的显示器11输出的图像的信号处理的图像引擎部 34_l~34-9。
再者，以下在没有必要个别地区分扬声器引擎部33-1~33-9以及 图像引擎部34-l~34-9时，分别也称作扬声器引擎部33以及图像引擎 部34。
再者，调谐部31由多个(例如9个)调谐器构成。调谐部31 的多个调谐器分别选择由未图示的天线接收的来自广播电台的广播 信号的接收频带，用给定的方式把所选择的接收频带的广播信号解 调，把解调后的信号中的图像信号和音频信号向主控制部32输出。
主控制部32由MPU (多处理机单元，Multi Processor Unit)等 构成，进行用于归纳连接在多扬声器系统上的多个扬声器引擎部33 和图像引擎部34的控制。即，主控制部32输入来自未图示的遥控器 的用户的指示信号、来自图像引擎部34的状态或处理结果等信息、 来自扬声器引擎部33的状态或处理结果等信息。
主控制部32根据需要把用户的指示信号提供给扬声器引擎部33 和图像引擎部34。主控制部32把来自图像引擎部34的信息供给其他 图像引擎部34和扬声器引擎部33，把来自扬声器引擎部33的信息供 给其他扬声器引擎部33和图像引擎部34。即，通过主控制部32相互 共享图像引擎部34的状态或处理结果等信息、扬声器引擎部33的状 态或处理结果等信息。
此外，主控制部32按照来自遥控器的用户的指示信号，把来自 调谐部31的图像信号对图像引擎部34输出，把来自调谐部31的音 频信号对扬声器引擎部33输出。
例如，在对各显示器ll分别输出不同的节目的图像时，对各图 像引擎部34输出不同的节目的图像信号。此外，例如，在显示器 11-1 11-3输出相同的节目的图像时，对与显示器11-1 11-3对应的图 像引擎部34-1~34-3输出相同节目的图像信号，对此外的显示器输出 不同的节目的图像信号。
另 一方面，主控制部32对扬声器引擎部33输出由用户设定的有 效画面的音频信号，并且也输出多个系统或至少1系统的其他节目的 音频信号。
扬声器引擎部33和图像引擎部34分别构成为能对多扬声器系统 插拔，安装(连接)后的扬声器引擎部33和图像引擎部34通过主控 制部32能相互进行信息的交换。
扬声器引擎部33能够根据图像引擎部34的状态或其他扬声器引 擎部33的状态，确认多显示器装置1和多扬声器2的结构，即构成 多扬声器2的显示器11的数量及其配置、以及构成多扬声器2的扬 声器12的数量及其配置，以此取得多扬声器2中的所对应的扬声器 12L、 12R和12B的ID (识别符，Identification)号。再者，也可以 预先设定DIP ( dual in-line package )开关等，通过确认它来取得ID 号。
进而，扬声器引擎部33根据对应的扬声器12的ID号、来自图 像引擎部34的处理结果(例如，有效画面信号或画面大小信号)， 选择与对应的扬声器12L、 12R和12B的音频信号处理有关的参数， 根据所选择的参数，进行从主控制部32输入的音频信号的信息处理。
这里，扬声器引擎部33把与有效画面对应的音频信号作为对扬 声器12输出的音频信号(以下也称作扬声器输出信号)而输入，把 此外的至少1系统的音频信号作为子通道音频(裏音声)信号而输入。
扬声器引擎部33进行扬声器输出信号的音频信号处理，向对应 的扬声器12输出，并且监视子通道音频信号，根据监视结果，代替 扬声器输出信号进行子通道音频信号的音频信号处理等，进行基于监 视结果的处理。再者，该扬声器引擎部33的处理结果也通过主控制 部32供给其他扬声器引擎部33、图像引擎部34。
图像引擎部34根据其他图像引擎部34的状态，或有必要的话， 根据扬声器引擎部33的状态，确认多显示器装置1和多扬声器2的 结构等，以此识别多显示器装置1中的所对应的显示器11的ID号。 此外，图像引擎部34按照来自主控制部32的用户的指示信号，在有 效画面中设定自身显示的图像(画面)，或解除该设定。
图像引擎部34按照来自主控制部32的用户的指示信号，与其他 图像引擎部34联动地对从主控制部32输入的图像信号进行用于显示 一个放大图像的图像处理，或进行用于显示各节目的图像的图像处 理，把处理后的图像信号对显示器11输出。然后，通过主控制部32 把图像引擎部34的处理结果(例如有效画面信号、画面大小信号、 频道编号、或缩放大小)供给对扬声器引擎部33或其他图像引擎部 34。
如上所述，在多扬声器系统中，由扬声器引擎部33和图像引擎 部34通过主控制部32相互进行信息的交换，所以也能追加任意数量 的图像引擎部34或扬声器引擎部33，自由变更输出数。
此外，在多扬声器系统中，各扬声器引擎部33和图像引擎部34 个别进行处理，所以对各输出也能追加个别的音频信号处理或图像信 号处理。
再者，在图2的例子中，示出通过主控制部32进行扬声器引擎 部33和图像引擎部34中的相互的信息交换的例子，但是也能采用通 过有线或无线彼此(电)连接扬声器引擎部33和图像引擎部34,而 不通过主控制部32地进行信息的交换的结构。
图3是表示图2的扬声器引擎部的结构例的图.再者，在图3 的例子中，在扬声器引擎部33和扬声器12L、 12R和12B之间分别 设置用于放大来自扬声器引擎部33的音频信号的放大器41L、 41R、 41B。
图3的扬声器引擎部33构成为包括音频输入部51-1和音频输入 部51-2、 AD ( Analog to Digital)转换部52-1和52-2、音频信号处理 部53、监视处理部53a、 DA ( Digital to Analog )转换部55曙1和55-2、
以及音量控制部56-1和56-2。
音频输入部51-1把来自主控制部32的与有效画面对应的音频信 号(左音频信号和右音频信号)作为扬声器输出信号(扬声器左输出 信号和扬声器右输出信号)而输入，对AD转换部52-1输出。AD转 换部52-1对来自音频输入部51-1的扬声器左输出信号和扬声器右输 出信号进行AD转换，把数字化的扬声器左输出信号和扬声器右输出 信号对音频信号处理部53输出。
音频输入部51-2把来自主控制部32的与有效画面对应的音频信 号以外的1系统的音频信号(左音频信号和右音频信号)作为子通道 音频信号(左子通道音频信号和右子通道音频信号)而输入，对AD 转换部52-2输出。AD转换部52-2对来自音频输入部51-2的左子通 道音频信号和右子通道音频信号进行AD转换，把数字化的左子通道 音频信号和右子通道音频信号对音频信号处理部53输出。
音频信号处理部53具有与多显示器装置1和多扬声器2的多种 结构的各扬声器12对应的参数组。该参数组由根据后面描述的声像 定位或声音表现、按照多显示器装置1的有效画面的位置或大小而预 先设定的参数构成。
音频信号处理部53按照从控制部54供给的图像引擎部34的状 态或其他扬声器引擎部33的状态，选择参数组，进而按照从控制部 54供给的图像引擎部34或扬声器引擎部33的处理结果(例如多显示 器装置1的有效画面的位置或大小)，从所选择的参数组中选择使用 的参数。然后，音频信号处理部53对来自AD转换部52-1的扬声器 输出信号进行基于所选择的参数的音频处理。把音频处理后的全部范 围(Full Range)的左音频信号和右音频信号对DA转换部55-1输出， 把音频处理后的低频带(Bass)的音频信号对DA转换部55-2输出。
此外，音频信号处理部53内置有监视子通道音频信号的监视处 理部53a。监视处理部53a分析从DA转换部55-2输入的子通道音频 信号，把通过分析而抽取的信息供给音频信号处理部53。音频信号处 理部53进行基于由监视处理部53a抽取的信息的处理，把处理结果
通过控制部54和主控制部32供给其他扬声器引擎部33和图像引擎 部34。
例如，监视处理部53a监视在子通道音频信号中紧急广播或速报 的特征(即，紧急广播或速报特有的音频信号)，在包含有紧急广播 或速报的音频信号时，抽取该紧急广播或速报的音频信号，把抽取结 果供给音频信号处理部53。与此对应，音频信号处理部53通过控制 部54和主控制部32把该抽取结果供给其他扬声器引擎部33或图像 引擎部34，并且例如把对扬声器12输出的音频信号切换为子通道音 频信号。
控制部54通过对主控制部32发送扬声器引擎部33的状态(例 如，连接在主控制部32上，构成多扬声器2的状态)、音频信号处 理部53的处理结果等，把这些信息提供给其他扬声器引擎部33或图 像引擎部34。此外，控制部54接收通过主控制部32发送来的用户的 指示信号或其他扬声器引擎部33或图像引擎部34的状态或处理结果 等信息，根据这些信息，控制音频信号处理部53或音量控制部56-1 和56-2。
DA转换部55-1对来自音频信号处理部53的音频处理后的全部 范围的左音频信号和右音频信号进行DA转换，把模拟的左音频信号 和右音频信号分别对音量控制部56-1输出。DA转换部55-2对来自音 频信号处理部53的音频处理后的低频带的音频信号进行DA转换， 把模拟的低频带的音频信号对音量控制部56-2输出。
音量控制部56-1根据控制部54的控制，控制来自DA转换部55-1 的模拟的左音频信号和右音频信号的音量，分别通过放大器41L、 41R 对扬声器12L、 12R输出。由此，从扬声器12L、 12R分别输出与进 行信号处理后的左音频信号和右音频信号对应的左声音和右声音。
音量控制部56-2根据控制部54的控制，控制来自DA转换部55-2 的模拟的低频带的音频信号的音量，通过放大器41B对扬声器12B输 出。由此，从扬声器12B输出与进行音频处理后的低频带的音频信号 对应的低频带的声音。
再者，在图3的例子中作为子通道音频信号只输入l系统的音频 信号，但是也可以输入多个系统的音频信号，与l系统时同样进行处 理。
图4是表示图1的多显示器装置的有效画面的例子的图。
在图4的例子中，在各显示面配置为3行x3列的阵列状的显示 器11-1 11-9中显示分别不同的节目的图像。即，在图4的多显示器 装置1中，构成9个画面，9个画面中上层、左侧的显示器ll-l的画 面(在显示器11-1中显示的脸的图像)GG1设定为有效画面。
多扬声器2以把声像定位在有效画面即显示器11-1的画面GG1 的方式把与显示器11-1的画面GG1对应的声音只从配置在显示器 11-1的正上方的扬声器12L-1和12R-l、配置在显示器11-1的正下方 的扬声器12L-7和12R-7、配置在显示器11-1的左右的扬声器12L-4 和12R-4输出。再者，画阴影的扬声器12表示与其他扬声器12相比， 使用重要度高，在图4的例子中，表示只从使用重要度高的扬声器12 输出声音的例子。
这时，在多扬声器2中，对使配置在显示器11-1的左右的扬声 器12L-4和12R-4输出的声音的音频信号进行延迟操作，对使配置在 显示器11-1的上下扬声器12L-1和12R-1以及扬声器12L-7和12R-7
输出的声音的音频信号进行音量操作，以此实现对显示器11-1的上下 左右的声像定位。
即，通过过去的分析可知从人耳的配置等听觉特性考虑，在人 体中，与上下方向的知觉相比，左右方向的知觉更优异，该事实在察 觉声音方向方面非常显著地表现出来。因此，延迟操作对向左右方向 的声像定位是有效的，但是在上下方向几乎无效。
因此，在多扬声器2中，为了实现向上下方向的声像定位，通过 有效地使用配置在上下的扬声器的音量操作，实现向上下方向的牢固 的声像定位.具体而言，在多扬声器2中，对各扬声器12(输出的音 频信号)分配与向有效画面(图4的情况下，画面GG1)的上下左右 的声像定位对应地设定的延迟操作和音量操作的参数。
图5是表示分配给图4的情况下的扬声器的参数的例子。 在图5的例子中，表示图4的例子中配置在显示器11-1的左右 的扬声器12L-4和12R-4、配置在显示器11-1的正上方的扬声器12L-1 和12R-1、配置在显示器ll-l的正下方的扬声器12L-7和12R-7的音 量参数和延迟参数。再者，未图示的其他扬声器12的音量参数和延 迟参数为"0"。
对扬声器12L-4分配"0.5"的音量参数和"0"的延迟参数，对扬声 器12R-4分配"0.5"的音量参数和"50"的延迟参数。
此外，对扬声器12L-1和12R-1分配"0.9"的音量参数和"0，，的延 迟参数，对扬声器12L-7和12R-7分配"0.4"的音量参数和"0"。
这里，音量参数表示最大值为1时的值，延迟参数为对采样频率 48kHz的声音的延迟采样量。
即，图4的例子的情况下，对于左右方向，使比扬声器12L-4 离显示器11-1的画面GG1的距离远的扬声器12R-4延迟50个采样， 以此进行向显示器11-1的画面GG1的声像定位。
对于上下方向，如果以左右的扬声器12L-4和12R-4的音量参数 "0.5"为基准，则离显示器11-1的画面GG1的距离远的扬声器12L-1 和12R-1的音量参数为"0.9"，比基准还大，扬声器12L-7和12R-7 的音量参数为"0.4，，，比基准还小，以此进行向显示器11-1的画面GG1 的声像定位。
如上所述，通过利用了到达两耳的时间差的延迟操作和使用了到 达两耳的声音的音量差的音量操作，实现多扬声器2的声像定位。
图6是表示图1的多显示器装置的有效画面的其他例子的图。
在图6的例子中，在各显示面配置为3行x3列的阵列状的显示 器ll-l ll-9中，与图4的例子同样分别显示不同的节目的图像.即， 在图6的多显示器装置1中，构成9个画面，9个画面中从中层、左 开始第二个(即多显示器装置1的中央)显示器11-5的画面(在显示 器11-5上显示的脸的图像)GG2设定为有效画面。
多扬声器2以把声像定位在有效画面即显示器11-5的画面GG2
的方式把与显示器11-5的画面GG2对应的声音例如只从配置在显示 器11-5的正上方的扬声器12L-2和12R-2、配置在显示器11-5的正 下方的扬声器12L-8和12R-8、配置在显示器11-5的左右的扬声器 12L-5和12R-5输出。
这时，在多扬声器2中，对使配置在显示器11-5的左右的扬声 器12L-5和12R-5输出的声音的音频信号进行延迟操作，对使配置在 显示器11-5的上下的扬声器12L-2和12R-2以及扬声器12L-8和 12R-8输出的声音的音频信号进行音量操作，以此实现上下左右的声 像定位。
即，在图6的例子中，扬声器12L-5和12R-5离显示器11-5的 画面GG2的距离相同，扬声器12L-2和12R-2、扬声器12L-8和12R-8 离显示器11-5的画面GG2的距离也相同，所以实际上进行左右同等 的延迟操作或音量操作，以此进行对显示器11-5的上下左右的声像定 位。
再者，虽然省略图示，但是，在图6的多扬声器2中，对各扬声 器12分配与向有效画面(图6时，画面GG2)的上下左右的声像定 位对应地设定的、图5那样的音量参数和延迟参数。
图7是表示图1的多显示器装置的有效画面的其他例子的图。
在图7的例子中，在各显示面配置为3行x3列的阵列状的显示 器ll-l ll-9中，在上中下层的右侧的显示器11-3、 11-6和11-9显示 一个节目的放大图像，在其他显示器11分别显示不同的节目的图像。 即，在图7的多显示器装置1中，构成7个画面，7个画面中显示器 11-3、 11-6和11-9的放大画面(在显示器ll-3、 11-6和11-9上显示 的脸的图像)GG3设定为有效画面。
再者，以下，把如图7的例子的放大画面GG3那样在多个显示 器11上显示的一个放大图像也称作缩放时的画面。
多扬声器2以把声像定位在有效画面即显示器11-3、 11-6和11-9 的放大画面GG3的方式把与显示器11-3、 11-6和11-9的放大画面 GG3对应的声音只从配置在显示器11-3、 11-6和11-9的正上方的扬
声器12L-3和12R-3、配置在显示器11-3、 11-6和11-9的正下方的扬 声器12L-9和12R-9、配置在显示器ll-3、 11-6和11-9的左右的扬声 器12L國4 12L画6和12R-4~12R-6输出。
这时，在多扬声器2中，对使配置在显示器11-3、 11-6和11-9 的左右的扬声器12L-4 12L-6和12R-4~12R-6输出的声音的音频信号 进行延迟操作，对使配置在显示器11-5的上下的扬声器12L-3和 12R-3以及扬声器12L-9和12R-9输出的声音的音频信号进行音量操 作，以此实现上下左右的声像定位。
即，在图7的例子中，例如，对于左右方向，使比扬声器 12L-4~12L-6离显示器11-3、 11-6和11-9的画面GG3的距离远的扬 声器12R-4-12R-6延迟数个采样，以此进行向显示器11-3、 11-6和 11-9的放大画面GG3的声像定位。此外，对于上下方向，扬声器12L-3 以及12R-3和扬声器12L-9以及12R-9离显示器11-3、 11-6和11-9 的画面GG3的距离相同，所以实际上进行左右同等的延迟操作或音 量操作，以此进行向显示器11-3、 11-6和11-9的放大画面GG3的声 像定位。
再者，虽然省略图示，但是在图7的多扬声器2中，对各扬声器 12分配与向有效画面(图7的情况下，画面GG3)的上下左右的声 像定位对应地设定的图5那样的音量参数和延迟参数。
图8是表示图l的多显示器装置的有效画面的其他例子的图。即， 图8的例子是图4的有效画面的其他例子。
在图8的例子中，在各显示面配置为3行x3列的阵列状的显示 器11-1-11-9中，在中下层的从左开始第一和第二显示器ll-4、 11-5、 11-7和11-8中显示的脸的图像(即显示器11-4、 11-5、 11-7和11-8 的放大画面)GG4设定为有效画面。
多扬声器2以把声像定位在有效画面即显示器11-4、 11-5、 11-7 和11-8的放大画面GG4的方式把与显示器11-4、 11-5、 11-7和11-8 的放大画面GG4对应的声音只从配置在显示器11-4、 11-5、 11-7和 11-8的正上方的扬声器12L-l、 12R-l、 12L-2、 12R-2、配置在显示 器11陽4、 11-5、 11-7和11-8的正下方的扬声器12L-7、 12R-7、 12L-8、 12R-8、配置在显示器11-4、 11-5、 11-7和11-8的左右的扬声器12L-5、 12R画5、 12L-6、 12R-6输出。
这时，在多扬声器2中，对使配置在显示器11-4、 11-5、 11-7 和11-8的左右的扬声器12L-5、 12R誦5、 12L-6、 12R-6输出的声音进 行延迟操作，对使配置在显示器11-4、 11-5、 11-7和11-8的上下的扬 声器12L-1、 12R画l、 12L-2、 12R画2、以及12L誦7、 12R-7、 12L醫8、 12R-8 输出的音频信号进行音量操作，以此实现上下左右的声像定位。
即，在图8的例子中，例如，对于左右方向，使比扬声器12L-5、 12R-5离显示器11-4、 11-5、 11-7和11-8的画面GG4的中心的距离 远的扬声器12L-6、 12R-6延迟数个采样，以此进行向显示器11-3、 11-6和11-9的放大画面GG4的声1象定位。此外，对于上下方向，4吏 比扬声器12L-7、 12R-7、 12L-8、 12R-8离显示器11-4、 11-5、 11-7 和11-8的放大画面GG4的中心的距离远的扬声器12L-l、 12R-l、 12L-2、 12R-2为小的音量，以此进行向显示器11-4、 11-5、 11-7和 11-8的放大画面GG4的声像定位。
再者，虽然省略图示，但是在图8的多扬声器2中，对各扬声器 12分配与向有效画面(图8的情况下，画面GG4)的上下左右的声 像定位对应地设定的图5那样的音量参数和延迟参数。
如上所述，在多扬声器系统中，在多显示器装置1的上下左右配 置构成多扬声器2的扬声器12，所以能把声像定位于多显示器装置1 的显示面上、设定在上下左右任意的位置的有效画面上。
由此，能直观地识别在以往，例如在有效的画面上预先赋予记 号并用户用眼睛扫描全部画面而识别的有效画面。
这里，在多扬声器2中，不是对某点，而是如上所述对面(画面) 的声像定位是重要的。
一般，为了取得用于靠听分辨向邻近位置的声像定位的精度，在 声像的位置变化的瞬间必须识别它与以前的定位位置不同，然而，多 显示器装置1的显示器11是彼此邻近配置的，所以在声像的位置变
化的瞬间难以识别它与以前的定位位置不同。
因此，在多扬声器2中，不仅从到达两耳的时间差计算的延迟操 作，而且为了容易识别有效画面被切换，在以与较接近的画面的差分 变大的方式把各显示器11的画面设定为有效画面时，把与各有效画 面对应的声音的声像如图9所示那样定位在圆周上。
图9是表示声像定位位置的例子的图。再者，在图9的例子中， 省略各显示器11和扬声器12的符号的图示，画面G1 G9分别表示 显示不同图像的显示器11-1 11-9的画面，P1 P9分别表示显示器 11-1-11-9的画面G1 G9设定为有效画面时的声像定位位置。
即，显示器11-1-11-4的画面G1 G4和显示器11-6~11-9的画面 G6 G9设定为有效画面时的声像定位位置P1 P4和声像定位位置 P6 P9不是在各画面中，而是如虚线所示，配置在以多显示器装置l 的中央位置为中心的比多显示器装置1的显示面(全部画面G1 G9) 更大一圏的圆的圆周Ml上的位置。此外，在图9的例子中，圆周 Ml上的各声像定位位置是分别以等间隔配置的。
具体而言，显示器11-1的画面Gl设定为有效画面时的声像定 位位置Pl配置在从多显示器装置1的中央位置通过显示器11-1的画 面Gl的直线与圆周Ml相交的位置。显示器11-2的画面G2设定为 有效画面时的声像定位位置P2配置在从多显示器装置1的中央位置 通过显示器11-2的画面G2的直线与圆周Ml相交的位置。显示器11-3 的画面G3设定为有效画面时的声像定位位置P3配置在从多显示器装 置1的中央位置通过显示器11-3的画面G3的直线与圆周Ml相交的 位置'显示器11-4的画面G4设定为有效画面时的声像定位位置P4 配置在从多显示器装置1的中央位置通过显示器11-4的画面G4的直 线与圆周Ml相交的位置。
显示器11-6的画面G6设定为有效画面时的声像定位位置P6配 置在从多显示器装置1的中央位置通过显示器11-6的画面G6的直线 与圆周Ml相交的位置。显示器11-7的画面G7设定为有效画面时的 声像定位位置P7配置在从多显示器装置1的中央位置通过显示器
11-7的画面G7的直线与圆周Ml相交的位置。显示器11-8的画面 G8设定为有效画面时的声像定位位置P8配置在从多显示器装置1的 中央位置通过显示器11-8的画面G8的直线与圓周Ml相交的位置。 显示器11-9的画面G9设定为有效画面时的声像定位位置P9配置在 从多显示器装置1的中央位置通过显示器11-9的画面G9的直线与圆 周M9相交的位置。
再者，关于配置在多显示器装置1的中央的显示器11-5,画面 G5设定为有效画面时的声像定位位置P5配置在多显示器装置1的中 央位置。
如上所述，把声像定位在各显示器的画面上时，以与显示器的个 数、画面的大小无关地配置于包围全部显示器的圆的圆周上或配置在 该圆的圆心上的方式设定各扬声器的音量操作或延迟操作的参数。由 此，在显示器彼此之间邻近时，在声像的位置变化的瞬间能使用户识 别它与以前的定位位置不同，即有效画面变化。
再者，在图9的例子中，用椭圆表示圆周M1，但是如果是包围 全部显示器的显示面的圓，就可以是正圆，也可以是椭圆。
此外，在图9的例子中，说明在各显示器11-1-11-9的画面G1 G9 中分别显示不同的图像，在多显示器装置1中构成9个画面的例子， 但是，如图10和图11所示，在构成缩放时的画面时，显示不同的图 像的画面是配置在包围全部显示器的圆的圆周上的。
在图10的例子中，放大画面GA1表示显示一个放大图像的显示 器ll-l、 11-2、 11-4、 11-5的画面，画面G3、画面G6、画面G7 G9 分别表示显示不同图像的显示器11-3、 11-6、 11-7~11-9的画面，PA1、 P3、 P6、 P7 P9分别表示放大画面GA1、画面G3、画面G6、画面 G7 G9设定为有效画面时的声像定位位置。
即，以在显示器11-3、 11-6、 11-7-11-9的画面G3、画面G6、 画面G7 G9设定为有效画面时的声像定位位置P3、 P6、 P7 P9与图 9的例子同样，配置于以多显示器装置1的中央位置为中心的比多显 示器装置1的显示面更大一围的圆的圆周M1上的位置的方式，设定
各扬声器12的音量操作或延迟操作的参数。
由此，即使在有缩放时的画面，并且显示器彼此接近时，在声像 的位置变化的瞬间也能使用户识别它与以前的定位位置不同，即有效 画面变4匕。
另一方面，以在显示器ll-l、 11-2、 11-4、 11-5的放大画面GAl 设定为有效画面时的声像定位位置PA1不是放大画面GA1的中央位 置而是配置在比放大画面GA1的中央位置更偏向与其他画面G3、画 面G6、画面G7 G9相反的方向的显示器11-1的位置的方式，设定各 扬声器12的音量操作或延迟操作的参数。
由此，从其他画面G3、画面G6、画面G7 G9把声像移动到放 大画面GA1时，能使用户容易识别该移动。
、在图ll的例子中，放大画面GBl表示显示一个放大图像的显示 器ll-l、 11-4、 11-7的画面，画面G2、画面G3、画面G5、画面G6、 画面G8、画面G9分别表示显示不同图像的显示器11-2、 11-3、 11-5、 11-6、 11-8、 11-9的画面，PB1、 P2、 P3、 P5、 P6、 P8、 P9表示画面 G2、画面G3、画面G5、画面G6、画面G8、画面G9设定为有效画 面时的声像定位位置。
即，以在显示器11-2、 11-3、 11-6、 11-8、 11-9的画面G2、画 面G3、画面G6、画面G8、画面G9设定为有效画面时的声像定位位 置P2、 P3、 P6、 P8、 P9与图9的例子同样，配置在以多显示器装置 1的中央位置为中心的比多显示器装置1的显示面更大一圏的圓的圆 周Ml上的位置的方式，设定各扬声器12的音量操作或延迟操作的 参数。此外，以在配置在多显示器装置1的中央的显示器11-5的画面 G5设定为有效画面时的声像定位位置P5配置在多显示器装置1的中 央位置的方式设定各扬声器12的音量操作或延迟操作的参数，
由此，即使在有缩放时的画面，并且显示器彼此邻近时，在声像 的位置变化的瞬间也能使用户识别它与以前的定位位置不同，即有效 画面变4匕。
另一方面，以在显示器ll-l、 11-4、 11-7的放大画面GB1设定
为有效画面时的声像定位位置PB1不是放大画面GB1的中央位置而 是配置在比中央位置更偏向与其他画面G2、画面G3、画面G5、画 面G6、画面G8、画面G9相反的方向(即图中左侧)的位置的方式， 设定各扬声器12的音量操作或延迟操作的参数。
由此，从其他画面G2、画面G3、画面G5、画面G6、画面G8、 画面G9把声像移动到放大画面GB1时，能使用户容易识别该移动。
下面，参照图12详细说明把缩放时的画面(放大画面)设定为 有效画面时的声音表现。
在图12的例子中，表示用多显示器装置1的9个显示器11-1~11-9 协调显示的一个节目的放大图像(放大画面)GCl(图中的阴影部分)。 该放大画面GC1与图11的画面GB1或画面G2相比，画面的大小、 显示的图像的大小等不同，声音也有必要进行与该图像的变化对应的 声音表现。
实际上，声像有必要通过紧缩一边定位在放大画面GC1的中心 一边按照图像或显示的图像的大小使声音具有扩展。因此，在多扬声 器系统中，使用多个扬声器12分担本来相反的2个要素的任务，通 过设定与分担的任务对应的参数来实现。
具体地进行说明。在图12的例子时，放大画面GC1周围的实线 的圆表示扬声器12的配置位置，该大小表示成为基准的声音的大小。 此外，箭头表示延迟的大小，虛线表示延迟的声音，该大小表示调整 后的声音的大小。此外，在放大画面GC1的上部从左按顺序排列配 置扬声器12-1~12-3,在放大画面GC1的下部从左按顺序排列配置扬 声器12-7 12-9，在放大画面GC1的左侧从上按顺序排列配置扬声器 12L-4 12L-6，在放大画面GC1的右侧从上按顺序排列配置扬声器 12R-4~12R-6。
再者，在图12的例子中，为了便于说明，扬声器12L-1和12R-1 设为扬声器12-1,扬声器12L-2和12R-2设为扬声器12-2，扬声器 12L-3和12R-3设为扬声器12-3,扬声器12L-7和12R-7设为扬声器 12-7，扬声器12L-8和12R-8设为扬声器12-8,扬声器12L-9和12R-9 设为扬声器12-9。
在图12的例子的扬声器系统中，使这些扬声器中、配置在上下 的扬声器12-1和12-7的对以及扬声器12-3和12-9的对如A的圆所 示，以成为基准的声音的大小输出与放大画面GC1对应的声音，以 此紧缩声像，定位在放大画面GC1的中心。
配置在上下左右的十字的扬声器12-2和12-8的对、12L-5和 12R-5的对如短的箭头所示对与放大画面GC1对应的声音进行稍少 的延迟操作，如B的圆所示用比基准更大的声音的大小输出与放大画 面GC1对应的声音，以此以声像表现画面GC1的大小的方式使声音 具有扩展。
使配置在左右的扬声器12L-4和12R-4的对、扬声器12L-6和 12R-6的对，如C的圆所示，以与基准相同的大小输出与放大画面 GC1对应的声音，如长的箭头所示，对与放大画面GC1对应的声音 进行过剩的延迟操作，以此使声音具有扩展，即具有余音(回声)。
即，在图12的例子时，在配置在上下的扬声器对的一方(扬声 器12-1和12-7、扬声器12-3和12-9)，紧缩声像，分配成为基准的 任务和定位在放大画面GC1的中心的任务，在配置在上下的扬声器 对的另一方(扬声器12-2和12-8)、配置在左右的扬声器对的一方 (扬声器12L-5和12R-5)，分配使与放大画面GC1的大小所对应的 声音具有扩展的任务，在配置在左右的扬声器对的另一方(扬声器 12L-4和12R-4、扬声器12L-6和12R-6)，分配使声音具有进一步的 扩展即回声的任务。
如上所述，缩放时的画面设定为有效画面时，使多个扬声器分担 任务，即进行基于与任务分担对应的参数的音频处理，以此能输出与 画面大小、以及所显示的图像的大小对应的声音。
图13表示图12的声音表现的其他例子，在图13的例子中，表 示9个显示器11-1 11-9中、由4个显示器11-1、 11-2、 11-4、 11-5 协调显示的一个节目的放大图像(放大画面)GC2 (图中阴影部分)。
图13的例子的扬声器系统中，使这些扬声器中、配置在放大画 面GC2以外的画面的上下或左右的扬声器12-3和12-9的对、扬声器 12L-6和12R-6的对，如A的圆所示，以成为基准的声音的大小输出。
使配置在放大画面GC2的上下的扬声器12-1和12-7、扬声器 12-2和12-8的对，如B的圆所示，以比基准更大的声音的大小输出 与放大画面GC2对应的声音，以此定位在位于多显示器装置1的靠 左的位置的放大画面GC2的中心。在扬声器12-1，如短箭头所示， 对与放大画面GC2对应的声音进行稍少的延迟操作，以此以声^^表 现放大画面GC2的大小的方式使声音具有扩展。
使配置在放大画面GC2的左右的扬声器12L-4和12R-4的对中 的扬声器12R-4如C2的圆所示，以成为基准的声音的大小输出与放 大画面GC2对应的声音，使扬声器12L-4，如短箭头所示，对与放大 画面GC2对应的声音进行稍少的延迟操作，如C1的圃所示，以比基 准更大的声音的大小输出与放大画面GC2对应的声音，以此以声像 表现位于多显示器装置1的靠左的位置的放大画面GC2的大小的方 式使声音具有扩展。
使配置在放大画面GC2的左右的12L-5和12R-5的对中的扬声 器12R-5如D2的圆所示，以成为基准的声音的大小输出与放大画面 GC2对应的声音，使扬声器12L-5如D1的圆所示，以与基准相同的 大小输出与放大画面GC2对应的声音，如长箭头所示，对与放大画 面GC2对应的声音进行过剩的延迟操作，以此使声音具有大的扩展， 即余音(回声)。
即，在图13的例子中，在配置在画面的上下左右以外的扬声器 的对(扬声器12-3和12-9、扬声器12L-6和12R-6)，紧缩声像，分 配成为基准的任务，在配置在画面的上下的扬声器的对(扬声器12-1 和12-7、扬声器12-2和12-8)，分配把声像定位到画面的中心的任 务，在配置在左右的扬声器的对的一方(扬声器12L-4和12R-4)分 配使声音具有扩展的任务，在配置在左右的扬声器的对的另一方(扬 声器12L-5和12R-5)分配使声音具有进一步扩展即余音的任务，
如上所述，在图13的例子时，也使多个扬声器分担任务，即，
进行基于与任务分担对应的参数的音频处理，以此能输出与画面大 小、显示的图像的大小对应的声音。
图14表示图12的声音表现的其他例子。在图14的例子中，表 示9个显示器11-1 11-9中、由3个显示器11-1、 11-4、 11-7协调显 示的一个节目的放大图像(放大画面)GC3 (图中阴影部分)。
图14的例子的扬声器系统中，使配置在放大画面GC3以外的画 面的上下的扬声器12-2和12-8的对、扬声器12-3和12-9的对，如A 的圆所示，以成为基准的声音的大小输出与放大画面GC3对应的声 音。
4吏配置在放大画面GC3的上下的扬声器12-1和12-7的对如B 的圆所示，以比基准更大的声音的大小输出与放大画面GC3对应的 声音，进而如短箭头所示，对与放大画面GC3对应的声音进行稍少 的延迟操作， 一边定位在位于多显示器装置l的靠左的位置的放大画 面GC3的中心， 一边以声像表现放大画面GC3的大小的方式使声音 具有扩展。
^使配置在放大画面GC3的左右的扬声器12L-5和12R-5的对中 的扬声器12R-5如C2的圆所示，以成为基准的声音的大小输出与放 大画面GC3对应的声音，使扬声器12L-5如短箭头所示，对与放大 画面GC3对应的声音进行稍少的延迟操作，如C1的圆所示，以比基 准更大的声音的大小输出与放大画面GC3对应的声音，以此以声像 表现位于多显示器装置1的靠左的位置的放大画面GC3的大小的方 式使声音具有扩展。
4吏配置在放大画面GC3的左右的扬声器12L-4和12R-4的对、 扬声器12L-6和12R-6的对中的扬声器12R-4和12R-6,如D2的圆 所示，以成为基准的声音的大小输出与放大画面GC3对应的声音， 使扬声器12L-4和12L-6如Dl的圆所示，以与基准相同的大小输出 与放大画面GC3对应的声音，如短箭头所示，对与放大画面GC3对 应的声音进行稍少的延迟操作，以此以声像表现位于多显示器装置1 的靠左的位置的放大画面GC3的大小的方式使声音具有扩展。
即，在图14的例子中，在配置在画面以外的上下的扬声器的对 (扬声器12-2和12-8、扬声器12-3和12-9)，紧缩声像，分配成为 基准的任务，在配置在画面的上下的扬声器的对(扬声器12-1和 12-7)，分配把声像定位到画面的中心的任务，在配置在左右的扬声 器的对(扬声器12L-4和12R-4、 12L-5和12R-5、 12L-6和12R-6 )， 分配使声音具有扩展的任务。再者，该情况下，画面GC3细长，所 以不使其具有余音。
如上所述，在图13的例子时，也使多个扬声器分担任务，即， 进行基于与任务分担对应的参数的音频处理，以此能输出与画面大 小、显示的图像的大小对应的声音。
下面，参照图15的程序流程图，详细说明基于扬声器引擎部33 的声音输出控制处理。
控制部54在步骤Sll中，作为自身的信息把扬声器引擎部33 的状态(例如，连接在主控制部32，构成多扬声器2的状态)对主控 制部32发送，并且通过主控制部32接收来自其他引擎部(其他扬声 器引擎部33或图像引擎部34 )的信息。控制部54对音频信号处理部 53供给来自其他引擎部的信息。
音频信号处理部53在步骤S12中，根据来自其他引擎部的信息， 选择与对应的扬声器12L、12R和12B的音频信号处理有关的参数组。
即，音频信号处理部53例如能根据接收到的图像引擎部34的状 态、其他扬声器引擎部33的状态，确认多显示器装置1以及多扬声 器2的结构(构成多显示器装置1的显示器11的数量及其配置、构 成多扬声器2的扬声器12的数量及其配置)等，以此取得多扬声器2 中的对应的扬声器12L、 12R和12B的ID号，根据该ID号，选择与 多显示器装置1以及多扬声器2的多种结构、以及与这些结构中的对 应的扬声器12L、 12R和12B的ID号所对应的音频处理有关的参数 组。
该参数组是根据上述的声像定位或声音表现，按各种有效画面或 按画面大小预先设定的，再者，图15的步骤S11和S12也能只在扬
声器引擎部33或图像引擎部34新连接时或取下时进行。
另一方面，调谐部31的多个调谐器分别选择从未图示的天线接 收的来自广播电台的广播信号的接收频带，用给定的方式把选择的接 收频带的广播信号解调，把解调的信号中的图像信号和音频信号对主 控制部32输出，主控制部32对扬声器引擎部33输出由用户设定的 有效画面的音频信号，并且也输出例如l系统的其他节目的音频信号。
在步骤S13中，音频输入部51-1把来自主控制部32的与有效画 面对应的音频信号(左音频信号和由音频信号)作为扬声器输出信号 (扬声器左输出信号和扬声器右输出信号)而输入，对AD转换部52-1 输出。由AD转换部52-1把来自音频输入部51-1的扬声器左输出信 号和扬声器右输出信号进行数字化，对音频信号处理部53输出。
在步骤S14中，音频输入部51-2把来自主控制部32的与有效画 面对应的音频信号以外的1系统的音频信号(左音频信号和右音频信 号)作为子通道音频信号(左子通道音频信号和右子通道音频信号) 而输入，对AD转换部52-2输出。由AD转换部52-2把来自音频输 入部51-2的左子通道音频信号和右子通道音频信号进行数字化，对音 频信号处理部53输出。
在步骤S15中，监视处理部53a分析从DA转换部55-2输入的 子通道音频信号，在子通道音频信号中监视紧急广播的音频信号，判 定是否检测到紧急广播。在判定未检测到紧急广播时，处理进入步骤 S16,音频信号处理部53执行来自AD转换部52-1的扬声器输出信号 的音频信号处理。参照图16,在后面描述该音频信号处理的细节。
利用步骤S16的扬声器输出信号的音频信号处理，按照图像引擎 部34或扬声器引擎部33的处理结果(例如，多显示器装置l中的有 效画面的位置或大小)，从参数组中选择使用的参数，对来自AD转 换部52-1的扬声器输出信号进行基于所选择的参数的音频处理。
音频处理后的全部范围(Full Range)的左音频信号和右音频信 号对DA转换部55-1输出，把音频处理后的低频带(Bass )的音频信 号对DA转换部55-2输出。DA转换部55-1对来自音频信号处理部53的音频处理后的全部范围的左音频信号和右音频信号进行DA转 换，把模拟的左音频信号和右音频信号分别对音量控制部56-1输出。 DA转换部55-2对来自音频信号处理部53的音频处理后的低频带的 音频信号进行DA转换，把模拟的低频带的音频信号对音量控制部 56-2输出。
在步骤S17中，音量控制部56-l根据控制部54的控制，控制来 自DA转换部55-1的模拟的左音频信号和右音频信号的音量，分别通 过放大器41L、 41R对扬声器12L、 12R输出。由此，从扬声器12L、 12R分别输出与进行信号处理后的扬声器输出信号的左音频信号和右 音频信号对应的左声音和右声音。
此外，音量控制部56-2根据控制部54的控制，控制来自DA转 换部55-2的模拟的低频带的音频信号的音量，通过放大器41B对扬 声器12B输出。由此，从扬声器12B输出与进行音频处理后的扬声器 输出信号的低频带的音频信号对应的低频带的声音。
另一方面，紧急广播等是与特征性的效果音一起发送的，所以从 子通道音频信号检测到紧急广播用的特征性的效果音时，判定为检测 到紧急广播，处理进入步骤S18。
在步骤S18中，音频信号处理部53从扬声器12L、 12R和12B 输出用于对用户通知紧急广播的给定的声音。
即，音频信号处理部53生成与用于对用户通知紧急广播的给定 的声音对应的音频信号(左音频信号、右音频信号、低频带的音频信 号)，经由DA转换部55-1以及音量控制部56-1使扬声器12L、 12R 输出所生成的左音频信号、右音频信号，经由DA转换部55-2和音量 控制部56-2使扬声器12B输出所生成的低频带的音频信号。
在步骤S19中，音频信号处理部53把紧急广播的检测结果经由 控制部54和主控制部32供给其他扬声器引擎部33或图像引擎部34。
根据该紧急广播的检测结果，例如即使在其他扬声器引擎部33 未检测到紧急广播，在其他扬声器引擎部33也同样进行以下的步骤 S20以后的处理。或者，也能构成为利用图像引擎部34使显示器11
显示检测到紧急广播的节目的图像。紧而，根据紧急广播的检测结果，
使图像引擎部34显示用于使用户选择"是否切换到紧急广播的节目" 的图像，能按照用户的选择，进行以下的步骤S20的处理。
在步骤S20中，音频信号处理部53代替扬声器输出信号执行子 通道音频信号的音频信号处理。再者，该子通道音频信号的音频信号 处理只是处理对象的音频信号不同而已，进行基本上与参照图16在 后面描述的(步骤S16的)音频信号处理同样的处理，所以该说明会 重复，因此省略。
利用步骤S20的子通道音频信号的音频信号处理，按照图像引擎 部34或扬声器引擎部33的处理结果(例如，多显示器装置l的有效 画面的位置或大小)，从参数组中选择要使用的参数，从AD转换部 52对子通道音频信号进行基于所选择的参数的音频处理。
音频处理后的全部范围(Full Range)的左音频信号和右音频信 号对DA转换部55-1输出，音频处理后的低频带(Bass )的音频信号 对DA转换部55-2输出。DA转换部55-1对来自音频信号处理部53 的音频处理后的全部范围的左音频信号和右音频信号进行DA转换， 把模拟的左音频信号和右音频信号分别对音量控制部56-1输出。DA 转换部55-2对来自音频信号处理部53的音频处理后的低频带的音频 信号进行DA转换，把模拟的低频带的音频信号对音量控制部56-2输 出。
在步骤S17中，音量控制部56-1根据控制部54的控制，控制来 自DA转换部55-1的模拟的左音频信号和右音频信号的音量，分别通 过放大器41L、 41R对扬声器12L、 12R输出。由此，从扬声器12L、 12R分别输出与进行信号处理后的子通道音频信号的左音频信号和右 音频信号对应的左声音和右声音。
此外，音量控制部56-2根据控制部54的控制，控制来自DA转 换部55-2的模拟的低频带的音频信号的音量，通过放大器41B对扬 声器12B输出。由此，从扬声器12B输出与进行音频处理的子通道音 频信号的低频带的音频信号对应的低频带的声音。
即，检测到的紧急广播的子通道音频信号从扬声器12L、 12R和 12B输出。
如上所述，对扬声器引擎部33输入扬声器输出信号以外的子通 道音频信号，所以进行使用子通道音频信号的处理，能把处理结果反 映到声音输出处理中。
再者，在图15的例子中，说明在扬声器引擎部33中，把处理对 象的音频信号从扬声器输出信号切换为子通道音频信号的例子，但是 也能根据步骤S19中供给的检测结果，利用主控制部32，把检测到紧 急广播的节目的音频信号作为扬声器输出信号对各扬声器引擎部33 输出。这时，在扬声器引擎部33中，通过处理扬声器输出信号，从 扬声器12输出检测到紧急广播的节目的声音。
此外，在图15的例子中，说明检测到紧急广播或速报等的例子， 但是并不限于此，例如除此之外也能同样进行基于特征性的效果音 检测的临时新闻的检测；基于音量变化的监视的CM、高潮场景的检 测；进而基于与预先登记的声音模式(例如，节目的开始、节目内的 给定的角落(corner)的开始、基于特定的说话者的台词等)的匹配 的检测等。
在所述的说明中，说明输入子通道音频信号并进行监视的例子， 但是输入的声音并不限于节目等的声音，例如也可以具有麦克风，并 检测从麦克风输入的声音。
下面，参照图16的程序流程图说明图15的步骤S16的音频信号 处理。再者，该处理是在图9所示的多显示器装置1中构成9个画面、 把其一个画面设定为有效画面时的处理。此外，图16的音频信号处 理由图17的音频信号处理部53执行。
图17是表示执行图16的处理的音频信号处理部的详细结构例的 图。再者，在图17中，实线表示输入信号(扬声器输出信号或子通 道音频信号)的流向，虚线表示指示信号或控制信号的流向。此外， 只表示了 l条实线，但是实际上，输入左右的音频信号，从音频信号 处理部53输出左右的音频信号和低频带的音频信号.
图17的音频信号处理部53构成为包括频率分析部101、参数存 储部102、延迟操作部103和音量操作部104。来自AD转换部52-1 的输入信号(音频信号)输入到频率分析部101和延迟操作部103。 此外，来自表示有效画面的图像引擎部34的有效画面识别信号经由 主控制部32和控制部54供给参数存储部102。
频率分析部101检测输入信号的频率成分，把检测到的频率成分 提供给参数存储部102。
在参数存储部102中存储多显示器装置1和多扬声器2多种结构 中的各扬声器12所对应的参数组。此外，该参数组是根据上述的声 像定位或声音表现设定的，由多显示器装置1的有效画面的位置或大 小、与低频成分和高频成分的比率所对应的参数构成。
参数存储部102按照从控制部54供给的图像引擎部34的状态或 其他扬声器引擎部33的状态，选择参数组，从所选择的参数组中选 择从控制部54供给的有效画面识别信号、来自频率分析部101的频 率成分中包含的低频成分和高频成分的比率所对应的参数(延迟操作 量或音量操作量)，按照所选择的参数，控制延迟操作部103和音量 操作部104。
即，在多扬声器系统中的输入信号中考虑音乐、电视音频信号、 无线电音频信号等各种信号。此外，如参照图6所示，延迟操作或音 量操作分别对声像定位的贡献大幅度依存于输入信号中包含的频率。 这是因为基于各自的操作特性，人为了感觉到延迟而需要某种程度 长的波长，所以输入信号中包含的低频成分大幅度会影响。另一方面， 高频成分原本指向性高，所以音量操作有效起作用。
因此，在参数存储部102中，用由频率分析部101检测的频率成 分中包含的低频成分和高频成分的比率，决定最佳的参数(延迟操作 量或音量操作量)，以此实现不受输入信号影响的声像定位。
延迟操作部103根据参数存储部102的控制，对输入信号进行延 迟操作，把延迟操作后的音频信号对音量操作部104输出。音量操作 部104根据参数存储部102的控制，对来自延迟操作部103的音频信
号进行增大或减小音量的音量操作，把音量操作后的音频信号对DA 转换部55-1或55-2输出。
回到图16,说明图17的音频信号处理部53的音频信号处理。 来自AD转换部52-1的输入信号(音频信号)对频率分析部101和延 迟操作部103输出。
在步骤S31中，频率分析部101分析输入信号的频率，把所分析 的频率成分供给参数存储部102。再者，虽然也能时常分析，但是实 际上例如分析在用户按下频道按钮的瞬间输入的输入信号的频率。此 外，该检测时的分析对象并不限于频率，也能利用时域信号的分析， 即在某时间内把给定的频率交叉几次。
在步骤S32中，参数存储部102把来自显示有效画面的图像引擎 部34的有效画面识别信号经由主控制部32和控制部54而输入。
在步骤S33中，参数存储部102从在图15的步骤S12中选择的 参数组中进而选择与来自频率分析部101的频率的频率分析结果以及 有效画面识别信号对应的参数。例如，在图4的例子时，即显示器11-1 的画面G1为有效画面时，选择图5的参数。
在步骤S34中，参数存储部102控制延迟操作部103，按照所选 择的参数，使输入信号延迟。例如，图4的扬声器12L-4和扬声器12R-4 时，如图5所示，延迟操作部103使对扬声器12R-4输出的右音频信 号延迟50。把延迟操作后的音频信号对音量操作部104输出。
在步骤S35中，参数存储部102控制音量操作部104，按照所选 择的参数，操作延迟的信号的音量，对DA转换部55-1或55-2输出。 例如，图4的扬声器12L-4和扬声器12R-4时，如图5所示，音量操 作部104以0.5的比率操作对扬声器12R-4输出的右音频信号和对扬 声器12L-4输出的左音频信号的音量。
然后，处理进入步骤S17，在步骤S17中，用最适合于输入信号 的频率和有效画面的参数来操作了延迟或音量后的信号所对应的声 音从对应的扬声器12L、 12R和12B输出。
即，由与全部扬声器12对应的扬声器引擎部33-1~33-9进行图
19的处理。因此，在显示器11-1的画面Gl设定为有效画面时，以与 画面G1对应的声音的声像定位在图9的Pl的方式操作了音频信号的 延迟或音量后的声音从各扬声器12输出。由此，听起来图4的显示 器11-1的画面Gl的声音的声像定位在画面Gl。
下面，参照图18的程序流程图，说明本发明的步骤S16的音频 信号处理的其他例子。再者，该处理是图12 图14的缩放时的画面设 定为有效画面时的处理。此外，图18的音频信号处理由图19所示的 音频信号处理部53执行。
图19是表示执行图18的处理的音频信号处理部的详细结构例的 图。再者，在图19的例子中，只是参数存储部102变更为参数存储 部151的点与图17的音频信号处理部53不同，具有频率分析部101、 延迟操作部103、音量操作部104的点是共同的。
即，经由主控制部32和控制部54对图19的参数存储部151不 仅供给来自显示有效画面的图像引擎部34的有效画面识别信号，还 供给画面大小信号。
参数存储部151与参数存储部102同样地构成，按照从控制部 54供给的图像引擎部34的状态或其他扬声器引擎部33的状态，选择 参数组，从所选择的参数组中选择从控制部54供给的有效画面识别 信号和画面大小信号、来自频率分析部101的频率成分中包含的低频 成分和高频成分的比率所对应的参数(操作延迟量或音量操作量)， 按照所选择的参数，控制延迟操作部103和音量操作部104。
回到图18，说明基于图19的音频信号处理部53的音频信号处 理。再者，图18的步骤S51、 S54和S55基本上进行与图16的步骤 S31、 S34、 S35同样的处理，所以会重复，适宜省略详细的说明。
来自AD转换部52-1的输入信号(音频信号)对频率分析部101 和延迟操作部103输入。在步骤S51中，频率分析部101分析输入信 号的频率，把所分析的频率成分供给参数存储部151。
在步骤S52中，参数存储部151把来自显示图像引擎部34的有 效画面识别信号和画面大小信号经由主控制部32和控制部54而输 入。
在步骤S53中，参数存储部151从在图15的步骤S12中所选择 的参数组中，进而选择来自频率分析部101的频率的分析结果、有效 画面识别信号和画面大小信号所对应的参数。例如，在图12的例子 时，在显示器11-1~11-9的放大画面GC1为有效画面时，选择与放大 画面GC1对应的参数。
在步骤S54中，参数存储部151控制延迟操作部103,按照所选 择的参数，使输入信号延迟。例如，在图12的扬声器12L-5和扬声 器12R-5时，延迟操作部103把对扬声器12R-4输出的右音频信号和 对扬声器12L-4输出的左音频信号稍微延迟。
在步骤S55中，参数存储部151控制音量操作部104,按照所选 择的参数，操作延迟的信号的音量，对DA转换部55-1或55-2输出。 例如，图12的扬声器12L-5和扬声器12R-5时，音量操作部104使 对扬声器12R-4输出的右音频信号和对扬声器12L-4输出的左音频信 号的音量比基准更大地操作。
然后，处理进入步骤S17，在步骤S17中，用最适合于输入信号 的频率、有效画面、画面大小的参数来操作了延迟或音量后的信号所 对应的声音从对应的扬声器12L、 12R和12B输出。
即，由所有扬声器12所对应的扬声器引擎部33-l 33-9进行图 19的处理。因此，图12的显示器11-1~11-9的放大画面GCli殳定为 有效画面时，把与放大画面GC1对应的声音的声像按照放大画面GC1 的中央位置和大小操作音频信号的延迟或音量后的声音从各扬声器 12输出。由此，听起来图12的显示器11-1 11-9的放大画面GC1的 声音的声像定位在画面GC1。
如上所述，在多扬声器系统中，各扬声器引擎部相互收发信息， 根据收到的信息分别进行音频处理，所以能可缩放地进行输出数的变 更，或可对针对各输出的音频处理施加个别的处理。
此外，在扬声器引擎部输入与输出的音频信号不同的子通道音频 信号，所以能把处理子通道音频信号的处理结果反映到音频处理中，
由此，例如如上所述，在竟争节目中有速报时，能立刻把声音切换到 该竟争节目。把该处理结果也发送给图像引擎部，以此能立刻把图像 切换到竟争节目。
在多扬声器系统中，构成多扬声器2的扬声器12配置在多显示 器装置l的显示面上的上下左右，所以无论有效画面移动到哪个位置， 都能进行向上下左右的任意位置的声像定位。由此，使用户能直观地 识别有效画面的位置。
此外，在多扬声器系统中，不是显示器的画面，而是在比多显示 器装置1的显示面(全画面G1 G9)还大一圏的圆的中心或圆周上的 位置配置声像，所以即使显示器彼此间接近，也能使用户能直观地识 别有效画面的移动。
进而，在多扬声器系统中，对各扬声器分配(设定)紧缩声像的 任务、扩展声像的任务、提供余音的任务等任务，进行与所使用的显 示器数或图像的缩放倍率(有效画面大小)对应的延迟和音量操作， 所以不依赖所使用的显示器数或图像的缩放倍率而使声像定位在图 像的中心。
此外，在多扬声器系统中，分析输入信号的频率特性，进行适合 它的延迟和音量操作，所以能抑制声像定位依赖于输入信号的情形。
上述的一系列处理是能由硬件执行，但是也能通过软件执行。
在由软件执行一 系列处理时，从程序记录介质向嵌入于专用硬件 中的计算机或通过安装各种程序能执行各种功能的例如通用个人电 脑中安装构成该软件的程序。
图20是表示由程序执行上述的一系列处理的个人电脑301的结 构例的框图。CPU311 (中央处理单元，Central Processing Unit) 311 按照存储在ROM (只读存储器，Read Only Memory) 312或存储部 318中的程序，执行各种处理。在RAM (随机存取存储器，Random Access Memory) 313中适宜存储要执行的程序或数据等。这些 CPU311、 ROM312、 RAM313通过总线314相互连接。
在CPU311通过总线314连接输入输出接口 315。在输入输出接
口 315连接由传感器21、键盘、鼠标、麦克风等构成的输入部316、 由显示器、扬声器等构成的输出部317。 CPU311与从输入部316输
入的指令对应地执行各种处理。然后，CPU311把处理结果对输出部
317输出。
连接在输入输出接口 315上的存储部318例如由硬盘构成，存储 CPU311执行的程序或各种数据。通信部319经由因特网或局域网等 网络与外部的装置通信。
此外，也可以经由通信部319取得程序，存储到存储部318。 连接在输入输出接口 315上的驱动器320在安装了磁盘、光盘、 光磁盘、或半导体存储器等移动介质321时，驱动它们，取得其中记 录的程序或数据。把所取得的程序或数据按照必要对存储部318传送、 存储。
存储安装在计算机中的、能由计算机执行的状态下的程序的程序 记录介质如图20所示，由磁盘(包含软盘)、光盘(包含CD-ROM (密致盘-只读存储器，Compact Disc-Read Only Memory ) 、 DVD(数 字通用盘，Digital Versatile Disc))、光磁盘、由半导体存储等构成 的封装介质即移动介质321、或暂时或永久存储程序的ROM312、构 成存储部318的硬盘等构成。根据需要，经由路由器、调制解调器等 接口即通信部319，利用局域网、因特网、数字卫星广播这样的有线 或无线的通信介质来向程序记录介质存储程序。
再者，在本说明书中，描迷存储在程序记录介质中的程序的步骤 是当然可以是按照记栽的顺序按时序进行的处理，即使不一定按时序 处理，也包含并列或个别执行的处理。
此外，在本说明书中，系统是表示由多个装置构成的装置整体。
再者，本发明的实施例并不限于上述形态，在不脱离本发明的要 旨的范围中能进行各种变更。
权利要求
1.一种输出控制系统，构成为包括多个输出控制装置，该多个输出控制装置分别控制与在多画面显示装置中显示的图像对应的声音向二维配置扬声器中的对象扬声器的输出，其中该多画面显示装置是把多个显示装置配置为阵列状而成的，该二维配置扬声器是以至少在上下2个以上并且左右2个以上的方式二维配置扬声器的，其中所述多个输出控制装置分别包括相互收发其他输出控制装置的状态或处理结果等信息的通信部件；以及根据由所述通信部件接收到的所述其他输出控制装置的信息，进行对所述对象扬声器输出的音频信号的处理的信号处理部件。
2. 根据权利要求l所述的输出控制系统，其中 还具有分别控制向构成所述多画面显示装置的所述多个显示装置的显示的多个显示控制装置；所述通信部件还从所述多个显示控制装置接收所述多个显示装 置的状态或处理结果等信息；所述信号处理部件根据由所述通信部件接收到的所述多个显示 装置的信息，进行对所述对象扬声器输出的音频信号的处理。
3. 根据权利要求l所述的输出控制系统，其中 所述多个输出控制装置进一步分别具有 输入对所述扬声器输出的音频信号的第 一信号输入部件； 输入对所述扬声器输出的音频信号以外的音频信号的第二信号输入部件；以及检测从所述第二信号输入部件输入的所述音频信号的特征的检 测部件；所述信号处理部件按照由所述检测部件检测到的所述音频信号 的特征的检测结果，进行从所述第二信号输入部件输入的所述音频信 号的处理，对所述对象扬声器输出。
4. 根据权利要求3所述的输出控制系统，其中 还具有分别控制向构成所述多画面显示装置的所述多个显示装置的显示的多个显示控制装置；所述通信部件还把由所述检测部件检测到的所述音频信号的特 征的检测结果发送给所述多个显示控制装置。
5. 根据权利要求1所述的输出控制系统，其中 所述信号处理部件进行对所述对象扬声器输出的音频信号的处理，以便使与在所述多画面显示装置上显示的图像所对应的声音的声 像定位于所述多画面显示装置的显示面上的任意位置上。
6. 根据权利要求5所述的输出控制系统，其中 所述信号处理部件进行对所述对象扬声器输出的音频信号的处理，以便使与在构成所述多画面显示装置的所述多个显示装置中的一 个显示装置上显示的图像所对应的声音的声像定位于所述显示面上 的所述多画面显示装置的中央位置或以所述中央位置为中心的圆周 上。
7. 根据权利要求5所述的输出控制系统，其中 所述信号处理部件进行对所述对象扬声器输出的音频信号的处理，以便使与在构成所述多画面显示装置的所述多个显示装置中的2 个以上的显示装置上显示的图像所对应的声音的声像定位于与在所 述2个以上的显示装置上显示的图像大小对应的定位位置上。
8. 根据权利要求5所述的输出控制系统，其中 对所述扬声器分别设定对于在所述多画面显示装置中显示的图像所对应的声音的声像提供不同的效果的任务；所述信号处理部件按照对所述对象扬声器设定的任务，进行对所 述对象扬声器输出的音频信号的处理。
9. 根据权利要求8所述的输出控制系统，其中 对所述对象扬声器设定提供紧缩声像的效果的任务。
10. 根据权利要求8所述的输出控制系统，其中 对所述对象扬声器设定提供扩展声像的效果的任务。
11. 根据权利要求8所述的输出控制系统，其中 对所述对象扬声器设定提供余音的任务。
12. —种输出控制系统的输出控制方法，该输出控制系统构成为 包括多个输出控制装置，该多个输出控制装置分别控制与在多画面显 示装置中显示的图像对应的声音向二维配置扬声器中的对象扬声器 的输出，其中该多画面显示装置是把多个显示装置配置为阵列状而成 的，该二维配置扬声器是以至少在上下2个以上并且左右2个以上的 方式二维配置扬声器的，其中所述多个输出控制装置中的各个的输出控制方法包括 相互收发其他输出控制装置的状态或处理结果等信息的步骤；以及根据接收到的所述其他输出控制装置的信息，进行对所述对象扬 声器输出的音频信号的处理的步骤。
13. —种输出控制装置，构成由多个输出控制装置构成的输出控 制系统，该输出控制装置控制与在多画面显示装置中显示的图像对应 的声音向二维配置扬声器中的对象扬声器的输出，其中该多画面显示装置是把多个显示装置配置为阵列状而成的，该二维配置扬声器是以 至少在上下2个以上并且左右2个以上的方式二维配置扬声器的，该 输出控制装置包括相互收发其他输出控制装置的状态或处理结果等信息的通信部 件；以及根据由所述通信部件接收到的所述其他输出控制装置的信息，进 行对所述对象扬声器输出的音频信号的处理的信号处理部件。
14. 一种输出控制装置的输出控制方法，该输出控制装置构成由 多个输出控制装置构成的输出控制系统，该输出控制装置控制与在多 画面显示装置中显示的图像对应的声音向二维配置扬声器中的对象 扬声器的输出，其中该多画面显示装置是把多个显示装置配置为阵列 状而成的，该二维配置扬声器是以至少在上下2个以上并且左右2个 以上的方式二维配置扬声器的，该输出控制方法包括 相互收发其他输出控制装置的状态或处理结果等信息的步骤；以及根据接收到的所述其他输出控制装置的信息，进行对所述对象扬 声器输出的音频信号的处理的步骤。
15. —种程序，使构成由多个输出控制装置构成的输出控制系统 的输出控制装置执行如下处理，即控制与在多画面显示装置中显示的 图像对应的声音向二维配置扬声器中的对象扬声器的输出，其中该多 画面显示装置是把多个显示装置配置为阵列状而成的，该二维配置扬 声器是以至少在上下2个以上并且左右2个以上的方式二维配置扬声 器的，其中包括相互收发其他输出控制装置的状态或处理结果等信息的步骤；以及根据接收到的所述其他输出控制装置的信息，进行对所述对象扬 声器输出的音频信号的处理的步骤。
全文摘要
提供一种输出控制系统和方法、输出控制装置和方法、程序。多扬声器(2)控制以包围由显示器(11-1～11-9)构成的多显示器装置的方式配置的9对扬声器(12L-1～12L-9)以及扬声器(12R-1～12R-9)的声音输出，以便使与在多个或1个显示器(11)上显示的画面中用户可操作的有效画面所对应的声音的声像定位于有效画面上。本发明能应用于由多个扬声器构成的、控制与在由多个显示器构成的多显示器装置中显示的图像所对应的声音输出的多扬声器系统中。能按照多画面显示装置上显示的图像，进行该图像所对应的声音的音频信号处理。
文档编号H04R3/12GK101175337SQ20071018172
公开日2008年5月7日 申请日期2007年10月23日 优先权日2006年10月23日
发明者岛淳一, 有光哲彦, 江间拓郎, 近藤哲二郎 申请人:索尼株式会社