专利名称：收发机系统、发送机和接收机以及信息处理方法
技术领域：
本发明涉及用于交换运动图像信号的收发机系统以及包括在该收发机系统中的发送机和接收机。本发明进一步涉及在收发机系统、发送机和接收机中执行的信息处理方法。
背景技术：
本申请人提议过一种音频/视频(AV)系统，例如，在该系统中基站装置和监视装置通过无线通信连接(参阅JP-A-2001-358966)。
例如，该AV系统的基站装置包括用于电视广播的调谐器，因此它能接收、选择电视信号并将电视信号解调成视频信号(运动图像信号)。例如，该基站装置还包括视频信号输入终端，因此它具有从外部输入视频信号的功能。于是，可以将处理后得到的视频信号转换成可以无线传输和输出的压缩编码视频数据。
例如，该监视装置非常小足以在室内移动使用，并且能接收从基站装置无线发送来的编码视频数据。该监视装置在接收到的数据上执行解码处理和对接收到的数据进行扩展，并将结果显示和输出成图像。
监视装置还可以执行控制不同基站的操作，包括选择电视广播站和选择视频信号服务作为外部信源，并将操作信息发送给基站装置。基站装置控制调谐器来切换选定的信道和/或根据接收到的操作信息来切换外部信源的输入。
使用所述AV系统，用户可以在室内的任何地方携带和使用监视装置。换句话说，在监视装置能与基站装置进行通信的范围内，用户可以观看由基站装置获得的并且由监视装置输出的内容，例如电视广播。
目前，该AV系统是作为一种包括基站装置和监视装置的系统提供给用户的。但是，所述AV系统也可以发展成一种包括基站装置和多个监视装置的组合的AV系统。
包括一基站装置和多个监视装置的AV系统的应用如下所述。首先，可以在住宅中提供一个基站装置，居住者，例如生活在该住宅中的家庭成员可以持有和使用多个监视装置中的每一个。在这种情况下，不同类型的内容图像分别输出到多个监视屏幕上。换句话说，提供一种系统，其中每个不同的视频信号可以从一个公共基站装置传输到多个监视装置中的每一个上。
用AV系统的这种结构，多个用户中的每一个都能欣赏由用户自己使用的监视装置输出的优选内容的图像。而且，例如，由于一个基站装置对多个监视装置来说是公用的，所以采用和使用该AV系统的用户可以有这样的好处，即住宅中的空间不会被许多基站装置所占用并且购买费用也能因此减少。
如上所述，基站装置将视频信号转换成压缩编码视频信号以用于发送。监视装置对接收到的压缩编码视频数据进行解码以用于显示。换句话说，基站装置包括用于压缩和编码视频信号的视频编码器，而监视装置包括用于解码压缩编码视频信号的视频解码器。而且，如上所述，目前AV系统是假设一个基站装置和一个监视装置之间是一对一的关系，并且基站装置发送给监视装置的视频信号因此与一条内容相对应。所以，基站装置的视频编码器只包括一个与视频信号输入相对应的信道，而监视装置的视频解码器也只包括一个与接收到的压缩编码视频信号的输入相对应的信道。
例如，为了从一个公共基站装置向多个监视装置的每一个发送每个不同的信号，在包含有一个基站装置和多个监视装置结构的AV系统中，基站装置自然具有如图15所示的结构。为了简单描述，图15示出了AV系统中监视装置的最大数量为两个的情况时的基站装置的结构。
这里，图15中所示的基站装置获得运动图像信号(视频信号)A和运动图像信号B，它们是不同种类的视频内容，作为与两个监视装置相对应的运动图像的视频源。
根据这两个运动图像信号A和B，在这里提供第一视频编码器12-1和第二视频编码器12-2。第一视频编码器12-1和第二视频编码器12-2中的每一个都通过预定技术来压缩和编码输入的运动图像信号(视频信号)并输出编码的运动图像数据结果。在这种情况下，运动图像信号A和B分别同时输入到第一视频编码器12-1和第二视频编码器12-2中。换句话说，第一视频编码器12-1输出从运动图像信号A的压缩和编码中生成的编码运动图像数据，而第二视频编码器12-2输出从运动图像信号B的压缩和编码中生成的编码运动图像数据。
以这种方式从第一视频编码器12-1和第二视频编码器12-2输出的运动图像信号A的编码运动图像数据和运动图像信号B的编码运动图像数据在控制部分13(即中央处理单元(CPU))的控制下被传递并存储在存储器14中。然后，控制部分13以预定定时顺序加载存储器14中存储的运动图像信号A的编码运动图像数据和运动图像信号B的编码运动图像数据并将它们传递到通信部分15。在控制部分13的控制下，通信部分15对传递的编码运动图像数据执行转换成通信数据的处理，例如分组，并将待发运动图像数据发送和输出到目的监视装置。这里，当提供了未示出的监视装置A和B这两个监视装置时，就将运动图像信号A的待发运动图像数据和运动图像信号B的待发运动图像数据分别发送到作为目的地的监视装置A和监视装置B。
因此，为了允许一个基站装置能向多个监视装置同时发送不同种类内容的运动图像信号，基站装置中提供的视频编码器的数量要与系统中包括的监视装置的数量相对应，即，与要同时发送的运动图像信号的最大数目相对应。
在这种情况下，例如，当以上述方式将运动图像信号A和B的待发运动图像数据同时从图15所示的基站装置发送时，监视装置A只接收到运动图像信号A的待发运动图像数据，监视装置B只接收到运动图像信号B的待发运动图像数据。
然后，监视装置A获得接收的作为编码运动图像数据的运动图像数据并通过视频解码器对数据进行解码，将结果显示成运动图像。类似的，监视装置B获得接收的作为编码运动图像数据的待发运动图像数据并通过视频解码器对数据进行解码，将结果显示成运动图像。
对于要在监视装置中执行的解码和显示的操作与处理，监视装置只需要通过一个信道的视频解码器来解码和显示接收的和获得的编码运动图像数据。换句话说，由于这一点，监视装置可以具有与包括一个基站装置和一个监视装置的AV系统中的监视装置相同的结构。
但是，当采用图15所示的基站装置的结构时，根据系统中包含的监视装置的数量，要使用的视频编码器的数量必须与要同时发送的运动图像信号的最大数目相对应。因此，基站装置的电路尺寸就增大了，这增大了基底的尺寸和装置的尺寸，也增加了重量。
如参照图15所述的，尽管在控制部分(即CPU)的控制下可以调整从多个视频编码器同时编码和输出的编码运动图像数据的业务量，但是实际上控制处理给CPU带来十分大的负荷，这就降低了操作的可靠性。
而且，由于多条编码运动图像数据必须以实际的传输操作从基站装置同时发送，其中每一条编码运动图像数据都是独立编码的，所以就增加了用来编码运动图像数据的通信网络上的通信量。例如，这种通信量的增加可能会导致通信失败。
随着AV系统中允许的监视装置最大数量的增加，这些问题变得越来越明显和重要。
发明内容
因此，考虑到这些问题，本发明具有如下结构的收发机系统。
根据本发明的一个方面，本发明提供的收发机系统包括一个发送机和一个接收机。
所述发送机包括合成多个运动图像信号并因此生成合成运动图像信号的合成单元，对要输入的运动图像信号进行编码、输出编码运动图像信号并允许合成运动图像信号作为要输入的运动图像信号进行输入的编码单元，和将编码单元输出的编码运动图像信号发送到多个接收机的图像信号发送单元。
所述接收机包括接收由图像信号发送单元发送的编码运动图像信号的图像信号接收单元，对图像信号接收单元接收的编码运动图像信号进行解码并输出其中的运动图像信号的解码单元，和运动图像信号提取单元，当解码单元输出的运动图像信号是合成运动图像信号时，其用来从合成为运动图像信号的多个运动图像信号中提取需要的运动图像信号。
发送机可以包括合成多个运动图像信号并因此生成合成运动图像信号的合成单元，对要输入的运动图像信号进行编码、输出编码运动图像信号并允许合成运动图像信号作为要输入的运动图像信号进行输入的编码单元，将编码单元输出的编码运动图像信号发送到多个接收机的图像信号发送单元，和生成并发送提取命令信息的提取命令信息发送单元，所述提取命令信息用于命令一种从合成运动图像信号中提取运动图像信号到多个接收机中的每一个的方法，所述多个接收机是通过编码单元对合成运动图像信号进行编码所生成的编码运动图像信号被图像信号发送单元发送到的目的地。
接收机可以包括接收由图像信号发送单元发送的编码运动图像信号的图像信号接收单元，将图像信号接收单元接收的编码运动图像信号进行解码并输出其中的运动图像信号的解码单元，接收由发送机发送的提取命令信息的提取命令信息接收单元，所述提取命令信息用于命令一种从合成运动图像信号中提取运动图像信号的方法，和运动图像信号提取单元，当解码单元输出的运动图像信号是合成运动图像信号时，其用来根据提取命令信息接收单元接收的提取命令信息，从合成为运动图像信号的多个运动图像信号中提取需要的运动图像信号。
根据本发明的另一个方面，提供一种用于包括发送机和接收机的收发机系统的信息处理方法。
所述发送机执行合成多个运动图像信号并因此生成合成运动图像信号的合成步骤，对要输入的运动图像信号进行编码、输出编码运动图像信号并编码合成运动图像信号作为要输入的运动图像信号的编码步骤，和将编码步骤输出的编码运动图像信号发送到多个接收机的图像信号发送步骤。
所述接收机执行接收由图像信号发送步骤发送的编码运动图像信号的图像信号接收步骤，将图像信号接收步骤接收的编码运动图像信号进行解码并输出其中的运动图像信号的解码步骤，和运动图像信号提取步骤，当解码步骤输出的运动图像信号是合成运动图像信号时，其用来从合成为运动图像信号的多个运动图像信号中提取需要的运动图像信号。
根据本发明的另一个方面，提供一种用于发送机的信息处理方法。
在这种情况中，发送机执行合成多个运动图像信号并因此生成合成运动图像信号的合成步骤，对要输入的运动图像信号进行编码、输出编码运动图像信号并编码合成运动图像信号作为要输入的运动图像信号的编码步骤，将编码步骤输出的编码运动图像信号发送到多个接收机的图像信号发送步骤，和生成并发送提取命令信息的提取命令信息发送步骤，所述提取命令信息用于命令一种从合成运动图像信号中提取运动图像信号到多个接收机中的每一个的方法，所述多个接收机是通过编码步骤对合成运动图像信号进行编码所生成的编码运动图像信号被图像信号发送步骤发送到的目的地。
根据本发明的另一个方面，提供一种用于接收机的信息处理方法。
在这种情况下，接收机执行接收由发送机发送的编码运动图像信号的图像信号接收步骤，将图像信号接收步骤接收的编码运动图像信号进行解码并输出其中的运动图像信号的解码步骤，接收由发送机发送的提取命令信息的提取命令信息接收步骤，所述提取命令信息用于命令一种从合成运动图像信号中提取运动图像信号的方法，和运动图像信号提取步骤，当解码步骤输出的运动图像信号是合成运动图像信号时，其用来根据提取命令信息接收步骤接收的提取命令信息，从合成为运动图像信号的多个运动图像信号中提取需要的运动图像信号。
在根据本发明具有这些结构的收发机系统中，其中的发送机生成、编码由多个运动图像信号合成生成的合成运动图像信号并将其转换成编码运动图像信号。与此响应，其中的接收机从接收到的编码运动图像信号获得的合成运动图像信号中提取需要的运动图像信号。
该收发机系统的发送机生成、编码由多个运动图像信号合成生成的合成运动图像信号并将其转换成编码运动图像信号。同时发送机生成提取命令信息并将其发送到作为合成运动图像信号目的地的多个接收机。所述提取命令信息具有用于命令一种从合成运动图像信号中提取运动图像信号的方法的信息详情。
接收机从合成运动图像信号中提取运动图像信号，该合成运动图像信号是从接收的编码运动图像信号中获得的。这样，根据接收的提取命令信息所指示的命令来提取运动图像信号。
一般在这些结构中，首先，发送机输入并编码合成运动图像信号，所述合成运动图像信号是将多个运动图像信号合成为一个运动图像信号而生成的。这样，不考虑要合成的运动图像信号的数量，要编码的运动图像信号是合成运动图像信号中的一个。当接收到以这种方式从多个运动图像信号的合成中生成的合成运动图像信号时，接收机可以从合成运动图像信号中提取运动图像信号。
在用来提取运动图像信号的结构中，发送机发送提取命令信息与接收机根据接收的提取命令信息提取运动图像信号能够建立一种设备交互关系，即发送机发送合成运动图像信号命令(控制)来提取而接收机在所述控制下从合成运动图像信号中提取运动图像信号。
因此，根据本发明在包含一个编码并将运动图像信号(视频信号)发送到多个接收机的发送机的系统中，甚至当对不同种类内容的运动图像信号进行编码并将其从发送机发送到多个接收机时，不考虑将要发送的运动图像信号的数目，只需要一个信号处理系统来进行编码。因此，可以避免发送机费用的增加，也可以避免电路基底尺寸和设备尺寸的增加。甚至当以这种方式从发送机发送多个运动图像信号合成出来的合成运动图像信号的时候，接收机也能从合成的图像信号中提取出运动图像信号。因此，接收机能够没有任何问题的获得正常的运动图像信号。
而且，在根据提取命令信号提取运动图像信号的结构中，可以在系统中有效地实现从合成运动图像信号中提取出运动图像信号。
图1是示意性地示出了根据本发明的实施例的AV系统结构的框图；图2是示出根据实施例的AV系统中包含的基站装置内部结构实例的方框图；图3是示出根据实施例的AV系统中包含的监视装置内部结构实例的方框图；图4是示出根据实施例的AV系统操作实例的框图；图5是示出根据实施例的AV系统另一个操作实例的框图；图6是示出根据实施例的AV系统另一个操作实例的框图；图7是示出根据实施例的AV系统另一个操作实例的框图；图8是示出根据实施例的AV系统另一个操作实例的框图；图9A和9B是分别示意性地示出在合成运动图像信号中的运动图像信号合成形式的框图；图10A到10C是分别示意性地示出合成运动图像信号中的运动图像信号合成形式的框图；图11A和11B是分别示意性地示出根据合成运动图像信号的数量，运动图像信号的不同解决方法实例的框图；图12是描述监视装置执行的用于向基站装置请求运动图像的处理操作的流程图；图13是描述在接收到的待发运动图像数据是合成的图像信号时监视装置执行的用于实现信号处理的控制处理操作的流程图；图14是描述基站装置响应运动图像请求而执行的处理操作的流程图；图15是示出传统实例中基站装置结构实例的方框图。
具体实施例方式
下面将描述本发明的优选实施例(这在下文中将简称为实施例)。这里，采用诸如家用的室内使用的音频/视频(AV)系统作为实施例，其中基站装置和监视装置通过无线通信连接，所述基站装置发送视频/音频数据，所述监视装置接收基站装置发送来的视频/音频数据并能将数据作为图像/声音输出。换句话说，在本发明中基站装置相当于发送机，而监视装置相当于接收机。
图1示意性地示出了根据本实施例的AV系统的结构概念。本实施例的AV系统具有多个监视装置对应于一个基站装置这样的关系的装置结构。这里，两个监视装置对应于一个基站装置。
本实施例的AV系统包括图1中所示的基站装置1和监视装置2，并在住宅中使用。如下所述，基站装置1和监视装置2能互相通信。
基站装置1固定在住宅中的某个地方并具有接收、选择和对电视广播解码的功能，因而能获得视频/音频信息。
因此，可以将天线ANT连接到基站装置1上，所述天线ANT用于接收电视广播，其对应于电视广播接收功能。基站装置1选择和解码天线ANT接收的广播信号，并由此获得作为电视信号的视频/音频信息。基站装置1将电视信号转换成用预定技术进行压缩和编码的视频/音频信号数据。
本实施例的基站装置1还包括视频输入终端，例如能获得从与视频输入终端相连的外部AV机器输出的并通过视频输入终端输入的视频/音频信号，还能将视频/音频信号转换成压缩编码视频/音频信号数据。
基站装置1还具有因特网(网络)连接功能。因此，基站装置1连接到因特网上，例如，为了访问因特网上的Web站点或者交换电子邮件。因此，可以在基站装置1中安装名为Web浏览器或者邮递者的应用软件来浏览Web站点和新建以及交换电子邮件。
基站装置1可以创建Web浏览器或者邮递者的界面图像，例如，作为视频信号，还能输出界面图像而不是上面所述的电视广播的视频信号或者对电视广播的视频信号与界面图像进行合成。以这种方式生成的视频信号可以转换成压缩编码视频信号数据。
基站装置1能发送经过压缩和编码生成的视频/音频信号数据，如上所述首先作为无线电波。换句话说，基站装置1能够通过无线来发送内容信息，例如包含接收的和选定的电视广播的图像信息、从AV机器输入的视频/音频信号和包括因特网图像的界面图像。基站装置1能够通过无线来发送和输出非图像信息数据，例如命令。监视装置2可以接收到基站装置1以这种方式发送的信息，这将在下面进行详细描述。
基站装置1和监视装置2能通过无线通信交换命令。因此，基站装置1能被监视装置2控制，或者相反地，监视装置2可以被基站装置1控制。
这里，无线通信具有大概30m的可通信距离。换句话说，所述无线通信是用于这样一种使用环境，其中基站装置1和监视装置2可以放置得相对近一些，例如在同一所住宅内。
监视装置2具有便于用户移动的尺寸和形式。
监视装置2能够接收和输入从基站装置1以上述方式通过无线作为无线电波发送来的信号。例如，当输入和接收的信号是压缩编码的视频/音频信号数据的内容信息时，监视装置2对其执行解码处理并由此获得视频/音频信号。
监视装置2包括具有诸如液晶显示屏(LCD)的显示装置的显示部分26，并使显示部分26将获得的内容信息视频信号作为图像进行显示。换句话说，监视装置2能够显示由基站装置1接收和选择的电视广播的视频/音频信息、从AV机器上输入和获得的视频/音频信息以及在基站装置1中操作的应用软件的用户界面图像。监视装置2还包括输出音频信息的功能，包括扬声器29，以便能输出视频/音频信息的声音和/或与用户界面图像上的操作相对应的声音。
触摸板30a安装在显示部分26的显示屏部分上，通过检测触摸板30a上的操作来生成操作信息。
触摸板30a上的操作信息根据需要通过无线从显示部分26发送到基站装置1，基站装置1根据接收的信息执行所需的控制处理。执行包括发送/接收操作的操作允许在作为电视接收机监视器的功能和因特网功能之间的切换和/或选择用于电视广播的信道和/或选择外部视频/音频信源。而且，可以在例如Web浏览器和邮递者之类的应用软件的界面屏幕上执行操作控制，其按照上面所述的方式进行显示。
这样，基站装置1具有作为发送内容信息接口的功能，所述内容信息可以从环境中获取，例如从电视广播或外部AV机器中获取视频/音频信息，接收和获取一种例如因特网上的Web内容信息，以及发送所获取的内容信息。
监视装置2还具有作为用户接口的功能，用于输出如图像和/或声音、由上述基站装置1获得的视频/音频信息，以及接收用户对本系统操作的输入。
在这种条件下，根据本实施例，如上所述，AV系统包括一个基站装置1和多个监视装置2的组合。而且，例如，为了从监视装置2控制基站装置1，多个监视装置2中的每一个都能独立地请求图像信息(视频信号)。尤其是，例如，多个监视装置2能够互相请求不同信道的电视广播图像。响应于这样一个请求，基站装置1发送多条图像信息(视频信号)以便多个监视装置能够用下面将要描述的结构来显示各自请求的图像。
值得注意的是，尽管在图2中示出的是两个监视装置2，但是根据本发明的概念，AV系统中监视装置2的数量是没有特别限制的，这在下面的描述中会变得清楚。
图2是示出根据本实施例从基站装置1发送图像信息(即视频信号运动图像信号)的结构实例的框图。图2示意性地示出了在框图所示元件中处理流程(步骤)中的运动图像信号的状态。这里，运动图像信号的状态是从运动图像信号显示中生成的显示状态。
图2示出了以下的情况基站装置1获得作为要发送到监视装置2的图像信息的运动图像信号(视频信号)A和运动图像信号(视频信号)B。用作这些运动图像信号的图像信息可以是不同信道的电视广播的视频信号。在基站装置1的处理流程中，对应于运动图像信号A和运动图像信号B的运动图像A和B彼此分离，它们在图2所示的第一步骤中的运动图像状态中具有彼此独立的内容数据，其中第一步骤是获取运动图像信号A和运动图像信号B的步骤。
实际上，为了以上述方式同时获得多个不同信道的电视广播的视频信号，可以给基站装置1提供用于电视广播的多个调谐器。
而且，作为外部AV机器，将具有电视广播调谐器的机器连接到基站装置1上。因此，通过基站装置1的电视调谐器选择接收的一个信道的视频信号和通过外部AV机器端选择接收的另一个信道的视频信号可以输入到基站装置1并由基站装置1获取。显然，通过多个外部AV机器选择接收的信道的视频信号可以在不使用基站装置1的调谐器的情况下输入和获取。
以这种方式获得的运动图像信号A和B被输入到合成器11。在第二步骤的处理中，合成器11对输入的多个运动图像信号执行合成处理并输出作为一个运动图像信号(合成运动图像信号)的结果。在图2中，合成器11对输入的两个运动图像信号A和B执行合成处理并由此生成合成运动图像信号。因此，例如，与合成运动图像信号对应的运动图像信号的状态是将运动图像A和运动图像B合成在一个屏幕上，如图2所示。在图2中，当合成两个运动图像信号时，合成处理的结果显示为水平放置要合成的运动图像信号。
不应该特别限制合成器11能输入的运动图像信号的最大数目。合成器11本身可以通过执行模拟信号处理或数字信号处理来执行合成处理。例如，当在基站装置1的实际构造中的第一步骤中获得的运动图像信号是模拟信号时，合成器11可以通过对其执行模拟信号处理来合成运动图像信号。当在第一步骤中获得的运动图像信号是数字信号时，合成器11可以通过对其执行数字信号处理来合成运动图像信号。
然后，将由合成器11在合成处理中生成的合成运动图像信号输入到视频编码器12。
在第三步骤中，视频编码器12根据预定的编码技术对输入的运动图像信号进行压缩和编码并生成和输出编码运动图像信号。要输出的编码运动图像信号是数字信号。当要输入的运动图像信号是模拟信号时，视频编码器12首先执行A/D转换处理再执行编码处理。在这种情况下，视频解码器12输出一个与一个运动图像信号输入相对应的编码运动图像信号，这与常规情况类似。
视频编码器12所使用的压缩和编码技术没有特殊的限制，但是目前可以是基于例如运动图象专家组(MPEG)或者H.264的技术。
在第三步骤中，视频编码器12对合成器11输入的合成运动图像信号用与普通运动图像信号同样的方式执行压缩和编码处理，并输出作为压缩编码运动图像信号的结果。由视频编码器12对合成运动图像信号编码而生成的编码运动图像信号数据在本实施例中是合成/编码运动图像信号。在图2的情况中，合成/编码运动图像信号是由合成运动图像信号的编码生成的，其中在合成运动图像信号中对运动图像信号A和B进行合成。因此，在图2中，与第三步骤所获得的合成/编码运动图像信号相对应的图像具有如图2所示的合成在一个屏幕上的运动图像A和运动图像B。
视频编码器12输出的编码运动图像信号的数据在控制部分13的控制下被发送、写入并暂时存储在存储部分14中。控制部分13以要求的定时向通信部分15加载、发送并输入暂时存储在存储部分14中的编码运动图像信号的数据。例如，在这里限定控制部分13加载编码运动图像信号数据的定时是为了编码运动图像信号数据能够连续输出并在已接收到编码运动图像信号数据的监视装置中重建成图像。
控制部分13采用诸如包含中央处理单元(CPU)的微型计算机的结构，并在基站装置1中执行包括图2中所示的运动图像信号处理的控制操作。
在这种情况中，根据本实施例，通信部分15根据无线电波通信所采用的预定通信协议来执行通信处理。例如，本实施例的无线电波通信的通信协议可以是传输控制协议/因特网协议(TCP/IP)。即无线电波通信采用与因特网相同的通信协议。由于TCP/IP在因特网上的广泛发展，其应用很简单。
例如，为了允许基于TCP/IP的交换，可以对要发送的数据执行诸如分组和预定载波调制的处理，并且结果作为无线电波发送。在接收处理中，作为无线电波发送的发送信息被接收和解调成打包信息。然后，根据通信协议TCP/IP对其执行拆包处理，以便获得诸如命令等的视频/音频信息的原始数据。
在第四步骤中，通信部分15在上述控制部分13的控制下对存储器14传送过来的编码运动图像信号数据执行相同的通信处理以便能将数据作为待发运动图像数据发送到监视装置2，所述监视装置2被定义成无线电波通信的目的地。
接着，在图2的例子中，由于视频编码器12输出的编码运动图像信号是合成/编码运动图像信号，所以要从通信部分15发送的待发运动数据是合成/编码运动图像信号。在图2中，与要在第四步骤发送的待发运动图像数据对应的图像也导致运动图像A和运动图像B合成在一个屏幕上的状态，如图2所示。
因此，为了发送多条运动图像信息到多个监视装置2上，本实施例的基站装置1合成对应于多条运动图像信息的多个运动图像信号并生成一个运动图像信号(合成运动图像信号)。然后，压缩和编码合成运动图像信号并用与普通运动图像信号相同的方式将其发送出去。
作为待发运动图像数据的合成/编码运动图像信号被同时从本实施例的基站装置1发送到多个监视装置2。为了以这种方式同时发送待发运动图像数据给多个监视装置2，通过广播或者多播来实现与监视装置2的通信。
图3是示出用于向本实施例的监视装置2发送图像信息(视频信号运动图像信号)的结构实例的框图。图3也示意性地示出了框图中所示元件中的处理流程(步骤)中的运动图像信号的状态。这里，运动图像信号的状态是从运动图像信号显示中生成的显示状态。
首先，基站装置1发送的待发运动图像数据由监视装置2的通信部分21接收并解调。通信部分21的结构与前面所述的基站装置1的通信部分15的结构相同。
通信部分21接收和解调待发运动图像数据生成编码运动图像信号数据。控制部分22将通信部分21获得的编码运动图像信号数据写入并暂时存储在存储器23中。然后，以预定的定时将存储在存储器23中的编码运动图像信号数据加载并传送到视频解码器24。到这一步为止的处理是监视装置2中的第一步骤。
控制部分22还具有包括例如CPU的微型计算机的结构，并执行监视装置2中的控制，包括图3所示的运动图像信号处理。限定通过控制部分22向视频解码器24发送编码运动图像信号数据的定时是为了可以维持由视频解码器24解码和输出的运动图像信号的连续性。结果，例如，显示部分26显示并输出的图像最终因为不连续性而不具备不规则性。
在图3中，第一步骤中要传送到视频解码器24的编码运动图像信号数据是合成/编码运动图像信号数据，其中合成了运动图像信号A和运动图像信号B。因此，与第一步骤中的运动图像信号相对应的图像也具有这样一种状态，其中合成了运动图像A和运动图像B。
视频解码器24接收在上述控制部分22的控制下传送的编码运动图像信号数据的输入，使用与视频编码器12中的编码技术相对应的解码技术对其执行解码处理并生成和输出解码扩展后的运动图像信号。视频解码器24执行的解码处理是第二步骤。
在图3的第二步骤中，将其中合成了运动图像信号A和B的合成/编码运动图像信号输入到视频解码器24中，第二步骤(即解码处理)生成其中合成了运动图像信号A和B的合成运动图像信号。而且在作为图像的合成运动图像信号中，合成了运动图像A和运动图像B，如图3所示。
将视频解码器24解码后生成的运动图像信号输入到图形控制器25中。所述图形控制器25能够对输入的运动图像信号首先执行图像处理以便获取所需的图像显示形式。例如，可以从输入的原始运动图像信号中生成用于显示部分图像的运动图像信号，所述部分图像是输入的运动图像信号整个图像的一部分。这里，可以对图像执行诸如内插像素和细化像素的处理以便能改变原始运动图像信号的分辨率(像素大小)。
在这种情况中，图形控制器25还执行用于显示文本的信号处理，诸如在屏幕上显示的信道标号和原始运动图像数据上的输入信源。
当视频解码器24输入的运动图像信号是合成运动图像信号时，图形控制器25执行图像处理，从输入的合成运动图像信号所包含的多个运动图像信号中提取出监视装置2要显示的运动图像信号。图像处理是第三步骤。
为了让监视装置2显示其中合成了运动图像信号A和B的合成运动图像信号中的运动图像信号A，其中所述运动图像信号A输入到图3所示的图形控制器25中，通过第三步骤从合成运动图像信号中提取出运动图像信号A。因此，图3中所示的对应于最终生成的运动图像信号的图像只是运动图像A。
接着，图形控制器25以这种方式生成要在显示部分26上显示的运动图像信号(视频信号)并启动显示部分26在显示部分26上显示运动图像信号的图像。因此，用作显示部分26的显示设备(例如LCD)执行图像显示。这是监视装置2中的第四步骤。
在图3所示的情况下，在第四步骤中，显示部分26启动所依据的信号是从上述合成运动图像信号中提取的运动图像信号A，并且与此相应的图像是运动图像A。这意味着，作为第四步骤的结果的图像，运动图像A实际上由显示部分26进行显示。
根据基站装置1和监视装置2的这些构造，监视装置2中的图形控制器25可以具备从包含有多个运动图像信号的合成运动图像信号中提取需要的运动图像信号的功能。根据这一点，基站装置1只需要合成和同时向多个监视装置发送多个不同种类内容的运动图像信号。根据本实施例，运动图像信号内容的数据被压缩编码成较小的数据尺寸。在处理步骤中，首先合成多个运动图像信号并由此生成一个运动图像信号(合成运动图像信号)。然后，对合成运动图像信号进行编码。
因此，基站装置1总需要只对一个运动图像信号执行编码处理。换句话说，不考虑要发送到监视装置2的运动图像的数量，需要一个信号处理信道来用于编码处理。将实际情况应用到图2的结构中，基站装置1中需要一个视频编码器，即，即使当监视装置的最大可连接数量(要发送的运动图像的数量)增加时也只需要一个视频编码器12。
所以，即使在基站装置1同时向多个监视装置发送不同运动图像数据的结构中，也只需要一个视频编码器，并且即使当监视装置的最大可连接数量增加时，也不会因此而需要附加的视频编码器。因此，可以减少制造成本。而且，由于电路的尺寸没有增加，就避免了基站装置的电路基底尺寸的增加以及整个装置尺寸和重量的增加。而且，在这种结构中，通过控制部分(CPU)13根据程序执行的软件处理来实现视频编码器的处理功能，控制部分13要执行的编码处理总是针对一个运动图像信号。因此，不考虑要合成的运动图像信号数量的增加，控制部分上安装的编码加载也不会增加。
而且，从参照图2的描述中可以明显看出，借助于视频编码器12对合成运动图像信号编码的处理和借助于通信部分15对发送结果的处理与对一个普通运动图像信号执行的处理相同。这是因为合成运动图像信号本身必须作为一个运动图像信号来处理。因此，这里控制部分13执行的业务量，即用于向/从存储器14写入/读出合成/编码运动图像信号数据的定时控制，以及用于向通信部分15传输的定时控制都与发送一个普通运动图像信号相同。结果，当发送多条运动图像信息时，控制部分13中的CPU上的负载并没有增加，并且也不会失去操作的可靠性。
下面，将参照图4至图8来描述上述结构中包含有一个基站装置1和多个监视装置2的AV系统应用的另一个操作实例。
如图4所示，这里在AV系统中执行一种操作，其中基站装置1获得运动图像A和B这两个运动图像信号作为内容，并将合成/编码运动图像信号通过广播或多播同时发送给监视装置2-A和2-B作为待发运动图像数据，其中合成/编码运动图像信号是由运动图像A和B的运动图像信号合成和/或编码生成的。响应上述操作，监视装置2-A从接收的待发运动图像数据解码后生成的合成运动图像信号数据中提取并显示运动图像A的运动图像信号。监视装置2-B从接收的待发运动图像数据解码后生成的合成运动图像信号数据中提取并显示运动图像B的运动图像信号。
然后，从这个状态中，在AV系统的可通信区域中的另一个监视装置2-C可以向图5中所示的基站装置1发送一个请求运动图像C的命令。到该步骤为止，运动图像C是与基站装置1作为待发运动图像数据(合成/编码运动图像信号)发送的运动图像A和B中的那些不同的内容。也就是说，监视装置2-C请求发送一个还没有发送过的新的运动图像。
响应于对运动图像C的请求，如图6所示，基站装置1重新获取运动图像C的运动图像信号。然后，运动图像C的运动图像信号也与运动图像A和运动图像B的运动图像信号进行合成，借此获得一个合成运动图像信号。接着，对合成运动图像信号编码并将其作为待发运动图像数据通过广播或多播发送到监视装置2-A、2-B、2-C。考虑到最后合成的运动图像信号作为图像，运动图像信号可以是运动图像A、B和C在一个屏幕区域内的排列，如图6示意性示出的。
然后，监视装置2-A、2-B、2-C接收发送的待发运动图像数据并从运动图像A、B和C的合成中获取合成运动图像信号。接着，以同样的方式，监视装置2-A从合成运动图像信号中提取并显示输出运动图像A的运动图像信号。监视装置2-B从合成运动图像信号中提取并显示输出运动图像B的运动图像信号。监视装置2-C从合成运动图像信号中提取并显示输出运动图像C的运动图像信号。也就是说，监视装置2-C能够接收和显示输出所请求的运动图像C的供给内容。
然后，从图6所示的操作状态中看到，另一个监视装置2-D还可以向基站装置1发送一个用于请求运动图像A的命令，如图7所示。这里，监视装置2-D所请求的运动图像A与监视装置2-A所接收、解码、提取和显示的运动图像是相同的内容。也就是说，监视装置2-D所请求的运动图像A已经合成到合成运动图像信号中并且被基站装置1发送出去。
响应于监视装置2-D发出的请求，基站装置1发送待发运动图像数据，所述待发运动图像数据是从分别对应于运动图像A、B和C的运动图像信号的合成中以上述相同的方式生成的合成运动图像信号。也就是说，在这种情况中，待发运动图像数据是在图6中没有任何内容改变的情况下进行连续发送的。
还是在这种情况中，监视装置2-A、2-B、2-C和2-D接收并解码同时发送的待发运动图像数据并获取从运动图像A、B、C的合成中生成的合成运动图像信号。
用上述同样的方式，监视装置2-A从合成运动图像信号中提取并显示运动图像A的运动图像信号。监视装置2-B从合成运动图像信号中提取并显示运动图像B的运动图像信号。监视装置2-C从合成运动图像信号中提取并显示运动图像C的运动图像信号。然后，监视装置2-D也从合成运动图像信号中提取并显示与监视装置2-A相同的运动图像A的运动图像信号。也就是说，监视装置2-D能够接收和显示所请求的运动图像A的供给内容。
这里，如图5和6所示，响应于监视装置2对新的运动图像的请求，基站装置1会重新获取运动图像信号作为请求的运动图像，并将运动图像信号附加合成到合成运动图像信号中并发送结果。
另一方面，如图7和8所示，当监视装置2所请求的运动图像是已经合成到合成运动图像信号中并已经发送的图像时，基站装置1不会重新将请求的运动图像添加到合成运动图像信号中去。在该实施例中，要通过广播或多播同时发送到多个监视装置的信息是从监视装置所请求的所有运动图像信号的合成中生成的合成运动图像信号。因此，当需要相同的运动图像时，多个监视装置只需要提取包含在合成运动图像信号中的相同的运动图像。也就是说，由于可以共享相同的信息资源，所以不需要重复地将相同的运动图像信号合成到合成运动图像信号中去。
所以，即使当请求运动图像的监视装置的数量增加的时候和当多个监视装置请求一个相同的运动图像时，可以防止要被合成到合成运动图像信号中去的运动图像信号数量的增加。因此，图像合成处理的负荷不会漫无目的地增加。这就是抑制合成器11的结构尺寸增加的原因。由于要被合成到合成运动图像信号中去的运动图像信号的数量没有增加，所以监视装置的提取处理的负荷也减轻了。当用软件实现合成器11执行的图像信号处理和监视装置2执行的提取处理时，处理的负荷也不会漫无目的地增加。因此，执行处理的控制部分13和22的处理负荷也减少了。
下面将描述用于从监视装置2接收和获取的合成运动图像信号中完全提取所需的运动图像信号的系统和结构，如图4到8所示。
这里，例如如图9A到10C所示，基站装置1的合成器11将运动图像信号合成到已合成的运动图像信号中。
图9A和9B示意性地示出了合成运动图像信号的显示图像。图9A和9B示出的实例中，简单描述合成与运动图像A和B相对应的两个运动图像信号。
首先，图9A示出了与前面所述的图2到5中的运动图像信号相同的状态。换句话说，执行合成处理以便最终生成的合成运动图像信号与一个屏幕上水平排列的运动图像信号相对应。对于处理，生成视频信号以便能为合成运动图像信号的每条水平线顺序排列要合成的运动图像信号中相同位置的水平线。
或者，如图9B所示，可以对合成运动图像信号执行合成处理，其中要合成的运动图像与一个屏幕上垂直排列的图像相对应。为了生成所述的合成运动图像信号，可以通过从运动图像信号的第一行水平线到最后一行水平线来输入一个信号，然后从位于下方的运动图像信号的第一行水平线到最后一行水平线输入信号，来连续生成一个屏幕上的图像信号。
如图9A和9B所示，当要合成的运动图像信号的数量等于或低于预定数量时，运动图像可以用这种方式来合成，即水平地或垂直地排列运动图像。当要合成的运动图像信号的数量高于预定数量时，运动图像可以用这种方式来合成，即可以用预定规则下的水平方向和垂直方向的矩阵形式来排列图像。例如，如图6到8所示的，从运动图像A、B和C的合成中生成的待发运动图像数据具有这样一种合成模式。
也可以采用图10A到10C所示的合成模式作为生成运动图像的垂直排列的合成变化。图10A到10C也给出了一种实例，其中将与运动图像A和B相对应的两个运动图像信号进行合成。
图10A和10B分别示出包含运动图像A和B的运动图像信号的水平线信号的帧图像信号。所述运动图像A的帧图像信号包括第一行水平线DHA-1到最后一行水平线DHA-n中的线信号，而运动图像B的帧图像信号包括第一行水平线DHB-1到最后一行水平线DHB-n中的线信号。
为了合成运动图像A和B的运动图像信号并生成合成运动图像信号，从第一行水平线到最后一行的运动图像信号以这种方式排列，即如图10C所示的水平线DHA-1→DHB-1→DHA-2→DHB-2→DHA-3→DHB-3→...→DHA-n→DHB-n。换句话说，在这种情况中，运动图像A和B的帧图像信号的水平线与另一个帧图像信号交替合成，所述另一个帧图像信号是已合成的运动图像信号。例如，图10A到10C所示的合成技术对要合成的运动图像视频信号执行水平线合成，而图9A和9B所示的合成技术是执行要合成的运动图像的合成。
当要合成三个或更多个运动图像时也可以采用这些技术中的一种。例如，当除了运动图像A和B还要合成运动图像C时并且当运动图像C的帧图像信号包括第一行水平线DHC-1到最后一行水平线DHC-n时，用作合成运动图像信号的合成帧图像信号可以用下面的方式进行排列，例如水平线DHA-1→DHB-1→DHC-1→DHA-2→DHB-2→DHC-2→DHA-3→DHB-3→DHC-3→...→DHA-n→DHB-n→DHC-n。
值得注意的是，在参照图10A到图10C描述的例子中，要合成的运动图像信号的一条水平线是顺序地分配给合成运动图像信号的一条水平线的，合成基本上只需要在水平线上来执行。因此要合成的运动图像信号的多条水平线可作为一个视频信号部分来处理，并且合成可以在视频信号部分来执行。而且，在图10A到图10C中，合成运动图像的帧图像信号中的一个运动图像的帧图像信号与原始运动图像的帧图像信号具有相同的水平线排列，合成可以通过在预定规则下扰乱原始运动图像帧图像信号的水平线并且将不规则的水平线分配给合成运动图像帧图像信号的水平线来实现。
从图5和图6中可以明显看出，要合成的和包括在作为待发运动图像数据的要发送的合成运动图像中的运动图像信号的数量是根据来自监视装置2一侧的请求而运动变化的，例如，根据本实施例。因此，根据本实施例，用于压缩和编码合成运动图像信号的编码率(例如压缩率)可以根据要合成到和包括在下面所述的合成运动图像信号中的运动图像信号数量而变化。
这里，如图11A所示，基站装置1可处理的用作运动图像信号的帧图像的最大分辨率(即像素的数量)是a×b，其中水平分辨率(即水平像素的数量)是a，垂直分辨率(即垂直像素的数量)是b。
如上所述，由于基站装置1还将合成运动图像信号作为一个运动图像信号来处理，所以合成运动图像信号的最大分辨率还是a×b。接着，为了在这里将两个到四个运动图像合成到一个合成运动图像信号中去，与a×b的最大分辨率相对应的图像大小被定义为合成区域，并为每一个运动图像定义c×d的分辨率，其中c是水平分辨率，d是垂直分辨率，如图11A所示。
为了简化描述，合成区域的水平分辨率a和要进行合成的运动图像的水平分辨率c之间在这里具有1/2a＝c的关系。合成区域的垂直分辨率b和要进行合成的运动图像的垂直分辨率d之间具有1/2b＝d的关系。
所需数量为四个以下的具有如上所述定义的分辨率的运动图像信号可以通过将运动图像信号以矩阵排列模式分配到合成区域来合成。在这种情况中，如图11A中运动图像A、B、C和D所示出的，具有c×d的分辨率的运动图像信号可以分配和合成到具有a×b分辨率的合成区域中。
如图11A所示，可以在将四个运动图像信号合成到一个运动图像信号中的状态中合成另一个运动图像信号。但是，在这种情况中，如图11A所示，不能以c×d的分辨率来添加和合成另一个运动图像信号。
因此，在这种情况中，如图11B所示，可以定义一个比c×d的分辨率小的分辨率e×f来作为要进行合成的运动图像信号的分辨率(水平分辨率×垂直分辨率)。
在图11B中，要进行合成的运动图像信号的e×f的分辨率和合成区域的a×b的分辨率之间具有1/3a＝e和1/3b＝f的关系。因此，如图11B中运动图像A到I所示，可以将最大数量的九个运动图像信号分配和合成到矩阵排列模式中。
通过根据要进行合成的运动图像信号数量的增加来降低运动图像信号的分辨率，可以将所有要进行合成的运动图像信号分配和合成到一个有限的合成区域中去。
但是，众所周知，图像信号分辨率的降低会破坏显示图像信号图像的质量。因此，当以上述方式根据要进行合成的运动图像的数量来降低运动图像信号的分辨率时，监视装置2显示的图像质量会遭到破坏。
根据本实施例，为了补偿质量降低，用于用视频编码器12编码从运动图像信号的合成中生成的合成运动图像信号的编码率(例如压缩率)可以根据运动图像信号分辨率的降低而减少，所述运动图像信号的分辨率根据要进行合成的运动图像的数量而降低。即使采用众所周知的相同压缩/编码技术来增加编码率也会导致较少的数据率但是有低的重现质量。相反，降低编码率会导致较大的数据率但是有高的重现质量。
可以通过考虑实际合成区域的最大分辨率与要进行合成的运动图像信号的分辨率之间的关系以及监视装置2实际显示的运动图像的质量来定义编码率的实际值。
如图10A到10C所示，根据要进行合成的运动图像数量在编码率中的变化可以被应用到水平线的合成中。
下面，参照图12至图14，将根据上述本实施例的AV系统的操作来描述在基站装置1和监视装置2中执行的处理操作。
在本实施例的AV系统中，为了让监视装置重新显示一些内容的运动图像，必须将所述内容的运动图像信号从基站装置1发送出去，因此，监视装置2必须选择一条内容，也就是运动图像，然后向基站装置1请求运动图像信号，如图5中监视装置2-C和图7中监视装置2-D的操作所示。图12示出了图3中所示的控制部分22根据程序执行的处理步骤。
在步骤S101中，首先图12中所示的处理等待接收用于在监视装置2上显示运动图像的命令。例如，当用户通过在监视装置2上执行操作来选择期望的一条内容并执行用于显示所述内容的图像的操作时，作为响应会生成用于输出运动图像的命令。尤其是，用户可以选择期望的信道并执行用于在监视装置2上显示电视广播的图像的操作。然后，生成用于选择和显示选定信道的运动图像的命令作为内容。
以这种方式，当生成用于输出运动图像的命令时，处理从步骤S101移动到步骤S102。
在步骤S102中，执行控制处理，响应于上述的运动图像显示命令，选择基站装置1作为目的地并发送用于请求运动图像传输的命令(运动图像请求命令)。这里，用于显示运动图像的生成命令的信息包括要进行显示的选定内容(运动图像信号)信息，而运动图像请求命令，作为内容数据包括上述用于要进行发送的内容(运动图像信号)的选定内容信息(运动图像信号)。
在步骤S102的控制处理中，通信部分21向作为目的地的基站装置1发送运动图像请求命令。
图14示出了基站装置1响应于运动图像请求命令而执行的处理。图14中所示的处理由图2中所示的控制部分13根据程序来执行。要注意的是，图13是示出根据图14中所示过程发送的提取命令信息在监视装置2侧的处理，这将在下面进行描述。
首先，在步骤S301中，基站装置1侧等待接收AV系统中包含的一个监视装置发送的运动图像请求命令，当识别接收到运动图像请求命令时处理移动到步骤S302和后续步骤。
在步骤S302中，参照接收的运动图像请求命令的信息来识别通过命令选择的运动图像内容。确定当前是否正在将与识别内容相对应的运动图像信号作为待发运动图像数据进行发送。
如果在步骤S302中确定正在发送此次接收的通过运动图像请求命令选定的运动图像信号，这是肯定的结果，处理就移到步骤S310，这将在下面进行描述。另一方面，如果确定当前没有发送此次接收的通过运动图像请求命令选定的运动图像信号，这是否定的结果，处理就移到步骤S303。
如果在步骤S302中得到的是否定的确定结果，必须通过将运动图像信号添加到目前为止已经发送的待发运动图像数据中来发送在步骤S301中由此次接收的运动图像请求命令选定的运动图像信号。在步骤S303和后续步骤中执行处理。
因此，在步骤S303，首先参照此次接收的运动图像请求命令信息来识别由所述命令请求的运动图像信号内容。然后，对获得的内容执行控制处理，也就是由所述命令请求的运动图像信号。例如，当所请求的内容是电视广播预定信道的图像时，执行控制来切换在基站装置1中调谐器选择的信道以便获得选定信道的视频信号。
在以这种方式获得由运动图像请求命令选定的运动图像信号以后，执行步骤S304中的处理。
在步骤S304中，当前从合成器11输出并输入到视频编码器12的运动图像信号具有要进行合成的运动图像的当前定义的分辨率时，确定图10C中所示的合成区域是否有一些空闲区域以用于分配和合成此次最新添加的运动图像信号(在步骤S303中获得的运动图像信号)。例如，对于该确定，控制部分13可以监视从视频编码器12传送到存储部分14的编码运动图像信号的状态。当与空闲区域相对应的信号部分是黑图像或白图像时，其中在该空闲区域内运动图像信号还没有合成到合成运动图像信号，例如，控制部分13识别黑图像或白图像占信号部分的多少并以此作为编码运动图像信号的状态。空闲区域的容量可以根据识别结果来识别，并且还能够确定是否存在用于新运动图像信号的空闲区域。
然后，在步骤S304中如果获得存在空闲区域这样的肯定的确定结果，处理就移动到步骤S309。
在步骤S309和后续步骤中，控制合成器11以便在与此次所请求的运动图像(内容)相对应的运动图像信号分配给合成区域中的空闲区域之后来执行合成处理。
作为这个处理的结果，可以获得在步骤S303中获得的运动图像信号的附加合成所生成的合成运动图像信号。
在下一步骤S310中，执行处理以用于将提取命令信息从通信部分15发送到在前一步骤S301中请求运动图像的监视装置2中。
这里，提取命令信息包括需要用于从合成运动图像信号中提取目标运动图像信号的信息元素。
例如，对于参照图9A或9B描述的合成运动图像信号，要提取的运动图像信号的在合成运动图像信号中的信号位置上的信息被存储起来。例如对参照图10C所描述的合成运动图像信号来说，在包括要提取的运动图像信号的水平线的合成运动图像信号中表示水平线位置的信息被存储起来。
由步骤S310中生成的提取命令信息所提取的运动图像信号与响应于步骤S301接收的运动图像请求命令所选定的运动图像信号是相同的。
在步骤S309后的步骤S310中，用于提取在前一步骤S303中获得的并在步骤S309中重新添加的运动图像信号的提取命令信息是重新生成的，然后，发送所述提取命令信息。
另一方面，在步骤S302中获得的作为肯定的确定结果的步骤S310中，不需要重新生成提取命令信息。换句话说，在这种情况中，选定的运动图像信号被发送到监视装置，这意味着提取和显示作为这次选定的一个相同运动图像信号的监视装置2已经存在。这更意味着基站装置1已经生成并发送了作为这次选定的一个用于提取相同运动图像信号的提取命令信号。因此，将当前发送的用于运动图像信号的提取命令信息存储起来以便在该例的步骤S310中再使用所存储的提取信息。
在步骤S310中从基站装置1向监视装置2发送提取命令信息可以通过只向指定为目的地的并且已经在步骤S301中发送运动图像信号请求的监视装置单播通信来实现。提取命令信息的传输可以定义成是对步骤S301中接收的运动图像信号请求的响应。
在执行了步骤S310的处理之后，处理移动到步骤S311，这将在下面进行描述。
如果在步骤S304中得到否定的结果，即表示用于附加合成运动图像信号的空闲区域无效或者短缺时，处理移动到步骤S305。
在步骤S305中，为要进行合成的当前运动图像信号定义的分辨率改变成规定值低于预定值的一个级别。因此，在合成器11中要合成的每个运动图像信号的分辨率转换成具有改变的和定义的分辨率的运动图像信号的形式。根据本实施例，可以在合成器11中执行处理之前执行分辨率改变的信号处理。
在下一步骤S306中，控制合成器11以便可以根据与步骤S305中改变的分辨率相对应的合成模式来重新合成要合成的运动图像信号。
在下一步骤S307中，控制视频编码器12以便可以根据在前一步骤S305中改变的分辨率来改变用于编码的限定编码率。由于步骤S305中执行的改变是为了更低的分辨率，所以在步骤S307中编码率也改变到一个较小的值。
在下一步骤S308中，执行控制处理以用于发送提取命令信息给所有的监视装置，所述监视装置是由步骤S306中的重新合成处理生成的作为待发运动图像数据的合成运动图像信号的目的地。
在这种情况下，由于重新合成处理是在前一步骤S306中执行的，所以在合成运动图像信号中设计合成运动图像信号的模式与重新合成之前是不一样的。
因此，在步骤S308中，首先生成提取命令信息以用于命令一种提取要合成到合成运动图像信号中的运动图像信号的方法。换句话说，为每一个要合成到合成运动图像信号中去的运动图像信号生成提取命令信息。然后，向所有的监视装置2发送与监视装置2所请求的运动图像信号相对应的提取命令信息，其中所述重新合成的运动图像信号发送到监视装置2。这里，提取命令信息还通过单播通信发送给监视装置。在步骤S308中的处理结束以后，处理移动到步骤S311。
在步骤S311中，执行控制处理以用于将当前的合成运动图像信号作为待发运动图像数据从通信部分15发送出去，所述合成运动图像信号是由合成器11的合成处理而生成的。要注意的是，合成器11合成生成的合成信号被编码和发送到通信部分15以便能将合成信号作为待发运动图像数据从通信部分15发送出去。
图13示出了在监视装置2接收的待发运动图像数据是合成运动图像信号的情况下，与信号处理操作相对应的控制处理操作。图13所示的处理通过例如控制部分22来实现。
在步骤S201中，图12中所示的处理等待接收基站装置1发送的提取命令信息。当识别到接收了提取命令信息时，将接收的提取命令信息存储在预定的存储区域，例如在下一步骤S202中的存储器14。在下一步骤S203中，处理等待启动接收由基站装置1发送的作为合成运动图像信号的待发运动图像数据。然后，当识别出启动了接收数据时，处理移动到步骤S204。
响应于步骤S203中接收作为合成运动图像信号的待发运动图像数据的启动，监视装置2启动信号处理和显示控制以用于对接收的合成运动图像信号通过视频解码器24进行解码、传送到图形控制器25以及在显示部分26上进行显示。
然后，在步骤S204中，根据由在步骤S202中存储的提取命令信息表示的详细内容来控制图形控制器25，以便从输入到图形控制器的解码后的合成运动图像信号中提取出一个运动图像信号。接着，在下一步骤S205中，在图形控制器25上执行用于在显示部分26上显示提取的运动图像信号的控制处理。
因此，在本实施例的AV系统中，基站装置1能准确获得监视装置2所需的运动图像信号并能把监视装置2所需的运动图像信号合成为一个合成运动图像信号并发送所述合成运动图像信号。监视装置能从接收的合成运动图像信号中准确提取和显示目标运动图像信号。
尽管上述描述的处理只涉及到运动图像信号，但是诸如实际电视广播的电视信号的内容信息和从AV装置输出的内容信息并不限定为运动图像信号，而可以具有包含与运动图像信号同步的能重现的音频信号的形式。对于这种情况，与合成运动图像信号所包含的每个运动图像信号相对应的音频信号最好同时发送到监视装置2上以便监视装置能够在显示运动图像信号的同时播放所述声音。
为此，可以使用诸如多信道和多语言标准，其由例如MPEG-2编码技术支持。
虽然在本实施例中，在监视装置2中从合成运动图像信号中只提取一个运动图像信号，但是可以根据本发明的概念从合成运动图像信号中提取所需的多个运动图像信号。也就是说，没有专门限定从合成运动图像信号中提取的运动图像信号的数量。
尽管在本实施例中提供了一种包括基站装置和监视装置的AV系统，但是本发明可以应用于具有其他形式的控制系统中。例如，替代基站装置和监视装置，可以采用包括有本实施例中所述AV功能的个人电脑或者小终端装置，例如高移动性的便携式个人数字助理(PDA)。
权利要求
1.一种收发机系统，包括发送机和接收机，所述发送机包括合成装置，用于合成多个运动图像信号并由此生成合成运动图像信号；编码装置，用于对要输入的运动图像信号编码并输出编码的运动图像信号，并且使合成运动图像信号作为将被输入的运动图像信号输入；和图像信号发送装置，用于将从编码装置输出的编码运动图像信号发送到多个接收机，以及所述接收机包括图像信号接收装置，用于接收由图像信号发送装置发送的编码运动图像信号；解码装置，用于对由图像信号接收装置接收的编码运动图像信号解码并输出其运动图像信号；和运动图像信号提取装置，当从解码装置输出的运动图像信号是合成运动图像信号时，从被合成为运动图像信号的多个运动图像信号中提取所需的运动图像信号。
2.如权利要求1所述的收发机系统，包括所述发送机还包括提取命令信息发送装置，用于生成和向多个接收机中的每一个发送提取命令信息，所述提取命令信息用于命令从合成运动图像信号中提取运动图像信号的方法，所述多个接收机是图像信号发送装置发送由编码装置对合成运动图像信号编码而生成的编码运动图像信号的目的地；和所述接收机还包括提取命令信息接收装置，用于接收提取命令信息，其中运动图像信号提取装置根据由提取命令信息接收装置接收的提取命令信息从被合成为合成运动图像信号的多个运动图像信号中提取所需的运动图像信号，所述合成运动图像信号由解码装置解码和输出。
3.如权利要求1所述的收发机系统，包括所述接收机还包括请求信息发送装置，用于向发送机发送用来选择和请求运动图像信号的请求信息；和所述发送机还包括请求信息接收装置，用于接收所述请求信息，其中，当由请求信息接收装置接收的请求信息选择了新的运动图像信号时，合成装置将新的运动图像信号添加并合成到当前的合成运动图像信号，并由此生成合成运动图像信号。
4.如权利要求1所述的收发机系统，其中编码装置根据包含在由合成装置生成的合成运动图像信号中的运动图像信号的数量来改变和定义用于编码的编码率。
5.如权利要求1所述的收发机系统，包括所述接收机还包括请求信息发送装置，用于向发送机发送用来选择和请求运动图像信号的请求信息；和所述发送机还包括请求信息接收装置，用于接收所述请求信息，其中，当被请求信息接收装置接收的请求信息选择的运动图像信号已经包含在合成运动图像信号中时，合成装置生成与以前相同的合成运动图像信号。
6.如权利要求1所述的收发机系统，其中合成装置生成合成运动图像信号，因此以预定的排列规则来排列作为要进行合成多个运动图像信号的图像。
7.如权利要求1所述的收发机系统，其中合成装置生成合成运动图像信号，因此以预定的排列规则来排列要进行合成多个运动图像信号中每一个的水平线。
8.如权利要求1所述的收发机系统，其中图像信号发送装置通过广播或多播向多个接收机发送编码运动图像信号。
9.一种发送机包括合成装置，用于合成多个运动图像信号并由此生成合成运动图像信号；编码装置，用于对要输入的运动图像信号编码并输出编码运动图像信号，并且使合成运动图像信号作为将被输入的运动图像信号输入；图像信号发送装置，用于将从编码装置输出的编码运动图像信号发送到多个接收机；和提取命令信息发送装置，用于生成和向多个接收机中的每一个发送提取命令信息，所述提取命令信息用于命令从合成运动图像信号中提取运动图像信号的方法，所述多个接收机是图像信号发送装置发送由编码装置对合成运动图像信号编码而生成的编码运动图像信号的目的地。
10.一种接收机包括图像信号接收装置，用于接收从发送机发送的编码运动图像信号；解码装置，用于对由图像信号接收装置接收的编码运动图像信号解码并输出其运动图像信号；提取命令信息接收装置，用于接收从发送机发送的提取命令信息，所述提取命令信息用于命令从合成运动图像信号中提取运动图像信号的方法；和运动图像信号提取装置，当从解码装置输出的运动图像信号是合成运动图像信号时，根据由提取命令信息接收装置接收的提取命令信息从被合成为合成运动图像信号的多个运动图像信号中提取所需的运动图像信号。
11.一种用于包括发送机和接收机的收发机系统的信息处理方法，所述方法包括使用发送机，合成步骤，用于合成多个运动图像信号并由此生成合成运动图像信号；编码步骤，用于对要输入的运动图像信号编码并输出编码运动图像信号，并且还将合成运动图像信号作为要输入的运动图像信号进行编码；和图像信号发送步骤，用于将从编码步骤输出的编码运动图像信号发送到多个接收机，以及使用接收机，图像信号接收步骤，用于接收通过图像信号发送步骤发送的编码运动图像信号；解码步骤，用于对通过图像接收步骤接收的编码运动图像信号解码并输出其运动图像信号；和运动图像信号提取步骤，当从解码步骤输出的运动图像信号是合成运动图像信号时，从被合成为运动图像信号的多个运动图像信号中提取所需的运动图像信号。
12.一种用于发送机的信息处理方法，包括合成步骤，用于合成多个运动图像信号并由此生成合成运动图像信号；编码步骤，用于对要输入的运动图像信号编码并输出编码运动图像信号，并且还将合成运动图像信号作为要输入的运动图像信号进行编码；图像信号发送步骤，用于将通过编码步骤输出的编码运动图像信号发送到多个接收机；和提取命令信息发送步骤，用于生成和向多个接收机中的每一个发送提取命令信息，所述提取命令信息用于命令从合成运动图像信号中提取运动图像信号的方法，所述接收机是图像信号发送步骤发送通过编码步骤对合成运动图像信号编码而生成的编码运动图像信号的目的地。
13.一种用于接收机的信息处理方法，包括图像信号接收步骤，用于接收发送机发送的编码运动图像信号；解码步骤，用于对图像接收步骤接收的编码运动图像信号解码并输出其运动图像信号；提取命令信息接收步骤，用于接收发送机发送的提取命令信息，所述提取命令信息用于命令从合成运动图像信号中提取运动图像信号的方法；和运动图像信号提取步骤，当解码步骤输出的运动图像信号是合成运动图像信号时，根据提取命令信息接收步骤接收的提取命令信息从被合成为运动图像信号的多个运动图像信号中提取所需的运动图像信号。
全文摘要
基站装置从多个运动图像信号的合成中生成合成运动图像信号，并将合成运动图像信号编码和转换成编码运动图像信号，然后发送编码运动图像信号。作为响应，监视装置从接收的编码运动图像信号中获得的合成运动图像信号中提取其所需要的运动图像信号。提取处理包括从基站装置向每一个监视装置进行发送并由监视装置根据提取命令信息来实现，所述提取命令信息具有表示从合成运动图像信号中提取运动图像信号的方法的信息详细内容。在这种系统配置下，在基站装置中对于编码处理只需要一个信号处理系统。
文档编号H04N5/44GK1758755SQ20051007166
公开日2006年4月12日 申请日期2005年2月3日 优先权日2004年2月3日
发明者前多辉也 申请人:索尼株式会社