专利名称：网络信息处理系统、信息创建设备和信息处理方法
技术领域：
本发明涉及一种可很好地应用于网络电子会议系统、网络教育系统、网络游戏系统等中的网络信息处理系统、信息创建设备和信息处理方法。
更具体地说，本发明涉及这样的网络信息处理系统、信息创建设备和信息处理方法，其中，通过通信装置将信息处理设备、信息控制和显示装置以及信息创建设备等互相连接起来，从而，基于这个信息处理设备的输入操作功能，确定由信息控制和显示装置目前所显示的图像中的哪幅图像作为目标，连接与带有其时间信息的目标图像相关的识别信息，以将这些识别信息保存在信息创建设备中，使得，例如，就可以保证其内容中最显著的电子信息在数据流中，并且可以显示目标图像，以便当再现电子信息时，同另一幅图像相比，目标图像可以被突出显示(highlight)。
背景技术：
最近，已经经常使用所谓的电子会议系统，通过使用这种电子会议系统，陈述者(陈述材料的人)将使用个人电脑创建的陈述材料带进会议室，并且利用电子设备将这些材料陈述给多个其它会议参加者。
在该电子会议系统中，材料陈述者的显示设备和笔记本个人电脑被相互连接起来。在该显示设备中，使用数据投影仪，以便可以显示通过个人电脑所创建的陈述材料。对于数据投影仪(在此之后简称为“投影仪”)而言，一个陈述者的笔记本个人电脑被连接在RGB彩色信号的电缆上，以便在该笔记本个人电脑上正显示的屏幕能被投影到白墙等上面。投影到白墙等上面的任何陈述材料都由陈述者操作的鼠标光标来指点。也就是说，只有陈述者拥有的材料才被显示在白墙等上面。
最近有了这种适应网络的数据投影仪。这种投影仪具有内建(built-in)的个人电脑功能。通过使用这种投影仪，陈述者可将陈述文件从他或她的笔记本个人电脑(在此之后也称为“信息处理设备”)通过网络传递给投影仪，以便投影仪可以利用这种投影仪的个人电脑功能，来显示并投影其内容。
但是，在传统的电子会议系统中，如果组织这样一个系统，即，多个陈述材料被同时显示在诸如多个投影仪的显示设备上来进行陈述，由此从陈述材料自动创建例如会议记录的电子信息，这样的系统存在以下问题。
(1)对于创建诸如会议记录的电子信息的信息创建系统来说，它要求认可材料的陈述者利用他或她看见的任何屏幕来陈述这些材料。这是因为当再现诸如会议记录的图像时，材料的陈述者可以通知观看者哪幅图像是最显著的。
(2)在这种情况下，例如，根据这种信息创建系统，就不可能保证在陈述内容中最显著图像的电子信息是在数据流中，这样，就会出现陈述者还没有定为目标的任意图像被编辑并且进入再现图像中的可能性。
发明内容
一种与本发明有关的网络信息处理系统，包括至少一个具有输入操作功能的用于处理任意信息的信息处理设备；至少一个信息控制和显示装置，根据从信息处理设备传递来的信息来显示图像；信息创建设备，用于将在信息控制和显示装置上显示的内容和该内容的时间信息一起存储，以创建电子信息；通信装置，用于至少连接信息处理设备、信息控制和显示装置以及信息创建设备；确定装置，用于确定目前显示在信息控制和显示装置上的图像中的哪个图像是目标图像；以及识别信息添加装置，用于将指示由确定装置所确定的目标图像的识别信息添加到时间信息中。
根据本发明的这种网络信息处理系统，通过通信装置将至少一个具有输入操作功能的用于处理任何信息的信息处理设备、多个用于根据从信息处理设备传递来的信息来显示图像的信息控制和显示装置、以及用于将在信息控制和显示装置上显示的内容及其时间信息一起存储以便创建电子信息的信息创建设备相互连接起来。假定是这种连接，确定装置确定目前显示在信息控制和显示装置上的图像中的哪个图像是目标图像。例如，信息控制和显示装置配有这种确定装置。识别信息添加装置将用于指示由确定装置所确定的目标图像的识别信息添加到时间信息中。例如，信息创建设备配有这种识别信息添加装置。也就是说，信息控制和显示装置确定目前显示在信息控制和显示装置上的图像中的哪个图像是目标图像，并控制信息创建设备，以便使与该目标图像相关的识别信息同时间信息相连接，并且将连接起来的信息存储起来。
说明性地，在信息控制和显示装置和/或信息处理设备显示静止图像的情况下，每当信息处理设备执行静止图像的转换(change-over)时，信息控制和显示装置就将识别信息添加到其内容中。或者，每当信息控制权利从信息控制和显示装置传递给另一个时，其就将识别信息添加到其内容上。
因此，当再现由信息创建设备所创建的电子信息时，就可能显示目标图像，以便根据识别信息，同另一幅图像相比，目标图像的轮廓被突出显示(highlight)，这样，当信息控制和显示装置显示图像时，使得观看者被通知到关于哪副图像是最显著的再现图像的信息。
与本发明有关的用于将希望的内容及其时间信息一起存储以创建电子信息的信息创建设备，包括存储设备，用于将其内容及其时间信息一起存储；以及控制设备，用于基于事先自动地或手动地添加的、与存储在存储设备中的内容相关的识别信息来选择与目标图像相关的内容，以发送所选择的内容。
根据这种信息创建设备，当将希望的内容及其时间信息一起存储来创建电子信息时，存储设备将其内容和它们的时间信息一起存储。假定，控制设备根据事先自动地或手动添加的、与这些内容相关的以创建电子信息的识别信息，来从存储设备中读出这些内容，以便选择与目标图像相关的内容。
说明性地，控制设备根据识别信息自动地从所希望的内容中选择和编辑目标图像，并且保证这样编辑的以创建电子信息的内容在数据流中。这样保证的在数据流中的电子信息被发送给信息控制和显示系统或信息处理系统。
这就能从图像中，从所编辑的内容的最显著的信息中采集电子信息，并因此保证该电子信息在数据流中。这也使得当再现该电子信息时能显示目标图像，使得与另外的图像相比较，可以显示该图像，并且其轮廓被突出显示。于是，本发明还足以应用到网络信息处理系统中，从而，保证在数据流中的该网络信息处理系统的电子信息可以被最好地实时发送出去。
在有关本发明的信息处理方法中，通过通信装置将至少一个具有输入操作功能的用于处理任意的信息的信息处理系统、至少一个用于根据从信息处理系统发送来的信息来显示图像的信息控制和显示系统、以及用于将在信息控制和显示装置上显示的内容及其时间信息一起存储以创建电子信息的信息创建系统相互连接起来。在信息创建系统中保存内容时，确定目前显示在信息控制和显示系统上的图像中的哪个图像是目标图像，并且用于将指示所确定的目标图像的识别信息添加到时间信息中。
根据本发明的信息处理方法，当再现由信息创建系统所创建的电子信息时，就可能根据识别信息来显示目标图像，以便该目标图像可以被显示出来，并且与另外的图像相比较，其轮廓被突出显示。这就使得当在信息控制和显示系统中显示这些屏幕时，使观看者注意到在再现屏幕当中的最显著的屏幕上的信息。
图1是显示根据与本发明相关的第一个实施例的网络信息处理系统100的配置的方框图；图2是显示在网络信息处理系统100中的处理示例的流程图；图3是显示根据与本发明相关的第二个实施例的网络电子会议系统101的配置的图；图4是显示通信器3的内部配置的方框图；图5是显示创建器5的内部配置的方框图；图6是显示在记录者的客户PC上的GUI屏幕50的显示示例的图像视图；图7是显示在GUI屏幕上的菜单屏幕的显示示例的图像视图；图8是显示内容管理器屏幕50e的显示示例的图像视图；图9是显示在投影仪2中的图像的变化示例的图像视图；图10是显示在创建器5中的在数据流中保证有5幅图像的情况下的编辑示例的图像视图；图11是显示在网络电子会议系统101中的系统处理示例的流程图；图12是显示在笔记本个人电脑PCi上的保存确认屏幕P1的显示示例的图像视图；图13是显示根据与本发明有关的第三个实施例的网络电子会议系统102的配置的图；
图14A、14B和14C每个都是显示在投影仪2A到2C中的图像变换示例的图像视图；图15是显示在三个投影仪2A到2C之中的鼠标操作权利的传递示例以及目标图像标记FG和它们之间的关系的示例的图；图16是表示客户的笔记本个人电脑PCi的内容再现屏幕50f的显示示例的图像视图；图17是显示客户的笔记本个人电脑PCi的内容编辑屏幕50g的显示示例的图像视图；图18是显示在相关网络电子会议系统102的主通信器3A中的处理示例的流程图；图19是显示目标标记FG的设置示例的流程图；图20是显示目标标记FG的释放示例的流程图；以及图21是显示根据与本发明相关的第四个实施例的网络电子会议系统103的配置的示意图。
具体实施例方式
本发明已经解决了传统问题，并且本发明的一个目标是提供一种网络信息处理系统、信息创建设备，以及信息处理方法，这些系统、设备和方法能够保证陈述内容、会议等等当中的最显著图像中的电子信息在数据流中，以及在再现电子信息时，例如与另一个图像相比，该目标图像会被突出显示(highlight)。
以下将参考
与本发明相关的网络信息处理系统、信息创建设备、以及信息处理方法中的每个的实施例。
(1)第一个实施例本实施例是网络电子会议系统、网络教育系统，以及网络游戏系统的最高概念，其中，在网络信息处理系统中，信息处理设备、信息控制和显示装置、信息创建设备等通过通信装置相互连接起来。在该系统中，基于信息处理设备的输入操作功能来确定目前显示在信息控制和显示装置上的图像中的哪个图像是目标图像。该系统将与目标图像相关的识别信息及其时间信息连接起来，以将其存储在信息创建设备中。该系统能够保证使其内容之中的最显著的电子信息在数据流中。同时，在再现电子信息时，例如，与另外的图像相比，该系统还能使目标图像被突出显示(highlight)。
图1中所示的网络信息处理系统100可很好地应用于网络电子会议系统、网络教育系统、网络游戏系统等中。在该系统100中，信息创建设备5和至少一个信息控制和显示装置10A、10B、10C等被安置在特定的区域或特定的地方，如会议室中，并且，至少一个信息处理设备1被准备在这个特定的区域或地方中。这个信息创建设备5、信息控制和显示装置10A等，以及各个信息处理设备1通过通信装置4相互连接，以便根据来自任意信息处理设备1的操作指令，可以远程控制信息控制和显示装置10A等，并且，信息创建设备5能存储和编辑它的内容DIN，并准备电子信息DOUT。
信息处理设备1具有图形用户接口(此后称为GUI功能)，它是输入操作功能的一个示例，以利用该GUI功能和鼠标操作功能来处理任意信息。作为信息处理设备1，使用容易携带的笔记本类型的个人电脑(此后称为“笔记本个人电脑”)。当然，不只是可以使用笔记本个人电脑，而且可以使用桌面类型的个人电脑。如果参加网络电子会议系统等，则在笔记本个人电脑等中安装专用的应用软件。
通信装置4与信息控制和显示装置10A、10B、10C等连接，由此可以根据从信息处理设备1传递来的信息来显示图像。由于使用每个信息控制和显示装置10A、10B、10C等、投影仪以及具有计算机功能的通信器。信息控制和显示装置10A、10B、10C等的每一个都配有确定装置和识别信息添加装置。确定装置确定目前显示在信息控制和显示装置10A、10B、10C上的图像中的哪个图像是目标图像。识别信息添加装置将指示由确定装置由此所确定的目标图像的识别信息添加到其时间信息中。另外，信息控制和显示装置10A根据来自信息处理设备1的远程控制指令来协助包括在信息创建设备5中进行控制的电子信息处理，。
例如，信息控制和显示装置10A根据来自信息处理设备1的远程控制指令来确定目前显示在信息控制和显示装置10A、10B、10C上的图像中的哪个图像是目标图像，并且，控制信息创建设备5，以便将有关目标图像的识别信息及其时间信息连接起来，以存储它们。注意到关于这里的目标图像，是包括信息控制和显示装置10A的。另外，识别信息指的是用于识别显示在信息控制和显示装置10A等上的图像是否为目标图像的信息。识别信息指示材料的陈述者或其助手解释的那幅图像。
当信息控制和显示装置10A、10B、10C等和/或信息处理设备1在系统100中显示静止图像时，每当信息处理设备1改变静止图像显示时，信息控制和显示装置10A等就自动地将识别信息添加到其内容DIN中。这是因为当改变静止图像显示时，已改变的图像具有更高的要被标记的比率。
当一个信息处理设备1将在信息控制和显示装置10A、10B、10C之一中的用于控制信息的权利设置为信息控制权利时，每当信息控制权利被从信息控制和显示装置10A传递到其它的信息控制和显示装置10B等中时，这个信息处理设备1自动地将识别信息添加到所显示对象(displayedsubject)的内容DIN中。这是因为当将信息控制权利从信息控制和显示装置10A传递到其它的信息控制和显示装置10B等时，在信息控制和显示装置10B中所传递的图像具有更高的要被标记的比率。
在这个系统100中，利用信息处理设备1的输入操作功能，将有关目标图像的识别信息添加到所显示对象的内容DIN中(手动添加操作)。根据该手动添加操作，当在信息显示处理过程中解释相应的屏幕时，材料的陈述者和助手(们)由此可以将识别信息添加到在信息控制和显示装置10A等上的所显示对象的内容DIN中。如果这样的识别信息以前被添加到了其上，那么，当编辑和创建信息时，可以在多个内容(静止图像)之中自动地选择已经被添加了识别信息的目标图像。
与所述通信装置4连接的信息创建设备5将显示在信息控制和显示装置10A等上的内容DIN及其时间信息一起存储，以便创建电子信息DOUT。例如，信息创建设备5基于被自动添加的与显示在信息控制和显示装置10A等上的内容DIN相关的识别信息，来选择有关目标图像的电子信息DOUT，以便将其分发到其它的信息控制和显示装置10B或其它的信息处理设备1。或者，信息创建设备5基于被手动添加的、与这个显示对象的内容DIN相关的识别信息，来选择有关目标图像的电子信息DOUT，以便将其分发到其它的信息控制和显示装置10B或其它的信息处理设备1。
这样就允许自动选择内容DIN的网络电子会议系统等，在多个陈述屏幕上被设置成了其识别信息，以便最好地、实时地将其发送出去进行组织。也就是说，信息创建设备5根据识别信息，自动地或手动地在所显示对象的内容DIN中选择目标图像并对其进行编辑，以保证所编辑的内容DIN在数据流中和创建电子信息DOUT。这样就允许将数据流形式的电子信息DOUT一致地分发到(广播)安排在诸如远端的其它地方处的信息处理设备1以及信息控制和显示装置10A等上。
虽然信息处理设备1、信息控制和显示装置10A等以及信息创建设备5是通过通信装置4相互连接的，假设在系统100中，信息控制和显示装置10A等配有无线通信功能，并且每个信息处理设备1也都配有无线通信功能，由此组成(composing)通信装置4；假定提供无线设备来作为接入点，由此组成(composing)通信装置4；并且假定使用通常的通信电缆，由此组成(composing)通信装置4。当然，这些项目的组合允许构建网络。
由于装置具有无线通信功能，所以使用无线LAN卡。如果使用无线LAN卡，那么，信息控制和显示装置10A等，以及每个信息处理设备1能通过一对一(peer-to-peer)模式在特定的区域或地方相互连接。在此情况下，就不需要接入点。
以下将说明根据本发明的在与信息处理方法相关的网络信息处理系统100中的处理示例。图2是显示在网络信息处理系统100中的处理示例的流程图。
这个第一个实施例假定这样的情况，即，信息创建设备5(信息创建系统I)和至少一个信息控制和显示装置10A、10B、10C等(信息控制和显示系统II)被安置在特定的区域或特定的地方，诸如会议室，并且在该特定的区域或特定的地方准备了至少一个信息处理设备1(信息处理系统III)。在这个实施例中，假定，信息控制和显示装置10A、10B、10C和信息处理设备1中的任何一个显示静止图像，以及假定信息控制和显示装置10A、10B、10C和信息处理设备1显示静止图像。
根据这些处理需要，在图2中所示的流程图中的步骤A1中，信息创建系统I、信息控制和显示系统II、以及信息处理系统III通过通信装置4相互连接。此时，例如，信息控制和显示装置10A等配有无线通信功能，并且每个信息处理设备1也都配有无线通信功能，因此组成通信装置4。利用通信电缆将信息创建设备5和信息控制和显示装置10A等连接起来。
当然，可以提供无线设备作为接入点，由此组成通信装置4，并且可以使用通常的通信电缆，因此组成通信装置4。用于网络配置的电子设备，例如信息处理设备1、信息创建设备5、以及信息控制和显示装置10A被接通电源。
然后，在任何信息处理设备1中，该系统中的参加者(attendee)运行信息处理的系统程序，该处理转到步骤A2，在步骤A2中，信息控制和显示装置10A等等待从任何信息处理设备1来的输入操作指令。当信息控制和显示装置10A从信息处理设备1接收到任何输入操作指令时，处理转到步骤A3，在步骤A3中，信息控制和显示装置10A执行信息控制和显示处理。
在这个系统100中，信息控制和显示装置10A、10B和10C的多个项目根据从任何信息处理设备1中传递来的材料信息等显示图像。此时，在这个信息控制和显示装置10A中，例如，每当信息处理设备1改变静止图像显示时，识别信息被自动地添加到它的内容DIN中。
或者，当一个信息处理设备1控制在信息控制和显示装置10A、10B和10C之一当中的信息时，每当将信息控制权利从信息控制和显示装置10A传递到其它信息控制和显示装置10B时，识别信息被自动地添加到它的内容DIN中。当然，利用信息处理设备1的输入操作功能(手动添加操作)，有关目标图像的识别信息可以被自动地添加到其内容DIN中。
然后，处理前进到步骤A4，在步骤A4中，信息控制和显示装置10A检查各个显示的内容DIN是否被存储在信息创建设备5中。此时，利用信息处理设备1的输入操作功能，记录指令被传递到信息控制和显示装置10A。信息控制和显示装置10A检测这个记录指令，以检查是否已经执行该记录。
如果将内容DIN记录在信息控制和显示装置10A中，则处理转到步骤A5。如果没有记录内容DIN，则处理转到步骤A7。在步骤A5中，信息控制和显示装置10A根据信息处理设备1的输入操作功能，来确定目前显示在信息控制和显示装置10A、10B和10C上的图像中的哪个图像是目标图像。通过信息控制和显示装置10A等，根据添加到其内容DIN中的识别信息的检测来找出目标图像。添加了识别信息的内容DIN是目标图像，而没有添加了识别信息的内容DIN不是目标图像。
然后，处理前进到步骤A6，在步骤A6中，信息控制和显示装置10A控制信息创建设备5，使得它将有关目标图像的识别信息以及该识别信息的时间信息连接起来，以存储它们。信息创建设备5将显示在信息控制和显示装置10A上的内容DIN和该内容DIN的时间信息一起存储，以创建电子信息DOUT。电子信息DOUT可包括运动图像。
在步骤A7中，根据系统中的参加者完成的决定，由信息处理设备1完成对信息控制和显示装置10A、10B和10C以及信息创建设备5的远程控制(remote control)。信息控制和显示装置10A检测断电信息，并完成信息处理。如果没有完成这些远程控制，则处理返回到步骤A2，然后重复进行上述的A2到A6的处理。
这样，根据作为与本发明相关的第一个实施例的网络信息处理系统100，信息处理设备1、信息创建设备5和信息控制和显示装置10A通过通信装置4相互连接起来，以便信息控制和显示装置10A可以根据信息处理设备1的输入操作功能，来确定目前显示在信息控制和显示装置10A、10B和10C上的图像中的哪个图像是材料陈述者等的目标，由此来控制信息创建设备5，以便它将有关目标图像的识别信息及其时间信息连接起来，以存储它们。
因此，根据该识别信息，就可能显示该目标图像，以便当再现由信息创建设备5创建的电子信息DOUT时，同其它图像相比，它的轮廓可以被突出显示(highlight)，这样使观看者注意在信息控制和显示装置10A、10B和10C中的、在显示时间上的、在再现的图像中的哪幅图像是最显著的图像。
这样，利用网络信息处理系统100，使得网络电子会议系统、网络教育系统、网络游戏系统等被组织起来。
(2)第二个实施例在本实施例中，作为网络信息处理系统的一个示例，组织了网络电子会议系统101，使得根据信息处理设备的输入操作功能，来确定目前显示在信息控制和显示装置上的图像中的哪个图像是目标图像，由此，将有关目标图像的识别信息以及时间信息连接起来，以便将其存储在信息创建设备中。
在图3中所示的网络电子会议系统101是一种利用网络的陈述系统，在所述网络中，作为信息创建设备的示例的创建器5及作为信息控制和显示装置示例的陈述设备10，被安排在一个会议室等中，还有，作为信息处理设备示例的多个笔记本个人电脑PCi(i＝1到n)被准备在会议室中。陈述设备由投影仪2和通信器3组成，这将在随后说明。
这些创建器5和陈述设备10通过集中式连接器(以下称为集线器(HUB))9A、9B和9C，以及作为通信装置示例的、构成有线LAN等的通信电缆40相互连接起来。HUB 9A、9B和9C连接到每条通信电缆40。
这个陈述设备10和每个笔记本个人电脑PCi通过作为通信装置示例的接入点6和无线LAN相互连接，以便根据从任何笔记本个人电脑PCi来的操作指令，可以远程控制陈述设备10。
换句话说，经由网络通过将笔记本个人电脑PCi连接到陈述设备10的访问允许网络电子会议系统系统101被组织起来。这个网络电子会议系统101可单独操作或将它远程连接到另一个相同系统来使用。
在系统101中，会议参加者使用可以连接到网络的笔记本个人电脑PCi。每个笔记本个人电脑PCi具有GUI功能，这样它们可以利用GUI功能和鼠标操作功能，就可以执行任意信息处理。每个笔记本个人电脑PCi都配有液晶显示器11，在其上显示诸如GUI屏幕的操作屏幕。如果参加网络电子会议系统101，则在每个笔记本个人电脑PCi上安装专用的应用程序。
虽然在这个系统101中准备了陈述设备10，但是陈述设备10由用于投影陈述材料的投影仪2、引入了个人电脑功能的通信器3等组成。当然，投影仪2也可使用带有内建通信功能的网络通信类型(network-corresponding)的显示设备。
在该实施例中，HUB 9C连接到通信器3，该通信器3根据从任何笔记本个人电脑PCi传递来的材料等的信息来控制陈述的图像显示。换句话说，通信器3根据从任何笔记本个人电脑PCi来的远程控制指令来辅助网络中的信息处理，该信息处理包括到/来自投影仪2和创建器5的输入/输出控制。另外，主通信器3管理会议参加者使用的笔记本个人电脑(PCi)。主通信器3具有这样的关系，即，它能获得控制其它的子通信器的信息控制权利。
在投影仪2中，根据从任何笔记本个人电脑PCi来的材料信息来显示陈述的图像。投影仪2根据RGB信号将彩色图像投影在白墙等上面。代替投影仪2，可使用平板显示器等。因为平板显示器、等离子体显示器等能够被制成大规模的显示屏幕。
在本实施例中，提供了通过LAN连接可控制的电视会议设备7(例如，索尼生产的PCS-1600)来作为运动图像和音频输入设备的示例，并且该电视会议设备7在会议室内获得至少运动图像和音频信息，而不是从笔记本个人电脑PCi传递来的材料信息。电视会议设备7具有视频照相机7a和作为音频输入设备的麦克风7b。在本实施例中，电视会议设备7直接连接创建器5，并且具有这样的结构，即，根据从客户的任何笔记本个人电脑来的指令，可以控制它的操作模式。
创建器5连接上述的HUB 9A和电视会议设备7，并且将利用投影仪2显示的内容DIN和通过电视会议设备7获得的运动图像和音频信息，以及它们的时间信息一起存储，以创建电子信息DOUT。目的是从电子会议中的内容产生记录并将其保留，以创建这样的电子信息DOUT。创建器5还编辑这些内容DIN，以保证其在数据流中，由此创建电子信息DOUT。通过网络分发会议记录的目的是由数据流而创建电子信息DOUT。
虽然通信器3和创建器5通过通信电缆40相互连接，但HUB 9B连接本系统100中的接入点6，这样，它就能对于安装在笔记本个人电脑PCi中的无线LAN卡4A执行无线通信处理。当然，可以利用正常的通信电缆来执行有线通信处理。这些项目的组合使得网络被构建起来。更进一步，通信器3可以配有无线LAN功能，由此执行无线通信处理，这样，它直接访问安装在每个笔记本个人电脑PCi中的无线LAN卡4A(一对一(peer-to-peer)模式)。
接下来将说明通信器3的内部配置。图4是显示通信器3的内部配置的方框图。
在图4中所示的通信器3具有个人电脑功能，并通过操作任何笔记本个人电脑PCi的鼠标来执行信息处理。通信器3具有数据总线36，而显示适配器31、CPU 32、工作RAM 33、数据存储设备34、网络适配器35等连接到该数据总线36上。
显示适配器31具有处理陈述材料来创建RGB信号的功能。基于陈述材料的这个RGB信号被输出给投影仪2。工作RAM 33暂时存储私有IP地址，并传递与陈述材料相关的信息。
数据存储设备34由硬盘(HDD)、ROM和RAM构成，未示出。硬盘存储陈述材料。在ROM中，描述了用于辅助电子会议系统101的控制程序(此后称为“系统辅助控制程序”)。系统辅助控制程序由运行CPU 32的基本软件和陈述数据处理程序构成。
网络适配器35向和从笔记本个人电脑PCi发送和接收陈述数据和各种类型的命令。网络适配器35与HUB 9C连接。如果通信器3配有无线LAN功能，则无线LAN卡4B被安装在网络适配器35中。
CPU 32根据系统辅助控制程序来控制对显示适配器31、工作RAM 33、数据存储设备34、网络适配器35等的输入/输出操作。这是因为要处理各种类型的程序。CPU 32根据关于从笔记本个人电脑PCi等传递来的材料中的信息来控制陈述图像显示。换句话说，CPU 32根据从任何笔记本个人电脑PCi来的远程控制指令，辅助网络中的信息处理，该信息处理包括在投影仪2和创建器5中的输入/输出控制。更进一步，CPU 32管理由会议参加者使用的笔记本个人电脑PCi。
接着，以下将说明创建器5的内部配置。图5是显示创建器5的内部配置的方框图。
图5中所示的创建器5是用于将希望的内容DIN以及其时间信息一起存储以创建电子信息DOUT的设备，并具有数据总线26。CPU 21、工作RAM22、存储设备3、网络适配器24以及运动图像/音频输入终端25都与数据总线26连接。
工作RAM 22(例如硬盘)临时存储运动图像/音频信息，以及用来处理所传递和所接收的信息(与运动图像或静止图像相关的信息)的控制程序。存储设备23将与陈述材料相关的内容及其时间信息一起存储，还存储运动图像/音频信息等，以及用来处理它们的控制程序。
CPU 22是控制设备的示例，并根据与存储在存储设备23中的内容DIN相关的识别信息来执行各种类型程序的处理，以及选择与目标图像相关的内容DIN，以将它们发送出去。识别信息被自动地或手动地事先添加到所显示对象的内容DIN中。
CPU 21根据识别信息自动地从内容DIN中选择目标图像以编辑它。然后，CPU 21保证这样编辑的内容DIN在数据流中，以创建会议内容等的电子信息DOUT。这就使得数据流形式的电子信息DOUT被一致地分发(广播)给多个客户PC和通信器3。
运动图像/音频输入终端(I/O接口)25与数据总线26连接，并且电视会议设备7也与它连接，由此，能从这个电视会议设备7接收运动图像和音频信息。网络适配器24被用来连接通信器3。
这样，CPU 21适于存储与显示在上述通信器3上的陈述材料相关的信息，还存储从通信器3传递来的信息，如参加电子会议的参见者的信息(关于IP地址信息或他或她的面部照片)、运动图像和音频信息等。于是，在记录的最后就可能自动地创建会议中的内容，也就是会议的记录。
如果在会议中有多个参加者的笔记本个人电脑PCi，则在它们之中的一个客户的笔记本个人电脑PCi的控制下执行对上述创建器5和电视会议设备7的控制。也就是说，用作记录员的笔记本个人电脑PCi(此后称为“记录者的客户PC”)管理它。为了变成记录者的客户PC，它足够为创建器5打开用作操作屏幕的控制屏幕(控制)。
例如，在图6中所示的显示屏幕由在客户笔记本个人电脑PCi中采用在水平方向上分成三个显示系统的几乎三个显示子屏幕组成。在屏幕中间，显示了基本屏幕50a；在其右边，显示了用于显示有关参加会议的参加者的信息的参加者屏幕50b；以及在其左边，显示了用于控制创建器5的控制屏幕50C。另外，在显示屏幕的底部，显示的是长方形备忘录屏幕。
在基本屏幕50a的上方，显示了构成连接到相应的电子会议系统101的网络的电子设备的图标。在图6中所示的示例中，显示了创建器5的图标K1、通信器3的图标K2等。另外，显示了电视会议设备7的图标K3。
基本屏幕50a的下方是被用作失败的列表栏，其中，显示了存储在作为陈述者的客户的任何笔记本个人电脑PCi中的文件R1的名称。在参加者屏幕50b上，显示了参加者的面部像片、参加者具有的客户PCi的私有IP地址等。
在控制屏幕50c的顶部是图像显示部分，其中，由视频照相机7a拍摄的图像被显示为运动图像。在其中间，显示了线状的显示区域，该显示区域是包括功能键的软键操作部分，以及在其底部，显示了用于输入标题的输入部分。在软键操作部分，显示了记录“REC”键K4、“stop”键K5、暂停“PAUSE”键K6、用于标记记录中的重要图像部分的标记“MARK”键K7、用于打开备忘录屏幕的备忘录“MEMO”键K8、使用投影仪2而保留的静止图像信息(陈述材料)的捕获“CAPTURE”键K9等。
当利用客户PCi来登录通信器3时，只有基本屏幕50a被显示在客户PCi的显示屏幕上。如果它在通信器3的文件名称R1到图标K1中的文件列表上执行DRUG&DROP，则该文件数据(陈述材料)被传递给通信器3，由此，利用投影仪2显示它以完成陈述。但是，这只对一种情况是可用的，即，对操作有资格执行陈述的客户的笔记本个人电脑PCi进行操作的情况。
当按下基本屏幕50a中的n参加者“Attendee”按钮K10时，显示如图6的右方所示的参加者屏幕。然后，当右击创建器图标K1时，弹出如图7中所示的菜单样板(screed)，这样，如果从菜单屏幕中选择了项目“Control”，那么显示图6中所示的控制屏幕50c。如果从控制屏幕中选择了备忘录“memo”键K8，那么备忘录屏幕50d将被显示在GUI屏幕50的下部，如图6中所示的那样，以输入语句等。备忘录屏幕50d具有四到六行空格的空间。
如果从图7中所示的菜单屏幕中选择了项目“Contents Manager”(内容管理器)，那么显示图8中所示的内容管理器屏幕50e。内容管理器屏幕50e显示存储在创建器5中的列表菜单。除了存储在创建器5中的内容列表R2外，图8中所示的内容管理器屏幕50e显示用于为所选择的内容列表R2选择操作模式的软键。
在这个系统101中，显示用于再现所选择内容的回放“REVIEW”键K11、将所选择的内容传递给客户PCi的客户传递“DOWNLOAD TO MY COMPUTER”(下载到我的电脑中)键K12、将所选择的内容传递给服务器的服务器传递“UPLOAD TO SERVER”(上传到服务器)键K13、用于显示关于所选择的内容的详细信息的特定“SHOW CONTENTS INFORMATION”(显示内容信息)键K14、删除所选择的内容的删除“DELETE”键K15等。
例如，在图9中所示的5幅图像(有关空间)，是说明利用材料陈述者(客户)的笔记本个人电脑PCi来在投影仪2上所显示的图像的转换示例。页1显示一幅图像，其中圆形行星符号(PLANET)被显示在指示空间的显示屏幕的右下部。页2显示一幅图像，其中星形符号被显示在所显示屏幕的左上部，并且，方程Y＝AX+B被显示在星形符号的下面。页3显示一幅图像，其中，火箭符号被显示在显示屏幕的中间。页4显示一幅图像，其中圆形的太阳符号被显示在显示屏幕的右下部。页5显示一幅图像，其中星形符号被显示在显示屏幕的左上部，而方程Y＝CX-D被显示在星形符号的下面。
客户的笔记本个人电脑PCi将图9中所示的显示转换的时序①到⑤通过通信器3指令到投影仪2上。根据显示转换的时序①到⑤，投影仪2上的5幅图像被改变了，这样在所有图像被改变的时间点上，创建器5存储由通信器3捕获的5幅图像(它们的内容JPEG文件)。
通过保证和它们的时间信息一起存储的内容DIN在一个数据流中，并再现它们，可获得图10中所示的5幅图像。在本实施例中，在显示转换的时序①上显示指示空间的页1的图像，以及时间信息00:01:50。
相似地，在显示转换的时序②上显示页2的图像，以及时间信息00:02:11；在显示转换的时序③显示页3的图像，以及时间信息00:03:30；在显示转换的时序④上显示页4的图像，以及时间信息00:04:02；在显示转换的时序⑤上显示页5的图像，以及时间信息00:04:47。页5的图像指示一个示例，其中图像被持续显示到时间信息00:06:28。
在创建器5中存储这5幅图像(内容DIN)以及它们的时间信息，使得保证在一个数据流中的电子信息(内容)被创建。
接着，下面将说明在网络电子会议系统101中的处理示例。在本示例中，在会议中的陈述者通过网络，将陈述的文本文件和/或图像文件从笔记本个人电脑PCi发送给通信器3。根据图像文件的传输，陈述材料可以出现在投影仪2上。陈述者执行用于获得对通信器3的鼠标操作权利的操作，使得，他或她可以利用显示在投影仪2的显示屏幕上的图标进行解释。
根据这些处理需要，在图11中所示的流程图的步骤S1中，通过使用会议参加者的任何笔记本个人电脑来激活电子会议的应用软件，以登录通信器3(或主通信器)。
在此情况下，会议的第一参加者设置一个口令，然后，第二参加者或随后的参加者可通过输入口令来加入该会议。由于该口令不是本电子会议预先确定的适当值，所以，就可能解决这样的缺点问题，即若忘记了口令或偶然输入它，将不能激活该电子会议。
然后，处理进行到步骤S2，其中，如果会议的参加者打开了控制屏50c，以便允许会议的参加者操作创建器5，那么，仅仅该客户变成了记录者的客户PC(见图6)。在笔记本个人电脑PCi的GUI屏幕50上，如图6中所示，创建器5的图标K1被右击，并且从显示菜单上选择“control(控制)”，就显示控制屏50c。
处理进行到步骤S3，在步骤S3中，如果在控制屏中点击了记录“REC”键K7，那么就激活了电视会议设备7，以开始记录会议的图像。
如图6中所示，如果在控制屏50c上点击了记忆“MEMO”键K8，那么，就打开记忆屏幕50d以允许输入文本。如果点击了图6中所示的“SEND(发送)”键K17，则输入的文本进入到创建器5中。
处理进行到步骤S4，在步骤S4中，如果陈述材料被从笔记本个人电脑PCi的文件列表R1拉下并且落到希望显示的投影仪2的图标K2上，则从文件列表选择的陈述材料被显示到投影仪2的屏幕上。与此同时，将陈述材料、页切换信息等存储在创建器5中的工作RAM 22中。
例如，在图9中所示的通信器3上，在显示转换的时序①上显示指示空间的页1的图像；在显示转换的时序②上显示页2的图像；在显示转换的时序③上显示页3的图像；在显示转换的时序④上显示页4的图像；以及在显示转换的时序⑤上显示页5的图像。
在显示中改变如此图像的情况下，捕获在该时序上显示的图像，这样，可以根据JPEG标准提交每幅图像，并发送到创建器5中。在创建器5中，连同(陈述者)陈述的视频图像和音频信息，记录了5幅图像，这些图像与创建器5的时间信息相连接，也就是说，关于显示转换的时序①的时间信息00:01:05；关于显示转换的时序②的时间信息00:02:11；关于显示转换的时序③的时间信息00:03:30；关于显示转换的时序④的时间信息00:04:02；以及关于显示转换的时序⑤的时间信息00:04:47。
处理进行到步骤S5，在该步骤S5中，如果停止记录，就在控制屏上点击停止“STOP(停止)”键。此时，如图12中所示，记录者侧的笔记本个人计算机PCi显示保存确认屏幕P1。在除了这样的保存处理之外的每种情况下，取消其内容。在执行保存操作中，处理进行到步骤S6，在步骤S6中，自动准备会议的内容。
换句话说，在步骤S6中，根据从通信器3中获得的静态图像信息以及从电视会议设备7中获得的运动图像和音频信息，来准备会议的内容。在创建器5中，如图10中所示，在一个数据流中保证5幅图像，以产生电子信息DOUT。为了通过网络如因特网，来查阅包括那5幅图像的会议内容，文件数据被转换为HTML格式。
然后，处理进行到步骤S7，在步骤S7中，当完成了会议内容的产生时，显示内容管理器屏幕50e。在屏幕50e上，就可能确认保存在创建器5(参见图8)中的会议内容。在步骤8中，当从这个内容管理器屏幕50e中选择了会议的希望内容时，就可以再现该内容。在步骤S9中，将所确认的内容传递到服务器设备，未显示出来，并保存在其中。
或者，在步骤S8中，当会议内容被再现然后并被编辑时，处理进行到步骤S10，在步骤S10中，通过操作内容管理器屏幕50e，将会议内容传递到笔记本个人计算机PCi侧，在笔记本个人计算机PCi中使用已知的编辑软件来编辑会议内容。在步骤S9中，将所编辑的服务器内容传递到并保存在服务器设备中，未示出。在步骤S11中，这使得记录者的笔记本个人计算机PCi再现存储在服务器设备中的会议内容，未示出。
(3)第三个实施例在本实施例中，假定网络会议立刻进行，在该网络会议中，在三个陈述设备10A、10B和10C中使用了多种材料。因此，材料的陈述者和助手(们)向相应的通信器发送将要陈述的材料的文件。
组织如图13中所示的网络会议系统102，使得可以将陈述设备10B和10C添加到如图3中所示的系统101中，陈述设备10A包括主通信器3A和投影仪2A，陈述设备10B包括子通信器3B和投影仪2B，以及陈述设备10C包括子通信器3C和投影仪2C。
主通信器3A连接到HUB 9C上，子通信器3B连接到HUB 9D上，子通信器3C连接到HUB 9E上，以及HUB 9D和9E连接到通信电缆40上，该通信电缆40由HUB 9A和9B以及LAN一起组成。这是因为多个材料可以突然出现在3个投影仪2A到2C上。
材料的陈述者将要陈述的文本和图像文件发送到主通信器3A或子通信器3B或3C，以使陈述的材料出现在连接到主通信器3A的投影仪2A上、连接到子通信器3B的投影仪2B上、或连接到子通信器3C的投影仪2C上。
因此，在系统102中，材料的陈述者及助手(们)使鼠标光标显示在屏幕上，来指示屏幕上的解释部分(称为“远程光标功能”)。根据这个远程光标功能，当客户PC侧执行用于获得远程鼠标的操作权的操作时(这里简单称为“鼠标操作权”)，这个客户PC的鼠标8中的运动就再现在了陈述屏幕上。
根据在图14A到图14C中显示的显示转换的例子，如果陈述突然进行到陈述多个材料，那么，材料的陈述者(客户)使用他的或她的笔记本个人计算机PCi，在投影仪2A到2C上执行5幅图像(关于空间)的显示转换操作。
在图14A中所示的投影仪2A中，在显示转换的时序[1-1]上显示指示空间的页1的显示图像，以及将圆形行星图像(行星)放置在显示图像的右下方。在显示转换的时序[1-2]上显示页2的显示图像，其中将指示太阳(SUN)的页2的圆形图像放在右下方。
相似地，在图14B中所示的投影仪2B中，在显示器转换的时序[2-1]上显示页1的显示图像，其中，页1的星型图像被放置在左上方，还有指示方程Y＝AX+B的图像被放置在星型图的下方的一部分上。在显示转换(display changeover)的时序[2-2]上显示页2的显示图像，其中，页2的星型图像被放置在左上方，还有指示方程Y＝CX-D的图像被放置在星型图的下方的一部分上。
另外，在图14C中所示的投影仪2C中，在显示转换的时序[3-1]上显示页1的显示图像，其中，指示火箭的页1的图像被放置在中间部分上。这样，这些图像在三个投影仪2A到2C中发生了变化。
在这样的投影仪2A到2C使用条件下，当创建器5记录网络会议的内容时，只通知创建器5在通信器3A上的图像的显示转换，并且将与这时显示的图像相关的内容DIN以及其时间信息一起记录，如第二个实施例那样，防止观看者知道材料的陈述者解释当前的任何图像，是通过他或她通知这副图像。
因此，根据第三个实施例，在主通信器3A等中，根据客户的笔记本个人计算机(下面称为“客户PC”)的输入操作功能，来确定材料的陈述者目前通知投影仪2A，2B和2C的图像中的那幅图像，并且控制创建器5，使得目标图像标记FG(M.V.P.)与其时间信息相联系，并且被记录下来。注意到，目标图像标记FG是识别信息的一个例子，并且参考用于识别与投影仪2A、2B、或2C的显示图像相关的当前显示的图像是否为目标图像的信息。换句话说，目标图像标记FG指示材料的陈述者及其助手(们)解释的图像。
在系统102中，当使用投影仪2A到2C和/或客户PC来显示静止图像时，每当客户PC对静止图像执行显示转换操作时，主通信器3A等自动地将目标标志FG添加到其内容DIN上。这是因为在静止图像的显示转换中，已改变图像具有更多的通知比例。
当客户PC将鼠标操作权限设置为在通信器3A、3B、和3C中的任何一个中的控制信息的权利时，每当鼠标操作权利被从主通信器3A传递到子通信器3B和3C中的任何一个时，客户PC自动地将目标标志FG自动添加到其内容DIN上。这是因为在将鼠标操作权利从主通信器3A传递到子通信器3B和3C的任何一个中时，被传递的投影仪2B、2C等具有更多的通知比例。
在系统102中，利用客户PC的GUI功能(称为“手动添加操作”)，将关于目标图像的目标图像标记FG添加到其内容DIN中。因此，根据该手动添加操作，当材料的陈述者和其助手(们)通过投影仪2A、2B或2C进行陈述并解释相应的图像时，他们就可以将目标图像标记FG添加到其内容DIN中。当产生和编辑关于陈述材料的信息时，这样先前添加目标图像标记FG，就使得添加了目标图像标记FG的目标图像自动地从多个内容DIN(静止图像)中被选择出来。
图13中所示的创建器5将显示在投影仪2A到2C上的内容DIN连同它们的时间信息一起记录，并产生电子信息DOUT。在第三个实施例中的创建器5将以下功能添加到第二个实施例具有的创建器上。例如，图5中所示的CPU 21能从存储设备23中读出所显示对象的内容DIN，因此，根据以前已经自动地或手动添加的关于内容DIN的目标图像标记FG，就可自动地或手动地选择和编辑有关目标图像的内容DIN。CPU 21保证所编辑的内容DIN在数据流中以产生电子信息DOUT。
这就允许从所显示对象的内容DIN中收集最显著的目标图像的电子信息DOUT，并且保证其在数据流中。当再现电子信息时，就可能根据目标图像标记FG来执行显示处理，从而与另一幅图像相比，目标图像的轮廓可以被突出显示。创建器5优先将数据流形式中的电子信息DOUT实时地递交(广播)给在远端等处的另一个系统中的任何通信器或客户PC。
接着，以下将说明自动地标记材料的陈述者目前解释的多幅图像中的一幅图像的方法。
该实施例具有在记录陈述的内容DIN时标记多幅图像中的目标图像的功能，并且当再现和编辑电子信息DOUT时利用目标图像标记FG。
在这种情况下，在情况①下，是当显示在投影仪2A到2C上的图像文件页被改变时，以及在情况②下，是当鼠标操作权利被传递给相应的陈述材料时，目标图像标记FG被添加到其内容DIN中，以标记该目标图像。③当鼠标操作权利可以被传递给图像，并且目标图像标记FG可以保持在投影仪2A等中时的标记保持允许时间被定义为Tdist。
在该假设下，图15显示在三个投影仪2A、2B和2C中的操作示例。在这些示例中，显示更新图像并且传递鼠标操作权利的情况(作为鼠标控制周期MOUSE CTL)。
在图15中所示的每个投影仪2A、2B和2C中，一幅图像在阴影圆圈之间的周期期间被显示出来。阴影圆圈符号指示图像更新点，而阴影条指示将鼠标操作权利和目标图像标记FG传递给相应的投影仪。图15中所示的项目(1)到(11)分别指示时间的显示点，并具有(1)＜(2)＜(3)……＜(11)的关系。
在该示例中，在图15中所示的投影仪2A中的每个时间显示点(1)和(7)处，显示了没有获得目标图像标记FG且更新了屏幕的状态。相似地，在投影仪2B中的每个时间显示点(2)和(9)处，显示了没有获得目标图像标记FG且更新了屏幕的状态。在投影仪2C中的每个时间显示点(3)和(8)处，显示了没有获得目标图像标记FG且更新屏幕的状态。
在投影仪2A中的时间显示点(4)处，获得鼠标操作权利，并且只在预定的时间周期如标记保持允许时间Tdisp期间，在投影仪2A中设置目标图像标记FG。在该示例中，这样设置Tdisp，使得当获得鼠标操作权利时，时间显示点(4)是时间的开始点。
如果仅在屏幕被更新之后，在象投影仪2A的时间显示点(1)处设置目标图像标记FG，那么设置Tdisp要考虑任何时间延迟，直到获得鼠标操作权利为止。这就导致占有目标图像标记的时间周期被占用而延长。
在投影仪2B中的时间显示点(5)处，获得鼠标操作权利，并且只在时间周期Tdisp[sec]期间，在投影仪2B中设置目标图像标记FG。在投影仪2C中的时间显示点(6)处，获得鼠标操作权利，并且只在时间周期Tdisp[sec]期间，在投影仪2C中设置目标图像标记FG。注意到，在投影仪2A中的时间显示点(10)处，在已经经过标记保持允许时间Tdisp之后，释放目标图像标记FG。
在时间显示点(2)、(3)、(8)和(9)处，在其它的投影仪2B等占用目标图像标记FG期间更新屏幕时，不能立即获得目标图像标记FG。在这种情况下，在象投影仪2A的时间显示点(7)处，在已经经过投影仪2C等中占用目标图像标记FG的标记保持允许时间Tdisp之后，获得目标图像标记FG。
当多个投影仪2A到2C等待在图15中所示的时间显示点(11)处获得目标图像标记FG时，在投影仪2B已经更新屏幕之前已经更新了屏幕的投影仪2C可以获得目标图像标记FG。这是因为与投影仪2B中的图像相比较而言，投影仪2C具有以下将说明的在图像上更高的显著程度。
在图15中所示的投影仪2B中的时间显示点(5)处，即使其它的投影仪2A、2C等等待通过更新图像来获得目标图像标记FG，当投影仪2B获得鼠标操作权利时，其就可以获得目标图像标记FG。相似地，在投影仪2C中的时间显示点(6)处，即使其它的投影仪2A、2B等等待通过更新图像来获得目标图像标记FG，当投影仪2C获得鼠标操作权利时，其就可以获得目标图像标记FG。
在该实施例中，当术语A指示投影仪2A到2C中的每一个是否具有目标图像标记FG，术语B指示它们是否具有鼠标操作权利，以及术语C指示更新图像中的等待顺序、内部状态时，投影仪2A到2C中的每一个的ms都被定义为以下的表达式(1)ms(PJi)[ABC]表达式(1)其中PJi是有关投影仪2A到2C的投影仪的序号，将其称为“PJi(i＝1到3)”。
关于目标图像标记FG，如果相应的投影仪获得它，则A＝1；而如果没有获得，则A＝0。关于鼠标操作权利，如果相应的投影仪获得它，则B＝1；如果没有获得，则B＝0。关于在更新图像中的等待顺序，鼠标操作权利的等待顺序由数字指示。在该实施例中，数字1、2、…按数字顺序排列成行，这样，当相应的投影仪2A等获得目标图像标记FG时，它们将在数字上减1。
下面将根据表达式(1)，在如图15中所示的时间显示点(1)到(11)处，在投影仪2A到2C的每个中，指示状态ms(PJi)之间的关系。当投影仪2A到2C中的每一个什么都没有显示时，所有这些状态ms(PJ1)到ms(PJ3)都是
。在投影仪2A中，在时间显示点(1)处，状态ms(PJ1)是[100]；在时间显示点(4)处，状态ms(PJ1)是[110]；在时间显示点(5)处，状态ms(PJ1)是
；在时间显示点(7)处，状态ms(PJ1)是[100]；以及在时间显示点(10)处，状态ms(PJ1)是
。
另外，在投影仪2B中，在时间显示点(2)处，状态ms(PJ2)是[101]；在时间显示点(5)处，状态ms(PJ2)是[110]；在时间显示点(6)处，状态ms(PJ2)是
；在时间显示点(9)处，状态ms(PJ2)是
。
此外，在投影仪2C中，在时间显示点(3)处，状态ms(PJ3)是
；在时间显示点(6)处，状态ms(PJ3)是[110]；在时间显示点(8)处，状态ms(PJ3)是
；在时间显示点(11)处，状态ms(PJ3)是[100]。关于目标图像标记FG，FG＝A，这样它就可以被转换成FG＝1或FG＝0。
于是，在通信器3A等上的CPU 32，或者创建器5的CPU 25就可以在三个投影仪2A到2C的每一个中识别并自动确定内部状态ms(PJi)[ABC]。在所显示的内容中，将自动确定的目标图像标记FG与它们的时间信息相连接，而所显示的内容可以被存储在存储设备23中。
在这个示例中，当在投影仪2或客户PC上再现电子信息DOUT时，根据目标图像标记FG，将通过希望的颜色所识别的图像与目标图像合成在一起。
根据图16中所示的内容再现屏幕50f，由投影仪2A(投影仪1)投影的用于指示星的页1的图像被显示在GUI屏幕50的中部的上方；由投影仪2C(投影仪3)投影的用于指示火箭的页1的图像被显示在其中部的下方；以及，由投影仪2B(投影仪2)投影的用于指示星和方程的页1的图像被显示其左边部分的上方。将这三幅图像以彩色同时显示在笔记本个人电脑PCi的液晶显示器11上。
在内容再现屏幕50f中，作为通过希望的颜色所识别的图像示例，添加了目标图像标记FG的图像，是利用一条黄色显示框13来显示的。观看利用一条黄色显示框13(由图中的斜线表示)所显示的图像，使得会议的参加者立即明白材料的陈述者由他或她通知它而解释图像。
图17显示在客户的笔记本个人电脑PCi中的内容编辑屏幕50g。在该示例中，根据目标图像标记FG，目标图像被合成成希望颜色的框图像和/或黄色线图像。根据图17中所示的内容编辑屏幕50g，图像(图片)被三个投影仪2A到2C显示在GUI屏幕50中部的下半部。在这个示例中，在图片1的一条线上，根据它们的时间信息，显示了由投影仪2A投影的指示星形的页1的图像和指示太阳的页2的图像。
在图片2的一条线上，根据它们的时间信息，显示了由投影仪2B投影的指示星形和方程Y＝AX+B的页1的图像和指示星形和方程Y＝CX-D的页2的图像。在图片3的一条线上，根据它的时间信息，显示了由投影仪2C投影的指示火箭的页1的图像。
在图片1到3的任何一个中，时间轴被纵向地指示成运动图像的时间刻度(影片)16。由下方的五边形符号组成的编辑标记19被提供在时间刻度16的上方。在图片1到3中，作为线图像一个示例的黄色条17被显示在由目标图像标记FG指示的图像下部，如已经解释的那样。在添加了图像标记FG的图像中，黄色条17指示标记保持时间Tdisp，以便于，在编辑操作过程中，通过右击操作等，在其中执行纠正处理(correction processing)，如删除和移动。
在图片3的下面提供了备忘录键K16，并且，一排各种类型的图标键8被安排在这个键K16的旁边。安排了可纵向移动的黄色显示框15，来作为通过希望的颜色识别的图像的一个示例，它跨过图片1到3的显示区域。在这个示例中，在图片1的线上，黄色显示框15跨过由投影仪2A投影的用于指示太阳的页2的图像，并且在图片3的线上，跨过由投影仪2C投影的用于指示火箭的页1的图像，且将它们覆盖。
在这个示例中，与图片3中指示火箭的图像相比较，与指示图片1中的太阳图像相关的鼠标操作权利是预先获得的，这样，可以在内容编辑屏幕50g的右上部显示用于指示图片1中的太阳的放大图像。有关指示图片3中的火箭的图像，当显示框15再向右移动以便指示图片1中的太阳图像从显示框15中移出时，在内容编辑屏幕50g的右上部上的显示，被从指示图片1中的太阳的图像改变为指示图片3中的火箭的图像，以便显示指示太阳的放大图像(投影仪1)。
在黄色条17和显示框15之间的关系上，如果显示帧15包括黄色条17，那么，具有黄色条15的放大图像就会显示在内容编辑屏幕50g的右上部上。换句话说，在显示框15的纵向运动和由材料陈述者确定为目标的目标图像之间的等效的关系可以在笔记本个人电脑PCi中被控制。
接着，以下将说明在网络电子会议系统102中的处理示例。
在该实施例中，假设创建器5(信息创建系统I)和三个陈述设备10A到10C(信息控制和显示系统II)被安排在一个会议室中，并且三个笔记本个人电脑PCi(i＝1到3信息处理系统III)被准备在所述会议室中。另外，三个投影仪2A到2C显示静止图像。
如图17中所示安排了接入点6，使得三个笔记本个人电脑PCi和三个通信器2A到2C被组织成无线LAN配置。利用HUB 9C到9E和通信电缆40将创建器5和三个通信器2A到2C相互连接起来。用于网络配置的电子设备，如笔记本个人电脑PCi、创建器5、投影仪2A到2C、以及通信器3A到3C被接通电源。然后，材料陈述者的笔记本个人电脑PCi被设置为客户PC。
根据这些处理设备，在图18中所示的流程图中的步骤B1中，当在客户PC中由材料陈述者激活了网络电子会议的系统程序时，主通信器3等，等待从客户PC输入操作的指令。当客户PC指令主通信器3执行输入操作时，处理前进到步骤B2，其中主通信器3A控制信息，以及投影仪PJi执行显示处理。
在系统102中，三个投影仪2A到2C根据从客户PC传递的材料信息来显示陈述的图像。此时，例如，每当客户PC切换静止图像显示时，主通信器3A就自动地将目标图像标记FG添加到内容DIN中。
当客户PC利用鼠标8通过远程控制来控制三个通信器3A到3C中的一个时，每当将鼠标操作权利从主通信器3A传递到子通信器3B中时，它就自动地将目标图像标记FG添加到内容DIN中。
在这个示例中，当投影仪的屏幕中发生了切换事件或者还没有获得鼠标操作权利的投影仪PJi重新获得它时，设置目标图像标记FG。当设置了目标图像标记FG时，调用图19中所示的子程序(subroutine)，因此，在其流程图的步骤C1中，主通信器3A等检查在相应的投影仪序号PJi中是否发生了屏幕改变。如果发生了屏幕改变，则处理转到步骤C2，在步骤C2中，主通信器3A检查是否没有投影仪PJi获得目标图像标记FG。如果没有获得目标图像标记FG，则处理转到步骤C4。
如果在相应的投影仪序号PJi中没有发生屏幕改变，则处理前进到步骤C3，在步骤C3中，检查鼠标操作权利是否被从相应的通信器3A等传递到子通信器3B。如果传递了鼠标操作权利，那么处理前进到步骤C4，因为在投影仪序号PJi中的内部状态变成了ms(PJi)＝010。
在步骤C4，将用于设置目标图像标记的定时器复位，并且激活该定时器以设置标记保持时间Tdisp。然后，处理前进到步骤C5，在步骤C5中，主通信器3A等只在标记保持时间Tdisp期间使目标图像标记FG能被设置。在这个投影仪序号PJi中的内部状态变成了ms(PJi)＝110。然后，处理返回图18中所示的主流程中的步骤B2。
在步骤C2中，如果任何投影仪PJi已经获得目标图像标记FG，那么，处理转到步骤C6，在步骤C6中，将相应的投影仪PJi的等待顺序C设置为C+1。当投影仪序号PJi的等待值(Wait)被设置为[1]，并且已经等待另一个投影仪PJi时，该Wait值加1(+1)。这个投影仪序号PJi的内部状态变成了ms(PJi)＝11i。于是处理返回至图18中所示的主流程图中的步骤B2。
用于目标图像标记FG的定时器指示Tdisp，这样，投影仪序号PJi的内部状态变成了ms(PJi)＝100。其后，如果目标图像标记FG被释放，那么调用图20中所示的子程序(subroutine)，以及在该流程图的步骤E1中，使定时器停止。在步骤E2中，投影仪序号PJi的目标图像标记FG被释放。该释放使得这个投影仪序号PJi中的内部状态变成了ms(PJi)＝000。
然后，在步骤E3中，主通信器3A等检查是否没有投影仪PJi获得目标图像标记FG，即，等待顺序C是否为
。在这个检查中，检测投影仪的内部状态ms(PJi)。例如，投影仪序号PJ2的内部状态是ms(PJ2)＝001，以及投影仪序号PJ3的内部状态是ms(PJ3)＝002。注意到，如果等待顺序C是
，则处理返回到图18中所示的主流程图中的步骤B2。
在步骤E3中，如果等待顺序C不是
，那么处理转到步骤E4，在步骤E4中使定时器复位，并且激活定时器以设置标记保持时间Tdisp。然后，处理前进到步骤E5，在步骤E5中，主通信器3A等将相应的投影仪PJi的等待顺序(等待值)C设置为C-1。换句话说，等待的投影仪的等待值被减少1。
其结果是，在Tdisp期间将目标图像标记FG，设置给具有值
的投影仪序号PJi。根据上述示例，投影仪序号PJ2的内部状态变成了ms(PJ2)＝100，以及投影仪序号PJ3的内部状态变成了ms(PJ3)＝001。处理返回到图18中所示的主流程图中的步骤B2。
然后，处理转到步骤B3，在步骤B3中，主通信器3A检查各个显示的内容DIN是否被存储在创建器5中。在这种情况下，利用客户PC的输入操作功能，将记录指令发送给主通信器3A。主通信器3A通过检测这个记录指令来检查是否已经做了该记录。
如果在主通信器3A中的内容DIN被存储了，那么，处理前进到步骤B4。如果没有内容DIN被存储，那么，处理前进到步骤B6。在步骤B4中，主通信器3A确定投影仪2A、2B和2C的陈述图像中的哪个图像目前是目标图像。通过检测添加到主通信器3A中的内容DIN上的目标图像标记FG来找出目标图像。添加了目标图像标记FG的内容DIN就是目标图像，而没有添加目标图像标记FG的内容DIN是非目标图像。
然后，处理前进到步骤B5，在步骤B5中，主通信器3A控制创建器5，以便有关相应目标图像的目标图像标记FG与它的时间信息相连接，并且，它将它们记录下来。创建器5将由主通信器3A所显示的内容DIN连同它们的时间信息一起记录，以产生电子信息DOUT。电子信息DOUT包括运动图像。
在步骤B6中，根据材料的陈述者的停止决定，客户PC停止远程控制投影仪2A到2C、通信器3A到3C、创建器5等。在投影仪2A到2C、通信器3A到3C和创建器5中，检测电源关断信息，由此停止信息处理。如果那些远程控制没有停止，那么处理返回到步骤B1，并重复上述步骤B1到B5。
因此，根据本发明的第三个实施例的网络电子会议系统102，客户PC和通信器3A到3C利用无线LAN，通过接入点6相互连接，而通信器3A到3C和创建器5通过HUB 9A、9C到9E、以及通信电缆40相互连接。主通信器3A确定投影仪2的图像中的哪幅图像是材料陈述者等目前定为的目标，并控制创建器5，以便将目标图像标记FG与它的时间信息相连接，并且它将它们记录下来。
然后，当再现由创建器5创建的电子信息DOUT时，根据目标图像标记FG，与其它图像相比，目标图像可以被显示出来，并且其轮廓被突出显示，以便它的观看者可以知道投影仪2再现的图像中的哪个图像是显示时间中最显著的(参看图16)。
当在笔记本个人电脑PCi中编辑内容屏幕时，根据显示框15可被纵向移动以及材料的陈述者定为目标的图像之间的等效关系，它可以控制显示(参看图17)。由此，这样的网络电子会议系统可以被组织，以便在多个陈述图像中，通过收集添加了目标图像标记的、材料陈述者的目标图像，电子信息DOUT具有现场会议的感觉，并且能够通过网络传递。
在这个实施例中，已经说明了使用三个通信器3A、3B的情况，但是，本发明并不局限于这种情况，因此，如果采用一个通信器与多个投影仪2A到2C等连接的结构，那么，通过将显示对象的内容DIN和目标图像标记FG传递给显示设备中的每个控制块，就可以实现相似的处理。
有关上述的网络信息处理系统，已经说明了网络电子会议系统102，但是本发明并不局限于这样的系统，因此，本发明还能应用于在远程地点和/或远程会议室中多个网络系统相互连接的系统中。
(4)第四个实施例在这个第四个实施例中，假设有关第三个实施例的网络电子会议系统102和最新安排的远程会议室A、B和C通过有线LAN相互连接，其中，出现在系统102中的陈述材料被再现和编辑，然后，电子信息DOUT被立即分发给远程会议室A、B和C。
如图21中所示的远程会议室类型的网络电子会议系统103被组织，这样，作为在陈述地点组织的远程会议室的会议室A的电子会议系统103A、作为远程会议室的会议室A的电子会议系统103A、会议室B的电子会议系统103B、会议室C的电子会议系统103C相互之间通过通信电缆40和网关设备(服务器)28A、28B和28C互相连接。
由于参考图17已经说明了电子会议系统102的内部结构，所以，在此省略对其说明。HUB 9E通过通信电缆40与网关设备29A连接。网关设备28A再通过通信电缆40与HUB 9F连接，并且，该HUB 9F通过通信电缆40与HUB 9G到9H连接。
HUB 9G与网关设备28B连接，且HUB 9H与网关设备28C连接。网关设备28B通过通信电缆40与HUB 90A到90F连接。网关设备28C通过通信电缆40与HUB 90G到90I连接。
在每个电子会议系统103A、103B和103C中，作为网络配置的电子设备，安排了一个投影仪2、通信器3、接入点6和电视会议设备7，并且作为信息处理设备，准备了四台笔记本个人电脑PCi。
在系统103A中，HUB 90A与接入点6连接，HUB 90B与通信器3连接，以及HUB 90C与电视会议设备7连接。在系统103B中，HUB 90D与接入点6连接，HUB 90E与通信器3连接，以及HUB 90F与电视会议设备7连接。
在系统103C中，HUB 90G与接入点6连接，HUB 90H与通信器3连接，以及HUB 90I与电视会议设备7连接。每个通信器3与投影仪2连接。
根据该实施例，在作为陈述地点的网络电子会议系统102中，选择有关使用多个陈述图像进行会议的目标图像，并且由创建器5保证在一个数据流中的电子信息DOUT被广播给会议室A到C。由此，通过在多个陈述图像中，收集添加了目标图像标记的、材料陈述者的目标图像，电子信息DOUT具有现场会议的感觉，并且能够在会议房间A到C中被观看。
关于上述的网络信息处理系统，已经说明了电子会议系统，但是本发明并不局限于这样的系统，于是，本发明还能应用到网络教育系统、网络游戏系统等。
例如，当组织网络教育系统时，每个学生配备了笔记本个人电脑PCi，然后，每个笔记本个人电脑PCi和包括通信器和投影仪的学习辅助显示设备(信息控制显示设备)通过通信装置，诸如无线LAN相互连接。学习辅助显示设备和创建器5通过通信电缆40相互连接。根据这个系统，根据由学生操作的笔记本个人电脑PCi的输入操作功能，来确定学习辅助显示设备上的图像中的哪个图像目前是目标图像。在该系统中，将关于目标图像的图像选择标记与它的时间信息相连接，并且创建器5记录它们。该系统使得在学习内容中最显著的重要学习部分(内容)被保证在数据流中。除此之外，例如，当再现这些内容时，与另一幅图像相比，该系统使得目标图像突出出来并显示。
另外，当组织网络游戏系统时，每个游戏入口都配有笔记本个人电脑PCi，然后，每个笔记本个人电脑PCi和包括通信器和投影仪的游戏辅助显示设备(信息控制显示设备)通过通信装置，如无线LAN相互连接。游戏辅助显示设备和创建器5通过通信电缆40相互连接。根据这个系统，根据通过游戏入口操作的个人笔记本电脑PCi的输入操作功能，来确定游戏辅助显示设备上的图像中的哪个图像目前是目标图像。在该系统中，关于目标图像的图像选择标记是与它的时间信息相连接的，并且创建器5记录它们。该系统使得在游戏内容中最显著的重要游戏部分(内容)被保证在数据流中。除此之外，例如，当再现这些内容时，与另一幅图像相比，该系统使得目标图像被突出出来并显示。
工业应用的可能性本发明可很好地应用于网络电子会议系统、网络教育系统、网络游戏系统等。
权利要求
1.一种网络信息处理系统，包括至少一个具有输入操作功能的用来处理任意信息的信息处理设备；至少一个信息控制和显示装置，用于基于从所述信息处理设备传递来的信息来显示图像；信息创建设备，用于将显示在信息控制和显示装置上的内容和所述内容的时间信息一起存储，以便创建电子信息；通信装置，用于至少连接信息处理设备、信息控制和显示装置以及信息创建设备；确定装置，用于确定目前显示在信息控制和显示装置上的图像中的哪个图像是目标；以及识别信息添加装置，用于将指示由所述确定装置所确定的目标图像的识别信息添加到时间信息中。
2.根据权利要求1所述的网络信息处理系统，其中所述信息控制和显示装置包括显示设备，用于基于从所述信息处理设备传递来的信息来显示图像；以及信息处理辅助设备，用于基于所述信息处理设备的输入操作功能，来在包括所述显示设备的网络中协助信息处理。
3.根据权利要求1所述的网络信息处理系统，还包括运动图像和音频输入设备，用于输入除了从所述信息处理设备传递来的信息之外，还输入图像和音频中的至少一个。
4.根据权利要求1所述的网络信息处理系统，其中，在所述信息控制和显示装置和/或所述信息处理设备显示静止图像的情况下，每当所述信息处理设备改变静止图像显示时，所述信息控制和显示装置将所述识别信息添加到内容中。
5.根据权利要求1所述的网络信息处理系统，其中，当所述信息处理设备中的一个信息处理设备将用来控制所述信息控制和显示装置之一中的信息的权利设置为信息控制权利，每当所述信息控制权利从所述信息控制和显示装置被传递到另一个信息控制和显示装置时，所述信息处理设备将所述识别信息添加到内容中。
6.根据权利要求1所述的网络信息处理系统，其中，通过使用所述信息处理设备的输入功能，来将有关所述目标图像的识别信息添加到内容中。
7.根据权利要求1所述的网络信息处理系统，其中，所述信息创建设备根据自动地或手动地添加的、有关显示在所述信息控制和显示装置上的内容的识别信息，来选择与目标图像相关的电子信息，以便将所选择的电子信息分发给所述信息控制和显示装置和/或所述信息处理设备。
8.根据权利要求1所述的网络信息处理系统，其中所述信息创建设备根据所述识别信息来在所述内容之中自动地或手动地选择目标图像并对其进行编辑，并且保证这样编辑的内容在数据流中，以创建所述电子信息。
9.根据权利要求1所述的网络信息处理系统，其中在在所述信息控制和显示装置和/或所述信息处理设备中再现所述电子信息的情况下，根据所述识别信息，来将具有希望颜色的已识别图像综合成目标图像。
10.根据权利要求9所述的网络信息处理系统，其中，根据所述识别信息，每个都具有希望颜色的框图像和/或线图像，被综合成目标图像。
11.一种信息创建设备，用于将希望的内容连同该内容的时间信息一起存储，以便创建电子信息，所述设备包括存储设备，用于将所述内容连同该内容的时间信息一起存储；以及控制设备，用于根据事先自动地或手动添加的、有关存储在所述存储设备中的内容的识别信息，来选择与目标图像相关的内容，以便发送所选择的内容。
12.根据权利要求11所述的信息创建设备，其中，根据所述识别信息，所述控制设备在所述内容之中自动地选择目标图像来编辑它，并且保证这样编辑的内容在数据流中，以创建所述电子信息。
13.一种信息处理方法，包括如下步骤通过通信装置将至少一个具有输入操作功能的用来处理任意信息的信息处理系统、至少一个用来根据从所述信息处理系统中传递来的信息显示图像的信息控制和显示系统、以及用于将在信息控制和显示系统上显示的内容连同该内容的时间信息一起存储以便创建电子信息的信息创建系统相互连接起来；在信息创建系统中存储内容时，确定目前显示在信息控制和显示系统上的图像中的哪个图像是目标图像；以及将指示这样确定的目标图像的识别信息添加到时间信息中。
14.根据权利要求13所述的信息处理方法，其中，组织了这样的系统，该系统允许陈述者利用当前正显示在包括投影仪的所述信息控制和显示系统上的多个陈述材料，来进行他/她的陈述；其中，在如此组织的所述系统中存储陈述的内容时，确认用于控制网络设备的状态，其中所述网络设备包括通过所述通信装置连接起来的信息处理系统、信息控制和显示系统、以及信息创建系统；其中，基于如此确认的状态来确定目前解释的是哪个屏幕；其中，图像选择标记被标记在如此确定来作为该次目标的图像的陈述内容上；其中，如此标记的图像选择标记与时间信息相连接。
15.根据权利要求14所述的信息处理方法，其中在处理所述陈述时，根据另一个参加者对所述信息处理系统的手动操作，来标记用于指示目前所解释的那个屏幕的图像选择标记。
16.根据权利要求14所述的信息处理方法，其中，在再现所述陈述内容时，基于所述图像选择标记，来确认通过利用已再现的多个屏幕中的一个屏幕来进行该陈述。
17.根据权利要求14所述的信息处理方法，其中组织如此的内容编辑系统，该内容编辑系统允许所述陈述内容被编辑并且准备成一个能够被广播来创建的流形式；以及其中，在如此组织的所述内容编辑系统中，根据图像选择标记，来在进行的屏幕之中自动地或手动地选择一个屏幕。
18.根据权利要求13所述的信息处理方法，其中组织这样的系统，该系统允许会议中的内容被保证在与显示在所述信息控制和显示系统上的内容相关的数据流中，以便实时地优先将其发送出去；其中，由如此组织的所述系统自动地从多个陈述屏幕中选择用所述图像选择标记标记了的图像，并将其发送出去。
19.根据权利要求13所述的信息处理方法，其中在所述信息控制和显示系统和/或所述信息处理系统显示静止图像的情况下，每当所述信息处理系统改变静止图像显示时，所述识别信息被添加到显示在所述信息控制和显示系统上的内容中。
20.根据权利要求13所述的信息处理方法，其中，在所述信息控制和显示系统之一中，当所述信息处理系统之一将用来控制信息的权利设置为信息控制权利时，每当所述信息控制权利从所述信息控制和显示系统被传递到另一个信息控制和显示系统时，所述识别信息被添加到显示在所述信息控制和显示系统上的内容中。
全文摘要
一种如图13所示的网络信息处理系统包括一个或更多笔记本电脑(PCi)；根据从笔记本电脑(PCi)接收到的信息来显示图像的多种陈述设备(10A到10C)；将由陈述设备(10A)所显示的内容DIN和时间信息一起记录以便创建例如电子信息DOUT的创建器(5)；以及用于连接笔记本电脑(PCi)、陈述设备(10A)和创建器(5)的通信电缆(40)。陈述设备(10A)等根据笔记本电脑(PCi)的输入操作功能来确定关注陈述设备(10A、10B、10C)上的哪幅图像，并控制创建器(5)来记录与连接到时间信息的关注图像有关的识别信息。
文档编号H04N7/15GK1615647SQ0282736
公开日2005年5月11日 申请日期2002年12月3日 优先权日2001年12月3日
发明者五十崎正明, 三宅透 申请人:索尼株式会社