传送系统和程序的制作方法
【技术领域】
[0001] 本发明设及一种程序，其由连接至第一传送终端的计算机执行W执行向第二传送 终端的显示数据传送，所述第一传送终端连接至显示设备并且还经由网络连接至第二传送 终端。
【背景技术】
[0002] 用于经由诸如因特网的网络在远程地点之间进行视频会议的传送系统变得越来 越受欢迎。在此传送系统中，通过在两个或更多个传送终端之间交换图像和音频数据进行 视频会议。随着最近宽带环境的发展，允许高质量图像和音频数据的传送和接收，并且可W 在远程地点之间进行接近于现实的适当条件下的视频会议。
[0003] 存在如下情况：其中当使用传送终端进行视频会议时，作为视频会议的出席者的 有关人员除了采用连接至显示设备并且还经由网络连接至另一传送终端的传送终端之外， 还采用诸如PC(个人计算机）的外部输入设备，与视频会议的伙伴讨论的诸如会议文件的 图像显示在外部输入设备的显示器上。在该种情况下，根据相关技术，外部输入设备已经经 由网络将当前显示在外部输入设备的显示器上的图像的显示数据传送至通信伙伴的另一 传送终端。
[0004] 视频会议的出席者与通信伙伴不仅可W共享在传送终端之间交换的图像数据和 音频数据，而且可W共享当前在外部输入设备的显示器上显示的图像的显示数据。
[0005] 在能够执行多任务操作的外部输入设备的情况下，可W在显示设备上同时显示由 不同任务生成的区域（窗口）的两个或更多个图像。在此情况下，向用户提供选择所述两 个或更多个图像中的一个的显示数据W传送至视频会议的伙伴的另一传送终端的能力，对 于用户将是方便的，因此提出允许用户选择图像之一的显示数据的技术。例如，见日本公开 专利公布No. 2011-254453。
[0006] 图40示出日本公开专利公布No. 2011-254453中公开的外部输入设备的显示设备 上显示的屏幕示例。如图40中所示，根据日本公开专利公布No. 2011-254453,用户可W通 过鼠标光标（C)选择出现在显示设备上的屏幕的两个区域（a)和化）中的一个，并在另一 传送终端上与视频会议的通信伙伴共享该屏幕的所选择的区域的显示数据。
[0007] 然而，日本公开专利公布No. 2011-254453未记载有关在共享该屏幕的整个屏幕 区域的显示数据的状态、与共享该屏幕的特定区域的显示数据的状态之间的切换。因此，存 在如下问题；用户不能从共享特定区域的显示数据的状态切换至共享整个屏幕区域的显示 数据的状态（反之亦然）。
【发明内容】
[0008] 在一个方面，本发明提供了一种传送系统，其中传送终端上的用户可W任意选择 整个区域显示数据的共享和特定区域显示数据的共享之一，使得与另一传送终端上的视频 会议的通信伙伴共享所选择的显示数据。
[0009] 在一个实施例中，本发明提供一种存储表示指令的序列的程序的非暂时性计算机 可读记录介质，所述程序当被计算机执行时使得计算机执行处理，所述计算机连接至第一 传送终端，所述第一传送终端连接至第一显示设备并通过网络连接至第二传送终端，所述 处理包括；在连接至该计算机的第二显示设备的屏幕上显示程序组件的区域；接收在第二 显示设备的屏幕上的整个区域中显示的显示数据、W及在作为用户的操作目标的该屏幕上 的程序组件的区域中显示的显示数据中的至少一个的选择；获取通过所接收的选择指示的 整个区域或所述区域的显示数据；从第一传送终端接收指示第一显示设备的分辨率的第一 分辨率信息；基于所接收的第一分辨率信息和指示第二显示设备的分辨率的第二分辨率信 息确定所获取的显示数据的分辨率；W及将所获取的具有所确定的分辨率的显示数据传送 至第一传送终端。
[0010] 当结合附图阅读W下详细描述时，实施例的其它目的、特征和优点将根据W下详 细描述而显而易见。
【附图说明】
[0011] 图1是示出根据实施例的传送系统的整体配置的图。
[0012] 图2是示出根据实施例的传送系统中的传送终端的硬件配置的图。
[0013] 图3是示出根据实施例的传送系统中的传送管理系统的硬件配置的图。
[0014] 图4A和图4B是示出构成根据实施例的传送系统的传送终端、中继设备和传送管 理系统的功能配置的框图。
[001引图5A、图5B和图5C是示出图像数据的图像质量的图。
[0016] 图6是不出改变质量管理表的不例的图。
[0017] 图7是示出中继设备管理表的示例的图。
[0018] 图8是示出终端认证管理表的示例的图。
[0019] 图9是示出终端管理表的示例的图。
[0020] 图10是示出目的地列表管理表的示例的图。
[0021] 图11是示出会话管理表的示例的图。
[0022] 图12是示出质量管理表的示例的图。
[0023] 图13是示出外部输入设备的功能配置的框图。
[0024] 图14是不出分辨率管理表的不例的图。
[00巧]图15是用于说明所执行的用于管理从中继设备发送至传送管理系统的状态信息 的处理的序列图，其中所述状态信息指示中继设备的各个操作状态。
[0026] 图16是用于说明在开始传送终端之间的通信之前执行的准备处理的序列图。
[0027] 图17是用于说明由传送终端执行的用于建立与另一传送终端的会话的处理的序 列图。
[0028] 图18是用于说明所执行的用于将显示数据从传送终端的外部输入设备传送至通 信伙伴的另一传送终端并且在其上显示该显示数据的图像的处理的序列图。
[0029] 图19是示出在显示器上显示的显示数据的示例的图。
[0030] 图20是示出在外部输入设备的显示器上显示的屏幕W及在传送系统的传送终端 上显示的屏幕的图。
[0031] 图21A、图21B和图21C是示出在外部输入设备上显示的桌面屏幕的示例的图。
[0032] 图22是用于说明当使用非压缩格式时由外部输入设备执行的分辨率转换W及由 传送终端执行的分辨率改变的处理的序列图。
[0033] 图23是用于说明显示数据获取单元获取整个区域显示数据或特定区域显示数据 的处理的流程图。
[0034] 图24是用于说明转换分辨率的处理的流程图。
[00巧]图25A和图25B是用于说明由传送终端执行的用于控制分辨率（包括改变分辨 率）的处理的流程图。
[0036] 图26A和图26B是用于说明在图25A的处理中的步骤S102的确定步骤的图。
[0037] 图27是用于说明当使用压缩格式时由外部输入设备执行的分辨率转换W及由传 送终端执行的分辨率改变的处理的序列图。
[0038] 图28A、图28B和图28C是示出在外部输入设备上显示的桌面屏幕的示例的图。
[0039] 图29是用于说明显示数据获取单元获取显示数据的处理的流程图。
[0040] 图30A和图30B是示出外部输入设备的功能配置的框图。
[0041] 图31是示出将鼠标光标图标并入在显示数据中的示例的图。
[0042] 图32是用于说明显示数据中的鼠标光标图标的并入的图。
[0043] 图33是用于说明显示数据获取单元将鼠标光标图标并入在显示数据中的处理的 流程图。
[0044] 图34A、图34B和图34C是示出将不在Windows⑥中共享的区域（窗口）的示例 的图。
[0045] 图35是示出外部输入设备的功能配置的框图。
[0046] 图36是示出例外管理表的示例的图。
[0047] 图37是用于说明显示数据获取单元获取整个区域显示数据或特定区域显示数据 的处理的流程图。
[004引图38是示出例外管理表的示例的图。
[0049] 图39是用于说明显示数据获取单元获取整个区域显示数据或特定区域显示数据 的处理的流程图。
[0050] 图40是示出根据相关技术的外部输入设备上显示的屏幕的示例的图。
【具体实施方式】
[0051] 将参考附图给出对实施例的描述。
[0052] 图1是示出根据实施例的传送系统1的整体配置的图。将参考图1描述根据该实 施例的传送系统1的整体配置。
[0053]存在各种类型的传送系统。一个示例可W是数据提供系统。在数据提供系统中， 在单向方向上经由传送管理系统将内容数据从一个终端传送至另一个终端。另一示例可W 是通信系统。在该通信系统中，经由传送管理系统在两个或更多个传送终端之间相互传递 信息或情绪表达。通信系统用于经由通信管理系统（即，传送管理系统）在两个或更多个 通信终端（即，传送终端）之间相互交换信息或情绪表达。通信系统的示例包括视频会议 系统、视频电话系统、音频会议系统、语音呼叫系统、或个人计算机屏幕共享系统。
[0054] W下实施例通过将视频会议系统概念化为通信系统、将视频会议管理系统概念化 为通信管理系统的示例、W及将视频终端概念化为通信终端的示例，描述该传送系统、该传 送管理系统W及该传送终端。也就是，在实施例中使用的传送终端和传送管理系统不仅可 W应用于视频会议系统，而且还可W应用于通信系统或传送系统。
[005引如图1中所示，传送系统1包括两个或更多个传送终端（lOaa、10油、……、10化）、 用于传送终端（10aa、10油、......、10化）的显示器（120aa、120油、......、120化）、分别连接 至传送终端（10aa、10油、......、10化）的两个或更多个外部输入设备（40aa、40油、......、 40化）、两个或更多个中继设备（30a、3化、30c、30d)、传送管理系统50、程序提供系统90、W及维护系统100。
[0056] 注意，在此实施例中，传送终端（lOaa、10油、......、10化）中的任一个可W称为"传 送终端10"，显示器（120aa、120油、……、120化）中的任一个可W称为"显示器120"，外部 输入设备（40aa、40油、……、40化）中的任一个可W称为"外部输入设备40"，并且中继设 备（30a、3化、30c、30d)中的任一个可W称为"中继设备30"。显示器120是传送终端10的 显示器的示例。注意，W下，传送终端和传送管理系统还分别可W简称为"终端"和"管理系 统"。
[0057] 传送终端10被配置为将图像数据、语音数据等传送至另一传送终端10并从该另 一传送终端10接收图像数据、语音数据等。注意，在此实施例中，将说明图像数据是移动图 片图像数据的情况。然而，传送终端10可W被配置为传送并接收静止图片图像数据。替 代地，图像数据可W包括移动图片图像数据和静止图片图像数据两者。中继设备30被配 置为在传送终端10之间中继图像数据和语音数据。传送管理系统50被配置为W综合的 (integrated)方式管理传送终端10和中继设备30。
[0058] 外部输入设备40连接至传送终端10并被配置为将表示在外部输入设备40的显 示器（图3中的"显示器216")上显示的图像的显示数据传送至传送终端10,用于显示该 显示数据的图像。
[0059] 图1中所示的路由器（70a、70b、……、70f)被配置为选择图像数据和语音数据的 最优路径。注意，在此实施例中，路由器（7〇a、7化、……、70f)中的任一个可W称为"路由 器70"。程序提供系统90包括被配置为存储用于终端的程序并将所述程序传送至传送终端 10的未图示的硬盘（皿)，通过所述程序，传送终端10可W实施各种功能或各种单元。程序 提供系统90的皿被配置为还存储用于中继设备的程序并将用于中继设备的程序传送至中 继设备30,通过所述程序，中继设备30实施各种功能或各种单元。另外，程序提供系统90 的皿被配置为存储传送管理程序并将传送管理程序传送至传送管理系统50,通过所述程 序，传送管理系统50实施各种功能或各种单元。
[0060] 如图1中所示，传送终端lOaa、传送终端10油、中继设备30a和路由器70a经由 LAN(局域网）2a连接，使得它们可W彼此通信。传送终端lOba、传送终端10化、中继设备 3化和路由器7化经由LAN化连接，使得它们可W彼此通信。LAN2a和LAN化通过包括 路由器70c的专用线路2油连接，使得它们彼此通信，并且在预定区域A中设置LAN2a和 LAN2b。例如，区域A可W是日本，LAN2a可W设置在东京的办公室中，并且LAN化可W 设置在大阪的办公室中。
[0061] 同时，传送终端lOca、传送终端lOcb、中继设备30c和路由器70d经由LAN2c连 接，使得它们可W彼此通信。传送终端lOda、传送终端10化、中继设备30d和路由器70e经 由LAN2d连接，使得它们可W彼此通信。LAN2c和LAN2d通过包括路由器70f的专用线 路连接，使得它们彼此通信，并且在预定区域B中设置LAN2c和LAN2d。例如，区域B可W 是USA，LAN2c可W设置在纽约的办公室中，并且LAN2d可W设置在华盛顿特区的办公室 中。区域A和区域B经由因特网2i从路由器70c和70f连接，使得区域A和区域B经由因 特网2i相互通信。
[0062] 传送管理系统50和程序提供系统90经由因特网2i连接至传送终端10和中继设 备30,使得它们可W彼此通信。替代地，传送管理系统50和程序提供系统90可W位于区域 A或区域B中，或者可W位于除了区域A和B之外的区域中。
[0063] 注意，在此实施例中，通信网络2由LAN2a、LAN2b、专用线路2油、因特网2i、专用 线路2?1、LAN2cW及LAN2d组成。在图1的通信网络2中，附在传送终端10、中继设备 30、传送管理系统50、路由器70和程序提供系统90的每一个下的四个数字的集合简单地指 示典型的IPv4(因特网协议版本4)下的IP地址。例如，如图1中所示，传送终端lOaa的 IP地址是"1. 2. 1. 3"。替代地，可W代替IPv4下的IP地址而使用IPv6下的IP地址。然 而，在此实施例中，IPv4用于简化该图示。
[0064][实施例的硬件配置]
[0065] 接下来，将描述根据该实施例的传送系统1的硬件配置。
[0066] 图2是示出根据该实施例的传送系统1中的终端（即，传送终端）10的硬件配置的 图。如图2中所示，终端10包括配置为控制终端10的整体操作的中央处理单元（CPU) 101、 存储用于该终端的程序的只读存储器（ROM) 102、用作CPU101的工作区域的随机存取存储 器（RAM) 103、配置为存储诸如图像数据或音频数据的各种数据的闪存104、配置为基于CPU 101的控制而控制各种数据在闪存104等中的揃取（retrieval)和写入（存储）的固态驱 动器（SDD) 105、配置为控制数据到诸如闪存的记录介质106中的揃取和写入（存储）的介 质驱动器107、由用户操作用于选择终端10的地址的操作按钮108、用于终端10的电源的 开启/关闭的电源开关109、W及用于利用通信网络2传送数据的网络IF(接口）111。
[0067] 终端10还包括配置为基于CPU101的控制对被摄体（subject)成像的相机112、 配置为控制相机112的驱动的成像设备IF113、配置为拾取诸如语音、声音或噪音的音频 声音的麦克风114、配置为输出音频声音的扬声器115、配置为提供用于音频声音从麦克风 114和到扬声器115的输入/输出的接口的语音输入/输出IF116、配置为基于CPU101 的控制将图像数据传送至外部显示器120的显示器IF117、配置为将各种外部设备连接至 连接端口的外部设备IF118、配置为向用户告知终端10的各种功能问题的警报灯119、W 及诸如地址总线或数据总线的总线110,用于如图2中所示经由总线110将元件和设备彼此 电连接。
[006引注意，记录介质106可从终端10移除。另外，如果记录介质106是配置为基于CPU101的控制揃取或写入数据的非易失性存储器，则记录介质106不限于闪存104,并且可W 是电可擦除和可编程ROM巧EPROM)。相机112包括配置为将光转换为电荷W产生被摄体的 数字图像（视频）的透镜和固态图像传感器。固态图像传感器的示例包括互补金属氧化物 半导体（CMOS)、或电荷禪合器件（CCD)。可W代替SSD105使用硬盘驱动器（皿D)。
[0069]显示器120是配置为显示被摄体的图像或用于操作终端10的图标的由液晶或有 机化材料形成的显示单元。
[0070] 此外，可W在诸如记录介质106的计算机可读记录介质上W可安装格式或W可执 行格式记录用于该终端的前述程序，W分发该种记录介质。
[0071] 可W经由通用串行总线扣SB)将外部设备IF118与诸如外部相机、外部麦克风和 外部扬声器的外部设备连接。当经由USB将外部相机连接至外部设备IF118时，优先于内 置相机112而驱动外部相机。同样地，当经由USB将外部麦克风或外部扬声器连接至外部设 备IF118时，优先于内置麦克风114或内置扬声器115而驱动外部麦克风或外部扬声器。 传送终端10可W是PC、智能电话、平板电脑终端、移动电话等中的任一个。
[0072] 图3是示出根据该实施例的传送系统1中的传送管理系统50的硬件配置的 图。如图3中所示，传送管理系统50包括配置为管理系统50的整体操作的中央处理单元 (CPU) 201、存储用于传送管理的程序的只读存储器（ROM) 202、用作CPU201的工作区域的 随机存取存储器（RAM) 203、配置为存储各种数据的硬盘（皿)204、配置为基于CPU201的控 制而控制各种数据在皿204中的揃取和写入（存储）的硬盘驱动器（皿D) 205、配置为控制 数据到诸如闪存的记录介质206中的揃取和写入（存储）的介质驱动器207、配置为在显示 器216上显示诸如光标、菜单、窗口、字符和图像的各种信息的显示器IF208、用于利用稍 后描述的通信网络2传送数据的网络IF209、包括用于输入字符、数字和各种指令的多个 键的键盘211、用于选择或执行各种指令、选择要处理的项W及移动光标的鼠标212、配置 为控制数据在作为可移除记录介质的示例的致密盘只读存储器（CD-ROM) 213中的揃取或 写入的CD-ROM驱动器214、配置为将各种外部设备连接至连接端口的外部设备IF215、W 及诸如地址总线或数据总线的总线210,用于如图3中所示经由总线210将元件和设备彼此 电连接。显示器216是外部输入设备40的显示单元的示例。
[0073] 注意，可W在诸如记录介质206或CD-ROM213的计算机可读记录介质上W可安装 格式或W可执行格式记录用于传送管理的前述程序，W分发该种记录介质。可W将用于传 送管理的程序记录在皿204上。
[0074] 此外，外部输入设备40包括与传送管理系统的硬件配置类似的硬件配置，因此省 略外部输入设备40的硬件配置的描述。注意，ROM202存储用于控制外部输入设备40的 程序。在此情况下，也可W在诸如记录介质206或CD-ROM213的计算机可读记录介质上W 可安装格式或W可执行格式记录用于外部输入设备40的程序，W分发该种记录介质。
[00巧]此外，中继设备30包括与管理系统50的硬件配置类似的硬件配置，因此省略中继 设备30的硬件配置的描述。注意，ROM202存储用于控制中继设备30的程序。在此情况 下，也可W在诸如记录介质206或CD-ROM213的计算机可读记录介质上W可安装格式或W 可执行格式记录用于中继设备的程序W分发该种记录介质。
[0076] 此外，程序提供系统90包括与管理系统50的硬件配置类似的硬件配置，因此省略 程序提供系统90的硬件配置的描述。注意，ROM202存储用于控制程序提供系统90的程 序。在此情况下，也可W在诸如记录介质206或CD-ROM213的计算机可读记录介质上W可 安装格式或W可执行格式记录用于程序提供系统90的程序W分发该种记录介质。
[0077] 此外，维护系统100包括与管理系统50的硬件配置类似的硬件配置，因此省略维 护系统100的硬件配置的描述。维护系统100是配置为维护或管理终端10、中继设备30、 管理系统50和程序提供系统90中的至少一个的计算机。例如，如果维护系统100位于国 内，而终端10、中继设备30、管理系统50或程序提供系统90位于国外，则维护系统100经 由通信网络2远程地维护或管理终端10、中继设备30、管理系统50和程序提供系统90中 的至少一个。
[0078] 此外，维护系统100可W被布置为在不使用通信网络2的情况下维护终端10、中 继设备30、管理系统50W及程序提供系统90中的