沉浸式和交互式的视频会议房间环境的制作方法
【专利摘要】本发明涉及一种沉浸式和交互式的视频会议房间环境。一种用于协同视频会议环境的排布被公开。具有基本上“L形状”的配置的显示屏允许同时对远程参与者的视频和协同材料进行显示，这为与协同材料进行交互的会谈参与者提供了更自然的交互。此外，当会谈参与者与协同材料交互时，摄像头被排布为聚焦于该会谈参与者的肩上。摄像头这样的位置向远程用户提供了协同者的更自然的视图。
【专利说明】沉浸式和交互式的视频会议房间环境
【技术领域】
[0001] 本公开一般地涉及诸如视频会议（videoconference)系统和内容协同 (collaboration)系统之类的协同会议系统，并且更具体地涉及集成的视频会议--电子 协同工作空间环境。
【背景技术】
[0002] 视频会议技术的进步已经开始带来效益，并且针对一些会谈（meeting),视频会议 已经提供了对亲身会谈的合理替代。当前技术水平的视屏会议系统向一个或两个或更多用 户提供了专用摄像头和监视器，利用革新的房间排布，通过将监视器和扬声器放置在如果 远程会谈参与者亲自参加的话他们将就坐的位置来使得远程参与者感觉好像他们处于相 同的房间。这样的系统更好地达成了面对面通信的范例，其中会谈参与者可以观看无法在 电话会议中达成的面部表情和身体语言。这些系统中的一些允许内容、应用或计算机屏幕 被共享。然而关于更为协同的会谈，这样的系统常常是不足的，其中在这些更为协同的会 谈中两个或更多的成员可能想要在白板上共同工作，或者甚至想要同时观看演示以及演讲 者。
[0003] 最近，协同系统已经有了进步，其中两个或更多用户可以远程地在相同的工作 空间上工作，相同的工作空间例如是可以作为白板和视频监视器进行一体化工作的电 子板。这样的系统改善了协同者们在共享空间中工作的能力，但却具有差的用户参与 (engagement)特征。这些系统最多可以允许远程用户的小视频图像被显示在电子板上，而 板的剩余部分被保留用于协同空间。
[0004] 在对达成协同系统和视频会议技术的最好方面的尝试中，有时这两种系统将被部 分署为并行的。然而，这种途径留下了许多希望的空间，因为这两种系统未被集成，并且没 有哪一种技术被配置为考虑无缝集成方式的其它技术的存在。
【发明内容】
[0005] 根据一个方面，提供了一种系统，包括：显示屏，所述显示屏可以被分割为协同分 区和视频分区，所述协同分区和所述视频分区被以少于180度的角度偏移；肩视图摄像头， 所述肩视图摄像头的位置接近视频屏幕的所述视频分区，并且被配置为捕获接近所述视频 屏幕的所述协同分区的演示者区域并且捕获会谈参与者区域。
[0006] 根据另一方面，提供了一种视频会议系统，包括：本地视频会议显示屏，包括：第 一分区；中心分区，所述中心分区的位置与所述第一分区和第三分区相邻并且在所述第一 分区和第三分区之间；以及所述第三分区，每个分区被从与它相邻的分区偏移小于180度 的角度。
[0007] 根据又一方面，提供了一种视频会议房间排布，包括：协同视频会议显示屏排布， 所述协同视频会议显示屏排布为基本上凹型的配置，所述显示屏被配置为同时地在所述显 示屏的视频分区中显示视频内容以及在所述显示屏的协同分区中显示协同工作空间；演示 者区域，所述演示者区域与所述显示屏的所述协同分区相邻；以及肩视图视频摄像头，所述 肩视图视频摄像头被配置为捕获所述演示者区域。
【专利附图】
【附图说明】
[0008] 为了描述可以获得本公开的上述特征和其它特征的方式，被在上文简要说明的原 理的更具体说明，将被通过参考它的示出在附图中的具体实施例来呈现。应当理解，这些图 示仅描绘了本公开的示例性实施例，并且因此将不被视为限制它的范围，本文的原理的附 加的特性和细节被通过对附图的使用来描述和讨论，其中：
[0009] 图1示出了沉浸式和交互式的视频会议房间环境的陈设的示例性俯视图；
[0010] 图2示出了示例性本地和远程交互视频会议房间环境；
[0011] 图3示出了交互视频会议房间环境的示例性室内视角的视图；
[0012] 图4A-4C示出了交互视频会议房间环境的显示屏排布的一个实施例的示例性细 节；
[0013] 图5A和5B示出了两种示例性系统模式；
[0014] 图6示出了示例性本地系统实施例；
[0015] 图7示出了示例性网络系统实施例；
[0016] 图8示出了使得多个站点处的会谈参与者可以彼此协同的示例性方法；
[0017] 图9示出了被配置为排布呈现在显示屏上的内容窗口的计算设备的示例性实施 例；
[0018] 图10示出了在显示屏上呈现内容窗口的示例性实施例；
[0019] 图11示出了在显示屏上呈现多个内容窗口的示例性实施例；
[0020] 图12示出了排布内容窗口的呈现位置的示例性方法实施例；
[0021] 图13示出了管理参与者交互的多个层级（class)的示例性方法实施例；
[0022] 图14示出了被配置为运行于协同会议系统兼容的应用的个人计算设备；
[0023] 图15示出了运行在个人计算设备上的应用的示例性显示屏；
[0024] 图16A和16B示出了协同屏幕显示的示例性实施例；
[0025] 图17示出了用来创建可以被共享的内容的内容创建屏幕的示例性实施例；
[0026] 图18示出了从协同显示屏上载或下载内容的示例性方法实施例；
[0027] 图19示出了用于共享内容至显示屏幕或者从该显示屏幕下载内容的示例性用户 界面实施例；并且
[0028] 图20A和20B示出了示例性计算系统实施例。
【具体实施方式】
[0029] 鍵
[0030] 公开了与协同会谈系统，尤其是沉浸式和交互式协同会谈系统房间环境相关的系 统、方法、设备和非易失性计算机可读存储介质。
[0031] 与远程参与者的协同会谈正变得更为流行。这要求今天的视频会议系统不仅向用 户（本地用户）提供远程参与者的视频，还提供会谈材料（通常为电子文档）。
[0032] 多数现有视频会议系统是十分受限的。它们需要参与者一直坐在预定的位置上。 当用户需要在会谈中呈现电子文档时，系统通常在两个分离的区域显示远程参与者的视频 和该电子文档。
[0033] 然而，远程参与者的视频和电子文档之间的分离导致了协同会谈中的一些问题。 这些问题将使得整个远程协同的体验打折扣。例如，这些系统未能支持不同类型的会谈。由 于摄像头设定的约束，多数现有视频会议系统被设计为仅支持坐下时的情景。当用户站起 时，他们的手将不再被显示在视频中。另一个附加的示例是，现有系统未能显示远程参与者 和电子文档之间的交互。当人们在相同的位置召开协同会谈时，他们可以看到文档材料和 其它会谈参与者之间的每次交互，例如当其它参与者在文档上指点时、当他们开始做出编 辑时等。
[0034] 本技术通过提供调节具有或不具有电子材料的视屏会议会谈的系统来改善协同 视频会议体验，调节是通过提供可被分割为协同分区和视频分区的可分割显示屏来达成 的。可分割的显示屏由被集成作为一个显示设备来执行的多个面板组成。面板的角度配置 被排布为提供某种程度的环绕（wrap around)或"L形状"或凹型配置。当没有要显示的电 子材料时，该环绕系统可以仅被用于与来自远程站点的视频全景视图进行视频会议。当电 子协同材料在会谈中被使用时，显示屏被分割成视频部分和协同部分。在一些实施例中，视 频部分和协同部分被以一角度关系排布，其中协同分区和视频分区相对于彼此被偏移少于 180度的角度。在一些实施例中，该角度为大约90度的偏移。
[0035] 该角度关系支持模仿真实世界的肩并肩的（shoulder-to-shoulder)协同体验， 其中当用户在白板上书写时，该用户在他/她肩膀旁边有其他协同者。为进一步支持肩并 肩协同体验，肩视图摄像头被排布在显示屏的视频部分上或周围并且被对焦于临近该显示 屏的协同分区的区域，从而捕获会谈参与者与显示屏的协同分区的交互。
[0036] 在一些实施例中，显示屏的角度排布是通过将组成显示屏的面板排布成三个分区 来创建的，这三个分区为：第一分区、与第一和第三分区相邻并且在第一和第三分区之间的 中心分区以及第三分区。每个分区可以从它的邻接分区被偏移小于180度的角度。
[0037] 如上文指出的，显示屏可以被配置为在全景视频模式和协同模式之间切换。这样 的配置由显示屏处理器控制，显示屏处理器通常控制显示屏从一种模式到另一种的切换并 且控制显示屏的演示部分和协同部分将被放置在该显示屏上的何处。
[0038] 除了对显示屏的排布，当与对显示屏的排布结合使用时，对房间的排布也增强了 协同视频会议体验。如上所述，显示屏可以被配置为具有视频分区和协同分区的大体上凹 型的配置。房间可以被配置为具有邻接于显示屏的协同分区的演示者（presenter)区域以 及被配置为捕获演示者区域的肩视图（shoulder-view)视频摄像头。
[0039] 其他协同者通常就坐在相较演示者区域距离显示屏的协同分区较远的前景 (foreground)会谈参与者区域。前景会谈参与者区域被配置为使得该区域内的协同者可以 容易地接近显示屏，或者使得他们可以保持位于他们基本在摄像头的全视图中的前景会谈 参与者区域中，并且可以被以几乎真人的尺寸呈现至远程站点。
[0040] 视频会议房间还被排布为具有相较前景会谈参与者区域距离显示屏较远的背景 (background)会谈参与者区域，以使得前景会谈参与者区域中的人或对象可以从摄像头的 视图中遮挡背景会谈参与者区域中的人或对象。就坐在房间的这部分的参与者可以通过便 携式电子设备来与协同视频会议系统交互。
[0041] 房间棑布
[0042] 下文讨论本公开的各种实施例。尽管讨论了具体实现方式，应当理解这仅被针对 示例的目的而做出。相关领域技术人间将认识到在不背离本公开的精神和范围的情况下， 可以使用其它组件和配置。
[0043] 公开的技术解决了本领域对这样的系统的需要：该系统提供更为自然的会议环 境，其特别适合于（尽管非排他的）交互式和协同式视频会议会谈，在其中会谈参与者在显 示屏幕的协同分区上交互并且在显示屏幕的视频分区上自然地观看彼此。
[0044] 图1示出了沉浸式和交互式的视频会议房间环境100的陈设的示例性俯视图，房 间环境100在主持和参与交互式和协同式视频会议会谈中是有用的，其中会谈参与者在显 示屏的协同分区上交互并且在显示屏的视频分区上自然地观看彼此。房间100包括基本为 "L形状"配置的显示屏102。显示屏102可以由一个或多个面板组成。例如，图1示出了显 示屏102由至少5个面板102a、102b、102c、102d和102e组成。面板102a和102b组成第 一分区，面板102d和102e组成第三分区，并且面板102c组成第二分区（中心分区）。在一 些使用模式中，第一分区、中心分区和第三分区可以被共同称为视频分区。每个分区彼此邻 接，但相较彼此排布成一定的角度。第一分区（面板l〇2a和102b)和第三分区（面板102d 和102e)被以相对彼此小于180度的角度排布，在一些实施例中，第一分区和第三分区被以 相对彼此大约90度的角度排布。第一分区和第三分区都被以相较中心分区大约相同的角 度排布，其中该角度小于180度，并且在一些实施例中该角度为大约135度。这些面板一起 组成了一个可被任意分割为多个显示分区的集成显示屏幕。例如在一些实施例中，第一分 区或第三分区可以被指定为协同分区，而留下显示屏的剩余分区（例如，分别地，第三分区 和中心分区，或者第一分区和中心分区）被指定为视频分区。
[0045] 显示屏102被安装在台坪（apron) 104上，或者位于台坪104上方。台坪104在面 板前延伸一段距离并且起到防止会谈参加者站立得太靠近显示屏102的作用，从而减少对 显示屏102的无意接触，其可以导致对显示屏102的损坏和/或正被注册的非有意命令。
[0046] 图1的交互视频会议房间环境100还包括多个摄像头106、108和110。摄像头106 是被配置为捕获房间的宽图像的全景摄像头。在一些实施例中，摄像头106被配置为在全 景拍摄模式中使用，在该模式中整个显示屏幕102被用于显示会谈参与者。如图1所示，摄 像头106位于并且靠近房间的中间。在一些实施例中，两个具有更窄视场的摄像头可替代 单一全景摄像头。在这样的实施例中，两个摄像头可以位于大体上彼此邻接的位置以具有 类似的焦点。在一些实施例中，可以使用一个或多个镜子以进一步对齐两个摄像头的焦点。
[0047] 摄像头108是肩视图摄像头并可以被配置为在协同模式中使用，并且位于临近 第三分区的边缘且目标为演示者区112,从而当演示者正与显示屏102的协同分区102a、 102b (亦作第一分区）交互时，该摄像头被直接地指向演示者的肩膀。摄像头108还可以捕 获房间中的其它会谈参与者，尽管该摄像头的主要关注点在演示者处。
[0048] 摄像头110是整个房间摄像头并且在演示模式下使用，在该模式中系统适于没有 室内协同者的更为传统的演不。在一些实施例中，例如被在演不模式下利用的实施例中，房 间100可以被配置为不具有桌子115和前景会谈参与者区域114。
[0049] 图1的沉浸和交互式视频会议室内环境100还示出了一些会谈参与者区112、114 和116。演示者区112大约描绘出了演示者的交互区的轮廓。站在该区中的演示者可以与 显示屏102的协同分区交互，同时可以越过她的右肩膀通过视屏摄像头108看到显示在显 示屏102的视屏分区上的她的远程观众。因此演示者可以通过从他们的肩膀上看过去来观 看室内会谈参与者，从而以与在白板上工作的协同者类似的方式来自然地与其它会谈参与 者交互。因此演示者区112的特征在于它是前景会谈参与者区114和显示屏102之间的、 演示者可以站立的区。另外，演示者区112的至少一部分的位置距离显示屏102足够近以 允许站在区112中的演示者与显示屏102进行物理上的交互。
[0050] 前景会谈参与者区114描绘了针对这样的会谈参与者的区域的轮廓：这些会谈参 与者当前并未在演示者区112的屏幕中，但在会谈的前景中。当显示屏102处于全景模式 中时这些会谈参与者位于摄像机106的全视图中，或者当显示屏处于协同模式中时这些会 谈参与者位于摄像机108的视图中。这些参与者将向远程会议观众表现为大体上真人尺 寸。会谈参与者区114还可以包括桌子115。如图1中所示，桌子11基本上不遮挡前景会 谈参与者接近屏幕。因此会谈参与者区114的特征在于相较演示者区112距离显示屏112 更远，并且具有显示屏102的各部分中的至少一个部分的基本上未被遮挡的视图。
[0051] 背景会谈参与者区116描绘出了针对就坐在房间后部的会谈参与者的区域的轮 廓。如果前景会谈参与者未将他们从视图中挡住，则这些参与者可以被在摄像头106或摄 像头108中的一个上观看。背景会谈参与者主要被预期为观察者，尽管如将在下文中更详 细论述的，这些会谈参与者可以通过个人计算设备与屏幕上的内容交互而不是不得不接近 该屏幕。
[0052] 图2示出了示例性本地和远程交互视频会议房间环境。如示出的，本地环境120 被示出在虚线示出的远程环境120'旁边。当通过肩视图摄摄像头108和108'被观看时， 每个环境是彼此的镜像。各个房间被布置为镜像，是因为，当被捕获时，两种环境都将与用 户在其中的环境看上去是一样的。
[0053] 图3示出了交互视频会议房间环境100的示例性室内视角的视图。再次，交互视频 会议房间环境1〇〇被示出为其中具有显示屏102。如示出的，显示屏102由2X5栅格的多 个面板1029、1021'、1028、102扒10211、102 ￥、102￥、1021、1027和1022组成。图3还示出了全 景摄像头106以及肩视图摄像头108的示例性位置。还示出了来自前景会谈参与者区114 的桌子115。
[0054] 除了已经指出的交互视频会议房间环境100的特征，环境100还包括扬声器117 和麦克风118。在示出的实施例中，扬声器117是安装在墙上的，并且位于显示屏102的第 一分区或第三分区的正后方，以便向远程会谈参与者给予立体声效果。同样地，麦克风118 位于显示屏102的第一分区或第三分区的正上方，以便采集与一个麦克风或其它麦克风接 近的音频，以使得捕获的音频的定向品质（directional quality)可以由扬声器117在远 程环境中回放。
[0055] 对本领域普通技术人员显而易见的是，对摄像头、扬声器和麦克风的放置仅仅是 示例性的。此外，可以使用更多或更少的摄像头、扬声器和麦克风。尽管图3中扬声器和麦 克风的放置许可了将被利用的基本定向音频特征，如电话会议领域普通技术人所知的，扬 声器和麦克风的阵列可以用来提供更先进的定向音频特征，例如基于个体周围的声场来识 别该指定个体正在讲话的特征。类似地，尽管图1和图3中摄像头的放置提供了被视为最 重要的基本视图，在本技术的一个实施例中，可以使用许多其它摄像头来唯一地聚焦于会 议中的每个个体。如视频分析和多路复用技术中已知的，视频映射技术可以用于将许多摄 像头的输出混合为仅仅一个图像。
[0056] 图4A-4C示出了交互视频会议房间环境的显示屏排布的一个实施例的示例性细 节。图4A示出了显示屏排布102的俯视平面图。在图4A中，五个显示面板的顶部被示出 为位于阵列中，以使得（组成第一显示部分的）前两个面板相对于中心部分以一定角度被 排布，中心部分进一步被排布为与（组成第三显示部分的）后两个面板有一定的角度。总 体上，面板的三个部分组成了大体上为凹型排布的显示屏。在示出的实施例中，第一部分和 第三部分被排布为相对于中心部分具有135度的角度。
[0057] 图4B示出了组成第一部分和中心部分的显示屏的前视平面图。其中示出了存在 两行显示屏--一行堆叠（stack)在另一行上。两行显示屏被支持在台坪104之上。
[0058] 图4C示出了组成第三部分和中心部分的显示屏的前视平面图。其中示出了存在 两行显示屏--一行堆叠在另一行上。两行显示屏被支持在台坪104之上。
[0059] 本领域普通技术人员将会明白，尽管本文中显示屏102被示出为由多个面板组 成，可以使用更多或更少的面板。在一些实施例中，可能仅有一个面板是必须的，例如柔性 0LED显示屏。如果将使用柔性显示屏，则将不需要显示屏的各部分之间的角度关系，并且可 以使用连续弯曲显示屏或部分弯曲显示屏且仍然形成大体类似的配置。
[0060] 图5A不出了不例性协同系统模式，其中显不屏102被分割成协同部分102g和视 频部分102h。对本领域普通技术人员显而易见的是，尽管协同部分102g位于显示屏102的 右侧，但是协同部分102g可以位于显示屏102的左侧。
[0061] 图5A还示出了使用本技术的两个一起工作的协同者。协同者140是观看远程协 同者145与显示屏102的协同部分102g交互的本地协同者。不仅可以在显示屏102的视 频部分102h上观看远程协同者145与显示屏102交互，虚拟手147还反映了远程协同者与 显示屏102的交互，例如指向显示屏上的位置、绘图、擦除等。在一些实施例中，与显示屏 102的协同部分102g的所有交互被反映到协同视频会议的其它端点，从而其它协同者意识 到发生在板上的所有动作，就如同他们在相同地物理房间中与远程协同者在一起时意识到 的那样。
[0062] 图5B示出了示例性全景模式，其中整个显示屏102用于显示远程会谈参与者的视 频馈给（feed)。如图5B所示，在该模式中，会谈参与者可以在面对面对话中自然地加入彼 此，而不是被桌子遮挡和感知到距离。会谈参与者能够接近屏幕并且表现为如同当他们在 相同的物理房间中谈话时一样地站立。图5B还示出了，对于所有会谈参与者整个远程房间 是可见的，因而也使得会谈对他们更有吸引力。
[0063] 在一些实施例中，会谈参与者可被识别和追踪，并且他们的名字或其它标识符可 被用在出现在每个节目参与者的视频图像上方的标签150中。如下面将更详细讨论的，本 技术可被配置有脸部识别软件、骨架追踪相机、语音识别软件和/或定向音频软件等。这些 技术中的每个可被用来追踪遍及会谈房间的会谈参与者的移动。此外，由于该系统可被配 置为追踪会谈参与者，因此还可被配置为记录整个会谈中与每个节目参与者交互有关的各 个元数据。
[0064] 另外，图5B还示出了出席名册152,包括已知参与该会谈的每个会谈参与者的名 字。在一些实施例中，这些名字可从与已知在该会谈房间中的个人计算设备相关联的用户 账户来得出，或者它们可从会谈邀请得出；它们还可由会谈参与者输入。
[0065]
[0066] 图6示出了示例性系统实施例。示出的系统实施例可以代表由本地和远程会谈参 与者使用来进行交互视频会议的系统。例如，本地和远程会谈参与者都可以访问诸如系统 200之类的系统，系统可以用于在本地和远程会谈参与者之间通信。
[0067] 如示出的，系统200包括计算设备208。计算设备208可以是支持与其它计算设备 的网络通信的任何类型的计算设备，例如，计算设备208可以是个人计算设备，例如台式机 或工作站、商务服务器或者便携式计算设备，例如膝上型电脑、智能电话或平板PC，。计算设 备208可以包括示出在图20A和20B中的计算设备的特征、组件以及外围设备中的一些或 全部。例如计算设备208可以包括如图20A和20B所示的输入和输出设备。
[0068] 如示出的，计算设备208可以被配置为向显示屏202输出并且从触摸设备204接 收输入。尽管显示屏202和触摸设备204被示出为分离的设备，这仅出于示例性目的。显 示屏202和触摸设备204可以形成集成的触摸显示屏，其中显示屏202代表设备的显示部 分，并且触摸设备204代表触摸显示屏硬件。
[0069] 在一些实施例中，触摸设备204可以是用于传输和接收红外光束的板（bezel)。在 利用触摸板的实施例中，板可以被从本领域已知的板来修改。传统的触摸屏幕板常常围绕 显示设备形成边界并且在水平和垂直方向中发送红外光束。然而由于显示屏的第一部分和 第三部分都以某角度与中心部分接壤，并且不希望在显示屏的部分之间放置板，因为水平 方向中红外光束不能被传输。由此，板系统可以被修改以仅传输垂直光束，从而检测显不 屏上的接触和手势。在一些实施例中，触摸设备204可以是另外类型的触摸设备，例如层叠 (layer)在显示屏202之上的电容触摸设备或层叠在显示屏202之上的触摸膜，或者层叠在 显示屏202之上或之后的基于相机的触摸设备。
[0070] 由触摸设备204接收到的输入可以被传输至计算设备208用于解释以及响应动 作。接收设备被配置为解释由触摸设备接收的输入。一些输入和菜单界面应用于系统的范 围（system wide),尽管一些输入和菜单界面是依赖于应用或上下文的。
[0071] 计算设备208可以向视频墙处理器206提供一个或多个视频输出，视频墙处理器 206被配置为向显示屏202的适当部分显示一个或多个视频输出。例如，计算设备208可以 输出远程参与者的视频，以及针对协同工作空间的显示数据。远程参与者的视频可以被显 示在显示屏202的视频部分，而协同工作空间可以被显示在显示屏202的协同部分。在仅 有视频部分被输出的实施例中，视频墙处理器206可以向显示屏202输出整个视频。
[0072] 在一些实施例中，对哪些面板被用于协同部分以及哪些面板被用于视频部分的选 择可以是可配置的。例如，视频墙处理器206可以被配置为响应于从计算设备208接收命 令来变动显示屏202的排布。
[0073] 此外，计算设备208可以被配置为与其它计算设备通信。例如，计算设备208可以 包括用于与个人计算设备209通信的接口。在一些实施例中，个人计算设备209可以通过 诸如蓝牙之类的短场通信协议来连接到计算设备208。替代地，个人计算设备209可以通过 可用网络来与计算设备208通信。尽管计算设备208仅被连接至个人计算设备209,这仅仅 是示意性而非限制性的。计算设备208可以被配置为与任意数量的个人计算设备通信。
[0074] 在一些实施例中，计算设备208可以被配置为记录在计算设备208处接收的输入。 输入可以包括从任何被联合计算设备204使用的各种可能的输入设备接收的任何类型的 输入。例如，输入可以包括从触摸设备204接收的任何输入以及从未在图6中不出的输入 设备接收的任何输入，例如从键盘、鼠标、麦克风等接收的输入。此外在一些实施例中，计算 设备208可以记录从与计算设备208通信的任何其它计算设备（例如个人计算设备209) 接收的输入。
[0075] 在一些实施例中，计算设备208可以被配置为记录存储在计算设备208上的存储 器中的输入日志中的所接收输入。替代地在一些实施例中，输入可以被存储在另外的与计 算设备208通信的计算设备处。
[0076] 在一些实施例中，输入日志可以包括描述由计算设备208接收的每个输入的元数 据。这可以包括描述下列各项的元数据：输入的类型、输入被从其接收的输入设备、输入被 接收的时间、输入被从其接收的位置、输入被从其接收的计算设备等。
[0077] 图7示出了示例性网络系统实施例。网络系统210示出了本地站点205和远程站 点225,两种站点都通过云计算系统220通信。尽管本地站点205被示出为具有附加的细 节，在一些实施例中，本地站点205和远程站点225都可以具有大体上相同的组件。例如， 本地站点205和远程站点225都可以包括示出在图6中的系统的特征、组件以及外围设备 中的一些或全部。
[0078] 如示出的，本地站点205可以包括被配置为从显示屏203接收输入并且向显示屏 203输出输入的计算设备208。显示屏203可以代表来自图6的触摸系统204和显示屏202 两者。显示屏203可以与视频墙处理器206进行电通信，如在图6中一样，视频墙处理器 206被配置为向显示屏203的适当部分显示一个或多个视频输出。
[0079] 显示屏203还可以与计算设备208电通信，从而与协同系统控制器214和远程出 席（tel印resence)客户端212通信。尽管协同系统控制器214和远程出席客户端212被 示出为由单个设备容宿，然而在一些实施例中，协同系统控制器214和远程出席客户端212 可由分离的计算设备容宿。
[0080] 计算设备208还可以与视频墙处理器206电通信，由此远程出席客户端212和协 同系统控制器214可以通过视频墙处理器206来输出将被显示在显示屏203上的内容，视 频墙处理器206被配置为向显示屏203的适当部分显示一个或多个视频输出。
[0081] 远程出席客户端212可以从显示屏203 (或者更具体地，从被安装在显示屏203 上或周围的摄像头和麦克风）接收输入，并且将该信息传输至云220中的远程出席服务器 222。远程出席服务器222可以被配置为从远程出席客户端（例如远程出席客户端212)接 收输入，并且将视频和音频流转发至另外的远程出席客户端（例如远程站点225处的远程 出席客户端）用于在远程站点225的显示屏上显示。
[0082] 类似地，协同系统控制器214可以被配置为从显示屏203接收输入，处理这些交互 并且生成可以被传输至视频墙处理器206用于在显示屏上203显示的结果输出。协同系统 控制器214还可以被配置为将接收到的交互翻译为用来与协同系统服务器224通信的通信 协议。
[0083] 协同系统服务器224可以被配置为从协同系统控制器214接收通信，并且基于接 收的通信来确定（例如远程站点225处的）其它协同系统客户端将采取的适当交互，并且 将这些指令发送至（一个或多个）远程站点225,其中指令由协同系统控制器214解释并且 这些交互被显示。
[0084] 下面是协同系统控制器214和协同系统服务器224之间的通信结构的一个示例：
[0085]
【权利要求】
1. 一种系统，包括： 显示屏，所述显示屏可W被分割为协同分区和视频分区，所述协同分区和所述视频分 区被W少于180度的角度偏移； 肩视图摄像头，所述肩视图摄像头的位置接近视频屏幕的所述视频分区，并且被配置 为捕获接近所述视频屏幕的所述协同分区的演示者区域并且捕获会谈参与者区域。
2. 如权利要求1所述的系统，还包括： 显示屏处理器，所述显示屏处理器被配置为在协同模式中将所述显示屏分割为所述协 同分区和所述视频分区。
3. 如权利要求2所述的系统，其中所述显示屏处理器还被配置为向所述显示屏的所述 协同分区输出协同工作空间，并且向所述显示屏的所述视频分区输出远程出席视频。
4. 如权利要求2所述的系统，其中所述显示屏处理器被配置为将所述协同模式中的经 分割的显示屏转变为全景模式中的全屏全景视频显示屏。
5. 如权利要求1所述的系统，其中所述显示屏还包括； 第一分区； 中也分区，所述中也分区的位置与所述第一分区和第H分区相邻并且在所述第一分区 和第H分区之间；W及 所述第H分区，每个分区被从与它相邻的分区偏移小于180度的角度。
6. 如权利要求5所述的系统，其中所述第一分区或所述第H分区为所述协同分区，并 且剩余分区共同地为所述视频分区。
7. 如权利要求4所述的系统，还包括： 全景摄像头，所述全景摄像头位于关于所述显示屏的基本中也位置处，所述全景摄像 头被配置为在所述全景模式中记录全景视频，并且所述肩视图摄像头被配置为在所述协同 模式中记录视频。
8. -种视频会议系统，包括： 本地视频会议显示屏，包括： 第一分区； 中也分区，所述中也分区的位置与所述第一分区和第H分区相邻并且在所述第一分区 和第H分区之间；W及 所述第H分区，每个分区被从与它相邻的分区偏移小于180度的角度。
9. 如权利要求8所述的视频会议系统，包括： 视频处理器，所述视频处理器被配置为将所述第一分区、所述中也分区和所述第H分 区中的每个分配给协同模式或视频模式。
10. 如权利要求9所述的视频会议系统，包括： 视频会议客户端，所述视频会议客户端被配置为在分配给所述视频模式的显示屏分区 上显示来自远程站点的视频图像；W及 协同系统控制器，所述协同系统控制器被配置为在分配给所述协同模式的显示屏分区 上显示来自远程站点的协同工作空间。
11. 如权利要求9所述的视频会议系统，包括： 肩视图摄像头，所述肩视图摄像头的位置与所述显示屏的所述第一分区或所述第H分 区中被分配给视频模式的分区接近，并且被配置为捕获与所述显示屏的所述第一分区或所 述第H分区中的被分配给所述协同模式的另一个分区接近的演示者区域； 视频会议客户端，所述视频会议客户端被配置为将由所述肩视图摄像头捕获的视频图 像传输至视频会议服务器；W及 协同系统控制器，所述协同系统控制器被配置为将与所述协同工作空间的交互传输至 所述协同系统服务器。
12. 如权利要求8所述的视频会议系统，包括： 房间视图摄像头，所述房间视图摄像头的位置面对所述显示屏并且被配置为捕获与所 述显示屏接近的演示者区域；W及 视频会议客户端，所述视频会议客户端被配置为将由所述房间视图摄像头捕获的视频 图像传输至视频会议服务器。
13. -种视频会议房间排布，包括： 协同视频会议显示屏排布，所述协同视频会议显示屏排布为基本上凹型的配置，所述 显示屏被配置为同时地在所述显示屏的视频分区中显示视频内容W及在所述显示屏的协 同分区中显示协同工作空间； 演示者区域，所述演示者区域与所述显示屏的所述协同分区相邻；W及 肩视图视频摄像头，所述肩视图视频摄像头被配置为捕获所述演示者区域。
14.如权利要求13所述的视频会议房间排布，包括： 前景会谈参与者区域，该前景会谈参与者区域的位置相较所述演示者区域离所述显示 屏的所述协同分区更远。
15.如权利要求14所述的视频会议房间排布，包括： 背景会谈参与者区域，该背景会谈参与者区域相较所述前景会谈参与者区域离所述显 示屏更远，W使得所述前景会谈参与者区域中的人或对象能够从所述肩视图摄像头的视图 中遮挡所述背景会谈参与者区域中的人或对象；W及 通信接口，所述通信接口被配置为与所述背景会谈参与者区域中的会谈参与者电接口 连接。
16.如权利要求13所述的视频会议房间排布，包括： 第一扬声器和第二扬声器，所述第一扬声器位于所述显示屏的所述协同分区后面，所 述第二扬声器位于所述显示屏的所述协同分区后面。
【文档编号】H04N7/15GK104469256SQ201310431971
【公开日】2015年3月25日 申请日期:2013年9月22日 优先权日:2013年9月22日
【发明者】孙齐冰, 张志寿, 苏西·魏, 陈锴, 张亚军, 尤毅 申请人:思科技术公司