本发明涉及一种用于电子器件的具有多个实例的图形用户界面。
背景技术：
当前可用的视频显示器技术允许多个视频流在单个tv显示器、监视器或甚至电影屏幕上全屏显示，以允许多个用户同时观看不同的流。
例如，这可通过使视频流的连续帧时间交织来实现。首先，可显示流“a”的第一帧，然后显示流“b”的第一帧，然后流“c”的第一帧，并且接下来显示流“a”的第二帧、流“b”的第二帧，并且以此类推。如从3d视频技术已知，所谓的快门眼镜可由个体用户(观看者)使用来观看特定的视频流。快门眼镜具有从透明变化到不透明并且反之亦然的透镜。改变透镜的状态的过程是电子控制的，并且与人类感知相比是相对较快的。所述眼镜与显示器同步化，使得当显示流“a”的帧时，快门眼镜“1”是透明的并且其他眼镜是不透明的，并且当显示流“b”的帧时，快门眼镜“2”是透明的并且其他眼镜是不透明的，并且以此类推。如果视频流是单视场的，则左眼和右眼的两个透镜均同时改变其状态。因此，佩戴眼镜“1”的观看者仅看到与流“a”相关的帧，而佩戴眼镜“2”的观看者仅看到与流“b”相关的帧，并且以此类推。因此，视频流可由不同的观看者独立地选择以用于在同一显示器上同时进行观看。
前述方法还可应用于同时观看3d视频流以及同时观看3d和2d视频流。所述技术主要由显示装置每单位时间可显示的帧的最大量限制。
视频流可提供自一个来源或多个不同来源，诸如计算机、游戏机、电视机顶盒、dvd播放器、智能电话等。例如，游戏机可提供两个不同的视频流，每一个用于不同的游戏者。可替代地，单个显示器可由两个观看者使用，其中一个观看者意图观看来自游戏机的视频流，并且第二个观看者意图观看来自机顶盒的电视节目。
每个观看者应具有单独的头戴耳机以接收对应于所观看的视频流的声轨。在另一个使用场景中，不同的观看者可观看相同的视频流，但是使用不同的声轨(例如，不同的语言)。
需要为多流显示器的每个观看者提供控制由观看者所观看的流的显示的方式，例如通过提供对于每个观看者至少是部分地独立的菜单，使得每个观看者可单独地控制显示器。
因此，目的是提供一种用于显示和操作具有多个实例的菜单以用于由多流显示器的每个观看者以至少部分地独立的方式控制显示器的系统和方法。
技术实现要素：
公开了一种用于为多流显示器提供具有多个实例的菜单的装置，所述装置包括：数据接收块，其用于接收多个音频/视频流；音频/视频块，其用于解码多个所接收的音频/视频流并且将视频流的解码帧发送到显示装置，其中视频流的帧是时间交织的以用于连续视频流的帧的顺序显示；控制器，其包括快门眼镜控制单元，所述快门眼镜控制单元用于与观看者的快门眼镜进行通信以传输包括与此快门眼镜相关联的特定视频流的帧的定时的信息。控制器还包括：多用户图形用户界面实例管理器，其被配置来操作gui的多个实例，其中每个gui对应于特定组的观看者装置，每个组包括快门眼镜。
控制器还可包括图像帧生成器，其用于以帧序列生成对应于多用户gui的特定实例的图像帧以用于对应于此实例的视频。
控制器还包括音轨控制单元，其用于从所接收的音频/视频流分离适合于多用户gui的特定实例的音轨，并且将其发送到对应于多用户gui的特定实例的所述组的观看者装置的头戴耳机。
控制器还可包括虚拟远程控制单元控制单元，其负责与对应于多用户gui的特定实例的所述组的观看者装置的虚拟rcu进行通信。
控制器还可包括冲突管理器，其被配置来根据针对个体rcu设置的优先级来解决观看者装置的访问之间的冲突。
还公开了一种系统，其包括：多流显示装置；多组观看者装置；以及如上所述的装置。
至少一组观看者装置可包括快门眼镜、远程控制单元和头戴耳机。
还公开了一种用于为多流显示器提供具有多个实例的菜单的方法，所述方法包括以下步骤：检测多组观看者装置；针对多组观看者装置中的每个执行图形用户界面的个体实例；以及接收并解码多个音频/视频流并且将视频流的解码帧发送到显示装置，其中视频流的帧是时间交织的以用于连续视频流的帧的顺序显示。
还公开了一种非暂态计算机可读存储介质，其包括当被计算机执行时根据如上所述的方法启用用于提供具有多个实例的菜单的方法的指令。
附图说明
本发明的另外的细节和特征、其实质和各种优点将根据附图中所示的优选实施方案的以下详细描述而变得更加显而易见，在附图中：
图1示出内容分配系统的总图；
图2示出用户住宅处的内容分配系统的总图；
图3示出来自图2的系统的片段；
图4a示出用户装置的示例；
图4b示出用户眼镜的细节；
图5a示出移动装置的典型设置；
图5b示出移动装置的传感器单元；
图5c示出移动装置的连通性模块；
图6a示出解码器的配置；
图6b示出解码器中的数据接收块的资源；
图6c示出存储在解码器的存储器中的数据；
图7a示出多用户gui的配置的示例；
图7b示出具有不同类型的显示内容的图7a的多用户gui配置；
图7c示出多用户gui的另一种配置；
图8示出用于初始化多用户gui的多个实例的方法的流程图；
图9a-9f示出图8的方法的详细步骤。
符号和命名法
以下详细描述中的一些部分是关于以下来呈现：数据处理程序、步骤或对可在计算机存储器上执行的数据位的操作的其他符号表示。因此，计算机执行此类逻辑步骤，从而需要物理量的物理操纵。
通常这些量是采取能够在计算机系统中存储、转移、组合、比较及以其他方式操纵的电信号或磁信号的形式。出于通用使用的原因，这些信号被称为位、分组、消息、值、元素、符号、字符、项、数字或类似的术语。
另外，所有这些和类似的术语均意图与适当的物理量相关联，并且仅仅是应用于这些量的适宜标记。术语，诸如“处理”或“创建”或“转移”或“执行”或“确定”或“检测”或“获得”或“选择”或“计算”或“生成”或类似的术语，是指计算机系统的动作和过程，所述计算机系统操纵计算机寄存器和存储器内的表示为物理(电子)量的数据，并且将所述数据转换成存储器或寄存器或者其他此类信息存储装置内的类似地表示为物理量的其他数据。
诸如在本文中提及的计算机可读(存储)介质通常可以是非暂态的和/或包括非暂态装置。在此情况下，非暂态存储介质可包括可以是有形的装置，这意味着所述装置具有实际的物理形式，虽然所述装置可改变其物理状态。因此，例如，非暂态是指保持有形的装置(虽然具有状态变化)。
如本文所用，术语“示例”意思是充当非限制性示例、例子或说明例。如本文所用，术语“例如(forexample)”和“例如(e.g.)”引入一个或多个非限制性示例、例子或说明例的列表。
具体实施方式
图1呈现内容分配系统的总图。内容可由各种分配器从各种来源提供给用户装置110。内容提供商120可将线性tv内容(诸如基于时间和频道的电视、现场广播等)提供到内容递送网络100，其可以是广播、组播或单播。用户通过传输信道101(诸如电缆、卫星、地面、ip组播网络或其他类型的网络)与内容递送网络连接。另外的服务对于通过传输信道151与互联网150联接的用户装置110(或通过经由传输信道152与互联网连接并且经由传输信道102与内容递送网络100连接的内容提供商120)是可用的，并且包括以下中的至少一些。
追看服务140被配置来通过传输信道154提供已经作为线性tv被广播过的内容的重传，以便允许用户在几个小时或甚至几天之后观看所述内容。
电子节目指南(epg)数据提供商130被配置来通过传输信道153提供关于可购自各种来源的内容的另外的数据，所述内容包括可购自内容递送网络100和其他内容提供商140、160的内容。
电子节目指南(epg)数据提供商130被配置来通过传输信道153提供关于可购自各种来源的内容的另外的数据，所述内容包括可购自内容递送网络100和其他内容提供商140的内容。
针对其显示节目指南的内容项可包括现场广播事件和/或其他内容项，诸如追看内容、视频点播内容等。
传输信道151-154可以是使用适于携带特定服务的数据的传输技术的任何已知的类型，诸如有线的或无线的。
应用服务器160被配置来通过传输信道155为移动装置提供虚拟rcu的应用程序，从而允许它们模仿常规的rcu单元。
图2呈现用户住宅处(诸如在家或在办公室处)的内容分配系统的总图。用户装置通过接口诸如以太网(ip)210连接到内联网-局域网(lan)200，所述局域网(lan)200通过传输信道151与互联网150连接。lan200优选地包括防火墙201和被配置来确保并协调数据传输的路由器202。网关280可诸如在wi-fi技术中通过无线接入点(ap)290提供对内联网200的访问。多种装置可用于用户住宅中。所述装置中的一些可以是移动装置，诸如智能电话271、平板电脑272或另一种类型的装置273。其他装置可以是移动式的或固定式的，并且包括装置诸如笔记本计算机261、个人计算机262、游戏机263、连接到电视机231、232、233的机顶盒(stb)或机背盒(sbb)221、222、223或智能电视机240。广播分配接口250可通过传输信道101从内容递送网络100和/或通过直接链路或以太网接口210从其他装置221-223、240、261-263、271-273、280接收内容，并且通过直接链路或通过以太网接口210将其分配到其他装置。
图3示出来自图2的系统的片段。视频解码器装置220(诸如机顶盒或机背盒)从广播分配接口250接收数据、对其进行解码并且显示在显示装置230(诸如电视机)上。解码器220被配置来输出多个视频流，使得其可由观看者同时观看，如在本领域中已知的并且例如在背景部分中解释的。解码器220被配置来提供具有多个实例的菜单，如将在以下详细解释的。菜单具有图形用户界面(gui)，所述图形用户界面(gui)具有与每个观看者311-314(其与对应的快门眼镜相关联)相关联的若干同时实例。每个观看者可与若干装置321-324相关联：眼镜(有或没有头戴耳机)、远程控制单元(rcu)(常规的或由在移动装置上运行的软件应用程序模仿的)和头戴耳机(自主地有线或无线的，或有线连接到移动装置)。多用户gui的单独实例针对每个观看者311-314操作，因此观看者可在观看同一显示装置时同时在菜单的不同模块中进行导航。快门眼镜被同步化，使得当显示观看者311的内容301时，然后此眼镜411(在图7a中示出)是透明的，而其他观看者312-314的眼镜是不透明的。这以等效的方式适用于其他观看者312-314的内容302-304。
图4a示出用户装置的示例。观看者可使用不同的用户装置以用于控制gui菜单并接收音频/视频流。例如，可使用标准rcu460、移动装置270、具有耳机的快门眼镜420或没有耳机的快门眼镜410、有线或无线头戴耳机430、440、450。
图4b示出快门眼镜410、420的详细示例。快门眼镜410、420可配备有用于使眼镜激活并且去激活的机械微型开关或触摸传感器413、用于头上检测(即，检测用户是否佩戴眼镜)的ir发射器412和ir接收器411、以及用于与解码器或显示装置进行双向通信的通信系统414。当ir发射器412与ir接收器411之间的信号路径被遮断时，检测用户的头部。在取下眼镜之后，ir接收器411从ir发射器412接收信号并且眼镜可被自动地去激活。双向通信系统414接收同步化信号，所述同步化信号控制透镜的状态(透明或不透明)。
图5a呈现移动装置270的典型设置。装置270包括负责无线地接收和/或传输数据的连通性模块560。存储器504用于存储数据(包括与配合的用户装置相关联的数据)以及由移动装置的处理器510执行的软件(例如，虚拟rcu511应用程序)。时钟模块503被配置来为系统的其他模块提供时钟参考(与处理器的时间控制模块512配合)。传感器模块530包括至少一个传感器，如参考图5b所呈现的。
移动装置的其他典型的但是任选的模块是：显示模块550，其被配置来向用户显示gui；键盘506，其作为移动装置的输入接口操作；音频模块540，其被配置来生成听觉信号；和/或外部存储器槽诸如sd卡槽505，其被配置来接收并操作外部存储器单元。
双向数据总线501可被采用来实现模块与处理器510之间的通信。
移动装置还可包括与电池502配合的功率管理模块520。
图5b呈现移动装置的传感器单元530。传感器的管理可由传感器集合单元531控制，所述传感器集合单元531充当传感器组中的每一个与从相应的传感器请求数据的客户端之间的桥接器。传感器可以是以下传感器中的任一个或任何子组：接近传感器536、温度传感器537、光强度传感器539、加速度计533、测高仪532、陀螺仪534、磁力仪535、以及摄像机传感器538。前述传感器根据现有技术中，具体地智能电话领域中已知的原理操作。
图5c呈现移动装置的连通性模块560。通信装置可以是以下中的任一个或任何子组：wi-fi561、蓝牙562、fm无线电563、gps564、与sim卡槽566进行通信的蜂窝电话通信单元565(诸如gsm、3g、4g以及类似的装置)、或类似的装置。不同的通信装置可由连接到可包括一种或多种类型的天线的天线模块568的天线开关567管理。
图6a示出解码器220的结构。解码器220(机顶盒(stb)或机背盒(sbb))能够执行gui的多个实例。
数据接收/传输块620被配置来通过至少一个传输信道602与以太(ip)网210或无线网进行通信，以便接收内容、应用程序和/或内容数据。解码器还可包括外部接口630(以太网、蓝牙、zigbeerf4ce、wi-fi、红外)以通过至少一个通信信道603与其他装置或附件进行通信。
时钟模块660被配置来提供例如使解码器中的模块同步化所需的定时数据。
主rcu控制器650用于与用户远程控制单元(标准rcu或在移动装置上模仿的rcu)进行通信605。\
音频/视频块670用于解码视频流并且将多个视频流的解码帧发送到显示装置以用于向观看者显示流，其中视频流的帧是时间交织的以用于连续流的帧的顺序显示。
控制器610包括被配置来提供如本文所述的系统的功能性的多个单元，其包括以下中的至少一个：
-多用户gui实例管理器611，其负责针对每个观看者装置操作前述多用户gui的多个实例，并且根据图8所示的方法控制剩余的处理单元(612-619)；
-时间控制单元612，其负责生成用于与眼镜和头戴耳机(或与头戴耳机所连接到的移动装置)同步化的同步化信号；
-快门眼镜控制单元613，其负责监测、控制观看者的快门眼镜并且与其进行通信以传输包括与此快门眼镜相关联的特定视频流的帧的定时的信息；
-图像帧生成器614，其负责以帧序列生成对应于多用户gui的给定实例的图像帧以用于在显示装置上显示的视频；
-音轨控制单元615，其用于从所接收的音频/视频流分离适合于多用户gui的给定实例的音轨，并且根据同步化信号将其发送到对应的观看者的头戴耳机；
-虚拟rcu控制单元616，其负责虚拟远程控制单元的通信和控制；
-头戴耳机控制单元617，其负责头戴耳机的通信和控制；
-调谐器控制单元618，其用于监测在解码器中的数据接收块620中可用的调谐器(图6b)的实际利用；
-冲突管理器619，其负责检测由利用调谐器的资源和由多用户gui的所有可能的实例同时操作导致的潜在的冲突。
可能的是，多用户gui的可能的实例的最大量(实际上是可能的观看者的最大量)小于由解码器激活的、真实检测的眼镜的量。在这种情况下，根据针对个体rcu设定的优先级，冲突管理器619可向使用的眼镜数量超过最大可能观看的实例的数量的观看者提供由利用具有更高优先级排名的眼镜的其他观看者所选择的内容。
控制器610利用存储器块640操作，所述存储器块640包括ram640a和闪存640b块、以及任选地hdd640c。
解码器220的模块在双向数据总线601上与彼此进行通信。
图6b示出解码器220的数据接收块620的资源。数据接收块620可包括允许从若干视频接收器(调谐器)621-623接收视频流的若干前端(例如，2个、4个、8个或16个前端)。
图6c示出存储在解码器的存储器640中的数据。数据存储在容器中，诸如平板电脑或其他数据类型。
多用户gui配置641数据组包括关于可用接口641a、可访问协议641b、主rcu的id641c、可能的观看者的数量641d、以及其他gui参数641e(诸如特定于用户的颜色方案(或gui皮肤)、所选择的epg类型、功率节省模式、家长分级等)的信息。观看者装置配置642数据组包括关于第一观看者装置(诸如快门眼镜、头戴耳机和rcu类型(虚拟的或常规的))的配置642a以及第二观看者装置的配置642b和连续观看者装置的配置642c的信息。
记录644数据组包括关于存储在大容量存储装置(诸如hdd)中的记录的信息。
剩余的存储器空间643可用于根据系统需要存储其他数据。
图7a示出多用户gui配置和显示的图像帧的序列的示例。在所呈现的示例中，多用户gui具有专用于四个观看者311-314的四个实例701-704。每个观看者具有专用的快门眼镜，其中第一观看者311另外地使用标准rcu460和无线头戴耳机441，第二观看者使用具有连接到其的头戴耳机432的移动装置272，第三观看者使用移动装置273和无线头戴耳机443，并且第四观看者使用具有连接到其的头戴耳机434的移动装置274。第一实例701呈现专用于第一观看者411的视频流1和音轨1。显示序列的第一帧对应于第一实例701。当显示第一帧时，第一观看者的快门眼镜411的透镜是透明的(换言之：激活的、启用的)，而剩余观看者的眼镜的透镜是不透明的(换言之：非激活的、停用的)。接下来，显示第二帧，所述第二帧对应于专用于第二观看者312的第二实例702(呈现视频流2和音轨2)。当显示第二帧时，第二观看者的眼镜412的透镜是透明的，而剩余观看者的眼镜的透镜是不透明的。等效原理适用于第三实例和第四实例。
图7b示出具有不同类型的显示内容的图7a的多用户gui配置，其中：
-第一观看者311，其使用第一实例701，观看直播电视频道a；
-第二观看者312，其使用第二实例702，观看录制的记录b；
-第三观看者313，其使用第三实例703，浏览epg同时观看电视频道b；
-第四观看者314，其使用第四实例704，浏览web页面。
因此，每个实例701-704可与专用于每个观看者311-314的不同内容有关。
图7c示出具有四个实例的多用户gui的另一种配置，其中观看者311和313观看相同的视频流(对于第一实例701和第三实例703是共同的)，但是使用不同的音轨a1和a2。其他观看者312和314观看具有不同视频和音频内容的其他实例702、704。将不同视频流的量从四个减少至三个(减少视频帧)允许运行多用户gui的具有不同视频和音频内容的另一个实例。它还减少系统资源的利用。
图8示出用于在解码器上初始化多用户gui的多个实例的方法的连续步骤的流程图。在第一步骤801中，系统检查激活的快门眼镜并且记录其激活时间，所述激活时间之后限定所述快门眼镜的优先级值。接下来在步骤802中，确定剩余的观看者装置。在步骤803中，观看者装置与激活的快门眼镜配对，以便提供对应的观看者的操作。在步骤804中，确定与主rcu配对的快门眼镜，并且为此rcu设置高优先级。在步骤805中，基于快门眼镜激活时间，限定剩余的(常规的或虚拟的)rcu的优先级。在步骤806中，执行针对每个观看者(针对给定的快门眼镜和配对的观看者装置)的相应的多用户gui实例。在步骤807中，根据观看者的输入，确定对应的视频流和音轨，并且生成图像帧，包括与特定组的观看者装置相关联的gui实例的叠加。在步骤808中，生成所有快门眼镜和头戴耳机的同步化信号，并且将其发送到相应的装置。在步骤809中，在显示装置上显示图像帧的所制备的序列，并且将相应的音轨发送到对应的观看者的头戴耳机。
图9a-9f示出表示图8的方法的详细步骤的流程图。所述方法在步骤901中开始，其中将观看者w的数量设置为零。接下来在步骤902中，系统检查是否存在任何激活的快门眼镜。如果存在，则在步骤903中将观看者w的数量增加一。否则，程序移到步骤922。接下来，程序继续到步骤904，在所述步骤904中选择观看者w的快门眼镜，并且从存储器读取激活时间。在步骤905中，与观看者w的快门眼镜建立连接。在步骤906中，解码器与观看者w的快门眼镜配对。使用可用的接口和通信协议，在步骤907中建立与观看者w的剩余装置的连接。在步骤908中，将观看者w的装置d的数量设置为零。在步骤909中，系统检查是否存在观看者w的任何可用的装置。如果不存在更多可用的装置，则在步骤921中，从暂时存储器读取观看者w的所有装置的配置并且将其记录为观看者装置的配置，并且接下来程序移到步骤902。如果存在可用的装置，则在步骤910中将观看者w的可用装置的数量增加一。在步骤911中选择观看者w的装置d。在步骤912中检查观看者的rcu是否是常规rcu，如果是，程序移到步骤919。如果所述rcu不是常规rcu，则在步骤913中检查观看者装置是否是独立式头戴耳机。如果所述装置是独立式头戴耳机，则程序移到步骤919，如果不是，则在步骤914中检查移动装置是否包括头戴耳机。如果包括，则在步骤915中将移动装置作为主装置分配到头戴耳机，并且如果不包括，程序直接移到步骤916，在所述步骤916中获得对虚拟rcu的应用程序的访问。在步骤917中，下载虚拟rcu的对应的应用程序，并且进一步在步骤918中，将虚拟rcu的所下载的应用程序安装在移动装置上。在步骤919中，观看者w的所选择的装置d与解码器和对应的快门眼镜配对。在步骤920中，将观看者w的所选择的装置d的配置存储在暂时存储器中。接下来，程序循环回到步骤909。
在步骤922中，确定与主rcu配对的快门眼镜，并且为此rcu设置高优先级。接下来，在步骤923中，基于快门眼镜激活时间，限定剩余的(常规的或虚拟的)rcu的优先级。在步骤924中，针对以相同的上次选择的gui模块和上次观看的频道的视频流限定的每个观看者执行相应的多用户gui实例。在步骤925中，从广播分配接口250接收上次观看的频道的音频/视频流。在步骤926中，生成针对所有观看者的相同的图像帧以及使视频流视图与所有的快门眼镜并且使音轨与所有的头戴耳机同步化的同步化信号。在步骤927中，向所有的快门眼镜和头戴耳机发送同步化信号。接下来在步骤928中，在显示装置上显示所生成的图像帧，并且将音轨发送到所有的头戴耳机。在步骤929中，系统检查是否存在任何观看者命令。如果不存在命令，则程序返回到步骤925。如果存在任何命令，则程序继续到步骤930，在所述步骤930中，基于观看者输入(由观看者请求)，确定gui模块、视频流和对应的音轨。在步骤931中，分析所请求的gui模块、视频流和音轨，以便找到可能的冲突并且使所需的图像帧和音轨最小化。在步骤932中，系统检查是否存在任何可能的冲突。如果存在任何冲突，则系统(基于rcu的优先级)在步骤933中解决冲突并且接下来移到步骤934。在步骤934中，接收多个音频/视频流。接下来，在步骤935中，生成所确定的视频流的图像帧，并且选择相应的音轨。在步骤936中，生成使视频流视图与所有的快门眼镜并且使音轨与所有的头戴耳机同步化的同步化信号。在步骤937中，向观看者的快门眼镜和头戴耳机发送同步化信号。在步骤938中，在显示装置上显示所制备的图像帧的序列，并且将对应的音轨发送到对应的观看者的头戴耳机。在步骤939中，系统检查是否存在任何观看者的命令，并且如果不存在，则程序循环回到步骤934。否则，在步骤940中，系统检查观看者的命令是否是关闭解码器。如果不存在关闭解码器的命令，则程序返回到步骤930。如果观看者发送关闭解码器的命令，则在步骤941中关闭解码器。
本领域的技术人员可容易地认识到，用于为多流显示器提供具有多个实例的菜单的前述方法可由一个或多个计算机程序执行和/或控制。此类计算机程序通常通过利用计算装置中的计算资源来执行。应用程序存储在非暂态介质上。非暂态介质的示例是非易失性存储器，例如闪存存储器，而易失性存储器的示例是ram。计算机指令由处理器执行。这些存储器是示例性记录介质，其用于存储包括根据本文所呈现的技术概念执行计算机实现的方法的所有步骤的计算机可执行指令的计算机程序。
虽然本文所呈现的发明已经被描绘、描述并且已经参考具体的优选实施方案被限定，但是此类参考和以上说明书中的实施方式的示例并不暗示对本发明的任何限制。然而，将明显的是：在不脱离技术概念的更广泛范围的情况下，可对本发明做出各种修改和改变。所呈现的优选实施方案仅是示例性的，并且对本文所呈现的技术概念的范围是非详尽的。
因此，保护的范围不限于说明书中所描述的优选实施方案，而是仅由以下权利要求书限制。