立体图像数据在显示接口上的传送的制作方法

专利名称：立体图像数据在显示接口上的传送的制作方法
技术领域：
本发明涉及用于显示立体图像的图像数据的传送。
背景技术：
用于显示三维图像(静态或活动图像)的各种不同的方案是公知的。一个众所周 知的方案同时显示针对左眼和右眼借助不同的光偏振来编码的两个图像或颜色(例如红 色和绿色)。观看者在左眼和右眼前面戴上一副具有透镜的特殊眼镜。该透镜被设置成仅 仅让针对该眼设计的图像通过，即左眼仅仅看到针对该眼设计的图像。另一种立体显示技 术顺序地呈现针对左眼设计的图像，以及针对右眼设计的图像。用户戴上与所显示的图像 同步调整快门的一副特殊眼镜，从而使得左眼快门在显示左眼图像的周期期间打开，而右 眼快门在显示右眼图像的周期期间打开。自动立体显示技术消除了观看者戴特殊眼镜的需要。一个已知方案使用平板显示 器，该显示器在显示元件前面安装有多面倾斜的心室透镜。W007/069195A2中描述了这种显 示器的一个实例。历史上，3D显示被限于专门应用(例如医学成像)或故事片放映，其中可能提供定 制的高成本显示设备。现在，在向更广泛的观众发送立体内容方面引起相当多的关注，包括 消费者电子市场。然而，在消费者电子环境中发送立体图像的一个问题在于，常规的显示器 和将显示器或投影仪连接到媒体播放器的显示接口已经被特定地设计用于显示常规的2D 图像。用于在现有的显示接口的范围内传送立体图像数据的方案倾向于牺牲图像的 活动部分的一部分以携带再现立体图像所必需的附加数据。由Koninklijke Philips Electronics N. V.开发的WOWvx格式将整个显示帧分为多个可以携带不同数据的独立区 域。所述整帧被分为两个并排设置的子帧第一子帧携带2D图像数据，而第二子帧携带深 度信息。将一个头部加入到所述帧的左上角的开始处。所述图像数据在显示接口上以普通 方式被携带。显示器从第二子帧提取深度数据并创建具有第一子帧的分辨率的3D图像。该 3D图像随后被“拉长”以占据该显示器的全部可视区。数字显示器和媒体播放器正越来越多地装备有数字显示接口，比如高清晰度多媒 体接口(HDMI)。本发明设法提供一种在数字显示接口上传送立体图像数据的可替代方法。

发明内容
本发明的第一方面提供一种用在第一视听设备中的数字显示接口部件，用于支持 第一视听设备与第二视听设备之间的数字显示接口，该接口部件包括输入端，用于接收图像数据；格式器，其被设置成格式化用于在所述接口上传送的数据，其中该格式器可以以 下面的模式操作第一模式，其中该格式器产生携带2D图像的像素数据的第一数据元流；
第二模式，其中该格式器产生携带立体图像分量的复用组合的第二数据元流。该布置的优点在于，可以使用现有的接口容量在数字显示接口上携带立体图像数 据。有利地，当所述显示接口支持图像数据的各种不同颜色深度(比如48位颜色和常规的 24位颜色)时，被设计用于传送更高颜色深度数据的更高容量传输模式可以被重新使用以 携带复用的立体图像数据。因此，所述接口不需要附加的容量来携带立体数据，同时仍然允 许用于立体内容的良好的颜色深度。它还具有如下益处定义显示接口的现有标准需要很 少的改变或不需要改变。它还允许立体图像内容以与牺牲活动图像区域的一部分以携带立 体图像数据的那些方案相比明显更高的分辨率被发送。有利地，第二数据元具有不大于第一数据元且优选地与之相同的容量，这允许以 对定义接口的标准的改动最小的方式来携带立体数据。术语“立体图像数据分量”意图是包括发送数据以向用户构造立体(或自动立体) 显示的任何方案，以及包括发送左眼图像数据和右眼图像数据的方案；发送2D图像数据 和图像深度数据的方案；发送2D图像数据和图像深度数据以及遮挡信息的方案，遮挡信息 表示图片中的哪些对象被其他对象遮挡。在使用左眼和右眼图像数据的立体图像的情况下，所述格式器可以使用第二数据 元的一部分携带左眼图像数据并使用第二数据元的另一部分携带右眼图像数据。在使用2D+深度数据的立体图像的情况下，所述格式器可以使用第二数据元的一 部分携带2D图像数据并使用第二数据元的另一部分携带图像深度数据。该深度数据可以 另外地在信号的其他部分中携带，比如在水平或垂直消隐周期内的周期。在HDMI中，数据 岛分组在这些周期内被携带，并且某些数据岛分组可被标识为携带深度数据。有利地，信令信息在所述接口被发送，该信令信息标识所述格式器正在使用的模 式，并且另外的信令信息可以允许第二视听设备(例如显示器或投影仪)指示它是否有能 力再现以该格式化模式发送的立体数据。在高清晰度多媒体接口(HDMI)中，信令可被图像数据间的数据岛内携带的分组 携带。可以使用HDMI显示数据通道(DDC)在接口部件之间用信号发送宿端(sink)设备处 理立体数据的能力，其中能力数据存储在宿端的扩展显示标识数据(EDID)ROM中。本发明的一个相关方面提供一种用在视听设备中的数字显示接口部件，其用于支 持该视听设备与另一视听设备之间的数字显示接口，该接口部件包括输入端，用于从所述接口接收格式化的图像数据；处理器，被设置用于提取图像数据，该处理器可以以下述模式操作第一模式，其中该处理器从第一数据元流中提取用于2D图像的像素图像数据；以 及第二模式，其中该处理器从携带立体图像的分量的复用组合的第二数据元流解复 用立体图像的分量。本发明的一个相关方面提供一种在第一视听设备的数字显示接口部件处格式化 图像数据以便在第一视听设备与第二视听设备之间的数字显示接口上进行传送的方法，该 方法包括接收图像数据；通过以下方式格式化所述图像数据以便在接口上传送
以第一模式，产生携带2D图像的像素数据的第一数据元流；以及以第二模式，产生携带立体图像的分量的复用组合的第二数据元流。本发明的一个相关方面提供一种在视听设备的数字显示接口部件处处理图像数 据的方法，该方法包括从该接口接收格式化的图像数据；通过以下方式提取数据以第一模式，从第一数据元流中提取用于2D图像的像素图像数据；以及以第二模式，从携带立体图像的分量的复用组合的第二数据元流解复用立体图像 的分量。本发明的另一方面提供一种用在第一视听设备中的数字显示接口部件，用于支持 在第一视听设备与第二视听设备之间的数字显示接口，该接口部件包括输入端，用于接收立体图像数据；格式器，被设置成格式化用于在该接口上传送的数据，其中该格式器可操作以便 在该接口的主图像数据传送通道上发送立体图像数据的一部分，而在辅助数据通道上发送 立体图像数据的另一部分。所述接口部件可以在该接口上发送信令信息，用于标识立体数据如何在主数据通 道与辅助数据通道之间分布。有利地，所述立体图像数据包括2D图像数据和图像深度数据，并且所述格式器被 设置成在辅助数据通道上发送深度数据。所述辅助数据通道可以包括与主通道相同的电缆内的单独线或多个线；第二电 缆，其与携带主通道的第一电缆分离；或无线链路。本发明的一个相关方面提供一种用在视听设备中的数字显示接口部件，用于支持 该视听设备与另一个视听设备之间的数字显示接口，该接口部件包括输入端，用于连接到该接口的主图像数据传送通道和辅助数据通道；处理器，被设置用于从该接口的主图像数据传送通道提取立体图像数据的一部分 并从辅助数据通道提取立体图像数据的另一部分。本发明的一个相关方面提供一种在第一视听设备与第二视听设备之间的数字显 示接口上发送立体图像数据的方法，该方法包括在第一视听设备处，接收用于在接口上传送的立体图像数据；在接口的主图像数据传送通道上发送立体图像数据的一部分并且在辅助数据通 道上发送立体图像数据的另一部分。本发明的一个相关方面提供一种在视听设备处处理立体图像数据的方法，以支持 该视听设备与另一个视听设备之间的数字显示接口，该方法包括从接口的主图像数据传送通道提取立体图像数据的一部分并且从辅助数据通道 提取立体图像数据的另一部分。本发明的另一个方面提供一种用在第一视听设备中的数字显示接口部件，以用于 支持第一视听设备与第二视听设备之间的数字显示接口，该接口部件包括输入端，用于接收立体图像数据；格式器，被设置用于产生携带数据元的图像数据流以及携带该流中间隔的数据元的辅助数据，并且其中用于解码立体图像数据的信令信息在至少一个辅助数据元中携带。当立体图像数据包括左眼图像数据和右眼图像数据时，信令信息可以指定哪些数 据元携带左眼图像数据且哪些数据元携带右眼图像数据。当左眼图像和右眼图像基于逐行 交错时，信令信息可以针对每对交错行被发送一次，尽管它也可以更不频繁地被发送，比如 每场(field)或帧一次。当立体图像数据包括2D图像数据和深度信息时，信令信息可以指定下列至少一 个传输位置、深度信息的量。有利地，当立体图像数据具有多个不同的可能格式时，信令信息指定所述格式。用 于立体图像数据的所述格式之一可以是在常规的2D图像格式内编码立体图像数据的方案。有利地，信令信息在水平或垂直消隐周期中携带，并且对于高清晰度多媒体接口 (HDMI)，信令信息可以以数据岛分组来发送。本发明的一个相关方面提供一种用在视听设备中的数字显示接口部件，用于支持 在该视听设备与另一个视听设备之间的数字显示接口，该接口部件包括输入端，用于从接口接收携带数据元的图像数据流和携带该流中间隔的数据元的 辅助数据；使用至少一个辅助数据元中携带的信令信息来解码立体图像数据。本发明的一个相关方面提供一种在第一视听设备与第二视听设备之间的数字显 示接口上发送立体图像数据的方法，该方法包括在第一视听设备处，接收立体图像数据；产生携带数据元的图像数据流和携带该流中间隔的数据元的辅助数据，并且其中 用于解码立体图像数据的信令信息在至少一个辅助数据元中携带。本发明的一个相关方面提供一种在视听设备的数字显示接口部件处处理立体图 像数据的方法，该方法包括从接口接收携带数据元的图像数据流和携带该流中间隔的数据元的辅助数据；使用至少一个辅助数据元中携带的信令信息来解码立体图像数据。本发明的另一个方面提供一种用在第一视听设备中的数字显示接口部件，用于支 持第一视听设备与第二视听设备之间的数字显示接口，该接口部件包括输入端，用于接收立体图像数据分量；格式器，被设置用于产生携带数据元的图像数据流和携带该流中间隔的数据元的 辅助数据，并且其中立体图像数据分布在携带数据元的图像数据与携带数据元的辅助数据 之间。有利地，立体图像数据分量是2D图像数据和图像深度数据，并且其中深度数据在 携带数据元的辅助数据中携带。有利地，所述流进一步包括携带数据元的辅助数据内携带 的信令信息，该信令信息指定深度信息涉及图像的哪部分。携带数据元的辅助数据在水平或垂直消隐周期中被发送，比如HDMI数据岛分组。本发明的一个相关方面提供一种用在视听设备中的数字显示接口部件，用于支持 该视听设备与另一个视听设备之间的数字显示接口，该接口部件包括输入端，用于从接口接收携带数据元的图像数据流和携带数据元的辅助数据；
处理器，被设置用于从携带数据元的图像数据中提取立体图像数据并且从携带数 据元的辅助数据中提取至少一部分立体图像数据。本发明的一个相关方面提供一种在第一视听设备与第二视听设备之间的数字显 示接口上发送立体数据的方法，该方法包括在第一视听设备处，接收立体图像数据分量；产生携带数据元的图像数据流和携带该流中间隔的数据元的辅助数据，并且将立 体图像数据分布在携带数据元的图像数据与携带数据元的辅助数据之间。本发明的一个相关方面提供一种在视听设备的数字显示接口部件处处理立体图 像数据的方法，该方法包括从接口接收携带数据元的图像数据流和携带数据元的辅助数据；从携带数据元的图像数据中提取立体图像数据并从携带数据元的辅助数据中提 取至少一部分立体图像数据。本文所描述的功能可以在软件、硬件或其组合中实现。本发明可以借助包含若干 不同元件的硬件实现，以及借助适当编程的计算机来实现。因此，本发明的另一方面提供用 于实现上述任一方法的软件。该软件可以存储在电子存储设备、硬盘、光盘或其他机读存储 介质上。该软件可以作为计算机程序产品在机读载体上传送，或者可以经由网络连接被下 载到AV设备。本发明也扩展到用于在显示接口上传输的信号，其源于上述任一方法。可以将本发明的各个不同方面的特征进行组合。


本发明的实施例将通过实例并参照附图描述，在附图中图1示出用于在两个AV设备之间携带图像数据的显示接口 ；图2示出在接口一端的格式化功能；图3示出在显示接口上发送2D图像数据的常规方法；图4和5示出在显示接口上发送立体图像数据的方法；图6示出HDMI视频帧的格式；以及，图7示出包含辅助数据通道的显示接口。
具体实施例方式图1示出本发明所适用的示例性情况。在图1中，能够提供数字AV内容源的AV 设备10经由数字显示接口(DDI)40连接到显示器(或视频投影仪)20。设备10、20中的接 口部件12、22支持接口 40并且提供比如将信号格式化为标准定义的接口 40所要求的形式 的功能。源设备10可以是能够从存储器11 (比如硬盘、固态存储器或光盘或任何其他固定 的或可移动的存储介质或设备)中获得数字AV内容的设备。设备10的实例包括个人录像 机(PVR)、光盘播放器，比如DVD播放器、HD-DVD播放器或蓝光播放器。可替代地，设备10 可以采取机顶盒的形式，该机顶盒从分布通道(比如广播通道或宽带网络或其他类型的网 络(比如家庭网络))接收内容。存在多种用于显示立体(3D)图像的方法。用于在接口上传输3D图像数据的两种主要方法是传输两个表示如人眼所看见的左视图和右视图的完整的、分离的立体图像； 以及具有相关联的深度信息的普通2D图像，其可以用于在显示器内产生立体图像。第一方 法通常在接口上需要明显更高的带宽(达到2D图像所需带宽的2倍)，但在显示器中需要 很少的处理，而第二方法可能需要增加的带宽较小，但这是依靠显示器中的一些快速实时 处理来处理深度信息。 当前的数字显示接口(比如HDMI)提供很高的带宽。这些接口传输未压缩的像素 信息，这与其他传送机制(比如以太网、USB、IEEE1394)由于其带宽限制而必须传输压缩 图像不同。最初，由HDMI传输的图像被限于每颜色每像素8位，所谓的“24位颜色”。对来 自版本1. 3的HDMI的改进已经允许HDMI携带每像素更多位，且可选地携带每颜色每像素 10、12和16位，即高达48位颜色。HDMI描述深颜色像素包装(packing)模式(HDMI1. 3a， 6. 5. 3节)，其允许刚刚描述的更高的颜色深度。 根据本发明的一个实施例，所述深颜色模式用于传输立体图像数据。所述立体图 像数据可以是左图像数据+右图像数据或2D+深度信息。图2示出接口部件12内所使用 的格式化功能15。所述格式器15可以有选择地在多个不同模式之一中操作。这是由选择 下列输入的集合中一个的格式器示意性示出的2D图像数据31 ；2D+深度图像数据32、33 ； 或左眼和右眼图像数据34、35，其用于处理并有选择地连接38到接口输出端39。格式器15 可以接收常规的2D图像数据31，比如24位颜色图像数据31。典型地，这是以RGB或分量 视屏(Y，Cr，Cb)格式接收的。当接收立体图像数据时，格式器15复用36、37图像数据分 量。对于左眼/右眼图像数据，可以从图像的左眼/右眼帧或场中相同的像素获得左眼数 据和右眼数据，尽管其他用于组合像素的算法也处于本发明的范围内。对于2D图像+深度 信息，该2D图像数据典型地对应于单个像素(例如RGB或分量视频格式)并且深度信息可 以采取不同的形式，并且相对2D图像的像素，可以对应于图像的不同区域。格式器15仅仅 可以支持3D格式(即仅仅L+R或仅仅2D+深度)中的一种或两种类型的3D格式。图3-5示出了图像数据可以被复用的不同方式的范围。图3示出常规的图像数 据。在HDMI中，三色分量(R、G、B或Y、Cr、Cb)在三个最小化传输差分信令(TMDS)通道 41上同时被发送。TMDS涉及应用到数据的线水平(line-level)编码以保持合适的DC平 衡以及保持数据流中传输量的减少。每个颜色分量可以使用标准颜色深度(例如每颜色每 像素8位)或增强的颜色深度(例如每颜色每像素16位)来发送。图4示出1 了立体左 眼/右眼数据可以被复用的方法。在每个数据携带元素的第一部分中发送左眼数据的分量 (R，G，B或Y，Cr, Cb)，并且随后立即发送右眼数据的分量(R，G，B或Y，Cr, Cb)。左眼和右 眼两者在相同的分组、连续的图像数据分组或连续的图像数据分组的一部分内被发送。例 如，当使用每颜色每像素16位模式时，位0-7可以携带左图像Y数据，而位8-15携带右图 像Y数据。HDMI1. 3a当前允许高达每颜色每像素16位(48位颜色)的颜色深度。图4示 出在现有的48位颜色模式内如何能携带两个24位颜色图像，且接口无需附加容量。应当 理解，HDMI (即其他)规范的未来修订版可扩展带宽以允许更大的颜色深度，这将允许左眼 和右眼图像都使用每像素更多位，从而允许更丰富的3D图像。图5示出用于发送2D图像数据+深度信息的方案，其中首先发送2D数据，随后发 送深度数据。每个颜色分量0 ，6』或￥，0，03)遵循相同的格式。在图6中，分组的容量 在2D数据与深度信息之间被平等地分割，尽管其他任何分割也是可能的。可以发送比2D
11数据明显更少的深度数据，这可以允许2D图像使用宽调色板和/或高分辨率。也可以在所 传输的数据流的不同部分中发送一些或所有深度信息，比如在水平的和垂直的行消隐间隔 内特定的HDMI数据岛分组内。这对于不直接附属于特定像素的深度数据是特别地有用的， 例如该深度数据应用于图像的一个区域。接口部件12发送指示图像数据的格式的信令42，例如指示图像数据是2D、立体 (L+R)还是立体(2D+深度)。该信令也可以指示复用方案的其他细节，比如哪个颜色深度 模式正用于携带复用数据、分配给2D数据的每数据元的位数和分配给深度数据的每数据 元的位数。根据要显示的内容的需要，该信令允许在如何将立体数据分配给在接口 40上发 送的数据携带元素方面的灵活性，并且允许动态地改变深度信息的量。在HDMI中，在水平 的和垂直的行消隐周期中发送数据岛分组。所述信令信息可以方便地在数据岛分组内被携 带。图6示出HDMI视频帧的布局，其示出了像素数据在TMDS通道上发送的区域61、水平消 隐周期63和垂直消隐周期。数据岛分组64在位于水平和垂直消隐周期62、63内的数据岛 周期内发送。所述信令数据可以在通用控制分组、辅助视频信息帧(AVI)分组或特别地设 计用于该目的的信息帧分组中携带。如果深度数据在携带数据元的像素数据和所述流的其 他位置内发送，则所述信令可以指示将在哪找到深度数据。深度数据的量和深度数据的位 置可以在图像或图像序列期间根据所需的颜色深度、分辨率或图像的复杂度(例如图像内 深度信息的量)动态地变化。AV设备20包括对数据进行适当的处理以再现3D图像的处理器21。在立体显示 器的情况下(该情况下同时或顺序地为用户呈现分离的左眼和右眼图像)，处理器21构造 所述分离的左眼/右眼图像并在要求的时间输出它们24。对于顺序的立体显示器，提供另 一个输出23以使调整快门的眼镜的操作同步。在自动立体显示器的情况下，比如使用心室 的屏幕的显示器，处理器21构造需要输出24到显示元件以产生自动立体显示的图像数据。 接口部件22和处理器21使用在接口上发送的信令信息来确定立体图像数据是否正被发送；确定正在使用的通用立体图像格式(例如左+ 右图像；2D+深度；活动图像数据内编码的立体)；确定在接口上如何对图像数据进行编码的更多细节，并且因此确定在接收器处应 当使用的解码方案。这可以包括关于正在使用的深颜色模式、2D与深度数据之间的位分配、 深度数据的传输位置(例如特定数据岛分组或辅助通道位置)的信息。AV设备10、20之间的其他信令允许宿端设备20指示其接收并处理图像数据的能 力。所述能力信息可以指示用于发送2D和立体图像数据的每种模式的最大允许带宽。在 HDMI中，宿端设备的能力可以使用显示数据通道(DDC)通道，其中能力数据被存储在宿端 的扩展显示标识数据(EDID)ROM中。所述接口可以支持用于发送立体数据的其他方案。第一可替代方案是发送顺序携 带的两个独立的完整图像(比如完整的左图像，随后是完整的右图像)。左和右图像的指示 可以通过紧邻图像数据位置携带的信令信息(比如HDMI数据岛分组)来指示。第二可替代方案是发送两个分离的图像，但两个图像的行交错。例如，首先发送左 图像的第一行，随后发送右图像的第一行，以此类推。第三可替代方案是以常规方式发送2D图像，以及在专用于携带深度信息的特定 数据岛分组中携带深度信息。
在每种可替代方案中，紧邻图像数据位置携带的信令信息(比如HDMI数据岛分 组)可以指示图像数据对应的内容。对于第三可替代方案，信令信息可以指定深度数据涉 及的图像部分。如上所述，HDMI数据岛分组可以是通用控制分组、辅助视频信息帧(AVI)分 组或特定设计用于该目的的信息帧分组。这些分组中的信息可以标识当前正在使用(参见上文)的立体方法(场、行或字节)；深颜色像素分组模式是否正用于携带3D信息或深颜色模式2D图像；左和右视图到当前场、行或字节的映射；有多少数据岛分组的分组/子分组正用于携带深度信息；其他立体图像数据分量的位置。上述实施例示出独立的立体图像分量在显示接口上可以如何携带。对于某些应 用，特别是那些用于在心室屏幕上显示的应用，在接口部件12处接收到的图片可能已经用 立体内容编码。例如，背景部分中描述的WOWvx编码的图像包括2D图像、深度信息和/或 已经嵌入到常规图像的独立区域中的遮挡信息。在一个实施例中，2D图像在图像像素的四 分之一中携带(例如，图片中总行数一半的半行中)。相关联的深度和/或遮挡信息在呈现 的图片的其他四分之三中携带。在这种情况下，图片的行在HDMI链路上传送，好像它们是 针对所有可用行、覆盖每行的全部的单个2D图像。为了识别这种3D图像，HDMI数据岛分 组(典型地为通用控制分组、辅助视频信息帧(AVI)分组或特别指定的信息帧分组)指示 该方法。在该分组中的信息标识了 -当前正在使用的立体方法(例如2D+深度)；-关于显示所需的该方法的任何信息。所述宿端识别如使用该方法传输的图片并相应地处理该图片。所述宿端还在EDID 中携带信息，其指示它支持该方法。在上面的描述中，通过在通道的普通数据携带元素内复用立体图像数据或通过在 相同通道上携带的其他分组(例如数据岛分组)内携带至少一部分立体图像数据，使得立 体图像数据在接口的通道(例如HDMI传送流)上被携带。本发明的另一个实施例在相关 联的高速辅助数据链路(比如千兆以太网、IEEE1394或高速无线链路)上携带至少一些立 体图像数据。信令信息标识哪些信息被接口的主通道携带且哪些被关联的辅助链路携带。 在HDMI中，信令信息可以在数据岛分组中被携带。相似的或互补的标识信息也可以在关联 的高速辅助链路上被携带。所述宿端使用接收的数据岛分组来识别哪些信息在哪个链路上 被携带，并且以呈现或处理所必需的格式来组合两个数据流。根据HDMI和关联的辅助链路 的特性，可能需要缓冲这两个流中所包含的数据以便使得它们之间保持同步。在使用上述 实施例的一个实施例中，用于辅助链路的相关联的导线在HDMI电缆内被携带；在图7中通 过连接接口部件12、22中的模块51、52的附加线50示出该选项。在其他实施例中，相关联 的辅助链路在连接设备10、20的单独电缆中被携带或由高速无线链路携带。本领域技术人员在实践要求保护的本发明时，通过研究附图、公开和所附权利要 求可以理解并实现对所公开的实施例的其他变形。在权利要求中，文字“包括”不排除其他 元件或步骤，并且不定冠词“一”不排除多个。单个处理器或其他单元可以完成权利要求中 叙述的若干项功能。在相互不同的从属权利要求中叙述某些措施这个起码的事实并不表示这 些措施的组合不能被有利地使用。权利要求中的任何附图标记不应当被解释为限制其范围。
权利要求
一种用在第一视听设备中的数字显示接口部件，用于支持第一视听设备与第二视听设备之间的数字显示接口，该接口部件包括输入端，用于接收图像数据；格式器，其被设置成格式化用于在所述接口上传送的数据，其中该格式器可以以下面的模式操作第一模式，其中该格式器产生携带2D图像的像素数据的第一数据元流；以及第二模式，其中该格式器产生携带立体图像分量的复用组合的第二数据元流。
2.根据权利要求1的接口部件，其中第二数据元具有不大于第一数据元的容量。
3.根据权利要求1或2的接口部件，其中所述立体图像数据分量是左眼图像数据和右 眼图像数据。
4.根据权利要求3的接口部件，其中所述格式器被设置成使用第二数据元的一部分携 带左眼图像数据并使用第二数据元的另一部分携带右眼图像数据。
5.根据权利要求4的接口部件，其中所述格式器被设置成将左眼图像数据和右眼图像 数据的对应像素复用到第二数据元中。
6.根据权利要求1或2的接口部件，其中立体图像数据分量是2D图像数据和图像深度 数据。
7.根据权利要求6的接口部件，其中所述格式器被设置成使用第二数据元的一部分携 带2D图像数据并使用第二数据元的另一部分携带图像深度数据。
8.根据权利要求7的接口部件，其中所述格式器被设置成复用2D图像的像素与来自图 像不同部分的深度数据。
9.根据前述权利要求中任一项的接口部件，其中所述格式器可以以第三模式操作，该 模式中所述格式器产生携带每像素数据的第三数据元，第三数据元具有小于第一数据元和 第二数据元中的每一个的容量。
10.根据前述权利要求中任一项的接口部件，该接口部件被设置成在接口上发送标识 所述格式器正使用哪个模式的信令信息。
11.根据前述权利要求中任一项的接口部件，该接口部件被设置成在接口上接收指定 第二视听设备的能力的信令信息。
12.根据权利要求10的接口部件，其中所述接口是高清晰度多媒体接口(HDMI)并且所 述信令信息在图像数据之间的数据岛分组中被发送。
13.根据前述权利要求中任一项的接口部件，其中所述接口是高清晰度多媒体接口 (HDMI)并且第一模式和第二模式是具有大于每像素24位颜色数据的容量的深颜色模式。
14.一种用在视听设备中的数字显示接口部件，用于支持该视听设备与另一个视听设 备之间的数字显示接口，该接口部件包括输入端，用于从所述接口接收格式化的图像数据；处理器，被设置用于提取图像数据，该处理器可以以下述模式操作第一模式，该模式中该处理器从第一数据元流中提取用于2D图像的像素图像数据；以及第二模式，该模式中该处理器从携带立体图像分量的复用组合的第二数据元流解复用立体图像的分量。
15.一种在第一视听设备的数字显示接口部件处格式化图像数据以便在第一视听设备 与第二视听设备之间的数字显示接口上传送的方法，该方法包括接收图像数据；通过以下方式格式化所述图像数据以便在接口上传送 以第一模式，产生携带2D图像的像素数据的第一数据元流；以及 以第二模式，产生携带立体图像的分量 的复用组合的第二数据元流。
16.一种在视听设备的数字显示接口部件处处理图像数据的方法，该方法包括 从该接口接收格式化的图像数据；通过以下方式提取图像数据以第一模式，从第一数据元流中提取用于2D图像的像素图像数据；以及以第二模式，从携带立体图像分量的复用组合的第二数据元流解复用立体图像的分量。
17.用于执行权利要求15或16的方法的软件。
18.源自权利要求15的方法的信号。
19.一种用在第一视听设备中的数字显示接口部件，用于支持在第一视听设备与第二 视听设备之间的数字显示接口，该接口部件包括输入端，用于接收立体图像数据；格式器，被设置成格式化用于在该接口上传送的数据，其中该格式器可操作以在该接 口的主图像数据传送通道上发送立体图像数据的一部分并在辅助数据通道上发送立体图 像数据的另一部分。
20.根据权利要求19的接口部件，所述接口部件被设置成在该接口上发送信令信息， 用于标识立体数据如何在主数据通道与辅助数据通道之间分布。
21.根据权利要求19或20的接口部件，其中所述立体图像数据包括2D图像数据和图 像深度数据，并且所述格式器被设置成在辅助数据通道上发送深度数据。
22.根据权利要求19-21中任一项的接口部件，其中所述接口包括电缆内的一组线，并 且辅助数据通道包括同一电缆内的分离线或多个线。
23.根据权利要求19-21中任一项的接口部件，其中所述接口包括第一电缆并且所述 辅助数据通道由第二电缆携带。
24.根据权利要求19-21中任一项的接口部件，其中所述辅助数据通道由无线连接携市ο
25.一种用在视听设备中的数字显示接口部件，用于支持该视听设备与另一个视听设 备之间的数字显示接口，该接口部件包括输入端，用于连接到该接口的主图像数据传送通道和辅助数据通道； 处理器，被设置用于从该接口的主图像数据传送通道提取立体图像数据的一部分并从 辅助数据通道提取立体图像数据的另一部分。
26.一种在第一视听设备与第二视听设备之间的数字显示接口上发送立体图像数据的 方法，该方法包括在第一视听设备处，接收用于在接口上传送的立体图像数据；在接口的主图像数据传送通道上发送立体图像数据的一部分并且在辅助数据通道上 发送立体图像数据的另一部分。
27.一种在视听设备处处理立体图像数据的方法，用于支持该视听设备与另一个视听 设备之间的数字显示接口，该方法包括从该接口的主图像数据传送通道提取立体图像数据的一部分并且从辅助数据通道提 取立体图像数据的另一部分。
28.一种用在第一视听设备中的数字显示接口部件，其用于支持第一视听设备与第二 视听设备之间的数字显示接口，该接口部件包括输入端，用于接收立体图像数据；格式器，被设置用于产生携带数据元的图像数据流和携带该流中间隔的数据元的辅助 数据，并且其中用于解码立体图像数据的信令信息在至少一个辅助数据元中携带。
29.根据权利要求28的接口部件，其中所述立体图像数据包括左眼图像数据和右眼 图像数据，并且信令信息指定哪些数据元携带左眼图像数据且哪些数据元携带右眼图像数 据。
30.根据权利要求28的接口部件，其中所述立体图像数据包括2D图像数据和深度信 息，并且所述信令信息指定下列至少一个传输位置、深度信息的量。
31.根据权利要求28-30中任一项的接口部件，其中立体图像数据具有多个不同的格 式，并且所述信令信息指定所述格式。
32.根据权利要求31的接口部件，其中用于立体图像数据的所述格式之一在常规的2D 图像格式内编码立体图像数据。
33.根据权利要求28-32中任一项的接口部件，其中所述信令信息在水平或垂直消隐 周期中携带。
34.根据权利要求33的接口部件，其中所述接口是高清晰度多媒体接口(HDMI)并且所 述信令信息在数据岛分组中发送。
35.一种用在视听设备中的数字显示接口部件，其用于支持在该视听设备与另一个视 听设备之间的数字显示接口，该接口部件包括输入端，用于从接口接收携带数据元的图像数据流和携带该流中间隔的数据元的辅助 数据；使用至少一个辅助数据元中携带的信令信息来解码立体图像数据。
36.一种在第一视听设备与第二视听设备之间的数字显示接口上发送立体图像数据的 方法，该方法包括在第一视听设备处，接收立体图像数据；产生携带数据元的图像数据流和携带该流中间隔的数据元的辅助数据，并且其中用于 解码立体图像数据的信令信息在至少一个辅助数据元中携带。
37.一种在视听设备的数字显示接口部件处处理立体图像数据的方法，该方法包括从接口接收携带数据元的图像数据流和携带该流中间隔的数据元的辅助数据；使用至少一个辅助数据元中携带的信令信息来解码立体图像数据。
38.用于执行权利要求36或37的方法的软件。
39.源于权利要求 的方法的信号。
40.一种用在第一视听设备中的数字显示接口部件，用于支持第一视听设备与第二视 听设备之间的数字显示接口，该接口部件包括输入端，用于接收立体图像数据分量；格式器，被设置用于产生携带数据元的图像数据流和携带该流中间隔的数据元的辅 助数据，并且其中立体图像数据分布在携带数据元的图像数据与携带数据元的辅助数据之 间。
41.根据权利要求40的接口部件，其中立体图像数据分量是2D图像数据和图像深度数 据，并且其中深度数据在携带数据元的辅助数据中携带。
42.根据权利要求41的接口部件，进一步包括在携带数据元的辅助数据内携带信令信 息，用于指定深度信息涉及图像的哪部分。
43.根据权利要求40-42中任一项的接口部分，其中携带数据元的辅助数据在水平或 垂直消隐周期中被发送。
44.根据权利要求43的接口部分，其中所述接口是高清晰度多媒体接口(HDMI)，并且 所述信令信息在数据岛分组中被发送。
45.一种用在视听设备中的数字显示接口部件，其用于支持该视听设备与另一个视听 设备之间的数字显示接口，该接口部件包括输入端，用于从接口接收携带数据元的图像数据流和携带数据元的辅助数据；处理器，被设置用于从携带数据元的图像数据中提取立体图像数据并且从携带数据元 的辅助数据中提取至少一部分立体图像数据。
46.一种在第一视听设备与第二视听设备之间的数字显示接口上发送立体数据的方 法，该方法包括在第一视听设备处，接收立体图像数据分量；产生携带数据元的图像数据流和携带该流中间隔的数据元的辅助数据，并且将立体图 像数据分布在携带数据元的图像数据与携带数据元的辅助数据之间。
47.一种在视听设备的数字显示接口部件处处理立体图像数据的方法，该方法包括从接口接收携带数据元的图像数据流和携带数据元的辅助数据；从携带数据元的图像数据中提取立体图像数据并从携带数据元的辅助数据中提取至 少一部分立体图像数据。
48.用于执行权利要求46或47的方法的软件。
49.源自权利要求46的方法的信号。
全文摘要
一种数字显示接口(40)将第一视听设备(10)连接到第二视听设备(20)。立体图像数据在显示接口(40)上传送。立体图像数据的分量被复用并且插入到图像数据携带元素中。现有的深色模式可以被重复用于该目的。有助于识别或解码立体图像数据的信令信息被携带在辅助数据携带元素中。立体图像数据可以分布在图像数据携带数据元与辅助数据携带数据元之间。辅助数据携带元素可以在水平或垂直的消隐周期中被传送，并且可以包括HDMI数据岛分组。立体图像数据可以在辅助数据通道上发送。辅助数据通道可以构成与用于携带显示接口的主通道相同的电缆的一部分、单独的电缆或无线链路。
文档编号H04N13/00GK101904175SQ200880121615
公开日2010年12月1日 申请日期2008年12月15日 优先权日2007年12月18日
发明者N·B·谢泼德 申请人:皇家飞利浦电子股份有限公司