用于立体三维视频信息的通信的方法和系统的制作方法

专利名称：用于立体三维视频信息的通信的方法和系统的制作方法
技术领域：
本发明涉及网络，具体地讲，涉及通信网络中的视频信息的通信。
背景技术：
用于对表示三维(3D)视频内容(3D视频)的视频信息进行处理的技术(诸如3D电视(TV)技术)的出现增强了用户观看体验。然而，满足对3D视频的传输带宽要求具有挑战性，尤其是通过无线介质
发明内容

问题的解决方案本发明的实施例提供一种用于立体3D视频的通信的方法和系统。本发明的有益效果本发明的实施例通过在解构(deconstruct)视频巾贞时利用驻留在立体3D视频格式的L帧和R帧中的冗余信息来降低无线通信速率要求。


图IA显示根据本发明的实施例的用于立体3D视频信息的无线通信的无线通信系统的框图。图IB示出二维(2D)视频帧和3D视频帧。图2显示根据本发明的实施例的用于立体3D视频信息的通信的过程的流程图。图3显示根据本发明的另一实施例的用于立体3D视频信息的通信的过程的流程图。图4显示根据本发明的实施例的用于立体3D视频信息的无线通信的无线局域网的框图。图5显示高层次框图，该高层次框图显示包括用于实现本发明的实施例的计算机系统的信息处理系统。
具体实施例方式最优模式本发明的实施例提供一种用于立体3D视频的通信的方法和系统。一个实施例包括从发送无线站到接收无线站的3D立体视频信息的无线通信，所述3D立体视频信息包括未压缩的第一眼视图视频帧和对应的立体的未压缩的第二眼视图视频帧。在一个实施例中，通过无线通信介质发送未压缩的第一眼视图视频帧中的像素集合。减小未压缩的第二眼视图视频帧中与所述第一眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合。通过所述无线通信介质发送所述减小的像素集合。在接收无线站，基于所述第一眼视图像素集合和所述减小的像素集合来重构未压缩的第二眼视图像素集合。
参照以下描述、权利要求和附图，本发明的这些特征、方面和优点以及其它特征、方面和优点将变得被理解。发明模式本发明的实施例提供一种用于在无线通信网络中的立体3D视频信息的无线通信的方法和系统。一个实施例包括一种实现通过解构第一眼视图视频帧和对应的第二眼视图视频帧的3D立体视频信息的无线通信的方法的系统。通过无线通信介质从发送无线站发送未压缩的第一眼视图视频帧中的像素集合。减小第二眼视图像素集合中的像素信息，并通过所述无线通信介质从发送无线站发送减小的像素集合。在接收无线站，基于所接收的未压缩第一眼视图像素集合与所接收的减小的对应的第二眼视图像素集合来重构未压缩的第二眼视图视频像素集合。在本发明的可替换实施例中，通过通信介质发送视频信息。所述通信介质可以是在其中信息被从信息发送器移到信息接收器的无线介质、有线介质或者一些其它介质。 参照附图，本发明的一种实现包括一种通过减小用于未压缩的立体3D视频流的发送负荷的处理而构造的无线通信系统。图IA显示视频流传输无线通信系统10，该视频流传输无线通信系统10包括包括用作发送站(发送器)12的收发器的无线站和包括用作接收站(接收器)13的收发器的无线站。在一个示例中，根据本发明的实施例，无线通信系统10包括无线网络(诸如毫米波(_w)无线局域网/个人区域网)。根据本发明的实施例，无线系统10被构造用于通过无线通信介质11 (比如，射频(RF))(诸如60GHz无线介质)的从发送无线站12到接收无线站13的3D视频的无线通信。在这个示例中，3D视频包括未压缩的数字3D视频信息。在一个实施例中，根据本发明的实施例，发送无线站12包括无线收发器12A、处理器12B、存储器12C以及视频通信和处理逻辑12D。以下进一步描述根据本发明的实施例的用于在发送站12解构视频帧的处理逻辑12D。根据本发明的实施例，接收无线站13包括无线收发器13A、处理器13B、存储器13C以及视频通信和处理逻辑13D。以下进一步描述根据本发明的实施例的用于在接收站13重构视频帧的处理逻辑13D。 图IB显示2D视频和3D立体视频(3D视频)的比较。在一个示例中，3D视频信息包括至少两个视频流第一眼视图流和对应的第二眼视图流。在本文所述的实施例中，第一眼视图流包括左眼视图流(L)，第二眼视图流包括右眼视图流(R)。本领域技术人员将认识至IJ，在第一眼视图流包括右眼视图流、第二眼视图流包括左眼视图流的情况下，本发明同样适用。这样的3D视频通过分别对观众的左眼和右眼呈现两幅偏移的2D图像(即，L视频帧和R视频帧)来提供图像中的深度错觉。偏移的2D图像(即，L视频帧和R视频帧)被组合，并提供图像中的3D深度的感知。在一个示例中，光源将图像定向地划分到观众的眼睛中。本发明的实施例通过在解构视频帧时利用驻留在立体3D视频格式的L帧和R帧中的冗余信息来降低无线通信速率要求。例如，冗余信息可包括R帧中的也驻留在对应的L帧中的相同/类似的空间位置上的信息。R帧中的这样的冗余信息无需被发送，或者这样的冗余信息的子集可被发送。本发明的一个实施例提供一种用于3D完全未压缩的L帧视频和具有差值的减小的R帧的无线通信的处理。本发明的另一个实施例提供一种用于无线地传送3D完全未压缩的L帧和具有估计的差值的减小的R帧的无线通信的处理。本发明的另一个实施例提供一种用于3D完全未压缩的L帧和压缩的R帧的无线通信的处理。本发明的另一个实施例提供以下帧的交替通信对于偶数视频帧，完全未压缩的L帧和减小的或压缩的R帧；对于奇数视频帧，减小的或压缩的L帧和完全未压缩的R帧，反之亦然。这帮助使在接收无线站对两个3D视频帧的视觉效果平均。用于3D完全未压缩的L帧和具有差值的减小的R帧的无线通信处理对于未压缩的视频帧，可根据可用的发送器和/或接收器缓冲器大小以及预期的视频服务质量(QoS)来降低无线通信开销。根据本发明的实施例，假设接收器存储缓冲器大小为至少一个未压缩的视频帧，并且存在不同的发送器存储缓冲器大小。根据本发明的实施例的通信处理利用L帧与R帧中的对应像素集合(即，一个或多个视频像素行)之间的空间相关性来解构视频帧。根据本发明的实施例，给定接收器存储缓冲器大小为至少一个未压缩帧，并且发 送器缓冲器大小为至少一个未压缩帧加上一个附加行，可通过考虑L帧与R帧(最初由两个稍微错位的照相机产生)中的对应行之间的相关性(或者利用该相关性的性质)来减小R中贞的发送。图2显示根据本发明的实施例的用于发送完全未压缩的L帧和具有差值的对应的减小的R帧并在接收站重构R视频帧的通信处理20的流程图。R帧的减小是基于L帧与R帧中的对应视频像素单元(比如，数字像素行)之间的空间相关性。图2示出示例性处理，该示例性处理包括逐个单元地(比如，逐行地、宏块、像素、像素集合或其它视频信息单元)将完全未压缩的L帧发送到接收站，将整个L帧存储在发送缓冲存储器中，发送减小的对应的R帧，并在接收器重构R帧。处理20包括以下处理块块21 :逐个单元地将完全未压缩的L帧发送到接收器，并将整个L帧存储在发送缓冲器中。块22 :设置索引i = I。块23 :获得未压缩的R帧的行i，并对所存储的L帧的至少行i进行信号处理以确定立体L帧与R帧之间的向右或向左的预期位移Di (就像素数量而言)。块24 :通过确定的位移及其移位方向(Di，+/_)对R帧的行i进行移位,其中指示右移位，指示左移位。块25 :从L帧中的对应行减去移位的行。块26 :对差值进行编码(比如，使用熵编码、行程编码(RLC)或霍夫曼编码等)。块27 :将R帧的编码的差值以及位移值及其移位方向值(Di，+/_)发送到接收器。块28 :在接收器，对所述差值进行解码，并使用L帧、R帧的所述行的差值以及值(Di，+/-)来重构R帧中的所述行。接收器具有至少一个未压缩帧加上活动空间(active-space)行加上一个附加行的缓冲存储器。在活动空间行期间，信源发送恒定的像素值，并且不管该值如何，信宿都忽略在活动空间行期间接收的所有数据。块29:将索引i加I。块30 :如果R帧的最后行，则进行块31，否则进行块23以对R帧中的其它行重复块 23-29。块31 :对视频流中的后面的3D L视频帧和R视频帧重复块21_29。
处理块23-26提供减小R帧的大小的处理的示例。因为被用户的左眼和右眼捕捉的图像的位置可具有微小的移位，所以处理块对这样的移位的值进行估计。调整后的R帧的移位是计算R帧与L帧之间的像素的差值。差值被编码以减小R帧的大小。处理20可应用于发送具有差值的减小的L帧和完全未压缩的R帧。在一个实施例中，不是对每行i确定预期位移Di，而是可确定行i的每个像素的预期位移Di。此外，不是确定每行i的预期位移Di，而是可将帧分割为宏块，并可确定每个宏块的预期位移。在一个实施例中，预期位移Di可具有一个像素的分辨率。预期位移Di可具有子像素分辨率。预期位移Di的分辨率可大于一个像素。预期位移Di可以沿着单个维度。所述单个维度可以沿着水平轴。所述单个维度可以沿着从水平线歪斜的单个轴。 根据本发明的实施例，不是单行，而是可使用2维像素集合(需要2行或更多行)来估计位移。本发明的实施例还提供以下帧的交替传输对于偶数视频帧，完全未压缩的L帧和具有差值的减小的R帧；对于奇数视频帧，具有差值的减小的L帧和完全未压缩的R帧，反之亦然。另外，如果获悉用户的左眼对视频/图像比右眼更敏感，则可将所述传输改变为完全未压缩的L巾贞和具有差值的减小的R巾贞多于具有差值的减小的L巾贞和完全未压缩的R帧的模式，反之亦然。用于3D完全未压缩的L帧和具有估计的差值的减小的R帧的无线通信处理根据本发明的实施例，在接收器缓冲器大小为至少一个未压缩帧、发送器缓冲器大小为几个未压缩视频行(比如，B个视频行集合)，并且传输带宽可适合于完全未压缩的L帧和部分未压缩的R帧的情况下，可通过估计R帧相对于对应的L帧的位移来减小关于R帧的信息的传输。图3显示示例通信处理40，其中，发送器缓冲器的大小是B个视频行，其中，处理40包括以下处理块块41 :逐个单元地(比如，逐行地)将完全未压缩的L帧发送到接收器。并将L帧的第一像素集合(B个视频行)存储在发送器缓冲器中。块42 :设置索引i = I。块43 :获得对应的未压缩的R帧的行i，并对L帧的被存储行的至少行i进行一些信号处理，以确定立体L帧与R帧之间的向右或向左的预期位移Di (就像素数量而言)。块44 :通过确定的位移及其移位方向(Di，+/-)对R帧的行i进行移动。 块45 :从L帧中的对应行减去R帧的移位行。块46 :对差值进行编码(比如，熵编码、行程编码(RLC)或霍夫曼编码等)。块47 :将R帧的第一行的编码的差值以及位移值及其移位方向值(Di，+/-)从发送器发送到接收器。块48 :在接收器，对所述差值进行解码，并基于L帧、位移和移位方向(Di，+/_)以及R帧中的行i的差值来重构R帧中的行i。块49:将索引i加I。块50 :如果i大于所设置的大小B，则进行块51，否则进行块43，以对所述B个视频行集合中的其它行重复块43-49。
块51 :重构R帧中的其余行。这样的重构的示例包括(a)通过使用所确定的估计位移(Di，+/-)来移动L帧的行，并将来自L帧的对应行的相同行差值与所得的行值相加；或者(b)通过使用所确定的估计位移(根据需要，具有校正)来移动L帧的行。当左眼和右眼没有在空间中的完全相同的位置上捕捉到两幅图像时，可能不能总是直接从L帧重构R帧的右边缘，并且在L帧和R帧的边缘处都需要一些校正。以上示例显示了这样的情况，即，发送缓冲器大小为B个视频行，并且仅R帧的根据处理块43-48进行信号处理的B行被发送到接收器(而R帧的其余行不被发送到接收器)。通过首先使用所述估计的位移值和差值重构R帧的B行集合来在接收器执行R帧的重构。在接收器，所述位移值和差值可用于L帧的其余行(超过所述B个视频行集合)，以在接收器上重构R帧的其余视频行。根据本发明的实施例，不是单行，而是可使用2维像素集合(需要2行或更多行)来估计位移。
处理40对于可存储在发送缓冲器中的L帧的行数(比如，像素集合)是可伸缩的。如果所设置的大小等于L帧中的行数，则处理40类似于以上处理20。处理40可容易地被修改为发送具有估计的差值的减小的L帧和完全未压缩的R帧。对于偶数视频帧，3D视频信息的交替传输可包括完全未压缩的L帧和具有估计的差值的减小的R帧。在一个实施例中，根据处理块43-49来实现减小帧的步骤。对于奇数视频帧，3D视频信息的交替传输还可包括具有估计的差值的减小的L帧和完全未压缩的R帧。3D视频信息的交替传输可帮助缓和两个帧的用户视觉感知的平均。另外，如果获悉用户的左眼对于视频/图像比右眼更敏感，则可将所述传输改变为完全未压缩的L帧和具有估计的差值的减小的R帧多于具有估计的差值的减小的L帧和完全未压缩的R帧的模式，反之亦然。用于3D完全未压缩的L帧和压缩的R帧的无线通信处理在本发明的另一个实施例中，假设发送器和接收器的每一个的视频缓冲器大小均为视频像素的未压缩帧中的至少一个像素集合(比如，B个视频行)。编解码(压缩/解压缩)操作被应用于L帧或R帧之一。在接收器缓冲器大小小于一个像素集合的情况下，仅发送完全未压缩的L巾贞和完全未压缩的R中贞。在另一个实施例中，当接收器和发送器缓冲器大小是未压缩帧中的一个像素集合(比如，B个视频行)的大小，并且传输带宽仅可适合于完全未压缩的L帧和编码的(即，压缩的)R帧时，通过用帧内编解码技术(诸如MPEG或H. 264)进行压缩来减小R帧。这样，未压缩的L帧和压缩的R帧被发送。在接收器，使用接收器上的视频解码器来重构R帧。这假设编解码器被实现在无线系统中。对于未压缩的视频帧的视频压缩可使用各种标准(诸如H. 264、MPEG2、JPEG2000等)中所指定的帧内视频压缩模式。在一个示例中，发送器无线站和接收器无线站形成无线局域网，该无线局域网实现用于数据的无线通信的帧结构。该帧结构利用媒体访问控制(MAC)层和物理(PHY)层中的包通信。每个无线站包括MAC层和PHY层。MAC层接收包括净荷数据的数据包，并将MAC头附到该数据包，以便构造MAC协议数据单元(MPDU)。MAC头包括诸如源地址(SA)和目的地址(DA)的信息。MPDU是PHY服务数据单元(PSDU)的一部分，并被传递到AP中的PHY层以将PHY头(即，PHY前导码)附到该MPDU，从而构造PHY协议数据单元(PI3DU)。PHY头包括
用于确定包括编码/调制方案的通信方案的参数。发送器无线站的MAC层包括发送视频逻辑模块(比如，图IA中的逻辑12D)，该发送视频逻辑模块实现如本文所述的根据本发明的实施例的3D视频处理和通信模块。类似地，接收器的MAC层包括接收视频逻辑模块(比如，图IA中的逻辑13D)，该接收视频逻辑模块实现如本文所述的根据本发明的实施例的3D视频处理和通信模块。根据本发明的实施例，示例发送器无线站和接收器无线站能够例如通过天线训练和波束成形来执行定向通 目。图4显示根据本发明的实施例的实现3D视频通信的示例无线通信系统200的框图。根据本发明的实施例，系统200包括用作发送器的无线站202和用作接收器的无线站204。发送器202包括图IA中的发送器12的示例实现，接收器204包括图IA中的接收器 13的示例实现。系统200还可包括诸如在基础设施模式下便于视频传输的协调器模块235。协调器235可包括这样的逻辑模块，该逻辑模块可被实现为独立装置或者发送器202或接收器204的一部分。发送器202包括PHY层206、MAC层208和应用层210。PHY层206包括RF通信模块207，该RF通信模块207在基带处理模块230的控制下通过RF信道经由多个无线路径201发送/接收信号。基带模块230允许控制信息和视频信息的无线通信。应用层210包括用于提供3D视频帧流的音频/视频(AV)预处理模块211。3D视频流然后被MAC层208转换为MAC包。在一个实施例中，根据本发明的实施例(诸如关于图2-3所述的实施例)，预处理模块211执行发送器端3D视频通信，该发送器端3D视频通信包括通过拆解输入的视频帧来对视频进行解构并选择性地减小这些帧以用于传输。在另一个实施例中，根据本发明的实施例，MAC层208执行发送器端3D视频通信。在另一个实施例中，根据本发明的实施例，预处理模块211和MAC层208合作执行发送器端视频通信。应用层210还包括AV/C控制模块212，该AV/C控制模块212发送流传输请求和为通过无线信道的包的传输预留信道时间块的控制命令。接收器204包括PHY层214、MAC层216和应用层218。PHY层214包括RF通信模块213，该RF通信模块213在基带处理模块213的控制下发送/接收信号。MAC层216将MAC包中所接收的视频信息提供给应用层218。应用层218包括A/V后处理模块219，该A/V后处理模块219用于将所接收的视频帧处理为用于消费(比如，显示在显示屏幕上以供用户观看)的视频流。在一个实施例中，根据本发明的实施例(诸如以上关于图2-3所述的实施例)，MAC层216还实现包括3D视频重构的接收器端3D视频通信。在另一个实施例中，根据本发明的实施例，A/V后处理模块219还实现包括3D视频重构的接收器端3D视频通信。在另一个实施例中，根据本发明的实施例，MAC层216和A/V后处理模块219合作实现包括3D视频重构的接收器端3D视频通信。应用层218还包括AV/C控制模块220，该AV/C控制模块220处理流控制和信道接入。可通过多个RF信道执行发送器202与接收器204之间的波束成形通信。MAC/PHY层可根据需要根据已知技术执行天线训练和射束切换控制。
本发明的实施例可应用于无线装置和系统，诸如实现用于通过射频信道的音频/视频(A/V)信息的通信的毫米波通信的无线系统。例如，本发明的实施例可应用于WiGig和WirelessHD(WiHD)无线网络，诸如WiGig 3D A/V支持。WiGig是由无线吉比特联盟对在60GHz频谱上工作的多吉比特速度无线通信技术推广的标准。WiHD是定义关于用于消费者电子产品的无线高清晰度信号通信的下一代无线数字网络接口的规范。在本发明的一种实现中，可分配供应商指定编解码器ID，其中，发送器(发送者)在A/V能力请求巾贞(A/V Capability Request frame)中向接收器通知其供应商指定编解码器的支持及其视频缓冲器大小。发送器类似地通过来自接收器的A/V能力响应帧(A/V Capability Response frame)来确定接收器(信宿)支持哪些供应商指定编解码器以及接收器视频缓冲器大小。如果接收器支持发送器的编解码器处理，则发送器和接收器可利用供应商指定编解码器选择请求和响应巾贞(Vendor Specific Codec Select RequestandResponse frames)来基于它们的能力选择通信处理的适当配置、通过无线信道执行A/V连接设置、并实现根据本发明的实施例的A/V通信。在一个示例中，供应商指定A/V内容·的净荷可包括未压缩的L帧、位移(Di，+/_)和R帧的编码的像素差值，这些可被依次放置在净荷(比如,包)中。如本领域技术人员意识到的，本发明的实施例可被修改为发送压缩的L帧和完全未压缩的R帧。以下帧的交替传输可帮助平均两个帧的用户视觉感知对于偶数视频帧，完全未压缩的L帧和压缩的R帧；对于奇数视频帧，压缩的L帧和完全未压缩的R帧，反之亦然。另外，如果用户的左眼对视频/图像比右眼更敏感，则可将所述传输改变为完全未压缩的L巾贞和完全压缩的R巾贞多于压缩的L巾贞和完全未压缩的R巾贞的模式，反之亦然。如本领域技术人员已知的，根据本发明，以上所述的前述示例架构可以以许多方式来实现，所述许多方式诸如在无线装置中、在无线发送器/接收器中、在无线网络中等的用于供处理器执行的程序指令、软件模块、微码、计算机可读介质上的计算机程序产品、逻辑电路、专用集成电路、固件、消费者电子装置等等。此外，本发明的实施例可采取完全硬件实施例、完全软件实施例或者既包含硬件元件、又包含软件元件的实施例。图5显示高层次框图，该高层次框图显示包括用于实现本发明的实施例的计算机系统100的信息处理系统。计算机系统100包括一个或多个处理器101，并且还可包括电子显示装置102 (用于显示图形、文本和其它数据)、主存储器103 (比如，随机存取存储器(RAM))、存储装置104(比如，硬盘驱动器)、可移除存储装置105(比如，可移除存储驱动器、可移除存储器模块、磁带驱动器、光学盘驱动器、其上存储有计算机软件和/或数据的计算机可读介质)、用户接口装置106 (比如，键盘、触摸屏、键板、定点装置)以及通信接口107(比如，调制解调器、网络接口(诸如以太网卡)、通信端口或PCMCIA插槽和卡)。通信接口 107允许软件和数据在计算机系统与外部装置之间传递。系统100还包括前述装置/模块101至107连接到的通信基础设施108 (比如,通信总线、交叉杆(cross-over bar)或网络)。通过通信接口 107传递的信息可以是能够通过通信链路被通信接口 107接收的诸如电子信号、电磁信号、光学信号或其它信号的信号形式，所述通信链路携带信号，并可使用导线或电缆、光纤、电话线、蜂窝电话链路、射频(RF)链路和/或其它通信信道来实现。表示本文的框图和/或流程图的计算机程序指令可被加载到计算机、可编程数据处理设备或处理装置中，以使在其上执行的一系列操作产生计算机实现的处理。已参照根据本发明的实施例的方法、设备(系统)和计算机程序产品的流程图和/或框图描述了本发明的实施例。这样的图示/示图或者它们的组合的每个块可用计算机程序指令来实现。计算机程序指令在被提供给处理器时生成机器指令，以使得通过处理器执行的指令创建用于实现流程图和/或框图中所指定的功能/操作的手段。流程图/框图中的每个块可表示实现本发明的实施例的硬件和/或软件模块或逻辑。在可替换实现中，块中所指出的功能可以按与图中所指出的顺序颠倒的顺序、同时地、等等方式发生。术语“计算机程序介质”、“计算机可用介质”、“计算机可读介质”和“计算机程序产品”被用于泛指诸如主存储器、辅助存储器、可移除存储驱动器和安装在硬盘驱动器中的硬盘的介质。这些计算机程序产品是用于将软件提供给计算机系统的装置。计算机可读介质使得计算机系统允许从计算机可读介质读取数据、指令、消息或消息包和其它计算机可读信息。计算机可读介质例如可包括非易失性存储器(诸如软盘、ROM、闪存、盘驱动器存储器、CD-ROM和其它永久储存器)。它对于例如在计算机系统之间传输信息(诸如数据和计算机指令)是有用的。计算机程序指令可被存储在计算机可读介质中，所述计算机程序指 令可指导计算机、其它可编程数据处理设备或其它装置以特定方式运作，以使得存储在计算机可读介质中的指令生成制品，所述制品包括实现流程图和/或一个框图块或多个框图块中所指定的功能/动作的指令。计算机程序(即，计算机控制逻辑)被存储在主存储器和/或辅助存储器中。计算机程序还可通过通信接口来接收。这样的计算机程序在被执行时使得计算机系统能够执行如本文所讨论的本发明的特征。具体地讲，计算机程序在被执行时使得处理器或多核处理器能够执行计算机系统的特征。这样的计算机程序代表计算机系统的控制器。已参照本发明的某些版本描述了本发明；然而，其它版本是可能的。因此，权利要求的精神和范围不应限于本文所包含的优选版本的描述。
权利要求
1.一种通信立体三维(3D)视频信息的方法，所述立体3D视频信息包括未压缩的第一眼视图视频帧和对应的未压缩的第二眼视图视频帧，所述方法包括 发送未压缩的第一眼视图视频帧中的像素集合； 减少未压缩的第二眼视图视频帧中与所述第一眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合；和发送所述减小的像素集合。
2.根据权利要求I所述的方法，还包括 基于第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的空间相关性来确定差信息； 基于所述差信息来减小第二眼视图像素集合中的像素信息；和 通过通信介质发送所述减小的像素集合和所述差信息。
3.根据权利要求2所述的方法，其中 所述差信息包括第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的差值。
4.根据权利要求2所述的方法，其中 所述差信息包括水平差信息，使得不通过所述通信介质发送垂直差信息。
5.根据权利要求2所述的方法，其中 所述差信息包括第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的差的估计。
6.根据权利要求2所述的方法，其中 通过所述通信介质发送所述像素集合的步骤包括通过毫米波射频无线信道将所述像素集合从发送无线站发送到接收无线站。
7.根据权利要求2所述的方法，还包括基于以下方面来重构未压缩的第二眼视图视频像素集合所述第一眼视图像素集合、所述减小的像素集合和所述差信息。
8.根据权利要求I所述的方法，其中 减小第二眼视图像素集合中的像素信息的步骤包括压缩第二眼视图像素集合中的像素。
9.根据权利要求8所述的方法，其中 发送所述像素集合的步骤包括通过无线通信介质将所述像素集合从发送无线站发送到接收无线站。
10.根据权利要求8所述的方法，还包括在接收站基于所接收的第一眼视图像素集合和第二眼视图像素集合来重构未压缩的第二眼视图视频像素集合。
11.根据权利要求2所述的方法，其中，所述差信息具有子像素分辨率。
12.根据权利要求I所述的方法，其中 所述第一眼视图包括左眼视图，所述第二眼视图包括右眼视图。
13.根据权利要求I所述的方法，其中 发送所述像素集合的步骤包括通过毫米波射频无线信道将所述像素集合从发送无线站发送到接收无线站。
14.根据权利要求I所述的方法，其中减小未压缩的第二眼视图视频帧中的像素集合中的像素信息的步骤包括基于驻留在立体3D视频格式的第一眼视图帧和第二眼视图帧中的冗余信息来减少所述像素集合中的像素信息。
15.根据权利要求I所述的方法，还包括 交替地发送包括两对视频帧的3D立体视频信息，每对视频帧包括未压缩的第一眼视图视频帧和对应的立体的未压缩的第二眼视图视频帧； 其中，交替地发送的步骤包括对于第一对视频帧 发送未压缩的第一眼视图视频帧中的像素集合； 减小未压缩的第二眼视图视频帧中与第一眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合；和发送所述减小的像素集合；并且对于随后的第二对视频帧 发送未压缩的第二眼视图视频帧中的像素集合； 减小未压缩的第一眼视图视频帧中与第二眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合；和发送所述减小的像素集合。
16.根据权利要求15所述的方法，其中，所述重构由接收无线站执行。
17.一种用于通信立体三维(3D)视频信息的通信站，所述立体3D视频信息包括未压缩的第一眼视图视频帧和对应的未压缩的第二眼视图视频帧，所述通信站包括 视频处理器，其减小未压缩的第二眼视图视频帧中与未压缩的第一眼视图视频帧中的像素集合对应的像素集合中的像素信息，以产生减小的像素集合；和 通信模块，发送所述减小的像素集合和所述未压缩的第一眼视图视频帧中的所述像素隹A 口 O
18.根据权利要求17所述的通信站，其中 所述视频处理器基于第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的空间相关性来确定差信息，并基于所述差信息来减小第二眼视图像素集合中的像素信息；并且 所述通信模块通过通信介质发送所述减小的像素集合和所述差信息。
19.根据权利要求18所述的通信站，其中 所述差信息包括第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的差值。
20.根据权利要求18所述的通信站，其中 所述差信息包括水平差信息，使得不通过所述通信介质发送垂直差信息。
21.根据权利要求18所述的通信站，其中 所述差信息包括第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的差的估计。
22.根据权利要求18所述的通信站，其中，所述差信息具有子像素分辨率。
23.根据权利要求17所述的通信站，其中 所述通信站包括无线发送站，使得所述通信模块通过无线通信介质将所述像素集合发送到无线接收站。
24.根据权利要求17所述的通信站，其中 所述视频处理器通过压缩第二眼视图像素集合中的像素来减小第二眼视图像素集合中的像素信息。
25.根据权利要求17所述的通信站，其中 所述第一眼视图包括左眼视图，所述第二眼视图包括右眼视图。
26.根据权利要求17所述的通信站，其中 所述视频处理器通过基于驻留在立体3D视频格式的第一眼视图帧和第二眼视图帧中的冗余信息减小所述像素集合中的像素信息来减小未压缩的第二眼视图视频帧中的像素集合中的像素信息。
27.根据权利要求17所述的通信站，其中 所述通信模块交替地发送包括两对视频帧的3D立体视频信息，每对视频帧包括未压缩的第一眼视图视频帧和对应的未压缩的第二眼视图视频帧，使得 对于第一对视频巾贞 所述通信模块发送未压缩的第一眼视图视频帧中的像素集合； 所述视频处理器减小未压缩的第二眼视图视频帧中与第一眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合；并且所述通信模块发送所述减小的像素集合；并且对于随后的第二对视频帧 所述通信模块发送未压缩的第二眼视图视频帧中的像素集合； 所述视频处理器减小未压缩的第一眼视图视频帧中与第二眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合；并且所述通信模块发送所述减小的像素集合。
28.一种用于通信立体三维(3D)视频信息的接收通信站，所述立体3D视频信息包括未压缩的第一眼视图视频帧和对应的未压缩的第二眼视图视频帧，所述接收通信站包括 通信模块，接收未压缩的第一眼视图视频帧中的像素集合和减小的像素集合，所述减小的像素集合包括未压缩的第二眼视图视频帧中与未压缩的第一眼视图视频帧中的所述像素集合对应的像素集合的减少的像素信息；和 视频处理器，基于所述第一眼视图像素集合和所述减小的像素集合来重构未压缩的第二眼视图像素集合。
29.根据权利要求28所述的通信站，其中 所述通信模块还接收基于第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的空间相关性的差信息，并基于所述差信息来减小第二眼视图像素集合中的像素信息；并且 所述视频处理器基于以下方面来重构未压缩的第二眼视图像素集合所述第一眼视图像素集合、所述减小的像素集合和所述差信息。
30.根据权利要求29所述的通信站，其中 在所述接收站，所述视频处理器基于所接收的第一眼视图像素集合和第二眼视图像素集合来重构未压缩的第二眼视图像素集合。
31.根据权利要求29所述的通信站，其中 所述差信息包括第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的差值。
32.根据权利要求29所述的通信站，其中 所述差信息包括水平差信息，使得不通过所述通信介质发送垂直差信息。
33.根据权利要求29所述的通信站，其中 所述差信息包括第一眼视图像素集合中的像素与第二眼视图像素集合中的对应像素之间的差的估计。
34.根据权利要求29所述的通信站，其中，所述差信息具有子像素分辨率。
35.根据权利要求28所述的通信站，其中 所述通信站包括接收无线站，使得所述通信模块通过无线通信介质从无线发送站接收所述像素集合。
36.根据权利要求28所述的通信站，其中 所述减小的像素集合包括第二眼视图像素集合中的压缩像素。
37.根据权利要求28所述的通信站，其中 所述第一眼视图包括左眼视图，所述第二眼视图包括右眼视图。
38.根据权利要求28所述的通信站，其中 所述减小的像素集合包括基于驻留在立体3D视频格式的第一眼视图帧和第二眼视图帧中的冗余信息而减小的像素信息。
全文摘要
立体三维(3D)视频信息的通信。一个实施例包括从发送无线站到接收无线站的立体3D视频信息的无线通信，所述立体3D视频信息包括未压缩的第一眼视图视频帧和对应的立体的未压缩的第二眼视图视频帧。在一个实施例中，通过无线通信介质发送未压缩的第一眼视图视频帧中的像素集合。减小未压缩的第二眼视图视频帧中与第一眼视图像素集合对应的像素集合中的像素信息，以产生减小的像素集合。通过所述无线通信介质发送减小的像素集合。在接收无线站，基于所述第一眼视图像素集合和所述减小的像素集合来重构未压缩的第二眼视图视频像素集合。
文档编号H04N13/00GK102972033SQ201180033399
公开日2013年3月13日 申请日期2011年5月2日 优先权日2010年5月5日
发明者敖超, 徐如兰, 邵怀荣 申请人:三星电子株式会社