用于显示三维图像的数字广播接收方法及其接收设备的制作方法
【专利摘要】本发明涉及数字广播接收方法及其接收设备，更具体地说，涉及用于显示三维图像的数字广播接收方法及其接收设备。为了实现这个目的，根据本发明的一个实施例的数字广播接收方法包括步骤：接收和解复用数字广播信号，数字广播信号包括基础视图和扩展的视图视频流；通过使用形成基础视图和扩展的视图视频流的输送分组确认有关基础视图和扩展的视图图片的可丢弃信息；以及通过使用可丢弃信息，解码基础视图和扩展的视图视频流。
【专利说明】用于显示三维图像的数字广播接收方法及其接收设备
【技术领域】
[0001]本发明涉及广播数字信号接收方法和广播数字信号接收装置，更具体地，涉及能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置。
【背景技术】
[0002]近年来，对三维图像服务的兴趣已经增长。因此，提供三维图像的装置正在发展中。存在三个类型的三维图像的实现，立体型、体型和全息型。
[0003]立体型的基本原理是以相交成直角方式排列的图像分别输入进人的左眼和右眼并且分别输入进左眼和右眼的图像在大脑中组合以产生三维图像。此时，以相交成直角的方式排列的图像分别被称为左视图图像和右视图像。当人的左眼和右眼通过偏光镜，或者通过显示装置本身看到左视图图像和右视图像时，用户感到三维图像效果。
[0004]但是，在相关技术中二维图像基本上在数字广播中使用。因此，为了在数字广播中有效地实现三维图像服务，考虑有效地检查和处理立体图像信号的方法。
【发明内容】
[0005]技术问题
[0006]因此，本发明的一个目的是提供一种广播数字信号发送和接收方法和广播数字信号发送和接收装置，其能够在提供立体型三维图像的数字广播中处理用于特技播放的信号。
[0007]本发明的另一个目的是提供一种广播数字信号发送和接收方法和广播数字信号发送和接收装置，其能够在提供多视图型三维图像的数字广播中处理用于特技播放的信号。
[0008]本发明的再一个目的是提供一种广播数字信号发送和接收方法和广播数字信号发送和接收装置，其中在提供多视图型三维图像的数字广播中视图对ID和有关每个视图对优先级的信息被包括在PVR辅助信息中。
[0009]本发明的再一个目的是提供一种用于自然的特技播放的广播数字信号接收方法和广播数字信号接收装置。
[0010]技术方案
[0011]为了实现这些和其他的优点，和根据本发明的目的，如在此处实施和广泛描述的，提供了一种广播数字信号接收方法，包括步骤:接收和解复用广播数字信号，在广播数字信号中包括在参考时间点和在扩展时间点上的视频流；使用构成在参考时间点和在扩展时间点上的视频流的输送分组处理有关在参考时间点和扩展时间点上图片的可丢弃性信息；以及使用可丢弃性信息解码在参考时间点和扩展时间点上的视频流。
[0012]在该方法中，可丢弃性信息可以被包括在多个输送分组之中的第一输送分组中，多个输送分组构成在参考时间点和扩展时间点上的图片。
[0013]在该方法中，可丢弃性信息可以由在discardble_pair_flag字段和discardable_f lag字段之中的至少一个表不，discardble_pair_f lag字段和discardable_flag字段包括在第一输送分组中。
[0014]在该方法中，discardable_pair_flag字段可以表示如果执行3D特技播放是否解码输送分组，并且diSCardable_flag字段可以表示如果执行2D特技播放是否解码输送分组。
[0015]在该方法中，discardable_pair_flag 字段和 discardable_f lag 字段可以一起被包括在单个语法结构中。
[0016]在该方法中，如果执行3D特技播放，则当在第一输送分组中的头部信息中包括的discardable_pair_flag字段的值是I时，可以省略多个输送分组的解码，多个输送分组构成在参考时间点和扩展时间点上的图片，并且具有与第一输送分组的接入单元编号相同的接入单元编号。
[0017]在该方法中，如果执行2D特技播放，则当在第一输送分组中的头部信息中包括的diSCardable_flag字段的值是I时，可以省略多个输送分组的解码，多个输送分组构成在参考时间点上图片，并且具有与第一输送分组的接入单元编号相同的接入单元编号。
[0018]在该方法中，discardable_flag字段可以仅在1-PID多路复用模式下提供。
[0019]在该方法中，如果在2-PID多路复用模式中接收到在参考时间点和扩展时间点上的视频流，并且执行2D特技播放，则可丢弃性信息可以从与在参考时间点上的视频流的PID值相对应的输送分组中提取。
[0020]在该方法中，可丢弃性信息可以是有关构成在参考时间点和扩展时间点上的视频流的输送分组之中省略哪个输送分组的解码的信息。
[0021]在该方法中，在参考时间点和扩展时间点上的视频流可以分别具有在不同时间点上的视频流分段。
[0022]为了实现这些和其他的优点，和根据本发明的目的，如在此处实施和广泛描述的，提供了一种广播数字信号接收装置，包括:调谐器，其接收广播数字信号，在广播数字信号中包括在参考时间点和扩展时间点上的视频流；解复用器，其将广播数字信号解复用为在参考时间点和扩展时间点上的视频流；PVR处理器，其使用构成在参考时间点和扩展时间点上的视频流的输送分组处理有关在参考时间点和扩展时间点上图片的可丢弃性信息；和解码器，其使用可丢弃性信息解码在参考时间点和扩展时间点上的视频流；和3D视频处理器，其控制解码的在参考时间点和扩展时间点上的视频流。
[0023]该装置可以进一步包括存储单元，在其中存储与可丢弃性信息相关联的输送分组和与特技播放控制相关联的文件。
[0024]在该装置中，可丢弃性信息可以被包括在多个输送分组之中的第一输送分组中，多个输送分组构成在参考时间点和扩展时间点上的图片。
[0025]在该装置中，响应于执行3D特技播放的控制命令，当包括在第一输送分组中的头部信息中的discardable_pair_flag字段的值是I时,解码器可以省略多个输送分组的解码，这多个输送分组构成在参考时间点和扩展时间点上的图片，并且具有与第一输送分组的接入单元编号相同的接入单元编号。
[0026]在该装置中，响应于执行2D特技播放的控制命令，当包括在第一输送分组中的头部信息中的disCardable_flag字段的值是I时，解码器可以省略多个输送分组的解码，这多个输送分组构成在参考时间点和扩展时间点上的图片，并且具有与第一输送分组的接入单元编号相同的接入单元编号。
[0027]有益效果
[0028]根据本发明，能够通过在提供立体型三维图像的数字广播中将可丢弃的图片集分配给构成三维图像的两个视图来处理用于特技播放的信号。
[0029]此外，根据本发明，能够在提供多视图型三维图像的数字广播中通过分配可安全移除的MVC接入单元(AU)和MVC子AU，来处理用于多视图型三维图像的特技播放的信号。
[0030]此外，根据本发明，在提供多视图型三维图像的数字广播中，通过在PVR辅助信息中存储视图对ID和有关每个视图对优先级的信息，有效地提供用于多视图型三维图像的特技播放。
【专利附图】
【附图说明】
[0031]图1是用于描述以二维图像提供特技播放方法的示意图；
[0032]图2a和2b是用于描述MVC比特流的配置的示意图；
[0033]图3是用于描述以非周期性的方式接收的MVC比特流的配置的示意图；
[0034]图4a、4b和4c是用于描述允许有关可丢弃的图片的信息在输送流级别用信号发送的语法结构的示意图；
[0035]图5a和5b是图示根据本发明的一个实施例在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中获得diSCardable_piC_data用于特技播放的过程的流程图；
[0036]图6是用于描述根据本发明的一个实施例能够显示三维图像的广播数字信号接收装置的方框图；
[0037]图7a和7b是用于描述根据本发明的一个实施例，在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中在多视图类型三维图像中提供有关可丢弃的图片的信息的方法的示意图；
[0038]图8是图示根据本发明的一个实施例，在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中，获得discardable_pic_data用于提供在由两个或更多个MVC流配置的3D视图上执行的特技播放的过程的流程图；
[0039]图9是用于描述根据本发明的一个实施例的能够显示三维图像的广播数字信号接收装置的方框图；
[0040]图10a、10b、1c和10d，以及图11a、lib、Ilc和Ild是用于描述根据本发明的一个实施例，在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中在特技播放模式中控制图像再现的方法的示意图；以及
[0041]图12是用于描述数据由用于发送广播数字信号的发送装置处理的过程的方框图。
【具体实施方式】
[0042]现在将详细地参考本发明的优选实施例，其示例在附图中说明。
[0043]在解释用于再现给出深度感的三维图像(以下简称为“3D图像”)的视觉表达或者显示技术中使用术语3-D或者3D。观众的视觉皮层将左视图图像和右视图像的两个图像解释为一个3D图像。
[0044]能够显示3D图像的装置采用用于处理和3D图像表达的3D显示技术。能够显示3D图像的装置有选择地使用特定的观看设备以便有效地向观众提供3D图像。
[0045]3D图像的处理和表达的示例包括使用多个相机的立体图像/立体视频的捕捉、多视图图像/多视图视频的捕捉，二维图像和有关深度的信息的处理等等。能够显示3D图像的装置的示例包括液晶显示器(LCD)、数字TV屏幕、计算机监视器等等，其配备有适用于支持3D图像显示技术的硬件或者软件部件。特定的观看设备包括专用眼镜、护目镜、头盔、眼睛佩戴物等等。
[0046]具体地，3D图像显示技术包括立体照片三维图像(通常，利用无源红/青眼镜可观看)技术、偏振三维图像(通常，利用无源偏振眼镜可观看)技术、交替帧序列(通常，有源快门眼镜和头盔用于观看)技术、使用透镜或者栅栏屏幕的自动立体显示技术等等。以下描述的各种技术思想和特点可适用于这些技术。
[0047]3D图像显示技术的一个示例使用旋转或者交替操作的光学设备，例如，附接在滤色盘上的分段偏光镜，而在这样情况下，光学设备相互同步。3D图像显示技术的另一个示例使用基于数字微镜设备(DMD)的数字光处理器(DLP)，数字微镜设备(DMD)使用可旋转的微小镜子，微小镜子以与要显示的图像中的像素相对应的矩形阵列排列。
[0048]另一方面，与3D图像渲染和显示技术(特别地，3D TV)有关的新型的标准正在各种公司、联盟和组织中发展。这些的示例包括电影与电视工程师学会(SMPTE)、消费电子协会(CEA)、3d@Home联盟、国际电信联盟(ITU)等等。除了这些之外，标准组，诸如DVB、BDA、ARIB、ATSC、DVD论坛，和IEC参与开发新型的标准。活动图像专家组(MPEG)参与多视图图像、立体图像和具有有关深度信息的二维图像的3D图像编译。在MPEG中，用于MPEG-4高级视频编译(AVC)的多视图视频编解码器扩展的标准化当前正在发展中。立体图像编译和立体分布格式与色移(立体照片)、像素子采样(并排、棋盘、五点形等等)以及增强的视频编译((2D+增量)、(2D+元数据)，和具有有关深度信息的2D)相关联。在这里描述的技术思想和特点可适用于这些标准。
[0049]该技术思想和特点的至少一部分与在用于数字图像或者3D TV的图像再现和显示环境方面描述的3D图像显示技术相关联。但是，上述部分的详细内容不限制在这里描述的各种特点，并且可适用于别的类型的显示技术和装置。例如，3D TV技术不仅可适用于TV广播，而且可适用于蓝光盘?、游戏机游戏、有线和IPTV传输、用于移动电话的内容传送等等，而在这样情况下，它们与其他类型的TV、机顶盒、蓝光盘?播放器、DVD播放器和TV内容分发器兼容。
[0050]返回参考3D图像处理的处理和表达方法，立体图像/视频捕捉被称作考虑两个时间点的立体成像方法，并且多视图图像/视频捕捉被称作使用多个相机的多视图成像方法。
[0051]立体成像方法使用通过利用左侧相机和右侧相机对相同的拍摄对象成像获得的一对左视图图像和右视图图像。多视图图像方法使用通过利用三个以上的相机对相同的拍摄对象成像获得的三个以上图像，三个以上的相机其每个放置在离拍摄对象恒定的距离，或者具有恒定视角。在多视图成像方法中，在图像之中的两个图像被指定为左视图图像和右视图成像，并且因此，能够实现三维图像。但是，本发明不局限于此，并且使用三个以上图像(例如，整体成像方法)的别的类型的三维图像的实现是可能的。
[0052]为了传输，使用包括活动图像专家组(MPEG)标准的各种方法压缩和编译立体图像或者多视图图像。例如，为了传输，使用H.264/高级视频编译(AVC)标准压缩和编译立体图像或者多视图图像。此时，为了获得3D图像，接收系统使用H.264/高级视频编译(AVC)标准解码接收的图像。
[0053]此外，在立体图像和多视图图像之中的一个图像被指定为在基础层中的图像，并且另一个被指定为在扩展层中的图像。使用与单体图像相同的方式编译在基础层中的图像，并且被发送，并且对于在扩展层中的图像，仅仅有关在基础层和扩展层中的图像之间关系的信息被编译和发送。作为压缩和编译方法的示例，使用诸如JPEG、MPEG-2, MPEG-D,
H.264/AVD的标准，并且作为压缩和编译在扩展层中图像的方法，使用H.264/多视图视频编译(MV)标准。
[0054]另一方面，在能够输出三维图像的广播数字信号接收方法和广播数字信号接收装置中，用于再现图像的接入时间被有选择地(或者以指定的方式)控制为任意接入时间，并且提供特技播放，其以使应于该任意接入时间这样的方式再现图像。
[0055]首先，在现有的二维广播数字信号接收装置(例如，2D电视机)中提供特技播放的方法在下面参考图1描述。这么做以帮助理解根据本发明在能够输出三维图像的广播数字信号接收方法和广播数字信号接收装置中提供在三维图像上执行的特技播放的方法。
[0056]为了支持在要再现的图像上执行的特技播放，在对应于二维图像的流之中的可丢弃的图片在二维广播数字信号接收装置中使用。
[0057]此时，如果二维图像被编译，则可丢弃的图片指的是在多个图片之中不用作参考的图片。因此，虽然在特技播放过程中没有再现，即，虽然被跳过，但是可丢弃的图片没有对其它图片的正常解码产生影响。
[0058]因此，在广播数字信号接收装置中，特别地，在个人视频记录器(PVR)中，如果特定的图片被跳过以产生快速再现效果，则该特定的图片，诸如可丢弃的图片，被跳过以产生该快速再现效果。
[0059]例如，如图1 图示的，如果在从图片 10、P1、P2、P3、P4、P5、P6、P7、P8、P9、P10、P11、P12、P13和P14配置的二维图像中执行特技播放，则在广播数字信号接收装置中对应于可丢弃的图片的图片PU P2、P4、P5、P7、P8、P10、P1UP13和P14被跳过，并且对应于不可丢弃的图片的图片1、P3、P6、P9、P12被再现以提供特技播放。
[0060]另一方面，根据用于二维图像的编译技术不同地指定可丢弃的图片。例如，如果二维图像是通过以MPEG-2标准编译获得的视频，则不用作参考图片的B图片被用作可丢弃的图片。此外，否则，如果二维图像是通过以H.264/AVC标准编译获得的视频，则具有其中nal片头部的nal_ref_idc的值为O片的图片被用作可丢弃的图片。
[0061]另一方面，否则，例如，用于实现三维图像的至少两个图像每个的视频流，例如，输送流存在于三维图像中，参考其来确定分别对应于至少两个图像的图片是否都是可丢弃的图片。
[0062]因此，根据本发明的一个实施例，能够输出三维图像的广播数字信号接收方法和广播数字信号接收装置提出了一种方法，其中仅当构成三维视图(或者三维图像)的基础视图和相关视图全部是可丢弃的图片时，该基础视图和相关视图被指定为可丢弃的图片，并且这个信息在输送分组级别上被处理。因此，根据本发明，在能够输出三维图像的数字信号接收装置中，可以不确定在构成三维视图(或者三维图像)的基础视图和相关视图中包括的所有nal片的每个是否是能够跳过特技播放的可丢弃的nal片。
[0063]在基于MVC提供三维图像的数字广播中提供平滑特技播放的方法在下面参考附图详细描述。图2a和2b是用于描述MVC比特流的配置的示意图。图3是用于描述以非周期性的方式接收的MVC比特流的配置的示意图。
[0064]首先，描述用于基于MVC实现三维图像的MVC比特流的配置。MVC比特流大致从两种类型的多模式来配置。
[0065]第一模式是1-PID多路复用模式(或者1-PID模式)。在1-PID多路复用模式中，在MVC比特流的配置中，一个MVC接入单元(MVC AU)被包括在一个PED分组中。此时，基础和相关视图分量都包括在一个MVC AU中。
[0066]另一方面，此时，通过使用MVC编译获得的视图分量分别地涉及基础视图和相关视图，并且指的是在左视图图像和右视图像之中的任何一个。以这样的方式，在1-PED多路复用模式中，两个对应的视图分量被组合为一个接入单元。
[0067]因此，如在图2a中图示的，在1-PID多路复用模式中，构成一个基础视图分量的多个输送分组(TP)和构成具有与一个基础视图分量相同的时间点的一个相关视图分量的多个输送分组被包括在一个MVC AU中。以这样的方式，在1-PID多路复用模式中，构成基础和相关视图分量的输送分组顺序地插入进一个输送流中。
[0068]另一方面，第二模式，与其中配置了基于MVC实现三维图像的MVC比特流的第一模式不同，是2-PID多路复用模式(或者2-PID)。
[0069]在2-PID多路复用中，一个PED分组包括一个视图分量，并且从用于不同视图的输送分组配置不同的输送流(TS)的每一个。
[0070]如在图2b中图示的，一个MVC AU从基础和相关视图分量的输送分组来配置，基础和相关视图分量包括在不同的输送流中并且其相互对应且对应于一个图片(或者帧)。也就是说，在这种情况下，对应于第一基础视图分量的输送分组包括在MVC基础视图流中，并且与对应于第一基础视图分量的第一相关视图分量相对应的输送分组被包括在MVC相关视图流中。因此，在MVC基础视图流中的输送分组和在MVC相关视图流中的输送分组分别在单独的传输流中被接收。
[0071]另一方面，基础视图分量在1-PID多路复用模式中被表达为MVC基础视图子比特流，并且在2-PID多路复用模式中被表达为MVC的AVC视频比特流。此外，基础视图分量是在通过使用MVC编译获得的两个视图分量之中对应于参考图像的分量，并且指的是使用现有的AVC.H.266解码器可解码的流。
[0072]另一方面，相关视图分量是使用IS0/IEC 14496-10的附录H可解码的流，并且对应于MVC扩展流。利用使用基础视图解码的结果的视图间预测，或者利用在相关视图分量之间的中间预测能够进行相关视图分量的解码。
[0073]因此，如参考图2a和2b描述的，在1-PID多路复用模式中，一个AU包括在一个PES分组中，并且因此，输送分组没有以AU为单位混合。但是，在2-PID多路复用模式中，构成一个AU的基础和相关视图分量包括在不同的PES分组中，并且因此，虽然每个视图分量的帧编号(或者图片编号)依次增长，但是构成一个AU单元的视图分量可以以它们不以连续的顺序相互邻近这样的方式来排列。
[0074]例如，如在图3中图示的，在2-PID多路复用模式中，虽然每个视图分量的输送分组在发送侧上被顺序地发送，但是每个视图分量的输送分组可以不每个AU单元顺序地列举，而在接收侧上经过重新多路复用过程。因此，如图示的，在终止对应于LO的输送分组的列举之前，对应于RO或者Rl的输送分组可以被列举。因此，在这种情况下，在每个AU之间的界线被模糊，并且因此，存在在特技播放过程中很难选择仅仅对应于期望的AU的输送分组的问题。因此，起点和终点的位置需要对于每个视图分量指定。此外，需要一种方法，其中，在一个帧从其开始的输送分组点上用信号发送AU_number和包括在对应的AU内的基础和相关视图分量的可丢弃性。
[0075]因此，参考附图，在下面详细描述一种方法，其中无论MVC比特流以1-PID多路复用模式还是以2-PID多路复用模式配置，在传输流级别提供有关可丢弃的图片的信息。
[0076]图4a、4b和4c是用于描述使有关可丢弃的图片的信息能够在传输流级别上用信号发送的语法结构的示意图。
[0077]用于处理与在图4a、4b和4c中图示的可丢弃的图片有关数据的字段描述如下。为了根据本发明的简要描述，构成语法字段的英语表达如下使用，并且字段被放在引号中用于其标识。
[0078]参考图4a，有关可丢弃的图片的信息在“transport_packet O ”中使用“adaptat1n_fieldO，，提供。
[0079]如果包括在输送分组上的头部信息中的“adaptat1n_field_control”是“10”或者 “ 11 ”，则存在 ^adaptat1nJieldO ”。
[0080]“Adaptat1n_field_control ” 表不 “adaptat1n_field O ” 或者有效载荷是否存在于有效载荷部分中。
[0081]另一方面，如果“adaptat1n_field_control ” 是 “10”，则 “adaptat1n_field_length”的值是 183,并且如果“adaptat1n_field_control ”是“ 11 ”,则“adaptat1n_field_length”的值是在O至182的范围中。
[0082]另一方面,如果“adaptat1n_field_control ”是“ 10”或者“11”,则有关可丢弃的图片的信息包括在“private_data_byte”字段中。
[0083]在图4b 中，“transport_private_data_flag，，字段存在于 “adaptat1n_fieldO ”中。
[0084]“transport_private_data_f lag” 表不 “private_data_byte，，是否存在于“adaptat1n_field O ” 中。
[0085]此时，如果“transport_private_data_flag”的值是“I”，则一个字节长度的“private_data_byte” 字段存在于 “adaptat1n_field O ” 中。
[0086]然后，如果“transport_private_data_flag” 的值是“O，，，则 “private_data_byte” 字段不存在于 “adaptat1n_field() ” 中。
[0087]以这样的方式，如果包括在“adaptat1n_field() ” 中的 “transport_private_data_flag” 的值是“ I ”,则 “private_data_byte” 字段不存在于“adaptat1n_field O ” 中。
[0088]另一方面，如果“transport_private_data_flag” 的值是“ I，，，则“private_data_byte”字段存在于“adaptat1n_field O ” 中，并且“transport_private_data_length”表不“private_data_byte”字段占据多少字节。
[0089]在上述的输送分组的语法结构中，可丢弃的图片信息，即“discardable_pic_data”,位于 “private_data_byte” 字段中。也就是说，“private_data_byte” 包括有关可丢弃的图片的详细信息。
[0090]位于“private_data_byte” 字段中的 “discardable_pic_data O ” 的语法结构在下面参考图4c详细描述。
[0091]用于提供有关可丢弃的图片信息的“discardable_pic_data() ”字段包括在图4c中图示的多个字段之中的至少一个。
[0092]“discardable_pic_data() ”包括用于处理可丢弃的图片的字段。
[0093]首先，“view_component_start_flag” 表不其中包括 “view_component_start_flag”的输送分组，即当前输送分组，是否是包括当前输送分组的对应的视图分量帧的第一输送分组。也就是说,“view_component_start_flag”的值是“ I”,其中包括值为“ I”的“view_component_start_flag”的输送分组是视图分量巾贞的第一输送分组,该视图分量中贞包括其中包括值为“I”的“view_component_start_flag”的输送分组。
[0094]如果“view_component_start_f lag” 的值是“O”，则包括值为 “O” 的 “view_component_start_flag”的输送分组不是任意视图分量巾贞的第一输送分组,该任意视图分量中贞包括其中包括值为“O”的“view_component_start_flag”的输送分组。
[0095]以这样的方式，通过“view_component_start_flag” 字段，“discardable_pic_dataO”提供有关构成任意视图分量帧的多个输送分组的哪个是第一输送分组的信息。
[0096]另一方面，使用其中“view_component_start_flag”值是“I”的输送分组，即在构成任意视图分量巾贞的多个输送分组之中的第一输送分组，“discardable_pic_data() ”提供有关包括第一输送分组的视图分量帧和有关立体视图对的可丢弃性信息。
[0097]“AU_number”字段,构成“discardable_pic_data O ”字段的另一字段，表示对应于其中包括“AU_number”字段的输送分组的接入单元(AU)的编号。在1-PID多路复用模式中，“AU_number”可以是包括分别对应于基础视图和相关视图的所有输送分组的接入单元的编号(参考图2a)。
[0098]另一方面,“AU_number”通过在GOP内的GOP序列号(高24比特)和显示顺序(或者解码顺序)(低8比特)的级联表示。
[0099]接下来,“discardable_pair_flag”表示对应于立体视图对的两个图片是否是所有可丢弃的图片，立体视图对对应于当前的流。也就是说，“discardable_pair_flag”表示对应于一对基础视图和相关视图的两个图片是否都是可丢弃的图片，一对基础视图和相关视图是通过多个输送分组实现的，这多个输送分组包括在接入单元中，在接入单元中包括其中包括“discardable_pair_flag”的输送分组。
[0100]更具体地说,在1-PID多路复用模式中，当“discardable_pair_flag”的值是“I”时，通过其中包括当前输送分组的接入单元实现的第一图片，和通过不同的接入单元实现的第二图片都是可丢弃的，该不同的接入单元具有与其中包括当前输送分组的接入单元的编号相同的编号。此时，第一图片和第二图片是构成立体视图对的图片。
[0101]因此,“discardable_pair_flag”的值是“I”,在3D特技播放时,对应于立体视图对的两个图片都是可丢弃的，立体视图对对应于当前的流。
[0102]接下来,“ base_v i ew_f I ag ”是表示包括当前输送分组的视图是基础视图还是相关视图的字段。也就是说，如果“base_view_flag”的值是“I”,则对应于包括“base_view_flag”的输送分组的图片是基础视图。然后，如果“baSe_VieW_flag”的值是“0”，则对应于其中包括具有“O”值的“baSe_VieW_flag”的输送分组的图片是相关视图。
[0103]接下来，如果包括在对应于当前流的图片内的所有nal片的nal_ref_idc字段的值都是“0”，贝U“discardable_flag”具有“I”的值。也就是说，如果构成对应于其中包括“discardable_flag”的输送分组的图片的所有nal片的nal_ref_idc字段的值是“0”，则该图片是可丢弃的，并且因此，确定图片是否是可丢弃的“diSCardable_flag”的值是“I”。另一方面，即使在包括在图片内的片之中一个的nal_ref_idC字段的值是“1”，“discardable_flag” 也具有 “O” 的值。
[0104]另一方面，上述“base_view_flag” 字段(或者 view_component_ID)在其中基础视图和相关视图构成一个接入单元的1-PID多路复用模式中是重要的。也就是说，因为在2-PID多路复用模式(或者N-PID多路复用模式中，基础视图和相关视图通过包括在输送头部中的PID值可标识，所以在2-PID多路复用模式中可以不包括“baSe_view_flag”。
[0105]接下来，“￥16￥_。0115)0116111:_611(1_；1^1&8”表不其中包括“￥16￥_。0115)0116111:_611(1_；1^1已区”的输送分组，即当前输送分组，是否是包括当前输送分组的对应的视图分量帧的最后的输送分组。也就是说,如果“view_component_end_flag”的值是“ I”,则其中包括具有“ I”的值的“view_component_end_flag”的输送分组是任意视图分量巾贞的最后的输送分组,在该任意视图分量巾贞中包括其中包括具有“ I ”的值的“ V i ew_component_end_f I ag ”的输送分组。在其它情形下，“view_component_end_flag”的值被设置为“O”。
[0106]在下面描述一个过程，其中处理具有如在图4a、4b和4c中定义的结构的“discardable_pic_data”。与上述 discardable_pic_data 相关联的语法结构取决于 MVC比特流是以1-PID多路复用模式还是以2-PID多路复用模式配置而不同地处理。
[0107]在下面描述一个过程，其中在接收装置中获得(处理)discardable_pic_data。
[0108]图5a和5b是图示根据本发明的一个实施例，在能够显示三维图像的广播数字信号接收方法和广播数字信号接收装置中获得diSCardable_piC_data以提供特技播放过程的流程图。
[0109]首先，参考图5a，描述在1-PID多路复用模式和2-PID多路复用模式中discardable_pic_data被处理以提供3D特技播放的过程。
[0110]为了提供3D特技播放，分别对应于构成3D图像的基础视图和相关视图的两个图片必须都处于可丢弃的状态之中。也就是说，有关立体视图对的可丢弃性信息必须被提供以便提供3D特技播放。
[0111]为了这么做，能够显示三维图像的广播数字信号接收装置通过下述过程获得有关一对图片的可丢弃性信息。
[0112]可丢弃性信息通过包括在输送分组中的“adaptati0n_field() ”来提供。为了获得有关在“adaptati0n_field() ”中包括的一对图片的可丢弃性信息，首先进行确定包括在有关输送分组的头部信息中的“adaptat1n_field_control”的值的过程。“adaptat1n_field_control” 的值是“10” 或者 “11”, “adaptat1n_fieldO ” 存在。“adaptat1n_field_control ”的值是“ 10”或者“11 ”,有关可丢弃图片的信息包括在“private_data_byte”字段中。
[0113]如上所述,“adaptat1n_field_control”的值是 “10” 或者 “11”，进行确定“transport_private_data_flag” 字段的值的过程。
[0114]此时，如果“transport_private_data_flag”的值是“I”，则一个字节长度的“private_data_byte” 字段存在于 “adaptat1n_field O ” 中。
[0115]然后，如果“transport_private_data_flag” 的值是“O”，则 “private_data_byte” 字段不存在于 “adaptat1n_field() ” 中。
[0116]以这样的方式，如果包括在“adaptat1n_field() ” 中的 “transport_private_data_flag” 的值是 “1”，则确定 “private_data_byte” 字段存在于 “adaptat1n_field O ”中。因此，如果“transport_private_data_flag”的值是“I”,则确定对应的输送分组包括有关可丢弃的图片的信息。
[0117]另一方面,“discardable_pic_data”，作为有关可丢弃的图片的信息，位于“private_data_byte”字段中。也就是说，“private_data_byte”包括有关可丢弃的图片的详细信息。
[0118]接下来，如果确定“transport_private_data_flag”的值是“I”，则进行通过“1:以118。01'1:_。1'；[￥3七6_(13七3_161^1:11”确定“。1'；[￥3七6_(13七3^5^6”字段占据多少字节的过程。
[0119]当通过“transport_private_data_length，，确定“private_data_byte，，字段占据多少字节的过程结束时，进行确定“view_component_start_flag”的值是否是“ I”的过程。
[0120]如果“view_component_start_flag”的值是“I”,则识别当前输送分组是在构成任意视图分量的多个输送分组之中的第一输送分组。
[0121]另一方面，如果“view_component_start_flag” 的值是“I”，则进行通过“AU_number ”字段确定其中包括当前输送分组的接入单元的编号的过程。
[0122]接下来,进行通过确定“discardable_pair_flag”的值来确定对应于基础和相关视图的两个图片是否是可丢弃的图片的过程，基础和相关视图对应于其中包括当前输送分组的接入单元。
[0123]也就是说，当在1-PID多路复用模式中“discardable_pair_flag”的值是“I”时，确定对应于一对基础视图和相关视图的两个图片是可丢弃的图片，一对基础视图和相关视图通过其中包括当前输送分组的一个接入单元实现。
[0124]此外，在1-PID多路复用模式中，当“discardable_pair_flag”的值是“I”时,表示通过其中包括当前输送分组的接入单元实现的第一图片，和通过不同的接入单元实现的第二图片都是可丢弃的图片，不同的接入单元具有与其中包括当前输送分组的接入单元相同的编号。此时，第一图片和第二图片是构成立体视图对的图片。
[0125]因此,如果“discardable_pair_flag”的值是“I”,则在3D特技播放时,对应于立体视图对的两个图片在接收装置中都是可丢弃的，立体视图对对应于当前流。此外，如果“discardable_pair_flag”的值是“0”，则在3D特技播放时，对应于立体视图对的图像在接收装置中再现，立体视图对对应于当前流。
[0126]另一方面，如果“view_component_start_flag”的值是“O”，则当前输送分组不是在构成任意视图分量的多个输送分组之中的第一输送分组，而在这样情况下，进行通过“view_component_end_flag”确定对应的输送分组是否是在构成任意视图分量巾贞的多个输送分组之中的最后的输送分组的过程。
[0127]也就是说,如果“view_component_end_flag”的值是“ I”,则其中包括具有“ I”的值的“view_component_end_flag”的输送分组是任意视图分量巾贞的最后的输送分组,在该任意视图分量巾贞中包括其中包括具有“ I ”的值的“ V i ew_component_end_f I ag ”的输送分组。在其它个情形下，“view_component_end_flag”的值被设置为“O”。
[0128]然后，如果“view_component_end_flag” 的值是 “ I ”,则进行确定 “Au_number” 以识别对应于对应的输送分组的接入单元的编号的过程。
[0129]以这样的方式，在接收装置中使用“discardable_pair_flag”实现3D特技播放。此夕卜，在接收装置中，通过使用 “view_component_start_flag” 和 “view_component_end_flag”识别接入单元的起点和终点，仅选择对应于在特技播放过程中希望的AU的输送分组。
[0130]该过程如上所述,其中在接收装置中使用“discardable_pair_flag”确定可丢弃性信息用于提供在3D立体视图上执行的3D特技播放。
[0131]另一方面，虽然分别对应于基础和相关视图的传输流都在接收装置中接收，但是根据用户的选择和接收装置的情形提供2D特技播放。
[0132]参考图5b，在下面描述在接收装置中提供2D特技播放的过程。与参考图5a提供的相同的过程的描述被省略，并且参考图5a提供的描述被替换。
[0133]在确定“view_component_start_flag，，字段、“AU_number” 字段和 “discardable—pair_plag”字段的过程结束之后,进行确定“base_view_f lag”字段的值的过程。
[0134]“base_view_flag”表示包括当前输送分组的视图是基础视图还是相关视图。也就是说，如果“base_view_flag”的值是“I”,则对应于其中包括“base_view_flag”的输送分组的图片是基础视图。然后，如果“baSe_VieW_flag”的值是“0”，则对应于其中包括具有“O”值的“baSe_VieW_flag”的输送分组的图片是相关视图。
[0135]也就是说，在再现2D图像的情况下，对应于基础视图的图像在接收装置中再现，并且因此，确定当前输送分组是否是对应于基础视图的输送分组。
[0136]因此，如果当前输送分组对应于基础视图，则在接收装置中进行确定“discardable_flag”字段的值的过程。
[0137]如果在对应于当前流的图片内包括的所有nal片的nal_ref_idc字段的值都是“0”，则“discardable_flag”具有“I”的值。也就是说，如果构成对应于其中包括“discardable_flag”的输送分组的图片的所有nal片的nal_ref_idc字段的值是“O”,则该图片是可丢弃的，并且因此，确定图片是否是可丢弃的“diSCardable_flag”的值是“I”。
[0138]因此，接收装置确定对应于其中“discardable_flag”具有“I”的值的输送分组的图片是可丢弃的图片。
[0139]另一方面,“base_view_flag”字段(或者 view_component_ID)在其中基础视图和相关视图构成一个接入单元的1-PID多路复用模式中是重要的。也就是说，因为在2-PID多路复用模式(或者N-PID多路复用模式)中通过包括在传输头部中的PID值可标识基础视图和相关视图，所以在2-PID多路复用模式中可以不包括“baSe_VieW_flag”。
[0140]因此，在2-PID多路复用模式中，接收装置不确定“baSe_VieW_flag”，并且仅确定“ d i s c ar dabIe_flag”。
[0141]如上所述，根据本发明，在输送流级别上分别确定对应于基础和相关视图的图片的可丢弃性。
[0142]提供上述2D或者3D特技播放的、能够显示三维图像的广播数字信号接收装置在下面参考附图详细描述。图6是用于描述根据本发明的一个实施例的能够显示三维图像的广播数字信号接收装置的方框图。
[0143]广播数字信号接收装置包括调谐器和解调器410、VSB解码器420、解复用器430、PVR处理器440、存储单元450、PSI或者PSIP/SI处理器460、AVC层470a、MVC扩展层470b、L/R分解器480，和输出格式器490 (3D视频处理器)。
[0144]此外，虽然未图示，但是该广播数字信号接收装置可以包括用于输出在对应的时间点的图像的图像输出单元。该图像输出单元控制用于每个时间点的图像。多个图像输出单元可以被提供且以左视图图像和右视图像分别输出这样的方式配置。
[0145]调谐器和解调器410接收广播数字信号、解调对应的信号、纠错、和提取输送流。作为对输送流执行滤波和分析的解复用器的示例，提供TP解复用器430。PSI/PSIP处理器460从由解复用器430传送的表信息中提取有关视频流的分组标识符(PID)信息。
[0146]AVC层470a是解码参考时间点视频的解码器。MVC扩展层470b是解码扩展时间点视频的解码器。
[0147]下面描述操作上述接收装置的方法。
[0148]接收装置从PMT中提取视频流PID和在PSI/PSIP处理器460中分析的TVCT信息。TP解复用器430使用对应的视频流ID输出视频流。当输出的视频流对应于参考时间点视频(AVC)时，解复用器430将视频流输出到AVC层470a。当输出的视频流对应于扩展时间点视频(MVC扩展)时，TP解复用器430将视频流输出到MVC扩展层470b。
[0149]AVC层470a和MVC扩展层470b处理在分别由AVC层470a和MVC扩展层470b接收的视频流中包括的视频数据和辅助数据，并且将处理的结果输出到L/R分解器480。基于由PSIP或者PSI/SI处理器460提取的信息，L/R分解器480和输出格式器490根据立体显示输出格式化参考时间点视频流和扩展时间点视频流，并且发送格式化的结果。
[0150]另一方面，根据本发明，在TP解复用器430 (或者解复用器)结束对传输流的滤波和分析处理之后，PVR处理器440处理有关来自构成输送流的输送分组的参考时间点流和扩展时间点流的可丢弃性信息。另一方面，PSIP或者PSI/SI处理器460可以执行下述过程，其中可以执行处理有关来自构成输送流的输送分组的参考时间点流和扩展时间点流的可丢弃性信息。
[0151]也就是说，PVR处理器440如参考图5a和5b描述的过程处理“discardable_pic_data”。另一方面，如果对记录的图像实现特技播放，则由PVR处理器处理的可丢弃性信息被存储在存储单元450中，并且用作参考。
[0152]也就是说，与可用于特技播放的输送分组和特技播放控制相关联的文件被存储在存储单元450中。以这样的方式，与输送分组和特技播放控制相关联的文件被存储在存储单元450中，并且当执行该文件的控制命令被应用于特技播放时，随时被使用。
[0153]根据一个实施例，下面描述存储在存储单元450中的文件的配置。能够显示三维图像的广播数字信号接收装置引用如在以下的[表I]中配置的文件，以便使用“discardable_pic_data() ” 实现特技播放。
[0154][表1]
[0155]
【权利要求】
1.一种广播数字信号接收方法，包括步骤: 接收和解复用广播数字信号，在所述广播数字信号中包括在参考时间点和扩展时间点上的视频流； 使用构成在所述参考时间点和所述扩展时间点上视频流的输送分组处理有关在所述参考时间点和所述扩展时间点上的图片的可丢弃性信息；以及 使用所述可丢弃性信息解码在所述参考时间点和所述扩展时间点上的所述视频流。
2.根据权利要求1所述的方法，其中，所述可丢弃性信息被包括在多个输送分组之中的第一输送分组中，所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片。
3.根据权利要求2所述的方法，其中，所述可丢弃性信息由包括在所述第一输送分组中的discardble_pair_flag字段和discardable_flag字段之中的至少一个表不。
4.根据权利要求3所述的方法,其中，所述discardable_pair_flag字段表示如果执行3D特技播放是否解码所述输送分组，以及 其中，所述discardable_f lag字段表示如果执行2D特技播放是否解码所述输送分组。
5.根据权利要求4所述的方法，其中，所述discardable_pair_flag字段和所述discardable_flag字段一起被包括在单个语法结构中。
6.根据权利要求4所述的方法，其中，如果执行所述3D特技播放，则当在所述第一输送分组中的头部信息中包括的所述discardable_pair_flag字段的值是I时，省略输送多个输送分组的解码，所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片，并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
7.根据权利要求4所述的方法，其中，如果执行所述2D特技播放，则当在所述第一输送分组中的头部信息中包括的所述discardable_f lag字段的值是I时,省略所述多个输送分组的解码，所述多个输送分组构成在所述参考时间点上所述图片，并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
8.根据权利要求3所述的方法,其中，所述discardable_flag字段仅在1-PID多路复用模式中提供。
9.根据权利要求8所述的方法，其中，如果在2-PID多路复用模式中接收到在所述参考时间点和所述扩展时间点上所述视频流，并且执行所述2D特技播放，则所述可丢弃性信息从与在所述参考时间点上的所述视频流的PID值相对应的输送分组中提取。
10.根据权利要求1所述的方法，其中，所述可丢弃性信息是有关构成在所述参考时间点和所述扩展时间点上的所述视频流的所述输送分组之中省略哪个输送分组的解码的信肩、O
11.根据权利要求1所述的方法，其中，在所述参考时间点和所述扩展时间点上的所述视频流分别具有在不同的时间点上的视频流分段。
12.—种广播数字信号接收装置，包括: 调谐器，所述调谐器接收广播数字信号，在所述广播数字信号中包括在参考时间点和扩展时间点上的视频流； 解复用器，所述解复用器将广播数字信号解复用为在所述参考时间点和所述扩展时间点上的所述视频流； PVR处理器，所述PVR处理器使用构成在所述参考时间点和所述扩展时间点上的所述视频流的输送分组处理有关在所述参考时间点和所述扩展时间点上的图片的可丢弃性信息； 解码器，所述解码器使用所述可丢弃性信息解码在所述参考时间点和所述扩展时间点上的所述视频流；以及 3D视频处理器，所述3D视频处理器控制解码的在所述参考时间点和所述扩展时间点上的视频流。
13.根据权利要求12所述的装置，进一步包括存储单元，在其中存储与所述可丢弃性信息相关联的所述输送分组和与特技播放控制相关联的文件。
14.根据权利要求12所述的装置，其中，所述可丢弃性信息被包括在多个输送分组之中的第一输送分组中，所述多个输送分组构成在所述参考时间中和所述扩展时间点上的所述图片。
15.根据权利要求12所述的装置，其中，响应于执行3D特技播放的控制命令，当在所述第一输送分组中的头部信息中包括的discardable_pair_flag字段的值是I时，所述解码器省略所述多个输送分组的解码，所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片，并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
16.根据权利要求12所述的装置，其中，响应于执行2D特技播放的控制命令，当在所述第一输送分组中的头部信息中包括的diScardable_f lag字段的值是I时，所述解码器省略所述多个输送分组的解码，所述多个输送分组构成在所述参考时间点和所述扩展时间点上的所述图片，并且具有与所述第一输送分组的接入单元编号相同的接入单元编号。
【文档编号】H04N21/43GK104137558SQ201280070454
【公开日】2014年11月5日 申请日期:2012年12月27日 优先权日:2011年12月27日
【发明者】徐琮烈, 崔智铉 申请人:Lg 电子株式会社