发送和接收广播信号以便提供特技播放服务的方法和装置的制造方法
【技术领域】
[0001]本发明涉及广播信号的发送和接收。更具体地，本发明涉及用于发送和接收广播信号以便提供特技播放(trick play)服务的方法和装置。
【背景技术】
[0002]近年来，对高分辨率、高质量图像服务的需求和兴趣非常高。随着紧跟HDTV之后的超高分辨率TV(UHDTV)已进入市场，正在提供非常逼真的高分辨率、高质量广播服务。在移动市场中，具有HD级别基本画面分辨率的智能手机也已进入市场，并且结果，用户对高分辨率、高质量图像的需求在迅速地增加。现在各种多媒体设备(诸如DTV、DMB、DVD、数字摄像机、图像黑盒、IPTV、智能TV和智能电话)中使用的H.264/AVC标准在支持高分辨率、高质量图像服务时是有限的。由于此原因，ITU-T视频编码专家组(VCEG)和ISO/IEC运动图像专家组(MPEG)已开始根据具有比H.264/AVC更高的压缩率和更低的复杂性的新的下一代运动图像压缩标准以及完成的高效率视频编码(HEVC)的国际标准最终草案(FDIS)的必要性来使ffiVC标准化。HEVC是展示相当于H.264/AVC的编码效率的大约35%的编码效率的下一代图像压缩标准，并且作为用于有效地压缩HD级别图像和UHD级别图像的巨量数据的核心技术已吸引相当关注。展望优化的ffivc软件和硬件标准将通过努力进入市场以得到HEVC技术遍布全世界的商业化。
[0003]此外，特技播放意指提供能够在随机时间之后再现图像(即，使得能够进行随机访问)的功能以及X速度功能(诸如X2速度和X4速度)的服务。因为在HEVC的随机访问点与H.264的随机访问点之间存在差异，所以有必要重新定义HEVC的随机访问点的类别。另外，HEVC提供可伸缩性(scalability)，并且因此，有必要使用该可伸缩性来提供特技播放。此外，常规的CFF媒体文件格式规范为H.264/AVC的特技播放定义格式。然而，未定义由HEVC编码的内容。因此，有必要为由HEVC编码的内容的解码和特技播放提供新的格式。
[0004]为了执行特技播放，根据常规AVC/H.264库中的相应图片之间的依赖使用叠层的构思来对构成视频流的图片进行分类。接收侧对仅具有特定叠层值的图片进行解码和显示以提供特技播放。然而，因为ffiVC基本上提供视频流的时间可伸缩性，所以有必要研宄使用时间可伸缩性来提供特技播放服务的方法。而且，如果用户知道可提供的最大X速度信息，则用户可能在使用特技播放时感到方便。因此，有必要研宄向用户提供能提供的最大X速度信息的方法。
【发明内容】
[0005]技术问题
[0006]被设计为解决问题的本发明的目的在于用于发送和接收广播信号以便提供特技播放服务的方法和/或装置。
[0007]被设计为解决问题的本发明的另一目的在于与用于提供特技播放服务的特技播放有关的信息。
[0008]被设计为解决问题的本发明的另一目的在于一种发信号通知与特技播放有关的信息的方法。
[0009]被设计为解决问题的本发明的另一目的在于一种能够将最大X速度信息提供给用户的发信号方法。
[0010]被设计为解决问题的本发明的另一目的在于一种使用由HEVC基本上提供的时间可伸缩性来提供特技播放的方法。
[0011]被设计为解决问题的本发明的另一个目的在于一种在照原样最大地使用与特技播放有关的常规信息的同时提供更好的特技播放服务的方法。
[0012]技术方案
[0013]能够通过提供一种广播信号发送方法来实现本发明的目的，该广播信号发送方法包括以下步骤:对视频数据进行编码以创建视频基本流(ES);创建包括视频基本流(ES)的经打包的基本流(PES);创建包括所创建的PES的传输流(TS)，其中，该TS包括用于执行特技播放的PVR辅助信息，该PVR辅助信息包括叠层号信息和最大时间标识信息，并且叠层号信息指示具有通过将1加到与RAP图片不同的图片的时间标识信息所获得的值的叠层号以及最大时间标识信息指示包括经编码的视频数据的视频基本流(ES)的最大时间标识信息值；以及发送所创建的TS。
[0014]对于RAP图片，由叠层号信息指示的叠层号可以具有0的值。
[0015]可以使用最大时间标识信息提供与特技播放的速度有关的信息。
[0016]PVR辅助信息可以被包括在TS的适配字段中。
[0017]PVR辅助信息可以包括指示与图片所属的段有关的信息的存在或不存在的分段信肩、柄^心、^[曰肩、o
[0018]PVR辅助信息可以包括指示图片所属的段的id的段标识符信息。
[0019]PVR辅助信息可以包括指示图片所属的节目的id的节目标识符信息。
[0020]PVR辅助信息可以包括从用于标识在各个段中具有第一呈现顺序的图片的段开始标志信息与用于标识在各个段中具有最后呈现顺序的图片的段结束标志信息之间选择的至少一个。
[0021]PVR辅助信息可以包括从用于标识在各个节目中具有第一呈现顺序的图片的节目开始标志信息与用于标识在各个节目中具有最后呈现顺序的图片的节目结束标志信息之间选择的至少一个。
[0022]在本发明的另一方面中，本文所提供的是一种广播信号接收装置，该广播信号接收装置包括:调谐器，该调谐器用于接收传输流(TS)，其中，该TS包括用于执行特技播放的PVR辅助信息，该PVR辅助信息包括叠层号信息和最大时间标识信息，并且叠层号信息指示具有通过将1加到与RAP图片不同的图片的时间标识信息值所获得的值的叠层号以及最大时间标识信息指示包括经编码的视频数据的视频基本流(ES)的最大时间标识信息值；第一提取单元，该第一提取单元用于从所接收到的TS中提取经打包的基本流(PES);第二提取单元，该第二提取单元用于从所提取的PES中提取视频基本流(ES);以及解码器，该解码器用于对所提取的视频基本流(ES)进行解码。
[0023]由叠层号信息指示的叠层号对于RAP图片可以具有0的值。
[0024]最大时间标识信息可以被用于提供与特技播放有关的速度的信息。
[0025]PVR辅助信息可以被包括在TS的适配字段中。
[0026]PVR辅助信息可以包括指示与图片所属的段有关的信息的存在或不存在的分段信肩、柄^心、^[曰肩、o
[0027]PVR辅助信息可以包括指示图片所属的段的id的段标识符信息。
[0028]PVR辅助信息可以包括指示图片所属的节目的id的节目标识符信息。
[0029]PVR辅助信息可以包括从用于标识在各个段中具有第一呈现顺序的图片的段开始标志信息与用于标识在各个段中具有最后呈现顺序的图片的段结束标志信息之间选择的至少一个。
[0030]PVR辅助信息可以包括从用于标识在各个节目中具有第一呈现顺序的图片的节目开始标志信息与用于标识在各个节目中具有最后呈现顺序的图片的节目结束标志信息之间选择的至少一个。
[0031]有益效果
[0032]本发明具有将特技播放服务提供给用户的效果。
[0033]本发明具有提供与用于提供与特技播放有关的信息将特技播放服务提供给用户的效果。
[0034]本发明具有提供向用户发信号通知提供与特技播放有关的信息的方法的效果。
[0035]本发明具有在特技播放服务中将可提供的最大X速度信息提供给用户的效果。
[0036]本发明具有使用HEVC的时间可伸缩性来提供更高效的特技播放服务的效果。
[0037]本发明具有在最大地保持与特技播放服务的常规系统的同时提供更高效的特技播放服务的效果。
[0038]本发明具有照原样使用HEVC视频流的结构来提供特技播放服务的效果。
[0039]本发明具有使用HEVC视频流的基于时间ID的结构来提供特技播放服务，从而提供较高的编码速度，而无需发信号通知将在编码步骤在特技播放中使用的特定图片的效果O
【附图说明】
[0040]图1是基于场景示出了根据本发明的实施方式的特技播放方法的视图。
[0041]图2是示出了根据本发明的实施方式的用于支持基于HEVC的流的公共文件格式(CFF)框符结构的视图。
[0042]图3是示出了根据本发明的实施方式的“hvcn”框符的语法的视图。
[0043]图4是示出了根据本发明的实施方式的Common_Metadata中包括的支持高动态范围(HDR)的元素的视图。
[0044]图5是示出了根据本发明的实施方式的在HEVC流情况下的随机访问的图片类型的视图。
[0045]图6是示出了根据本发明的实施方式的在封闭GOP情况下的特技播放方法的视图(场景1-1)。
[0046]图7是示出了根据本发明的实施方式的在其中GOP包括可解码超前图片的开放GOP情况下的特技播放方法的视图(场景1-2)。
[0047]图8是示出了根据本发明的实施方式的在其中GOP包括可解码超前图片和跳过超前图片的开放GOP情况下的特技播放方法的视图(场景1-2)。
[0048]图9是示出了根据本发明的实施方式的在其中GOP包括跳过超前图片的开放GOP情况下的特技播放方法的视图(场景1-2)。
[0049]图10是示出了根据本发明的实施方式的用于支持具有max_temporal_id为O的HEVC流的特技播放的特技播放框符的配置的视图(场景1-2)。
[0050]图11是示出了根据本发明的另一实施方式的用于支持具有max_temporal_id为O的HEVC流的特技播放的特技播放框符的配置的视图(场景1-2)。
[0051]图12是示出了根据本发明的实施方式的用于支持具有max_temporal_id为O的HEVC流的特技播放的特技播放框符中包括的pic_type的描述的视图。
[0052]图13是示出了根据本发明的实施方式的用于在pic_type不包括与超前图片有关的内容的情况下支持具有max_temporal_id为O的HEVC流的特技播放的特技播放框符的配置的视图(场景1-1)。
[0053]图14是示出了根据本发明的另一实施方式的用于在pic_type不包括与超前图片有关的内容的情况下支持具有max_temporal_id为O的HEVC流的特技播放的特技播放框符的配置的视图(场景1-1)。
[0054]图15是示出了根据本发明的实施方式的支持时间可伸缩性的HEVC流的配置的视图。
[0055]图16是示出了根据本发明的实施方式的用于限制最大X速度以在支持时间可伸缩性的HEVC流中支持特技播放的特技播放框符的配置的视图(场景2)。
[0056]图17是示出了根据本发明的另一实施方式的用于限制最大X速度以在支持时间可伸缩性的HEVC流中支持特技播放的特技播放框符的配置的视图(场景2)。
[0057]图18是示出了根据本发明的实施方式的在时间子层图片类型是TSA的情况下的帧速率改变方法的视图。
[0058]图19是示出了根据本发明的实施方式的在时间子层图片类型是STSA的情况下的帧速率改变方法的视图(场景3)。
[0059]图20是示出了根据本发明的实施方式的用于在支持时间可伸缩性的HEVC流中支持高X速度特技播放的特技播放框符的配置的视图(场景3)。
[0060]图21是示出了根据本发明的另一实施方式的用于在支持时间可伸缩性的HEVC流中支持高X速度特技播放的特技播放框符的配置的视图。
[0061]图22是示出了根据本发明的实施方式的广播信号接收系统的结构的视图。
[0062]图23是示出了根据本发明的实施方式的接收端的结构的视图。
[0063]图24是示出了根据本发明的实施方式的综合使用时间id和叠层的特技播放方法的视图。
[0064]图25是示出了根据本发明的实施方式的基于常规叠层构思的特技播放方法的视图。
[0065]图26是示出了根据本发明的实施方式的基于一对一将一个时间id映射到一个叠层的方法的特技播放方法的视图(场景A-a)。
[0066]图27是示出了根据本发明的另一实施方式的基于一对一将一个时间id映射到一个叠层的方法的特技播放方法的视图(场景A-a)。
[0067]图28是示出了根据本发明的实施方式的一对一将一个时间id映射到一个叠层的结果的视图。
[0068]图29是示出了根据本发明的另一实施方式的一对一将一个时间id映射到一个叠层的结果的视图。
[0069]图30是示出了根据本发明的实施方式的基于将一个时间id映射到数个叠层的方法的特技播放方法的视图(场景A-b)。
[0070]图31是示出了根据本发明的实施方式的包括用于时间id和叠层的映射的信息的TS分组的适配字段的配置的视图。
[0071]图32是示出了根据本发明的实施方式的HEVC_temporal_id_tier_mapping_info的配置的视图。
[0072]图33是示出了根据本发明的实施方式的HEVC_temporal_id_tier_mapping_info中包括的trick_play_speed字段的配置的视图。
[0073]图34是示出了根据本发明的实施方式的PVR_assist_informat1n的配置的视图。
[0074]图35是示出了根据本发明的实施方式的使时间id框架添加到其的PVR_assist_informat1n的配置的视图(场景B_a_a)。
[0075]图36是示出了根据本发明的另一实施方式的使时间id框架添加到其的PVR_assist_informat1n 的配置的视图(场景 B_a_b)。
[0076]图37是示出了根据本发明的实施方式的用于使用时间id来支持特技播放的PVR_assist_informat1n的配置的视图(场景Β-b)。
[0077]图38是示出了根据本发明的实施方式的接收装置的视图。
[0078]图39是示出了根据本发明的实施方式的叠层框架与HEVC时间子层之间的比较的视图。
[0079]图40是示出了根据本发明的另一实施方式的PVR_assist_informat1n的配置的视图。
[0080]图41是示出了根据本发明的实施方式的使用HEVC时间子层的特技播放方法的视图。
[0081]图42是示出了根据本发明的实施方式的广播信号发送方法的视图。
[0082]图43是示出了根据本发明的实施方式的广播信号接收装置的结构的视图。
【具体实施方式】
[0083]现在将详细地参照优选实施方式，其示例被例示在附图中。在本文中应该注意，这些实施方式仅用于例示性目的，并且本说明书的保护范围不限于或约束于此。
[0084]本说明书中使用的术语是考虑到功能所选择的并且在目前广泛地使用的一般术语。然而，这样的术语可以取决于本说明书所属领域的技术人员的意图、使用惯例或新技术的出现而变化。在特定情况下，一些术语可以由本申请的申请人选择。在这种情况下，将在本说明书的对应段落中描述这些术语的意义。因此，应该注意，本说明书中使用的术语基于术语的真实意义和本说明书而不是术语的简单名称来解释。
[0085]为了容易理解本发明和描述的方便，术语和缩写词被定义如下。
[0086]高效率视频编码(HEVC)是提供和常规H.265/AVC技术相同的视频质量同时具有为H.265/AVC技术的压缩率大约两倍的压缩率的高效率视频编码标准。
[0087]时间可伸缩性意指对在相同空间分辨率下具有不同帧频率的帧进行编码的方法。
[0088]特技播放意指能够在随机时间之后再现图像(即，使得能够进行随机访问)的功能并且提供X速度功能。
[0089]开放GOP意指能够使用位于对应GOP之前的图片作为基准图片对一个GOP (即包括超前(leading)图片的GOP)中的图片进行编码的结构。
[0090]封闭GOP意指用于仅使用对应GOP中的图片作为基准图片对一个G0P( S卩，与开放GOP不同，不包括超前图片的G0P)中的图片进行编码的结构。
[0091]超前图片意指具有比IRAP更迟的解码顺序但是更早的再现顺序的HEVC中的图片。
[0092]时间id是引入来在HEVC中支持时间可伸缩性的术语，并且可以由NAL_unit_header 的 nuh_temporal_id_plusl 发信号通知。
[0093]叠层是引入来在AVC流或mpeg-2流中支持特技播放的术语，并且可以被包括在TS分组中的适配字段中。
[0094]图1是基于场景示出了根据本发明的实施方式的特技播放方法的视图。
[0095]根据本发明的实施方式，可以基于是否使用HEVC的时间可伸缩性来定义用于特技播放的发信号方法。
[0096]在根据本发明的实施方式的视频流是不提供时间可伸缩性的流的情况下，即在视频流仅包括具有O的temporal_id的图片的情况下，对于封闭G0P，可以发信号通知以CFF媒体文件格式定义的dependency_level和pic_type以提供特技播放，这是因为视频流不包括超前图片(场景1-1)。另一方面，对于开放G0P，可以在piC_type中包括超前图片类型并且可以发信号通知cbpendencyjevel以提供特技播放(场景1_2)。
[0097]在根据本发明的实施方式的视频流是基于时间可伸缩性的流的情况下，即在视频流包括具有大于O的temporal_id的图片的情况下，可以发信号通知dependency_level、pic_type和temporal_sub_layer_pic_type以提供特技播放。更具体地，可以通过在流中包括的temporaljd来发信号通知可支持的速度级别以提供特技播放(场景2)。另外，可以以与在场景2中相同的方式通过temporaljd发信号通知可支持的X速度级别并且具有O的temporaljd的图片可以另外用来提供X速度的附加服务(场景3)。
[0098]这个图所示的框符(box)可以指示构成视频流的图片，并且框符中所描述的T_ID可以意指用于支持时间可伸缩性的temporal_id。
[0099]图2是示出了根据本发明的实施方式的用于支持基于HEVC的流的公共文件格式(CFF)框符结构的视图。
[0100]在这个图中，“NL0”、“NL1”和“NL2”可以指示CFF框符的关系。“格式Req.”可以指示对应框符的存在或不存在和对应框符的数量，“规范”可以指示标准的定义对应框符的一章节，并且“描述”可以指示对应框符的描述。在“格式Req.”是“ + ”的情况下，它可以意味着一个或更多个对应框符存在。在“格式Req.”是“0/1”的情况下，它可以意味着对应框符存在或不存在。在“格式Req.”是“I”的情况下，它可以意味着对应框符存在。在“格式Req.”是“O”的情况下，它可以意味着对应框符不存在。
[0101]这个图示出了其中用于HEVC的新的特技播放框符被添加到常规CFF的根据本发明的实施方式的CFF框符结构。另外，根据本发明的实施方式的CFF框符结构可以包括用于支持基于HEVC的nal单元的缩写为“hvcn”的存储框符。
[0102]图3是示出了根据本发明的实施方式的“hvcn”框符的语法的视图。
[0103]根据本发明的实施方式，CFF框符结构可以包括被缩写为“hvcn”的nal单元存储框符。
[0104]根据本发明的实施方式，可以针对特技播放每编解码器定义nal单元存储框符。
[0105]根据本发明的实施方式，可能不针对特定播放每编解码器定义nal单元存储框符，并且可以在常规“特技”框符中定义与常规AVC特技框符不同的HEVC特技框符。另外，可以根据“特技”框符的标志来选择AVC特技播放或HEVC特技播放。
[0106]在这个图中，HEVCConfig可以包括HEVC的序列参数集(SPS)和图片参数集(PPS)以及SPS的视频信息，诸如VUI参数。
[0107]图4是示出了根据本发明的实施方式的Common_Metadata中包括的支持高动态范围(HDR)的元素的视图。
[0108]由根据本发明的实施方式的xml框符参照的Common_Metadata可以包括HighDynamicRange 兀素。
[0109]根据本发明的实施方式的HighDynamicRange元素可以根据xml模式(schema)具有字符串的值。可能存在一个HighDynamicRange元素或者可能不存在HighDynamicRange元素。
[0110]根据本发明的实施方式的HighDynamicRange元素可以指示最小亮度和/或最大亮度(min.luminance 和 / 或 max.luminance)。
[0111]根据本发明的实施方式的HighDynamicRange元素可以扼要描述按最小亮度和/或最大亮度分类的值。例如，HighDynamicRange元素可以指示常规容量(最小:0.1cd/m2，最大:100cd/m2)、中间容量(最小:0.001cd/m2，最大:1000cd/m2)或高容量(最小:
0.0001cd/m2，最大:10000cd/m2)。
[011