发送装置、发送方法、接收装置和接收方法与流程

文档序号:11456412阅读:166来源:国知局
发送装置、发送方法、接收装置和接收方法与流程

本技术涉及发送装置、发送方法、接收装置和接收方法。更具体地说,本技术涉及一种发送装置等,其被配置为发送通过将高动态范围光电转换应用于高动态范围视频数据获得的传输视频数据。



背景技术:

过去已经考虑了发送通过将高动态范围光电转换应用于高动态范围视频数据获得的传输视频数据。以下,适当地将高动态范围缩写为“hdr”。例如,非专利文献1通过考虑采用常规接收装置进行接收,已经提出了包括与常规光电转换特性(伽马特性)兼容的区域的hdr光电转换特性(新伽马特性)。

参考文献

非专利文献

背景技术

非专利文献1:timborer,“non-linearopto-electricaltransferfunctionsforhighdynamicrangetelevision”,research&developmentwhitepaperwhp283,july2014



技术实现要素:

本发明要解决的问题

本技术的目的是确保有利地在接收侧执行使用hdr光电转换特性获得的传输视频数据的电光转换处理。

解决问题的方法

本技术的概念是一种发送装置,包括:

光电转换器,对高动态范围视频数据执行高动态范围光电转换以获得传输视频数据;

编码单元,对所述传输视频数据应用编码处理以获得视频流;

发送器,用于发送包括所述视频流的预定格式的容器;和

信息插入器,其将表示与高动态范围光电转换的特性对应的电光转换特性的元信息插入到视频流中的参数集合区域中。

根据本技术,通过光电转换器对高动态范围视频数据进行高动态范围光电转换,由此获得传输视频数据。通过编码单元将编码处理应用于传输视频数据,从而获得视频流。包含该视频流的预定格式的容器由发送器传输。

表示与高动态范围光电转换的特性相对应的电光转换特性的元信息由信息插入器插入到视频流中的参数集合区域中。例如,参数集合区域可以是spsnal单元中的区域。

如上所述,本技术被设计用于将表示与高动态范围光电转换的特性对应的电光转换特性的元信息插入到视频流中的参数集合区域中。因此,可以在接收侧有利地对使用hdr光电转换特性获得的传输视频数据进行电光转换处理。

此外,例如,本技术可以被配置成使得信息插入器进一步将表示视频流支持高动态范围的识别信息插入到容器的层中。该识别信息允许接收侧容易地识别视频流支持高动态范围,从而可以从视频流中的参数集合区域提取表示与高动态范围光电转换的特性相对应的电光转换特性的元信息,并对传输视频数据执行适当的电光转换。

例如,这种情况可以被配置为使得表示视频流是否具有与正常动态范围兼容的显示兼容性的信息被添加到识别信息。或者,例如,可以将这种情况配置为使得表示是否禁止用于视频流的显示亮度调整的信息被添加到识别信息。

此外,例如,这种情况可以以容器为传输流的方式配置,并且信息插入器将识别信息插入属于节目映射表和事件信息表中的一个的部分。此外,例如,这种情况可以以容器为mmt流的方式配置,并且信息插入器将识别信息插入属于mmt包表的部分。

同时,例如,本技术可以被配置成使得信息插入器进一步将用于显示控制的元信息插入到与视频流中的参数集合区域不同的区域中。例如,这种情况可以被配置为使得用于显示控制的元信息包括峰值亮度信息。或者,例如,这种情况可以被配置为使得用于显示控制的元信息包括指示允许显示亮度调整的区域的区域信息。在这种情况下,可以使用用于显示控制的元信息适当地进行显示控制。

此外,例如,这种情况可以被配置为使得用于显示控制的元信息包括表示用于视频流的显示亮度调整是否被禁止的信息。由此,就显示亮度而言,能够抑制超过制作者的意图的调整,或者可以抑制观看者的眼睛疲劳。

同时,本技术的另一概念是一种接收装置,包括:

接收器,用于接收预定格式的容器,所述容器包括通过对传输视频数据进行编码而获得的视频流;

解码单元,对视频流进行解码处理以获得传输视频数据;和

电光转换器,对在解码单元获得的传输视频数据执行电光转换,以获得显示视频数据,其中

传输视频数据是通过将高动态范围光电转换应用于高动态范围数据而获得的数据,以及

表示与高动态范围光电转换的特性对应的电光转换特性的元信息被插入到视频流中的参数集合区域中,

所述接收装置还包括从所述视频流中提取所述元信息的信息提取器,其中

电光转换器使用在信息提取器提取的元信息所表示的电光转换特性。

根据本技术,接收器接收预定格式的容器,所述容器包含通过对传输视频数据进行编码而获得的视频流。由解码单元将解码处理应用于视频流,由此获得传输视频数据。随后,通过电光转换器对传输视频数据进行电光转换,从而获得显示视频数据。

传输视频数据是通过将高动态范围光电转换应用于高动态范围数据而获得的数据。表示与高动态范围光电转换的特性相对应的电光转换特性的元信息被插入到视频流中的参数集合区域中。信息提取器从视频流中提取元信息。在电光转换器中,由该元信息表示的电光转换特性用于将电光转换应用于传输视频数据。例如,参数集合区域可以是spsnal单元中的区域。

如上所述,本技术被设计用于从视频流中的参数集合区域中提取表示与高动态范围光电转换的特性相对应的电光转换特性的元信息,使得由该元信息表示的电光转换特性用于对传输视频数据执行电光转换。因此,可以有利地进行使用高动态范围光电转换的特性获得的用于传输视频数据的电光转换处理。

此外,例如,本技术可以被配置为使得指示视频流支持高动态范围的识别信息被插入到容器的层中,并且信息提取器基于识别信息从视频流中的参数集合区域中提取元信息。在这种情况下,从视频流中的参数集合区域正确地提取元信息,因此能够对传输视频数据进行适当的电光转换。

同时,例如,本技术可以被配置为使得用于显示控制的元信息被包括在与视频流中的参数集合区域不同的区域中,并且进一步提供亮度调整单元,其基于用于显示控制的元信息的调整显示视频数据的显示亮度。例如,这种情况可以被配置为使得用于显示控制的元信息包括表示允许显示亮度调整的区域的区域信息,并且亮度调整单元调整允许显示亮度调整的区域的显示亮度。在这种情况下,可以适当调整显示亮度。

或者,例如,这种情况可以被配置为使得表示是否禁止用于视频流的显示亮度调整的信息插入到容器的层和/或视频流的层中,并且在表示是否禁止用于视频流的显示亮度调整的信息表示禁止的情况下,亮度调整单元不调整显示视频数据的显示亮度。由此,就显示亮度而言,能够抑制超过制作者的意图的调整,或者可以抑制观看者的眼睛疲劳。

本发明的效果

根据本技术,可以在接收侧有利地进行使用hdr光电转换特性获得的传输视频数据的电光转换处理。注意,在本说明书中描述的效果仅作为示例而不被解释为限制。也可能有另外的效果。

附图说明

图1是示出用作实施例的发送/接收系统的示例性配置的框图。

图2是示出构成发送/接收系统的发送装置的示例性配置的框图。

图3是用于说明hdr光电转换的特性的图。

图4(a)和4(b)是用于说明根据hdr电光转换特性的类型可以直接或间接指定参考等级“参考等级”和阈值等级“阈值等级”的图。

图5是示出在使用hevc编码技术的情况下gop中的顶层存取单元的图。

图6是示出在使用hevc编码技术的情况下gop中的顶层存取单元以外的存取单元的图。

图7是示出动态范围sei消息的示例性结构的图。

图8是示出动态范围sei消息的示例性结构中的主要信息的内容的图。

图9是示出高动态范围描述符的示例性结构的图。

图10是示出高动态范围描述符的示例性结构中的主要信息的内容的图。

图11是示出传输流的示例性配置的图。

图12是表示构成发送/接收系统的接收装置的示例性配置的框图。

图13是用于说明hdr电光转换,hdr显示映射处理等的特征的图。

图14是示出发送/接收系统的另一示例性配置的框图。

图15是示出从机顶盒向监视器传输的“venderspecificinfoframe”(“供应商指定的infoframe”)的分组中的第七字节和后续字节的结构的示意图。

图16是示出“venderspecificinfoframe”的分组中的各个示例性结构中的主要信息的内容的图。

图17是示出mmt流的示例性配置的图。

具体实施方式

下面将描述用于实施本发明的模式(以下称为“实施例”)。请注意,说明将按照以下顺序给出。

1.实施例

2.变形例

<1.实施例>

[发送/接收系统的示例性配置]

图1示出了用作实施例的发送/接收系统10的示例性配置。该发送/接收系统10由发送装置100和接收装置200构成。

发送装置100以mpeg2的形式生成作为容器的传输流ts,并将该传输流ts并入到广播波或网络中的分组中进行发送。该传输流ts包括通过将编码处理应用于传输视频数据而获得的视频流,所述传输视频数据是通过对hdr视频数据执行hdr光电转换获得的。

表示与hdr光电转换特性相对应的电光转换特性的元信息被插入到视频流中的参数集合区域中。此外,表示视频流支持hdr的识别信息被插入到容器的层中。该识别信息包括以下信息:表示视频流是否具有与正常动态范围兼容的显示兼容性的信息以及表示是否禁止对视频流进行显示亮度调整的信息等。在下文中,正常动态范围将被适当地缩写为“ldr”。

同时,用于显示控制的信息被插入到与视频流中的参数集合区域不同的区域中。用于显示控制的元信息包括:峰值亮度信息、表示允许调整显示亮度的区域的区域信息、表示是否禁止对视频流进行显示亮度调整的信息等。

接收装置200对包含在所接收的容器中的视频流进行解码处理,以获得传输视频数据。接收装置200基于由插入到视频流中的参数集合区域中的元信息所表示的传输转换特性,对传输视频数据进行光电转换,从而获得显示视频数据。在这种情况下,接收装置200基于插入到容器的层中从而指示视频流支持高动态范围的识别信息,提取插入到视频流中的参数集合区域中的元信息。

接收装置200还对显示视频数据进行显示映射处理,即,基于插入到视频流中的参数集合区域中用于显示控制的信息来调整显示视频数据的显示亮度。在插入到容器的层和/或视频流的层以表示是否禁止显示亮度调整的信息表示禁止的情况下,不进行该显示亮度调整。

[发送装置的示例性配置]

图2示出了发送装置100的示例性配置。该发送装置100具有控制单元101、hdr照相机102、hdr光电转换器103、视频编码器104、系统编码器105和发送器106。控制单元101包括在其配置中的中央处理单元(cpu),并且基于控制程序来控制发送装置100中的各个构件的动作。

hdr照相机102对物体进行成像,并输出高动态范围(hdr)视频数据。该hdr视频数据具有超过常规sdr图像的白色峰值的亮度的对比度,具体地,0至100%*n(其中n是大于1的数字),例如0至1000%。例如,这里的100%的水平相当于100cd/m2的白色亮度值。

主监视器103a是用于对hdr照相机102获得的hdr视频数据执行分级的监视器。该主监视器103a具有支持hdr视频数据或适合于hdr视频数据的分级的显示亮度级。

hdr光电转换器103将hdr光电转换特性应用于在hdr照相机102获得的hdr视频数据,以获得传输视频数据v1。图3中的实线a和虚线b都代表表示hdr光电转换特性的hdroetf曲线的实例。同时,图3中的虚线c是表示sdr光电转换特性的sdroetf曲线。在图3中,横轴表示输入亮度级,而纵轴表示传输码值。

hdr光电转换特性可以被配置为包括与sdr光电转换特性兼容的兼容性区域,如在图3中上述实线a和虚线b所示的hdr光电转换特性。换句话说,两个特性的曲线彼此匹配,直到输入亮度级达到两个特性的兼容性极限值。在输入亮度级达到兼容性极限值的点,获得作为兼容等级sp的传输码值。根据hdr光电转换特性,在输入亮度级达到峰值亮度pl的点处,将获得作为峰值等级mp的传输代码值。

hdr显示参考阈值cl代表以下两个区域之间的边界:需要匹配亮度的区域;和对ce监视器的依赖性被允许作为用于在接收装置的监视器(ce监视器)上显示的亮度的区域。在输入亮度级达到hdr显示参考阈值cl的点处,通过图3中的实线a,获得传输代码值作为例如在hdroetf曲线中的阈值等级cp。同时,根据sdr光电转换特性,在输入亮度级达到sdr特性表示的极限亮度sl的点处,获得作为峰值等级mp的传输代码值。这里的sl被分配到100cd/m2。注意,hdr显示参考阈值cl也可以被配置为匹配兼容性限制值,并且在这种情况下,阈值等级cp可以被兼容等级sp代替。

返回图2所示,视频编码器104将诸如mpeg4-avc或hevc的编码应用于传输视频数据v1以获得编码视频数据。该视频编码器104还使用包括在其中后一级中的流格式化器(未示出)来生成包括该编码视频数据的视频流(视频基本流)。

此时,视频编码器104将表示与hdr光电转换特性相对应的hdr电光转换特性的元信息插入视频流中的参数集合区域。根据本实施例的视频编码器104将元信息“transfercharacteristics”(“传输特性”)插入到访问单元(au)中的spsnal单元中的视频可用性信息(vui)的区域中。

该元信息“transfercharacteristics”指定hdr电光转换特性。具体地,上述“transfercharacteristics”表示作为hdr电光转换特性的类型的“newtype”(“新类型”)。在这种情况下,可以直接或间接地指定参考等级“referencelevel”和阈值等级“thresholdlevel”。此处的参考等级“referencelevel”被分配给例如100%的相当于100cd/m2的白色亮度值。同时,阈值等级“thresholdlevel”代表以下两个区域之间的边界:需要匹配亮度的区域;和对ce监视器的依赖性被允许作为用于在接收装置的监视器(ce监视器)上显示的亮度的区域。

在直接指定的情况下,假设“referencelevel”(“参考等级”)和“thresholdlevel”(“阈值等级”)被定义为vui中的识别值,如图4(a)所示。这种情况表示在用于要被引用的vui的语义规则中提到了各个元素。请注意“referencelevel”和“thresholdlevel”不一定需要单独确定,而是可以通过设置“referencelevel”=“thresholdlevel”来确定其中一个等级。

在间接指定的情况下,不再假定“referencelevel”和“thresholdlevel”被定义为vui中的识别值,如图4(b)所示。在这种情况下,vui的语义规则中没有提到各个元素。这种情况表明下面两个等式在vui中指定的定义“transfercharacteristics”的标准中确定,作为“newtype”的特性:

referencelevel=lr(lx>lr>lc)

thresholdlevel=lt(ly>lt>lr)。

注意,“referencelevel”和“thresholdlevel”不一定需要单独确定,而是可以通过设置“referencelevel”=“thresholdlevel”来确定其中一个等级。

此外,视频编码器104将用于显示控制的元信息插入视频流中除参数集合区域之外的区域中。根据本实施例的视频编码器104将要被新定义的动态范围sei消息(动态范围sei消息)插入到访问单元(au)中的“sei”部分。

图5示出了在使用hevc编码技术的情况下的一组图像(gop)中的顶部存取单元。同时,图6示出了在使用hevc编码技术的情况下gop中的顶部存取单元以外的存取单元。在hevc编码技术的情况下,用于解码的sei消息组“prefix_seis”被布置在其中对像素数据进行编码的片段(slices)之前,而在上述片段之后布置用于显示的sei消息组“suffix_seis”。如图5和图6所示,动态范围sei消息可以被配置,从而被布置为sei消息组“suffix_seis”。

图7示出了动态范围sei消息的示例性结构(语法)。图8示出了上述示例性结构中的主要信息(语义)的内容。八位字段“transfer_characteristic”指定hdr电光转换特性。具体地说,该字段表示作为hdr电光转换特性的类型的“newtype”。

八位字段“number_of_bits”表示编码像素位数。十六位字段“minimum_brightness_value”表示亮度的最小级(cd/m2)。十六位字段“peak_level”表示最大级别的相对值(%)。十六位字段“peak_level_brightness”表示亮度的最大级(cd/m2),并对应于图3中的峰值亮度pl。

十六位字段“compliance_threshold_level”表示显示级映射期间的阈值(%)。十六位字段“compliance_threshold_level_value”表示在显示级映射期间用作阈值,并且对应于图3中的hdr显示参考阈值cl的亮度(cd/m2)。注意,由“compliant_threshold_level”和“compliant_threshold_level_value”组成的阈值信息可以分别作为100%表示参考亮度和所述参考亮度发送。标志“mapping_protection_flag”表示解码后的显示映射(显示亮度调整)是否被禁止。“1”表示禁止显示映射。“0”表示不禁止显示映射。

返回图2所示,系统编码器105生成包括在视频编码器104处生成的视频流vs的传输流ts。随后,发送器106将该传输流ts合并到到广播波或网络中的分组中,以传输到接收装置200。

此时,系统编码器105将表示视频流支持高动态范围的识别信息插入传输流(容器)的层。根据本实施例的系统编码器105将高动态范围描述符(高动态范围描述符)插入属于节目映射表(pmt)的部分或属于事件信息表(eit)的部分。

图9示出了高动态范围描述符的示例性结构(语法)。图10示出了上述示例性结构中的主要信息(语义)的内容。八位字段“descriptor_tag”表示描述符类型,这里表示使用了高动态范围描述符。八位字段“descriptor_length”表示描述符的长度(大小),并指示随后的字节数作为描述符的长度。

标志“hdr_flag”表示服务流(视频流)是否是支持hdr的类型。“1”表示视频流支持hdr以及还表示vui具有hdr特性,或者vui是常规的但是sei提供hdr信息,或者vui具有hdr特性并且sei还具有hdr信息。“0”表示视频流不支持hdr。

在服务流(视频流)支持hdr的情况下,标志“sdr_compatible_flag”表示服务流(视频流)是否具有与sdr兼容的显示兼容性。“1”表示服务流(视频流)具有与sdr兼容的显示兼容性。“0”表示服务流(视频流)不具有与sdr兼容的显示兼容性。标志“mapping_protection_flag”表示在服务流(视频流)中是否禁止显示映射(显示亮度调整)。“1”表示禁止显示映射。“0”表示不禁止显示映射。

图2所示的发送装置100的动作将简要描述。通过hdr照相机102成像而获得的hdr视频数据被提供给hdr光电转换器103。在hdr照相机102处获得的hdr视频数据使用主监视器103a进行分级。在该hdr光电转换器103中,在执行光电转换以获得传输视频数据v1时,将hdr光电转换特性(hdroetf曲线)应用于该hdr视频数据。该传输视频数据v1被提供给视频编码器104。

在视频编码器104中,诸如mpeg4-avc或hevc的编码被应用于传输视频数据v1,使得获得编码的视频数据。此外,在该视频编码器104中,包括该编码视频数据的视频流由包括在其中后一级的流格式化器生成。

此时,在视频编码器104中,将表示与hdr光电转换特性相对应的hdr电光转换特性的元信息插入到视频流的层中。具体地,在视频编码器104中,将元信息“transfercharacteristics”(“传输特性”)插入到存取单元(au)中的spsnal单元中的视频可用性信息(vui)的区域中。

此外,在视频编码器104中,用于显示控制的元信息被插入到视频流的层中。具体地说,在视频编码器104中,要被新定义的高动态范围sei消息被插入到存取单元(au)中的“sei”的部分中。

在视频编码器104处产生的视频流vs被提供给系统编码器105。在该系统编码器105中,生成包括视频流的mpeg2格式的传输流ts。该传输流ts由发送器106并入广播波或网络中的分组,以被发送到接收装置200。

此时,在系统编码器105中,将表示视频流支持高动态范围的识别信息插入到传输流(容器)的层中。具体地,在系统编码器105中,将高动态范围描述符(高动态范围描述符)插入属于节目映射表(pmt)的部分或属于事件信息表(eit)的部分中。

[传输流ts的配置]

图11示出了传输流(“transportstream”,ts)的示例性配置。根据该示例性配置,存在由pid1识别的视频流的pes分组“videopes1”。指定hdr电光转换特性的元信息“transfercharacteristics”被插入到访问单元中的sps中的vui的区域中。同时,将其中描述峰值等级“peaklevel”,阈值等级“thresholdlevel”,映射保护标志“mapping_protection_flag”等的动态范围sei消息插入到存取单元中。

另外,节目映射表(pmt)作为节目特定信息(psi)被包括在传输流ts中。psi是提及包含在传输流中的每个基本流是属于节目中的哪一个节目的信息。pmt有一个节目循环,说明与整个节目有关的信息。

pmt具有基本流循环,其具有与每个基本流有关的信息。根据该示例性配置,存在与视频流对应的视频基本流循环(videoesloop)。诸如流类型和分组标识符(pid)的信息被布置在视频基本流循环(videoesloop)中,以便对应于视频流,并且同时,与该视频流相关的描述符说明信息是也布置在其中。

该视频流的“stream_type”的值被设置为例如表示hevc视频流的值,而pid信息被配置从而表示提供给视频流中的pes分组“videopes”的pid1。作为描述符之一,将其中描述hdr标志“hdr_flag”,sdr兼容标志“sdr_compatible_flag”,映射保护标志“mapping_protection_flag”等的高动态范围描述符插入。

此外,用作管理每个事件(视频节目)的服务信息(si)的事件信息表(eit)被包括在传输流ts中。将高动态范围描述符“highdynamicrangedescriptor”插入属于此eit的部分也是可以接受的。

[接收装置的示例性配置]

图12示出了接收装置200的示例性配置。该接收装置200具有控制单元201、接收器202、系统解码器203、视频解码器204、hdr电光转换器205、hdr显示映射单元206和ce监视器207。控制单元201包括其配置中的中央处理单元(cpu),并且基于控制程序来控制接收装置200中的各个构件的动作。

接收器202通过并入广播波或网络中的分组来接收从发送装置100发送的传输流ts。系统解码器203从该传输流ts中提取视频流(基本流)vs。系统解码器203还提取插入到容器(传输流)的层中的各种信息项,以发送给控制单元201。

在本实施例中,提取的信息也包括高动态范围描述符(参照图9)中的信息。控制单元201识别视频流支持hdr,同时还识别在hdr显示期间应该参考sei(动态范围sei),因为高动态范围描述符中的“hdrflag”被指定为“1”。

视频解码器204对在系统解码器203提取的视频流vs执行解码处理,以输出传输视频数据v1。视频解码器204还提取插入到构成视频流vs的每个访问单元中的参数集和sei消息以发送到控制单元201。

根据实施例,如上所述,控制单元201识别视频流支持hdr,同时还识别在hdr显示期间应该参考sei。因此,正确地提取了元信息“transfercharacteristics”以及动态范围sei消息(参照图7),其中元信息“transfercharacteristics”指定插入到spsnal单元中的vui的区域中的hdr电光转换特性。

控制单元201利用由元信息“transfercharacteristics”指定的hdr电光转换特性(即与在发送侧使用的hdr光电转换特性相对应的hdr电光转换特性)来设置hdr电光转换器205。hdr电光转换器205将设置的hdr电光转换特性应用于从视频解码器204输出的传输视频数据v1,以获得用于显示hdr图像的显示视频数据。

图13中的实线a表示hdr电光转换特性的hdreotf曲线(类型a)。该hdreotf曲线(类型a)对应于图3中实线a所示的hdroetf曲线。同时,图13中的虚线b代表表示另一hdr电光转换特性的hdreotf曲线(类型b)。该hdreotf曲线(类型b)对应于图3中虚线b所示的hdroetf曲线。另外,图13中的虚线c代表与由图3中的虚线c表示的sdroetf曲线对应的sdreotf曲线(类型c)。

根据hdr电光转换特性,在传输码值达到峰值等级mp的点,显示亮度级为pl。同时,在传输码值达到阈值等级cp的点,获得作为hdr显示参考阈值cl的输出亮度级。另外,如图13所示,在hdreotf曲线(类型a)的情况下,只要提供阈值等级cp和hdr显示参考阈值cl,并且不启用映射保护,在显示侧执行亮度映射(诸如由双点划线a'表示的),直到达到显示亮度级ep。与此相对,在hdreotf曲线(类型b)的情况下,在显示侧执行诸如由点划线b'表示的亮度映射,直到达到显示亮度级ep,只要检测到为此定义的兼容等级sp和参考等级,并且不启用映射保护。注意,如前所述,阈值cl表示以下两个区域的边界:需要匹配亮度的区域;和对ce监视器的依赖性被允许作为用于在接收装置的监视器(ce监视器)上显示的亮度的区域。

pl和cl的亮度信息被包括在动态范围sei消息中,该动态范围sei消息作为显示控制的元信息(参照图7)插入到视频流层中。hdr显示映射单元206基于用于显示控制的元信息来调整在hdr电光转换器205处获得的显示视频数据的显示亮度。具体地说,在ce监视器207具有比pl高的等于ep的最大亮度显示能力的情况下,hdr显示映射单元206也可以作为显示功能的一种方式来进行显示映射处理(即显示亮度调整处理),使得从hdr电光转换器205的输出亮度级之中,关于超过cl处的亮度的亮度级,将最大显示亮度级转换为ep。图13中的双点划线表示这种情况下的显示亮度调整处理的一例。

此外,在高动态范围描述符中的“mapping_protection_flag”和动态范围sei消息被指定为“1”从而表示禁止显示映射的情况下,hdr显示映射单元206不基于控制单元201的控制执行显示亮度调整处理。因此,可以抑制对显示亮度做出超过制作者的意图的调整,或者可以抑制观看者的眼睛疲劳。

图12所示的接收装置200的动作将简要描述。在接收器202中,接收从发送装置100通过并入广播波或网络中的分组而发送的传输流ts。该传输流ts被提供给系统解码器203。在系统解码器203中,从该传输流ts中提取视频流vs。

此外,在系统解码器203中,提取插入到容器的层中的各种信息项,以发送到控制单元201。该提取的信息也包括高动态范围描述符(参照图9)中的信息。在控制单元201中,基于被指定为“1”的高动态范围描述符中的“hdrflag”来识别视频流支持hdr的事实,而在hdr显示期间应该参考sei的事实也被类似地识别。

在系统解码器203处提取的视频流vs被提供给视频解码器204。在视频解码器204中,将解码处理应用于在系统解码器203处提取的视频流vs,由此获得传输视频数据v1。

此外,在视频解码器204中,插入到构成视频流vs的每个访问单元中的参数集和sei消息被提取,以被发送到控制单元201。如上所述,在控制单元201中,视频流支持hdr的事实被识别,而在hdr显示期间应该参考sei的事实也被识别。因此,提取指定hdr电光转换特性的元信息“transfercharacteristics”(其被插入到spsnal单元中的vui的区域中)以及动态范围sei消息(参照图7)。

在控制单元201的控制下,利用元信息“transfercharacteristics”指定的hdr电光转换特性,即与在发送侧使用的hdr光电转换特性相对应的hdr电光转换特性,设置hdr电光转换器205。在hdr电光转换器205中,将设定的hdr电光转换特性应用于从视频解码器204输出的传输视频数据v1,由此获得用于显示hdr图像的显示视频数据。

在hdr电光转换器205处获得的显示视频数据被提供给hdr显示映射单元206。在hdr显示映射单元206中,基于用于显示控制的元信息来调整显示视频数据的显示亮度。具体地说,在ce监视器207具有比pl高的等于ep的最大亮度显示能力的情况下,在hdr显示映射单元206中执行显示映射处理,即亮度转换处理,使得从hdr电光转换器205的输出亮度级之中,关于超过cl处的亮度的亮度级,将最大显示亮度级转移到ep(参考图13中的双点划线a')。或者,对于超过参考亮度级的亮度级执行显示映射处理,即亮度转换处理,使得最大显示亮度级转移到ep(参照图13中的单点划线b')。

此外,在高动态范围描述符中的“mapping_protection_flag”和动态范围sei消息被分配给“1”以表示显示映射被禁止的情况下,hdr显示映射单元206中不执行显示亮度调整处理。因此,在hdr电光转换器205获得的显示视频数据被原样输出。

来自显示映射单元206的输出视频数据被提供给ce监视器207。hdr图像被显示在该ce监视器207上。

如到此所述的,在图1所示的发送/接收系统10中,如图1所示,指定与高动态范围光电转换特性相对应的电光转换特性的元信息“transfercharacteristics”被插入视频流中的spsnal单元中的vui的区域中。因此,当对其使用由元信息“transfercharacteristics”指定的hdr电光转换特性时,可以在接收侧有利地执行利用hdr光电转换特性获得的传输视频数据的电光转换处理。

另外,在图1所示的发送/接收系统10中,高动态范围描述符(高动态范围描述符)被插入到容器(传输流)的层中。该描述符包括表示服务流(视频流)是否是支持hdr的类型的“hdr_flag”。这允许接收侧容易地识别视频流支持高动态范围,由此可以从视频流的参数集合区域中正确地提取表示对应于高动态范围光电转换特性的电光转换特性的元信息“传送特性”,并对传输视频数据执行适当的电光转换。

同时,在图1所示的发送/接收系统10中,动态范围sei消息(动态范围sei消息)被插入到视频流的层中。该sei消息包括用于显示控制的元信息。因此,可以使用该用于显示控制的元信息在接收侧适当地执行显示亮度控制。在这种情况下,用于显示控制的元信息包括表示允许显示亮度调整的区域的区域信息,使得根据例如ce监视器207的显示亮度能力的亮度转换仅针对允许亮度转换的区域而执行。结果,可以有利地再现由制作者预期的亮度气氛。

此外,在图1所示的发送/接收系统10中,高动态范围描述符和动态范围sei消息包括表示在服务流(视频流)中是否禁止显示映射(显示亮度调整)的标志“mapping_protectionflag”。因此,关于显示亮度,可以抑制超过制作者的意图的调整,或者可以抑制观看者的眼睛疲劳。

<2.变形例>

另外,注意上述实施方式已经只是了实例,其中在接收装置200中,hdr电光转换器205进行电光转换处理,并且另外地,hdr显示映射单元206根据ce监视器207的最大亮度显示能力进行亮度转换处理。然而,通过预先在电光转换特性(eotf)中反映亮度转换特性,电光转换处理和亮度转换处理可以由hdr电光转换器205单独同时进行。

此外,上述实施例已经表示了由发送装置100和接收装置200构成的发送/接收系统10。然而,可以应用本技术的发送/接收系统的配置不限于此。例如,如图14所示的发送/接收系统10a,接收装置200的一部分可以由包括通过诸如高分辨率多媒体接口(hdmi)的数字接口互连的机顶盒(stb)200a和监视器200b的配置代替。请注意,“hdmi”是注册商标。

在这种情况下,例如,视频解码器204及其前面的部件被包括在机顶盒200a中,并且电光转换器205及其随后的部件被包括在监视器200b中。机顶盒200a使用例如分组“venderspecificinfoframe”,将表示hdr光电转换特性的元信息,用于显示控制的元信息等传输到监视器200b。

图15示出了从机顶盒200a向监视器200b传输的分组“venderspecificinfoframe”(供应商指定的infoframe)中的第七字节和后续字节的示例性结构。同时,图16示出了各个示例性结构中的主要信息的内容。

三位信息“display_control_type”从第七字节的第七位到第五位布置。该三位信息表示显示类型的分类。“001”表示sd显示控制,而“010”表示hdr显示控制。这里使用“010”。

标志“mapping_protection_flag”被布置在第七字节的第四位中。该标志表示解码后的显示映射(显示亮度调整)是否被禁止。“1”表示禁止显示映射。“0”表示不禁止显示映射。四位信息“display_control_metadata_length”从第七个字节的第三位到第零位排列。该四位信息表示在后面空间布置的“display_control_metadata”的大小,以字节数表示。此处使用“12”。

八位信息“transfercharacteristics”被布置在第八字节中。该八位信息指定hdr电光转换特性。通过该信息检测用于显示的电光转换特性。这里使用“0x10”。八位信息“numberofbits”被布置在第8+1字节中。该八位信息表示编码像素位数。

十六位信息“minimumbrightnessvalue”被布置在第8+2字节和第8+3字节中。该十六位信息表示最小亮度级(cd/m2)。十六位信息“peaklevel”被布置在第8+4字节和第8+5字节中。该十六位信息表示最大亮度级的相对值(%)。

十六位信息“peaklevelbrightness”被布置在第8+6字节和第8+7字节中。该十六位信息表示最大亮度级(cd/m2)。十六位信息“compliant_threshold_level”被布置在的8+8字节和第8+9字节中。该十六位信息表示在显示级映射期间的阈值(%)。十六位信息“compliant_threshold_level_value”被布置在8+10字节和8+11字节中。这十六位信息表示在显示级映射期间用作阈值的亮度(cd/m2)。注意,由“compliant_threshold_level”和“compliant_threshold_level_value”组成的阈值信息可以作为分别表示参考亮度和所述参考亮度的100%发送。此外,上述从机顶盒200a到监视器200b的信息传输并不限于使用“venderspecificinfoframe”的分组的情况,并且显然定义infoframe的另一个分组能够类似地进行传输。

此外,上述实施例已经示出了传输流(mpeg-2ts)用作容器的示例。然而,根据本技术的传输不限于ts,并且在诸如isobmff或mmt的另一个分组的情况下,也可以使用相同的方法来实现视频层。

图17示出了mmt结构。mmt流对于每个资源(如视频和音频)都有一个mmt数据包。根据所示示例,由id1标识的mmt包被提供为视频资源。指定hdr电光转换特性的元信息“transfercharacteristics”被插入到访问单元中的sps中的vui的区域中。同时,将其中描述了峰值等级“peaklevel”,阈值等级“thresholdlevel”,映射保护标志“mapping_protection_flag”等的动态范围sei消息插入到存取单元中。

另外,mmt流具有诸如分组存取(pa)消息分组的消息分组。pa消息分组包括诸如mp表(mmt包表)的表。mp表包括关于每个资源的信息。这里,与视频资源相关联地插入了高动态范围描述符,在所述高动态范围描述符中,描述了hdr标志“hdr_flag”,sdr兼容标志“sdr_compatible_flag”,映射保护标志“mapping_protection_flag”等。

注意,本技术也可以如下所述进行配置。

(1)一种发送装置,包括:

光电转换器,用于对高动态范围视频数据执行高动态范围光电转换以获得传输视频数据;

编码单元,用于对所述传输视频数据应用编码处理以获得视频流;

发送器,用于以包括所述视频流的预定格式发送容器;和

信息插入器,用于将表示与所述高动态范围光电转换的特性对应的电光转换特性的元信息插入到所述视频流中的参数集合区域中。

(2)根据上述(1)所述的发送装置,其中

所述参数集合区域是spsnal单元中的区域。

(3)根据上述(1)或(2)所述的发送装置,其中

所述信息插入器进一步将表示所述视频流支持所述高动态范围的识别信息插入到所述容器的层中。

(4)根据上述(3)所述的发送装置,其中

表示所述视频流是否具有与正常动态范围兼容的显示兼容性的信息被添加到所述识别信息。

(5)根据上述(3)或(4)所述的发送装置,其中

表示用于所述视频流的显示亮度调整是否被禁止的信息被添加到所述识别信息。

(6)根据上述中任一项所述的发送装置,其中,

所述容器是运输流,

所述信息插入器将所述识别信息插入到属于节目映射表和事件信息表中的一个的部分中。

(7)根据上述中任一项所述的发送装置,其中,

所述容器是一个mmt流,

所述信息插入器将所述识别信息插入属于mmt包表的部分。

(8)根据上述中任一项所述的发送装置,其特征在于,

所述信息插入器还将用于显示控制的元信息插入与所述视频流中的所述参数集合区域不同的区域中。

(9)根据上述(8)所述的发送装置,其中,

用于显示控制的所述元信息包括峰值亮度信息。

(10)根据上述(8)或(9)所述的发送装置,其中

用于显示控制的所述元信息包括表示允许显示亮度调整的区域的区域信息。

(11)根据上述中任一项所述的发送装置,其中,

用于显示控制的所述元信息包括表示是否禁止用于所述视频流的显示亮度调整的信息。

(12)根据上述中任一项所述的发送装置,其中,

与所述参数集合区域不同的所述区域是seinal单元中的区域。

(13)一种传输方法,包括:

光电转换步骤,对高动态范围视频数据进行高动态范围光电转换,以获得传输视频数据;

编码步骤,对所述传输视频数据应用编码处理以获得视频流;

发送步骤,通过发送器以包括所述视频流的预定格式发送容器;和

信息插入步骤,将表示与所述高动态范围光电转换的特性相对应的电光转换特性的元信息插入到所述视频流中的参数集合区域中。

(14)一种接收装置,包括:

接收器,用于接收预定格式的容器,所述预定格式为包括通过对传输视频数据进行编码而获得的视频流的格式;

解码单元,用于对所述视频流进行解码处理以获得所述传输视频数据;和

电光转换器,用于对在所述解码单元获得的所述传输视频数据执行电光转换,以获得显示视频数据,其中

所述传输视频数据是通过将高动态范围光电转换应用于高动态范围数据而获得的数据,以及

表示与所述高动态范围光电转换的特性相对应的电光转换特性的元信息被插入到所述视频流中的参数集合区域中,

所述接收装置还包括信息提取器,所述信息提取器从所述视频流中提取所述元信息,其中

所述电光转换器使用在所述信息提取器提取的所述元信息所表示的所述电光转换特性。

(15)根据上述(14)所述的接收装置,其中

所述参数集合区域是spsnal单元中的区域。

(16)根据上述(14)或(15)的接收装置,其中

将表示所述视频流支持所述高动态范围的识别信息插入所述容器的层中,

所述信息提取器基于所述识别信息从所述视频流中的所述参数集合区域中提取所述元信息。

(17)根据上述(14)至(16)中任一项所述的接收装置,其中

用于显示控制的元信息被包括在与视频流中的参数集合区域不同的区域中,

所述接收装置还包括亮度调整单元,所述亮度调整单元基于用于显示控制的所述元信息来调整所述显示视频数据的显示亮度。

(18)根据上述(17)所述的接收装置,其中

用于显示控制的所述元信息包括表示允许所述显示亮度调整的区域的区域信息,以及

所述亮度调节单元调整允许显示亮度调整的区域的显示亮度。

(19)根据上述(17)或(18)所述的接收装置,其中

表示是否禁止用于所述视频流的所述显示亮度调整的信息被插入到所述容器的层和/或所述视频流的层中,以及

在表示是否禁止用于所述视频流的所述显示亮度调整的所述信息表示禁止的情况下,所述亮度调整单元不调整所述显示视频数据的所述显示亮度。

(20)一种接收方法,包括:

接收步骤,通过接收器接收预定格式的容器,所述预定格式为包括通过对传输视频数据进行编码而获得的视频流的格式;

解码步骤,对视频流应用解码处理以获得传输视频数据;和

电光转换步骤,对通过解码步骤获得的传输视频数据执行电光转换,以获得显示视频数据,其中

传输视频数据,其是通过将高动态范围光电转换应用于高动态范围数据而获得的数据,

表示与所述高动态范围光电转换的特性相对应的电光转换特性的元信息被插入到所述视频流中的参数集合区域中,以及

在所述电光转换步骤期间使用由所述元信息表示的所述电光转换特性。

本技术的主要特征是将指定与高动态范围光电转换特性相对应的电光转换特性的元信息插入到视频流中的spsnal单元中,从而确保使用高动态范围的光电转换特性获得的传输视频数据的电光转换处理在接收侧有利地进行(参照图11)。

参考标记清单

10,10a发送/接收系统

100发送装置

101控制单元

102hdr相机

103hdr光电转换器

103a主监视器

104视频编码器

105系统编码器

106发送器

200接收装置

200a机顶盒

200b监视器

201控制单元

202接收器

203系统解码器

204视频解码器

205hdr电光转换器

206hdr显示映射单元

207ce监视器

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1