图像处理装置、图像处理方法和图像处理系统的制作方法
【专利说明】图像处理装置、图像处理方法和图像处理系统
[0001]相关申请的交叉引用
[0002]本申请要求在2014年3月5日提交的日本在先专利申请JP2014-042858的优先权，其整体内容通过引用合并于此。
技术领域
[0003]本说明书中公开的技术涉及处理高动态范围移动图片的图像处理装置、图像处理方法和图像处理系统。
【背景技术】
[0004]近年来，由于成像元件(图像传感器)的位数增加，图像的高动态范围(HDR)的增加也在进行。在HDR图像中，最大亮度颜色和最小亮度颜色之间的对比度可以例如达到10000:1或更高，并且以逼真的方式实现真实世界。在HDR图像中，存在如下优点:可以以逼真的方式实现阴影，可以模拟照相曝光，以及可以实现闪光。
[0005]例如，已建议从具有不同曝光量的多个拍摄图像合成HDR图像的成像设备(例如，参照日本未审专利申请公布N0.2013-255201)。
[0006]对应于最大亮度约为500nit或100nit的HDR图像的显示器已开始商用。例如，HDR移动图片通过流式传输在互联网上从服务器分送，通过将诸如Blu-ray Disc (蓝光盘)的可记录介质设定为中间介质提供，或者从广播站广播。用户可以使用HDR功能显示器享受HDR移动图片。
【发明内容】
[0007]期望提供能够适当地处理高动态范围移动图片的图像处理装置、图像处理方法和图像处理系统。
[0008]根据本技术的实施例，提供了一种图像处理装置，其包括:改变信息提取单元，其提取在移动图片流的图像信号突然改变的位置处的图像信号改变信息；以及输出单元，其输出移动图片流和图像信号改变信息。
[0009]该图像处理装置可以进一步包括编码单元，其对移动图片流编码。此外，除了图像信号改变信息之外，输出单元可以输出编码单元编码之后的移动图片流。
[0010]在该图像处理装置中，改变信息提取单元可以提取以下至少之一作为图像信号改变信息:在预定监视器上显示移动图片流时的色域、或者显示亮度(Cd/m2)、内容亮度(% )、或者膝状曲线压缩期间的膝状位置信息。
[0011]在该图像处理装置中，输出单元可以沿传输路径发送移动图片流和改变信息。
[0012]在该图像处理装置中，改变信息提取单元可以以场景为单位从移动图片流提取改变信息，以及输出单元可以在与移动图片流对应的场景的首部共同传输关于每个场景的改变信息的SE I。
[0013]在该图像处理装置中，改变信息提取单元可以提取值逐渐改变的改变信息，以及输出单元可以传输在移动图片流的图像信号突然改变的位置之前和之后的改变信息作为元数据。
[0014]在该图像处理装置中，改变信息提取单元可以提取包括在图像信号突然改变的后继位置之前的时间量或帧数目以及在该位置处的图像信号的改变量的改变信息，以及输出单元可以传输作为移动图片流的SEI或TS描述符，或者MP4包的元数据的改变信息。
[0015]此外，根据本技术的另一实施例，提供了一种图像处理方法，其包括:提取在移动图片流的图像信号突然改变的位置处的图像信号改变信息；以及输出移动图片流和图像信号改变信息。
[0016]此外，根据本技术的又一实施例，提供了一种图像处理装置，其包括:输入单元，除了在图像信号突然改变的位置处的图像信号改变信息之外，其输入移动图片流；以及改变信息应对处理单元，其基于改变信息对输入的移动图片流执行应对处理。
[0017]该图像处理装置可以进一步包括解码单元，其对输入单元输入的移动图片流解码。此外，改变信息应对处理单元可以基于改变信息对解码单元解码之后的移动图片流执行应对处理。
[0018]在该图像处理装置中，输入单元可以输入在移动图片流的图像信号突然改变的位置之前的位置处的改变信息。
[0019]该图像处理装置可以进一步包括改变信息恢复单元，其从输入单元输入的信息中恢复图像信号改变信息。
[0020]在该图像处理装置中，改变信息恢复单元可以恢复移动图片流的以场景为单位提取并且设置在场景的首部或者与场景的首部相关联的改变信息。
[0021]在该图像处理装置中，改变信息恢复单元可以通过逐渐改变值来从设置在图像信号突然改变的位置之前和之后或者与其相关联的元数据中恢复改变信息。
[0022]在该图像处理装置中，改变信息恢复单元可以从移动图片流的元数据中恢复包括在图像信号突然改变的后继位置之前的时间量或帧数目以及在该位置处的图像信号的改变量的改变信息。
[0023]在该图像处理装置中，改变信息应对处理单元可以基于改变信息执行抑制移动图片流的图像信号中的突然改变的处理。
[0024]此外，根据本技术的再一实施例，提供了一种图像处理方法，其包括:除了在图像信号突然改变的位置处的图像信号改变信息之外，输入移动图片流；以及基于改变信息对输入的移动图片流执行应对处理。
[0025]此外，根据本技术的再一实施例，提供了一种图像处理系统，其包括:图像供给设备，除了在图像信号突然改变的位置处的图像信号改变信息之外，其供给移动图片流；以及图像应用设备，其基于改变信息执行抑制移动图片流的图像信号中的突然改变的处理。
[0026]然而，在该实例中，“系统”指的是其中多个设备(或者实现特定功能的功能模块)逻辑上累积，并且不考虑每个设备或功能模块是否在单个壳体内的物体。
[0027]根据在本说明书中公开的技术，可以提供优越的图像处理装置和图像处理方法，其能够以可以在接收或再现侧获取图像信号改变信息的方式处理HDR移动图片。
[0028]此外，根据在本说明书中公开的技术，可以提供优越的图像处理装置和图像处理方法，其能够以通过预先获取图像信号改变信息来执行与图像信号的突然改变对应的显示的方式处理HDR移动图片。
[0029]此外，根据在本说明书中公开的技术，可以提供优越的图像处理系统，其能够执行传输或记录HDR移动图片以与图像信号的突然改变对应的处理。
[0030]此外，本说明书中描述的效果仅是示例，本技术的实施例的效果不限于此。此外，还存在本技术的实施例进一步呈现除了以上描述的效果之外的额外效果的情况。
[0031]将使用基于以下描述的实施例的详细描述和附图来说明本技术中公开的技术的其他目的、特征和优点。
【附图说明】
[0032]图1是图示图像信号在时间方向上改变的情形的示图。
[0033]图2是示意性示出HDR移动图片的图像供给源的图像处理装置的配置示例的示图。
[0034]图3是示意性示出HDR移动图片的再现侧的图像处理装置的配置示例的示图。
[0035]图4是示意性示出本说明书中公开的技术被应用于图像传输系统的实施例的示图。
[0036]图5是示意性示出本说明书中公开的技术被应用于图像记录和再现系统的实施例的示图。
[0037]图6是示意性示出本说明书中公开的技术被应用于图像接收系统的实施例的示图。
【具体实施方式】
[0038]以下将在参照附图的同时详细描述本说明书中公开的技术的实施例。
[0039]在描述本说明书中公开的技术之前，将给出SDR图像和HDR图像的描述。
[0040]HDR图像的动态范围接近真实世界的动态范围，并且例如，最大亮度颜色和最小亮度颜色之间的对比度例如达到10000:1或更高。在HDR图像中，存在如下优点，可以以逼真的方式实现阴影，可以模拟照相曝光，以及可以实现闪光。
[0041]同时，如果当在显示屏幕上显示移动图片时亮度、色域等的图像信号临时急剧改变，则存在对观察者的健康危害，诸如感觉不适的关注。
[0042]图1图示了图像信号在时间方向上改变的情形。然而，水平轴被设定为时间轴，而竖直轴被设定为图像信号水平。图像信号是色域、亮度等。
[0043]在图1中所示的示例中，作为切换场景的结果发生图像信号的突然改变。场景101是房间内部的场景，场景102是在日光中或者蓝天下拍摄的室外场景，场景103是爆炸场景，而场景104是夜晚或夜空的场景。单个场景例如由MPEG(移动图片专家组)格式的移动图片流中的一个或两个或更多个图片组(GOP)构成。
[0044]诸如色域或亮度的图像信号在每个场景之间的切换111、112和113处突然改变。自然地，假设图像信号也在场景内突然改变。此外，还假设除了图像信号在场景之间的整个帧中突然改变的情况之外，在帧内的一部分块或者一部分像素中发生图像信号的突然改变。此外，除了场景之间的切换，还存在如下情况，作为帧变为多屏幕、字幕、同屏显示(OSD)或者正在帧内显示的菜单等的结果，图像信号突然改变。在任何情况下，当图像信号突然改变时，观察者的视觉被过度刺激，并且这致使对观察者的健康的影响。
[0045]特别地，由于HDR移动图片的动态范围是广的，因为在图1中图像信号在每个场景之间的切换111、112和113处显著改变，所以该问题更为严重。
[0046]在该实例中，在本说明书中公开的技术中，HDR移动图片的图像供给源的图像处理装置被设定为从源HDR移动图片提取图像信号改变信息，并且除了 HDR移动图片之外，输出图像信号改变信息。图像信号改变信息包括诸如图像信号突然改变的位置以及改变量等的信息，并且在图像信号突然改变的