>[0464]终端装置1102具有用于通过广播站1101广播的地面广播1111的接收功能以接收通过地面广播1111发送的基本层的可伸缩编码数据(BL) 1121。另外，终端装置1102具有通过网络1112执行通信的通信功能以接收通信网络1112发送的增强层的可伸缩编码数据(EL)1122。
[0465]终端装置1102例如响应于用户指令，对通过地面广播1111所获取的基本层的可伸缩编码数据(BL) 1121进行解码以获得基本层的图像以存储或发送至其他装置。
[0466]另外，终端装置1102例如响应于用户指令，将通过地面广播1111所获取的基本层的可伸缩编码数据(BL)1121和通过网络1122所获取的增强层的可伸缩编码数据(EL)1112组合以获得可伸缩编码数据(BL+EL)，以解码来获得增强层的图像，以存储或发送至其他装置。
[0467]如上所述，可以例如通过用于每个层的不同的通信介质来发送可伸缩编码数据。因此，可以共享负载，从而可以抑制出现延迟或上溢。
[0468]另外，可以根据情况对于每个层来选择用于传输的通信介质。例如，数据量相对大的基本层的可伸缩编码数据(BL) 1121可以通过具有宽的带宽的通信介质被发送，而数据量相对小的增强层的可伸缩编码数据(EL) 1122可以通过具有窄的带宽的通信介质被发送。另外，例如，可以根据网络1112的可用带宽，在增强层的可伸缩编码数据(EL)1122通过其被发送的通信网络是否被设置成网络1112或地面广播1111之间进行切换。当然，对于任意层的数据，应用相同的配置。
[0469]通过以这种方式进行控制，可以进一步抑制数据传输中负载的增大。
[0470]当然，层的数量是任意的，并且要用于传输的通信介质的数量也是任意的。另外，为数据传输目的地的终端装置1102的数量也是任意的。此外，在这之前，描述了来自广播站1101的广播的示例，但是使用示例不限于此。数据传输系统1100可以应用于将可伸缩编码的编码数据划分成多个单元并且通过多个传输线发送编码数据的任意系统。
[0471][第三系统]
[0472]另外，可伸缩编码用于存储编码数，例如类似于图35中示出的示例。
[0473]在图35中示出的成像系统1200中，成像装置1201对通过对对象1211进行成像所获得的图像数据执行可伸缩编码，并且将可伸缩编码数据(BL+EL)1221提供给可伸缩编码数据存储装置1202。
[0474]可伸缩编码数据存储装置1202以根据情况的质量存储从成像装置1201提供的可伸缩编码数据(BL+EL) 1221。例如，在普通时段中，可伸缩编码数据存储装置1202从可伸缩编码数据(BL+EL)1221提取基本层的数据，并且以低质量存储为具有小数据量的基本层的可伸缩编码数据(BL)。相反，例如，在关注时段中，可伸缩编码数据存储装置1202以高质量而不变化地存储具有大数据量的可伸缩编码输数据(BL+EL) 1221。
[0475]通过以这种方式进行，由于可伸缩编码数据存储装置1202仅需要时以高质量存储图像，所以可以抑制由图像质量的退化导致的图像的值的减小，抑制数据量的增大，并且提尚存储区域的利用效率。
[0476]例如，成像装置1201被假定为监视摄像装置。在监视对象(例如，入侵者)未被反映在捕获的图像上的情况下(在普通时段的情况下)，捕获的图像的内容很可能不重要，从而，给予数据量的减小以优先级。因此，低质量地存储图像数据(可伸缩编码数据)。相反，在监视对象被反映为捕获的图像上的对象1211的情况下(在关注时段的情况下)，捕获的图像的内容很可能是重要的，给予图像质量以优先级。高质量地存储图像数据(可伸缩编码数据)。
[0477]此外，可以例如通过可伸缩编码数据存储装置1202分析图像来确定时段是普通时段还是关注时段。另外，成像装置1201可以执行确定并且将确定结果发送至可伸缩编码数据存储装置1202。
[0478]此外，关于时段是普通时段还是关注时段的确定标准是任意的，从而用作确定标准的图像的内容也是任意的。当然，除了图像的内容以外的条件也可以用作确定标准。例如，可以根据记录的音频的大小、波形等进行切换，可以在每个预定时间间隔进行切换，或可以响应于外部指令如用户指令进行切换。
[0479]另外，在这之前，描述了切换普通时段和关注时段的两个状态的示例，但是状态的数量是任意的。例如，可以切换普通时段、少关注时段、关注时段、多关注时段等的三个或更多个状态。在本文中，状态的数量的上限依赖于可伸缩编码数据的层的数量。
[0480]另外，成像装置1201可以根据状态确定可伸缩编码中的层的数量。例如，在普通时段的情况下，成像装置1201以低质量生成具有小数据量的基本层的可伸缩编码数据(EL) 1222，并且将该可伸缩编码数据(BL)提供给可伸缩编码数据存储装置1202。另外，例如，在关注时段的情况下，成像装置1201以高质量生成具有大数据量的基本层的可伸缩编码数据(BL+EL) 1221，并且将该可伸缩编码数据(BL+EL) 1221提供给可伸缩编码数据存储装置1202。
[0481]在这之前，描述了监视摄像装置的示例，但成像系统1200的使用是任意的而不限于监视摄像装置。
[0482]此外，在该说明书中，对各种信息如跳过许可信息或跳过识别信息被复用成编码流并且经复用的编码流被从编码侧发送至解码侧的示例进行了描述。然而，信息的传输方法不限于示例。例如，信息可以在不被复用成编码比特流的情况下被传输或记录为与编码比特流相关的分离数据。在本文中，短语“与…相关联”表示包括在比特流中的图像(包括图像的一部分例如切片、块等)以及与该图像对应的信息能够在解码期间互相被链接。即，信息可以在与图像(或比特流)的传输线不同的传输线中被发送。另外，信息可以被存储在与图像(比特流)的记录介质不同的记录介质中(或同一记录介质的不同的记录区域中)。此外，信息和图像(或比特流)可以例如以多个帧、一个帧或帧内部的一部分为单位，即，以任意单位相互关联。
[0483]在这之前，尽管参照附图描述了本公开内容的优选实施方式，但是本公开内容不限于示例。明显的是，在权利要求中公开的技术精神的范围内，可以由本公开内容属于的技术领域中的普通技术人员设想各种修改或变化，并且应当理解的是，这些修改和变化被包括在本公开内容的技术范围内。
[0484]此外，本技术可以具有下面的配置。
[0485](I) 一种图像处理装置，包括:
[0486]设置单元，在对图像数据被编码的编码数据进行解码中，在当前块是跳过正交变换处理的块的情况下，将用于跳过正交变换处理的所述块的定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表；以及
[0487]解码单元，使用由所述设置单元设置的缩放列表执行包括逆量化处理的解码处理，并且对所述编码数据进行解码。
[0488](2)根据⑴至(9)中任一项所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长小于不具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长。
[0489](3)根据⑴至(9)中任一项所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成小于默认定制缩放列表情况下的值，或者使得与不具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成大于所述默认定制缩放列表情况下的所述值。
[0490](4)根据⑴至(9)中任一项所述的图像处理装置，其中，所述定制缩放列表中的与具有要帧内预测中被参考的可能性的所述像素对应的所述部分的每个量化步长具有根据对应的像素在帧内预测中被参考的可能性的等级的值。
[0491](5)根据(I)至(9)中任一项所述的图像处理装置，其中，在所述当前块是不跳过正交变换处理的块的情况下，所述设置单元设置如下默认缩放列表作为用于对所述当前块进行逆量化处理的缩放列表:在所述默认缩放列表中，量化步长的所有值都相同，或者与高频分量对应的像素的量化步长具有大值。
[0492](6)根据(I)至(9)中任一项所述的图像处理装置，还包括端部检测单元，所述端部检测单元检测帧内预测中的参考可变范围的端部，
[0493]其中，在所述当前块是由所述端部检测单元检测到的所述参考可变范围的端部中的块的情况下，所述设置单元将根据所述参考可变范围的端部的位置的所述定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表。
[0494](7)根据(I)至(9)中任一项所述的图像处理装置，还包括:
[0495]接收单元，接收关于正交变换处理的跳过的信息；以及
[0496]确定单元，基于由所述接收单元接收的关于正交变换处理的跳过的所述信息确定所述当前块是否是跳过正交变换处理的所述块，
[0497]其中，在由所述确定单元确定所述当前块是跳过正交变换处理的所述块的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表。
[0498](8)根据⑴至(9)中任一项所述的图像处理装置，其中，在被包括在关于正交变换处理的跳过的所述信息中并且指示关于是否允许图片中的正交变换处理的跳过的跳过许可信息的值为假的情况下，所述确定单元禁止所述图片中的正交变换处理的跳过。
[0499](9)根据(I)至(9)中任一项所述的图像处理装置，其中，所述确定单元还确定所述当前块的切片类型，以及
[0500]其中，在由所述确定单元确定所述当前块是跳过正交变换处理的所述块并且所述当前切片是对其仅执行帧内预测的切片的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表。
[0501](10) 一种图像处理装置的图像处理方法，包括:
[0502]通过所述图像处理装置进行:
[0503]在对图像数据被编码的编码数据进行解码中，在当前块是跳过正交变换处理的块的情况下，将用于跳过正交变换处理的所述块的定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表；以及
[0504]使用所设置的缩放列表执行包括逆量化处理的解码处理，并且对所述编码数据进行解码。
[0505](11) —种图像处理装置，包括:
[0506]设置单元，在对图像数据进行编码中，在对当前块跳过正交变换处理的情况下，将用于跳过正交变换处理的块的定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表；以及
[0507]编码单元，使用由所述设置单元设置的缩放列表执行包括量化处理的编码处理，并且对所述图像数据进行编码。
[0508](12)根据(11)至(19)中任一项所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长小于不具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长。
[0509](13)根据(11)至(19)中任一项所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成小于默认定制缩放列表情况下的值，或者使得与不具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成大于所述默认定制缩放列表情况下的所述值。
[0510](14)根据(11)至(19)中任一项所述的图像处理装置，其中，所述定制缩放列表中的与具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的每个量化步长具有根据对应的像素在帧内预测中被参考的可能性的等级的值。
[0511](15)根据(11)至(19)中任一项所述的图像处理装置，其中，在所述当前块是不跳过正交变换处理的块的情况下，所述设置单元设置如下默认缩放列表作为用于对所述当前块进行量化处理的缩放列表:在所述默认缩放列表中，量化步长的所有值都相同，或者与高频分量对应的像素的量化步长具有大值。
[0512](16)根据(11)至(19)中任一项所述的图像处理装置，还包括端部检测单元，所述端部检测单元检测帧内预测中的参考可变范围的端部，
[0513]其中，在所述当前块是由所述端部检测单元检测到的所述参考可变范围的端部中的块时，所述设置单元将根据所述参考可变范围的端部的位置的所述定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表。
[0514](17)根据(11)至(19)中任一项所述的图像处理装置，还包括确定单元，所述确定单元基于关于正交变换处理的跳过的所述信息确定对所述当前块是否跳过正交变换处理，
[0515]其中，在由所述确定单元确定对所述当前块跳过正交变换处理的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表。
[0516](18)根据(11)至(19)中任一项所述的图像处理装置，其中，在被包括在关于正交变换处理的跳过的所述信息中并且指示关于是否允许图片中的正交变换处理的跳过的跳过许可信息的值为假的情况下，所述确定单元禁止所述图片中的正交变换处理的跳过。
[0517](19)根据(11)至(19)中任一项所述的图像处理装置，
[0518]其中，所述确定单元还确定所述当前块的切片类型，以及
[0519]在由所述确定单元确定所述当前块是跳过正交变换处理的所述块并且所述当前切片是对其仅执行帧内预测的切片的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表。
[0520](20) 一种图像处理装置的图像处理方法，包括:
[0521]通过所述图像处理装置进行:
[0522]在对图像数据进行编码中，在对当前块跳过正交变换处理的情况下，将用于跳过正交变换处理的块的定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表；以及
[0523]使用所设置的缩放列表执行包括量化处理的编码处理，并且对所述图像数据进行编码。
[0524]附图标记列表
[0525]100图像编码装置
[0526]114正交变换单元
[0527]115量化单元
[0528]116无损编码单元
[0529]118逆量化单元
[0530]119逆正交变换单元
[0531]131正交变换跳过单元
[0532]132量化控制器
[0533]151确定单元
[0534]152缩放列表设置单元
[0535]200图像解码装置
[0536]212无损解码单元
[0537]213逆量化单元
[0538]214逆正交变换单元
[0539]231逆正交变换跳过单元
[0540]232逆量化控制器
[0541]251确定单元
[0542]252缩放列表设置单元
[0543]301切片端部检测单元
[0544]401切片端部检测单元
【主权项】
1.一种图像处理装置，包括: 设置单元，在对图像数据被编码的编码数据进行解码中，在当前块是跳过正交变换处理的块的情况下，将用于跳过正交变换处理的所述块的定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表；以及 解码单元，使用由所述设置单元设置的缩放列表执行包括逆量化处理的解码处理，并且对所述编码数据进行解码。
2.根据权利要求1所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长小于不具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长。
3.根据权利要求2所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成小于默认定制缩放列表情况下的值，或者使得与不具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成大于所述默认定制缩放列表情况下的所述值。
4.根据权利要求2所述的图像处理装置，其中，所述定制缩放列表中的与具有要帧内预测中被参考的可能性的所述像素对应的所述部分的每个量化步长具有根据对应的像素在帧内预测中被参考的可能性的等级的值。
5.根据权利要求1所述的图像处理装置，其中，在所述当前块是不跳过正交变换处理的块的情况下，所述设置单元设置如下默认缩放列表作为用于对所述当前块进行逆量化处理的缩放列表:在所述默认缩放列表中，量化步长的所有值都相同，或者与高频分量对应的像素的量化步长具有大值。
6.根据权利要求1所述的图像处理装置，还包括端部检测单元，所述端部检测单元检测帧内预测中的参考可变范围的端部， 其中，在所述当前块是由所述端部检测单元检测到的所述参考可变范围的端部中的块的情况下，所述设置单元将根据所述参考可变范围的端部的位置的所述定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表。
7.根据权利要求1所述的图像处理装置，还包括: 接收单元，接收关于正交变换处理的跳过的信息；以及 确定单元，基于由所述接收单元接收的关于正交变换处理的跳过的所述信息确定所述当前块是否是跳过正交变换处理的所述块， 其中，在由所述确定单元确定所述当前块是跳过正交变换处理的所述块的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表。
8.根据权利要求7所述的图像处理装置，其中，在被包括在关于正交变换处理的跳过的所述信息中并且指示关于是否允许图片中的正交变换处理的跳过的跳过许可信息的值为假的情况下，所述确定单元禁止所述图片中的正交变换处理的跳过。
9.根据权利要求7所述的图像处理装置， 其中，所述确定单元还确定所述当前块的切片类型，以及 其中，在由所述确定单元确定所述当前块是跳过正交变换处理的所述块并且所述当前切片是对其仅执行帧内预测的切片的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表。
10.一种图像处理装置的图像处理方法，包括: 通过所述图像处理装置进行: 在对图像数据被编码的编码数据进行解码中，在当前块是跳过正交变换处理的块的情况下，将用于跳过正交变换处理的所述块的定制缩放列表设置为用于对所述当前块进行逆量化处理的缩放列表；以及 使用所设置的缩放列表执行包括逆量化处理的解码处理，并且对所述编码数据进行解码。
11.一种图像处理装置，包括: 设置单元，在对图像数据进行编码中，在对当前块跳过正交变换处理的情况下，将用于跳过正交变换处理的块的定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表；以及 编码单元，使用由所述设置单元设置的缩放列表执行包括量化处理的编码处理，并且对所述图像数据进行编码。
12.根据权利要求11所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长小于不具有要在帧内预测中被参考的可能性的像素对应的部分的量化步长。
13.根据权利要求12所述的图像处理装置，其中，所述定制缩放列表被配置成:使得与具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成小于默认定制缩放列表情况下的值，或者使得与不具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的量化步长被设置成大于所述默认定制缩放列表情况下的所述值。
14.根据权利要求12所述的图像处理装置，其中，所述定制缩放列表中的与具有要在帧内预测中被参考的可能性的所述像素对应的所述部分的每个量化步长具有根据对应的像素在帧内预测中被参考的可能性的等级的值。
15.根据权利要求11所述的图像处理装置，其中，在所述当前块是不跳过正交变换处理的块的情况下，所述设置单元设置如下默认缩放列表作为用于对所述当前块进行量化处理的缩放列表:在所述默认缩放列表中，量化步长的所有值都相同，或者与高频分量对应的像素的量化步长具有大值。
16.根据权利要求11所述的图像处理装置，还包括端部检测单元，所述端部检测单元检测帧内预测中的参考可变范围的端部， 其中，在所述当前块是由所述端部检测单元检测到的所述参考可变范围的端部中的块时，所述设置单元将根据所述参考可变范围的端部的位置的所述定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表。
17.根据权利要求11所述的图像处理装置，还包括确定单元，所述确定单元基于关于正交变换处理的跳过的所述信息确定对所述当前块是否跳过正交变换处理， 其中，在由所述确定单元确定对所述当前块跳过正交变换处理的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表。
18.根据权利要求17所述的图像处理装置，其中，在被包括在关于正交变换处理的跳过的所述信息中并且指示关于是否允许图片中的正交变换处理的跳过的跳过许可信息的值为假的情况下，所述确定单元禁止所述图片中的正交变换处理的跳过。
19.根据权利要求17所述的图像处理装置， 其中，所述确定单元还确定所述当前块的切片类型，以及 其中，在由所述确定单元确定所述当前块是跳过正交变换处理的所述块并且所述当前切片是对其仅执行帧内预测的切片的情况下，所述设置单元将所述定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表。
20.一种图像处理装置的图像处理方法，包括: 通过所述图像处理装置进行: 在对图像数据进行编码中，在对当前块跳过正交变换处理的情况下，将用于跳过正交变换处理的块的定制缩放列表设置为用于对所述当前块进行量化处理的缩放列表；以及使用所设置的缩放列表执行包括量化处理的编码处理，并且对所述图像数据进行编码。
【专利摘要】本公开内容涉及可以抑制编码效率降低的图像处理装置及方法。该图像处理装置包括：设置单元，在对图像数据被编码的编码数据进行解码中，在当前块是跳过其正交变换处理的块的情况下，将用于跳过其正交变换处理的块的定制缩放列表设置为用于对当前块进行逆量化处理的缩放列表；以及解码单元，其使用由设置单元设置的缩放列表执行包括逆量化处理的解码处理以对编码数据进行解码。本公开内容可应用于例如图像处理装置。
【IPC分类】H04N19-124, H04N19-61, H04N19-30
【公开号】CN104662901
【申请号】CN201380049173
【发明人】近藤健治
【申请人】索尼公司
【公开日】2015年5月27日
【申请日】2013年9月19日
【公告号】US20150189327, WO2014050676A1