发送方法以及接收方法_2

文档序号:8947771阅读:来源:国知局

[0044]为了解决这样的问题,本申请的一方式所涉及的数据发送方法是一种发送将影像以基本阶层和扩展阶层进行阶层编码而得的编码数据的发送方法,包括:生成步骤,生成包含表示进行所述编码数据的解码或显示的处理的时刻的时刻信息以及所述编码数据的编码流;以及发送步骤,发送所生成的所述编码流;所述编码数据具有各自由多个访问单元构成的多个集合,构成所述多个集合中的所述基本阶层的所述集合即第I集合的所述多个访问单元中的各个访问单元能够独立地解码,或者能够通过参照所述基本阶层的其他访问单元的解码后的数据来解码,构成所述多个集合中的所述扩展阶层的所述集合即第2集合的所述多个访问单元中的各个访问单元能够通过参照所述基本阶层的所述访问单元的解码后的数据来解码,所述时刻信息包括第I时刻信息和第2时刻信息,所述第I时刻信息表示进行针对所述第I集合的第I访问单元进行的所述处理的、以基准时钟为基准的时刻,所述第2时刻信息用于确定进行针对所述第2集合的第2访问单元进行的所述处理的、以所述基准时钟为基准的时刻。
[0045]据此,即使将基本阶层与扩展阶层的编码数据作为不同的数据来发送,也能够确定针对扩展阶层的访问单元进行的处理的时刻。
[0046]例如也可以是,所述第I访问单元是在所述第I集合中最先被进行所述处理的访问单元,所述第2访问单元是在所述第2集合中最先被进行所述处理的访问单元。
[0047]例如也可以是,所述处理为解码,所述第I集合的所述第I访问单元以外的多个访问单元中的各个访问单元与以所述第I时刻信息所示的时刻为基准的第I相对时间建立了对应,针对所述第I集合的多个访问单元中的各个访问单元进行的显示的时刻通过以该访问单元的解码的时刻为基准的第2相对时间来确定,所述第2集合的所述第2访问单元以外的多个访问单元中的各个访问单元与以所述第2时刻信息所示的时刻为基准的第3相对时间建立了对应,针对所述第2集合的多个访问单元中的各个访问单元进行的显示的时刻通过以该访问单元的解码的时刻为基准的第4相对时间来确定。
[0048]例如也可以是,所述处理为显示,所述第I集合的所述第I访问单元以外的多个访问单元中的各个访问单元与以所述第I时刻信息所示的时刻为基准的第5相对时间建立了对应,针对所述第I集合的多个访问单元中的各个访问单元进行的解码的时刻通过以该访问单元的显示的时刻为基准的第6相对时间来确定,所述第2集合的所述第2访问单元以外的多个访问单元中的各个访问单元与以所述第2时刻信息所示的时刻为基准的第7相对时间建立了对应,针对所述第2集合的多个访问单元中的各个访问单元进行的解码的时刻通过以该访问单元的显示的时刻为基准的第8相对时间来确定。
[0049]例如,所述第2时刻信息也可以是作为与所述第I时刻信息所示的第I绝对时刻的差分值的时刻偏移。
[0050]例如也可以是,所述集合是能够随机访问的随机访问单元,所述第I访问单元以及所述第2访问单元是随机访问点。
[0051]例如,多个第I集合与多个第2集合也可以分别一对一地建立了对应。
[0052]例如,所述第2集合也可以能够通过仅参照与该第2集合一对一地建立了对应的所述第I集合的解码后的数据来解码。
[0053]例如,所述第2集合也可以还包括第2头信息,该第2头信息保存有用于识别与该第2集合一对一地建立了对应的所述第I集合的识别信息、以及所述第2时刻信息。
[0054]例如,所述第I集合也可以还包括第I头信息,该第I头信息保存有用于识别与该第I集合一对一地建立了对应的所述第2集合的识别信息、以及所述第2时刻信息。
[0055]例如,所述编码流也可以还包括将用于识别所述第I集合的第I识别信息与用于识别与该第I集合一对一地建立了对应的所述第2集合的第2识别信息建立了对应而得的对应信息。
[0056]例如,所述时刻信息也可以保存在所述编码流的控制信息中。
[0057]例如,所述第2时刻信息也可以表示与所述第I时刻信息所示的第I绝对时刻不同的第2绝对时刻。
[0058]例如也可以是,在所述生成步骤中,生成包含所述第I集合的第I编码流、以及包含所述第2集合的第2编码流,在所述发送步骤中,利用第I传送路径发送所述第I编码流,利用不同于所述第I传送路径的第2传送路径发送所述第2编码流。
[0059]例如也可以是,在所述生成步骤中,按照MPEG2-TS (运动图像专家组_2传送流,Moving Picture Experts Group-2Transport Stream)生成所述第 I 编码流以及所述第 2编码流中的一方,按照MMT (运动图像专家组媒体传送,MPEG Media Transport)生成所述第I编码流以及所述第2编码流中的另一方。
[0060]例如也可以是,所述第I传送路径以及所述第2传送路径中的一方为在广播中使用的传送路径,所述第I传送路径以及所述第2传送路径中的另一方为在通信中使用的传送路径。
[0061]另外,这些整体性或者具体性的方式可以通过数据接收方法、集成电路、计算机程序或者可计算机读取的CD-ROM等记录介质来实现,也可以通过数据接收方法、集成电路、计算机程序或者记录介质的任意组合来实现。
[0062]以下,参照附图具体说明本申请的一方式所涉及的数据发送方法及接收方法。
[0063]另外,以下说明的实施方式均为本申请的一具体例。在以下的实施方式所示的数值、形状、材料、构成要素、构成要素的配置位置以及连接方式、步骤、步骤的顺序等仅为一例,并非意在限定本申请。另外,在以下实施方式的构成要素中,对于表示最上位概念的独立权利要求没有记载的构成要素,作为任意的构成要素进行说明。
[0064](实施方式)
[0065][发送方法]
[0066]以下,参照【附图说明】实施方式所涉及的发送方法(发送装置)。在实施方式中,作为一例说明按照MMT发送编码数据的发送方法。
[0067]首先,说明MMT下的编码流的数据结构。图5以及图6为用于说明MMT中的编码流的数据结构的图。
[0068]如图5所示,编码数据由多个访问单元(AU -.Access Unit)构成。编码数据例如为基于HEVC等运动图像编码标准编码而得的AV数据。具体而言,编码数据包括影像数据、声音数据、以及附随于它们的元数据、静止图像及文件等。在编码数据为影像数据的情况下,I个AU为与I个图片(I帧)相当的单位。
[0069]在MMT中,编码数据以GOP (图片组,Group Of Picture)单位按照文件格式被进行MP4数据化(被赋予MP4头)。S卩、编码数据具有各自由多个访问单元构成的多个集合(GOP) ο GOP为编码数据中的随机访问点,按照GOP中的解码顺序处于开头的访问单元与HEVC或AVC的IDR图片或者ηοη-1DR(非IDR)的I图片相当。该多个集合分别属于基本阶层以及扩展阶层中的任一阶层。在此,设属于基本阶层的集合为第I集合,设属于扩展阶层的集合为第2集合。
[0070]另外,由于构成第I集合的多个访问单元中的各个访问单元属于基本阶层,因此能够独立地解码,或者能够通过参照基本阶层的其他访问单元的解码后的数据来解码。此夕卜,由于构成第2集合的多个访问单元的各个访问单元属于扩展阶层,因此能够通过参照基本阶层的访问单元的解码后的数据来解码。
[0071]在MP4数据所包含的MP4头中,记述有访问单元的显示时刻(上述的PTS)或解码时刻(上述的DTS)的相对值。此外,在MP4头中,记述有MP4数据的序列号。另外,MP4数据(MP4文件)是作为在MMT标准中定义的数据单位的MPU (媒体处理单元,Media ProcessingUnit)的一例。在MPU中,也可以不发送MP4的头,而仅发送MPU中的样本数据等。该情况下,MPU与随机访问单位相当,构成MPU的样本与MPU —对一地建立了对应。此外,MPU也可以由多个GOP构成。
[0072]并且,如图6所示,MMT中的编码流10包括控制信息11、时刻信息12以及多个MMT包13。换言之,编码流10为MMT包13的包序列。
[0073]编码流10 (MMT流)为构成一个MMT封装的I个以上的流中的一个。MMT封装例如与一个广播节目内容相当。
[0074]控制信息11包括表示编码流10是被可适(可缩放)编码的流(包括基本层与扩展层双方的流)的信息、可适编码的种类及阶层等级数量(阶层数量)的信息。在此,可适编码的种类是指时间可适性、空间可适性及SNR可适性等,阶层等级数量是指基本层及扩展层等层的数量。
[0075]此外,控制信息11例如包括表示多个资源(asset)与包ID的对应关系的信息等。另外,资源为包括同一传送特性的数据的数据实体,例如为影像数据及声音数据等的任一个。
[0076]控制信息11具体而言,为MMT中的Cl (构成信息,Composit1n Informat1n)及MPT (MMT封装表,MMT Package Table)。另外,控制信息11在MPEG2-TS中为PMT (节目映射表,Program Map Table),在 MPEG-DASH 中为 MPD (媒体演不描述,Media Presentat1nDescript1n)等。
[0077]时刻信息12为用于决定访问单元的PTS或DTS的信息。时刻信息12具体而言,例如是作为属于基本阶层的MPU中的开头的访问单元的绝对时刻的PTS或DTSο具体而言,在PTS的情况下,能够表示在MPU中按照显示顺序处于开头的访问单元的PTS的绝对值,在DTS的情况下,能够表示在MPU中按照解码顺序处于开头的访问单元的DTS的绝对值。此夕卜,时刻信息12也可以作为节目信息保存在控制信息11中。在作为节目信息保存的情况下,作为一例,能够将节目信息保存在MMT报文(消息)中,将时刻信息12作为节目信息内的记述符来保存。
[0078]例如,若假设图3中的基本阶层的多个图片全部构成一个第I集合,则按照第I集合的解码顺序首先解码的第I访问单元即图片1在DTSll所示的时刻解码。此时,表示进行针对第I集合的第I访问单元进行的解码的、以基准时钟为基准的时刻(DTSll)的第I时刻信息也可以作为编码流10的时刻信息12(第I绝对时刻)被保存。S卩、第I绝对时刻例如表示DTSll本身。
[0079]此外,若假设图3的扩展阶层的多个图片全部构成一个第2集合,则按照第2集合的解码顺序首先解码的第2访问单元即图片bl在DTS21所示的时刻解码。此时,用于确定进行针对第2集合的第2访问单元进行的解码的、以基准时钟为基准的时刻(DTS21)的第2时刻信息如上所述,是作为与由第I时刻信息表示的第I绝对时刻的差分值的解码时刻偏移。第2时刻信息与第I时刻信息同样地,也可以作为编码流10的时刻偏移信息(解码时刻偏移)被保存。即、DTS21能够通过在由第I时刻信息表示的DTSll上加上由第2时刻信息表示的解码时刻偏移来确定。此外,作为第2时刻信息,也可以并非保存与第I时
当前第2页1 2 3 4 5 6 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1