发送装置、发送方法、接收装置和接收方法
【技术领域】
[0001]本技术涉及发送装置、发送方法、接收装置和接收方法，并且具体涉及提供多图像布置的分配服务(mult1-1mage-arrangement distribut1n service)的发送装置等。
【背景技术】
[0002]实现或提出了其中经由广播或经由网络流的多个流被多解码并且多个多解码图像被显示在显示器上的多窗口显示的技术。
[0003]例如，当多个图像以所谓的P中P(PinP)(画中画)风格显示时，用户可同时观看在大的主窗口上显示的一个频道的节目的图像和在小子窗口上显示的另一个频道的节目的图像。此外，例如，当不同频道的节目的图像在显示器的右半部和左半部并排显示时，用户可同时观看两个频道的节目的图像。
[0004]例如，专利文献I公开了一种技术，其中当在正常显示状态下输入多窗口显示指令时，显示状态被迅速切换到多窗口显示器。
[0005]专利文献
[0006]专利文献1:日本专利申请公开第2000-13712号
【发明内容】
[0007]本发明要解决的问题
[0008]例如，发送侧可发送多图像布置的多个图像的图像数据，并且接收侧可处理多个图像的数据、获得多图像布置图像(mult1-1mage-arranged image)并且显示多图像布置图像。在这种情况下，接收侧需要适当地布置多个图像。
[0009]本技术的一个目的是成功提供多图像布置分配服务。
[0010]解决问题的技术手段
[0011]根据本技术的构思提供了一种发送装置，该发送装置包括:
[0012]发送单元，发送具有包含多图像布置的分配服务的多个图像的编码图像数据的预定数量的视频流的预定格式的容器；和
[0013]信息插入单元，将位置信息插入到所述视频流的层中，所述位置信息指示所述多个图像的布置位置。
[0014]根据本技术，发送单元发送具有包含多图像布置的分配服务的多个图像的编码图像数据的预定数量的视频流的预定格式的容器。例如，容器可以是用作数字广播标准的发送流(MPEG-2TS)。或者，例如，容器可以是具有用于经由互联网进行分配的诸如MMT或MP4的另一种格式的容器。信息插入单元将位置信息插入视频流层中，位置信息显示多个图像的布置位置。
[0015]如上所述，根据本技术，位置信息被插入在视频流的层中，位置信息指示多个图像的布置位置。因此接收侧能够适当且容易地布置多个图像。
[0016]应注意，根据本技术，例如，信息插入单元可进一步将偏移信息(offsetinformat1n)插入到视频流的层中，偏移信息用于调整多个图像的显示定时。因此接收侧能够调整多图像布置的图像中的多个图像的显示定时，并且匹配多个图像中的显示开始定时(display-start timing)。
[0017]此外，根据本技术，例如，信息插入单元可进一步将类型信息插入视频流的层中，类型信息指示多图像布置的类型。因此接收侧能够适当识别多图像布置的类型，并适当地且容易地布置多个图像。此外，根据本技术，例如，在信息插入单元可进一步将寿命信息插入到视频流的层中，寿命信息指示多个图像的允许显示的时间是否被控制。由于这些信息，例如，接收侧能够自动地控制存储在虚拟显示缓冲器(virtual display buffer)中的图像数据的删除。
[0018]此外，根据本技术，例如，信息插入单元可进一步将类型信息插入视频流的层中，类型信息指示在显示期间的多个图像的旋转类型。因此，可能显示服务方想要提供的旋转状态下的多个图像。
[0019]此外，根据本技术，例如，信息插入单元可进一步将识别信息插入容器层中，识别信息识别多图像布置分配服务。因此接收侧能够容易地识别多图像布置分配服务，并准备该处理。在这种情况下，例如，信息插入单元可进一步将识别信息插入容器层中，识别信息识别多图像布置分配服务是否是运动图像(moving picture)/静止图像(still picture)混合服务。
[0020]此外，根据本技术，例如，信息插入单元可进一步将与多图像布置分配服务相关的总数视频流上的信息插入容器层中。因此接收侧能够知道视频流的总数量以很容易地处理，并适当地处理它们。
[0021]此外，根据本技术，例如，信息插入单元可进一步将类型信息插入所述容器层中，类型信显示每个视频流是否是运动图像流、静止图像流，或混合流，混合流包含混合的静止图像和运动图像。因此接收侧能够知道视频流的总数量以很容易地处理，并适当地处理它们。
[0022]此外，根据本技术的一个概念提供了一种接收装置，该接收装置包括:
[0023]接收单元，接收包含多图像布置的分配服务的多个图像的编码图像数据的预定数量的视频流，位置信息被插入到预定数量的视频流中，位置信息指示多个图像的布置位置；
[0024]解码单元，解码预定数量的视频流并且获得多个图像的图像数据；和
[0025]处理单元，基于位置信息布置解码后的多个图像的图像数据并且获得多图像布置图像的图像数据。
[0026]根据本技术，接收单元接收包含多图像布置分配服务的多个图像的编码图像数据的预定数量的视频流，位置信息被插入视频流层中，位置信息显示多个图像的布置位置。解码器单元解码预定数量的视频流，并且获得多个图像的图像数据。
[0027]此外，处理单元基于位置信息布置多个解码图像的图像数据，并且获得多图像布置图像的图像数据。例如，接收装置还可包括:解码缓冲器，临时存储由解码器单元获得的多个图像的图像数据；和虚拟显示缓冲器，临时存储多图像布置的图像数据，其中处理单元从解码缓冲器中顺序读取多个图像的图像数据，并将多个图像的图像数据写入对应于虚拟显示缓冲器的位置信息的布置位置的区域。
[0028]如上所述，根据本技术，基于位置信息布置多个解码图像的图像数据，并且获得多图像布置图像的图像数据。因此，能够有效地且适当地获得多图像布置图像的图像数据。
[0029]应注意，根据本技术，例如，接收装置可进一步包括显示控制器，该显示控制器从虚拟显示缓冲器读取与多图像布置的图像的一部分或所有的显示区域相对应的图像数据，并且在一部分或所有的图像区域中显示图像。在这种情况下，例如，接收装置还可包括用户操作单元，该用户操作单元通知显示控制器显示区域。因此，例如，可以改变在显示器上显示的图像，并基于用户操作在例如尺寸(分辨率)小的显示器上滚动显示较大的多图像布置图像。此外，在这种情况下，例如，接收装置还可包括用户操作单元，该用户操作单元通知显示控制器显示的数量，显示区域的图像被显示在显示器上。
[0030]此外，根据本技术，例如，接收装置可进一步包括请求发送单元，该请求发送单元向发送侧发送停止和恢复预定数量的视频流的发送的请求。因此，例如，在没有临时存储在缓冲器中的图像数据溢出的情况下用户可在任意时刻观看包含静止图像的多图像布置图像。
[0031]此外，根据本技术的另一构思提供了一种发送装置，包括:
[0032]元文件生成器，生成包含由客户终端使用以获得预定数量的视频流的信息的元文件，该预定数量的视频流包含多图像布置的分配服务的多个图像的编码图像数据，分配服务器能够经由网络分配该多图像布置的分配服务；和
[0033]元文件发送单元，响应于来自该客户终端的发送请求经由该网络将生成的该元文件发送至该客户终端，其中，
[0034]位置信息被插入到该视频流的层中，该位置信息指示该多个图像的布置位置，并且
[0035]该元文件生成器包含指示不断读取该预定数量的视频流的信息的元文件。
[0036]根据本技术，元文件生成器生成包含由客户终端使用以获得预定数量的视频流的元文件信息。预定数量的视频流包含多图像布置分配服务的多个图像的编码图像数据的预定数量的视频流，分配服务器能够经由网络分配多图像布置分配服务。在这种情况下，位置信息被插入到视频流层中，位置信息显示多个图像的布置位置。
[0037]元文件发送单元响应于来自客户终端的发送请求经由网络将元文件发送到客户终端。元文件生成器生成包含指示不断读取该预定数量的视频流的信息的元文件。
[0038]如上所述，根据本技术，元文件包含指示不断读取预定数量的视频流的信息。因此接收侧基于元文件的信息不断读取预定数量的视频流。因此能够成功地获得多图像布置图像的图像数据。
[0039]应注意，根据本技术，例如，元文件生成器可生成还包含识别信息的元文件，识别信息识别预定数量的视频流是静止图像流还是运动图像流。因此，客户终端能够容易确定预定数量的视频流是静止图像流还是运动图像。
[0040]本发明的有益效果
[0041]根据本技术，可以成功地提供多图像布置分配服务。应注意，有益效果并非局限于这里所描述的那些并且可以是在本公开中描述的任何效果。
【附图说明】
[0042][图1]示出实施例的分配系统的结构实例的框图。
[0043][图2]示出水平/垂直方向的二维多图像布置的实例的图。
[0044][图3]示出水平方向的一维多图像布置的实例的图。
[0045][图4]示出包含静止图像的组图片(grouppicture)的实例的图。
[0046][图5]示出包含运动图像的组图片的实例的图。
[0047][图6]示出包含运动图像的组图片的实例的图。
[0048][图7]示出包含静止图像和运动图像的组图片的实例的图。
[0049][图8]示出通过使用单个流的静止图像(静止图片)服务的分配的实例的图。
[0050][图9]示出通过使用多个流的静止图像(静止图片)服务的分配的实例的图。
[0051][图10]示出通过使用单个流的静止图像(静止图片)和运动图像(运动图片)的混合服务的分配的实例的图。
[0052][图11]示出生成传输流的发送数据生成器的结构实例的框图。
[0053][图12]示出在使用单个流的分配中的传输流的结构实例的图。
[0054][图13]示出在使用多个流的分配中的传输流的结构实例的图。
[0055][图14]示出组图片标签SEI(Group_picture_tag SEI)的结构实例(语法(Syntax))的图。
[0056][图15]示出组图片标签SEI的结构实例的主要信息的内容(语义(Semantics))的图。
[0057][图16]示出基于“display_coordinate”的显示期间的示例旋转的图。
[0058][图17]示出组图片中的图像的显示定时CTP的计算实例的图。
[0059][图18]示出组图片标签SEI上的各种信息以时间序列转移的实例的图。
[0060][图19]示出多流服务描述符(multi_stream_service_descriptor)的结构实例(语法)的图。
[0061][图20]示出多流服务描述符的结构实例的主要信息的内容(语义)的图。
[0062][图21]示出混合流描述符(mixed_stream_descriptor)的结构实例(语法)和结构实例的主信息的内容(语义)的图。
[0063][图22]示出图片寿命描述符(Picture_lifetime_descriptor)的结构实例(语法)和结构实例的主要信息的内容(语义)的结构实例的图。
[0064][图23]示出虚拟显示器(VirtualDisplay)上的显示区域与图像之间的关系的实例的图。
[0065][图24]示出虚拟显示器上的显示区域的位置和尺寸的实例的图。
[0066][图25]示出虚拟显示器上的显示区域与图像之间的关系的实例的图。
[0067][图26]示出虚拟显示器上的显示区域的位置和尺寸的实例的图。
[0068][图27]示出用于显示全景图像的显示器的结构实例的图。
[0069][图28]为均示出在组图片包含在水平方向上连续的七个图像时的显示区域的实例的图。
[0070][图29]示出基于DASH的流分配系统的结构实例的框图。
[0071][图30]示出MPD文件的层结构的图。
[0072][图31]示出其以分层方式被布置在MH)文件中的结构的关系的实例的图。
[0073][图32]示出基于内容生成DASH片段和DASHMPD文件的流量的实例的图。
[0074][图33]示出流分配系统的