图像传输装置，图像传输方法，图像接收装置和图像接收方法
图像传输装置，图像传输方法，图像接收装置和图像接收方法
【专利摘要】任何现有技术文献中，都没有考虑更忠实地保持并传输更大尺寸的图像(也称“影像”，下同)数据。本发明的传输图像数据的图像传输装置特征在于，具有：压缩图像数据的压缩处理单元；和输出由压缩处理单元压缩后的压缩图像数据的输出单元，输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
【专利说明】图像传输装置，图像传输方法，图像接收装置和图像接收方法
【技术领域】
[0001]本发明涉及影像信息的发送接收。
【背景技术】
[0002]近年来，数字图像处理中处理的像素数，随着面向一般用户的显示器的4k2k(3840X 2160 像素)化、播送的 HD (High Definition: 1920X 1080 像素)化、数码摄像机的影像传感器和显示器的高像素化，而逐渐增加。
[0003]在设备之间传输这些图像数据的方式，有HDMI (High-Definition MultimediaInterface (HDMI Licensing, LLC 的注册商标))标准和由 VESA (Video ElectronicsStandards Association)制定的DisplayPort (VESA的注册商标或商标)标准等。
[0004]上述HDMI的数据传输方式中，在专利文献I中记载了 “选择性地发送非压缩影像信号或者对于该非压缩影像信号用接收装置能够支持的压缩方式实施压缩处理得到的压缩影像信号，在传输线路的传输比特率内，能够良好地发送要求的比特率的影像信号”(参考专利文献I的[0048]，并且关于压缩方式，记载了“数据压缩部121-1?121-n分别对从编解码器(codec) 117输出的非压缩的影像信号以规定的压缩比进行压缩处理，输出压缩后的影像信号。数据压缩部121-1?121-n构成影像信号压缩部。数据压缩部121-1?121-n分别用相互不同的压缩方式进行数据压缩处理。例如，压缩方式可以考虑“RLE(RunLength Encoding)，，、“Wavelet，，、“SBM(Super Bit Mapping(索尼的注册商标)，，、“LLVC(LowLatency Video Codec) ”、“ZIP” 等”(参考专利文献 I 的[0077])。
[0005]此外，HDMI中，图像数据米用 TMDS (Transition Minimized DifferentialSignaling(Silicon Image, Inc.的注册商标))方式的数据传输格式,其一例在专利文献2
中表示。
[0006]先行技术文献
[0007]专利文献
[0008]专利文献1:日本特开2009-213110号公报
[0009]专利文献2:日本特表2005-514873号公报
【发明内容】
[0010]发明要解决的课题
[0011]但是，两个先行技术文献中，都没有考虑更忠实地保持并传输更大尺寸的图像(也称“影像”，下同)数据。
[0012]用于解决课题的方法
[0013]为了解决上述课题，例如采用权利要求中记载的结构。
[0014]本申请包括多种解决上述课题的手段，举其一例，是一种传输图像数据的图像传输装置，其特征在于，具有:压缩图像数据的压缩处理单元；和输出由压缩处理单元压缩后的压缩图像数据的输出单元，输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
[0015]此外，举另一例，是一种传输图像数据的图像传输装置，其特征在于，具备:对由多个成分构成的图像数据进行压缩处理的压缩处理单元；和输出压缩图像数据的数据传输单元，数据传输单元基于图像数据的各成分来变更该图像数据的输出方法。
[0016]此外，举另一例，是一种传输图像数据的图像传输装置，其特征在于，具备:压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息；和输出压缩图像数据和压缩编码信息的数据传输单元，压缩编码信息的冗余性比压缩图像数据高。
[0017]此外，举另一例，是一种传输图像数据的图像传输装置，其特征在于，具备:压缩图像数据的压缩处理单元；和输出由压缩处理单元压缩后的压缩图像数据的输出单元，输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据，压缩处理单元基于传输线路的传输错误率来变更图像数据的压缩处理。
[0018]发明效果
[0019]根据上述方法，能够更忠实地保持并传输更大尺寸的图像数据。
【专利附图】
【附图说明】
[0020]图1是第一实施例的图像传输装置和图像接收装置的一例。
[0021]图2是第一实施例的图像数据的有效/消隐期间的一例。
[0022]图3是第一实施例的压缩的图像数据的单位的一例。
[0023]图4是第一实施例的压缩的图像数据的单位的一例。
[0024]图5是第一实施例的主压缩编码信息和副压缩编码信息和压缩图像数据的结构的一例。
[0025]图6是第一实施例的数据传输的时序的一例。
[0026]图7是第一实施例的压缩处理部的一例。
[0027]图8是第一实施例的压缩处理部的一例。
[0028]图9是第一实施例的压缩处理部的一例。
[0029]图10是第一实施例的压缩部A的一例。
[0030]图11是第一实施例的压缩部A的一例。
[0031]图12是第一实施例的纠错编码生成部的一例。
[0032]图13是第一实施例的数据传输部的一例。
[0033]图14是第一实施例的压缩编码信息分组(packet)的头的一例。
[0034]图15是第一实施例的压缩编码信息分组的数据的一例。
[0035]图16是第一实施例的压缩编码信息分组的头的一例。
[0036]图17是第一实施例的压缩编码信息分组的数据的一例。
[0037]图18是第一实施例的压缩编码信息的一例。
[0038]图19是第一实施例的图像接收装置的EDID描述的一例。
[0039]图20是第一实施例的数据接收处理部的一例。
[0040]图21是第一实施例的解压缩处理部的一例。[0041]图22是第一实施例的解压缩处理部的一例。
[0042]图23是第一实施例的解压缩处理部的一例。
[0043]图24是第一实施例的解压缩处理部的一例。
[0044]图25是第一实施例的数据传输的时序的一例。
[0045]图26是第一实施例的数据传输的时序的一例。
[0046]图27是第一实施例的压缩编码信息的一例。
[0047]图28是第一实施例的压缩编码信息的一例。
[0048]图29是第二实施例的串行器(Serializer)的波形的一例。
[0049]图30是第二实施例的串行器输出的数据结构的一例。
[0050]图31是第二实施例的声音数据的分组结构的一例。
[0051]图32是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0052]图33是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0053]图34是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0054]图35是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0055]图36是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0056]图37是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0057]图38是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0058]图39是第三实施例的不附加主压缩编码信息的冗余度时的数据结构的一例。
[0059]图40是第三实施例的附加了主压缩编码信息的冗余度时的数据结构的一例。
[0060]图41是第三实施例的附加了主压缩编码信息的冗余度时的数据结构的一例。
[0061]图42是第三实施例的附加了主压缩编码信息的冗余度时的数据结构的一例。
[0062]图43是第三实施例的附加了副压缩编码信息的冗余度时的数据结构的一例。
[0063]图44是第四实施例的与传输错误率对应的压缩率、水平消隐期间和冗余度的分配的一例。
[0064]图45是第四实施例的与传输错误率对应的压缩率、水平消隐期间和冗余度的分配的一例。
[0065]图46是第四实施例的与传输错误率对应的压缩方式、水平消隐期间和冗余度的分配的一例。
[0066]图47是第五实施例的与内容对应的压缩率、水平消隐期间和冗余度的分配的一例。
[0067]图48是第六实施例的主压缩编码信息、副压缩编码信息和压缩图像数据、和声音分组的传输时序的一例。[0068]图49是第六实施例的主压缩编码信息、副压缩编码信息和压缩图像数据、和声音分组的传输时序的一例。
【具体实施方式】
[0069]现有技术中，存在虽然非压缩图像数据传输方式是延迟时间最小的图像数据传输方式，但为了发送大尺寸的图像数据需要高速的传输线路的课题。为了解决该课题，提出了压缩并传输图像数据的方式，但存在传输线路上发生错误时，在由多个像素构成的压缩块单位中，显示图像紊乱的课题。此外，存在能够在确保了高容错性的消隐期间中传输的数据量比能够在有效像素期间中传输的数据量少的课题。
[0070]本实施例中，在压缩并传输图像数据的传输方式中，按每个压缩块单位进行压缩，生成压缩编码信息，在压缩编码信息中，使重要性高的压缩编码信息(以下称为主压缩编码信息)在容错性高的消隐期间中传输，由此解决该课题。此外，其他压缩编码信息(以下称为副压缩编码信息)与压缩图像数据同样在有效期间中传输。以下用【专利附图】
【附图说明】该实施例。
[0071](实施例1)
[0072]以下说明本实施例的图像传输装置和图像接收装置的实施方式。
[0073]图1是表示本实施例的图像传输系统的框图，是用缆线300使图像发送装置100与图像接收装置200连接的结构。
[0074]图像发送装置100是传输图像数据的图像发送装置，是用HDMI缆线等将为了能够接收并视听数字播送而解码后的图像数据、记录介质中记录的图像数据、用相机等拍摄的图像数输出到其他设备的设备。作为图像发送装置100的一例，有录像机、内置了录像机功能的数字TV、内置了录像机功能的个人计算机、装载了相机功能和录像机功能的便携式电话、摄录机等。
[0075]图像接收装置200是使用HDMI缆线等输入图像数据并将图像输出到监视器的显示设备。作为图像接收装置200的一例，有数字TV、显示器、投影仪、便携式电话、电子看板设备等。
[0076]缆线300是在图像发送装置100与图像接收装置200的设备之间进行图像数据等的数据通信的数据传输线路。作为缆线300的一例，有与HDMI标准或DisplayPort标准对应的有线缆线、或者进行无线方式的数据通信的数据传输线路等。
[0077]首先，说明图像发送装置100的结构。
[0078]输入部101、102、103是用于将图像数据输入到图像发送装置100的输入部。作为输入到输入部101、用调谐器接收处理部105处理的图像数据的一例，有作为来自电视台或广播卫星等中继站的播送信号输入的数字播送。对输入部101输入该来自电视台或广播卫星等中继站的播送信号。
[0079]作为输入到输入部102、用网络接收处理部106处理的图像数据的一例，有利用互
联网的宽带连接经由网络发布的数字播送、和信息内容等。
[0080]作为输入到输入部103、用记录介质控制部107处理的图像数据的一例，有与输入部103连接的外部记录介质中记录的内容。此外，作为由记录介质控制部107处理的影像数据的一例，也有图像发送装置100中内置的记录介质108中记录的内容。作为与输入部103连接的外部记录介质、或者图像发送装置100中内置的记录介质108的一例，有光盘、磁盘、半导体存储器等。
[0081]调谐器接收处理部105是将输入的播送信号变换为比特流的接收处理部，此处将RF 频段(Radio Frequency)的播送信号频率变换为 IF 频段(Intermediate Frequency),成为不依赖于接收频道的一定频段的信号，对为了传输而施加的调制操作进行解调而成为解调后的比特流。
[0082]作为比特流的一例，有MPEG2传输流(以下记作MPEG2-TS)、和符合MPEG2-TS的格式的比特流等。以下的比特流以MPEG2-TS为代表进行说明。
[0083]上述调谐器接收处理部105进而检测并纠正传输途中发生的编码的错误，对纠错后的MPEG2-TS进行加扰的解除之后，选择复用了进行视听或记录的节目的I个转发器频率，将该选择的I个转发器内的比特流分离为I个节目的音频和视频的分组。
[0084]来自上述调谐器接收处理部105的MPEG2-TS，通过数据总线181供给到流控制部
111。流控制部111为了在上述调谐器接收处理部105中保持接收分组时的间隔，而从接收的分组内检测作为时刻管理信息的PTS(Presentation Time Stamp)、和MPEG系统的基准译码器内部的STC(System Time Clock),在根据检测结果修正后的时刻附加时间戳。
[0085]将附加了上述时间戳的分组对解码器部112或者记录介质控制部107的某一方或双方供给。到解码器部112的数据总线194用于视听图像数据时的处理，到记录介质控制部107的数据总线193在将图像数据记录在记录介质中时使用。
[0086]上述流控制部111的数据总线192中输入从输入部102经由网络接收处理部106输入的MPEG2-TS。上述数据总线192是取得经由网络发布的数字播送或数字内容的输入部。
[0087]进而，与输入部103连接的外部的记录介质、或图像发送装置100中内置的记录介质108中记录的数字播送或数字内容，被记录介质控制部107读取为MPEG2-TS，通过数据总线193输入到上述流控制部111。上述流控制部111选择这些输入中的至少I个以上，输出到解码器部112。
[0088]解码器部112对从上述流控制部111输入的MPEG2-TS进行解码，将生成的图像数据输出到显示处理部113。显示处理部113对于输入的图像数据，例如实施OSD (On ScreenDisplay)叠加处理、旋转、放大或缩小处理、帧率变换处理之后,输出到压缩处理部114。
[0089]压缩处理部114对来自显示处理部113的图像数据实施压缩处理，输出到数据传输部115。
[0090]数据传输部115将用压缩处理部114压缩后的图像数据(以下称为压缩图像数据)变换为适合传输的形式的信号并从输出部116进行输出。关于图像数据的传输，适合缆线传输的形式的信号的一例在HDMI标准中有记载。HDMI中，图像数据采用TMDS方式的数据传输格式。
[0091]输入部104是用于输入控制图像发送装置100的动作用的信号的输入部。作为输入部104的一例，有从遥控器发送的信号的接收部、和装置主体上具备的按钮等。来自输入部104的控制信号，供给到用户IF109。上述用户IF109将来自输入部104的信号输出到控制部110。控制部110按照输入部104的信号，控制图像发送装置100整体。作为控制部110的一例，有微处理器等。来自图像发送装置100的图像数据，通过缆线300供给到图像接收装置200。
[0092]接着说明图像接收装置200的结构。
[0093]输入部201中输入适合缆线传输的形式的信号。输入到上述输入部201的信号，被供给到数据接收处理部205。
[0094]数据接收处理部205实施从适合缆线传输的形式的信号变换为规定的数字数据的处理，将变换后的数字数据输出到解压缩处理部206。
[0095]解压缩处理部206对用上述图像发送装置100内的压缩处理部114实施的压缩处理进行解压缩，生成图像数据，输出到显示处理部207。
[0096]显示处理部207对输入的图像数据实施显示处理。作为显示处理的一例，有OSD叠加处理、用于变换为显示部208的分辨率的放大或缩小处理、旋转处理、帧率变换处理等。显示处理部207的输出输出到显示部208。
[0097]显示部208将输入的图像数据变换为符合显示方式的信号并在画面上显示。作为显示部208的一例,有液晶显示器、等离子体显示器、有机EL(Electro-Luminescence)显示器、投影仪投影显示器等显示部。
[0098]输入部202是用于输入控制图像接收装置200的动作用的信号的输入部。作为输入部202的一例，有从遥控器发送的信号的接收部、和装置主体上具备的按钮等。来自输入部202的控制信号，被供给到用户IF203。上述用户IF203将来自输入部202的信号输出到控制部204。控制部204是按照输入部202的信号控制图像接收装置200整体的控制部。
[0099]图2是表示I帧期间的传输图像数据的有效区域和不传输图像数据的消隐期间的图。
[0100]400所示的区域表示垂直期间，垂直期间400由垂直消隐期间401和垂直有效期间402构成。VSYNC信号是在从垂直消隐期间401的开头起规定的线数的期间中为1、在其他垂直消隐期间和垂直有效期间402的期间中为O的Ibit的信号。规定的线数的一例是4线等。
[0101]403所示的区域表示水平期间，水平期间403由水平消隐期间404和水平有效期间405构成。HSYNC信号是在从水平消隐期间404的开头起规定的像素数的期间中为1、在其他水平消隐期间和水平有效期间405的期间中为O的Ibit的信号。规定的像素数的一例
是40像素。
[0102]有效期间406表示被垂直有效期间402和水平有效期间405的期间包围的区域，对该期间分配图像数据。此外，消隐期间407是被垂直消隐期间401和水平消隐期间404的期间包围的区域。
[0103]本实施例中，上述结构中，在有效期间406中发送压缩图像数据和副压缩编码信息，在消隐期间407中发送主压缩编码信息。
[0104]消隐期间407传输将声音数据和其他附属数据分组化后的数据。
[0105]对于该声音数据等的分组在消隐期间407中发送具有可靠性的分组的方法，例如在日本特表2005-514873号公报中有公开。
[0106]该结构中，对于消隐期间的分组的数据加入了纠错编码，所以对于传输线路中发生的错误能够进行修正，容错性强。此外，消隐期间的分组的数据传输用的数据，采用在物理上不同的2个信道中传输的结构，每隔一定时间切换传输的信道，所以对于单侧的信道中突发性地发生的错误，因为另一方的信道不受影响，所以能够进行数据错误的修正。关于错误的纠正率，存在相对于水平有效期间为10_9、水平消隐期间为10_14的改善效果。
[0107]本例中，在有效期间406中传输每I个时钟周期24bit的图像数据，在消隐期间407中在32个时钟周期中传输由3byte的头和28byte的数据构成的I个分组。
[0108]例如，用444格式、帧频率60Hz传输水平3840有效像素、垂直2160有效线、YCbCr亮度色差信号的各12bit的情况下，需要891MHz这样非常高的时钟频率。高时钟频率不仅需要发送接收部的成本，能够稳定发送图像的缆线长度也会变短，易用性变差。
[0109]根据本实施例，2/3压缩为594MHz、1/3压缩为297MHz，这样能够接近实用的时钟频率。此外，在YCbCr亮度色差信号的各8bit的444格式、和各12bit的422格式中，能够用1/2压缩成为297MHz这样实用的时钟频率。
[0110]水平3840有效像素、垂直2160有效线中，例如水平消隐期间是水平560消隐像素，垂直消隐期间是垂直90消隐线。以下，用将水平3840有效像素、垂直2160有效线、YCbCr亮度色差信号的各12bit的444格式、帧频率60Hz的影像信号压缩为1/3的情况为例进行说明。
[0111]压缩后的时钟频率是297MHz，在水平1940有效像素、垂直2160有效线、水平280消隐像素、垂直90消隐线的条件下传输时，容易在接收侧稳定地再现2倍频率的原时钟594MHz。在水平有效像素期间中，如果将每I个像素的YCbCr亮度色差信号的各12bit共计36bit压缩为1/3即12bit，则因为能够传输压缩后的每I个像素24bit，所以能够传输原像素的2个像素，压缩后的时钟频率是原时钟的一半。
[0112]因为每32时钟周期能够传输I个分组，所以压缩后的水平280消隐像素中能够传输最大8个分组。另一方面，声音数据能够传输每I个分组24bitX8ch。因为图像数据的水平频率是135kHz ( = 60Hz X (2160+90))，所以8ch传输192kHz采样的24bit线性PCM声音的情况下在I个水平消隐期间中需要最大2个分组。其余6个分组优选能够在168byte (=28byteX6个分组)以内描述压缩编码方式信息。
[0113]另一方面，以上述32个像素为单位块压缩的情况下，因为是水平3840有效像素，所以需要120块的YCbCr亮度色差信号的各压缩编码方式信息，共计360个描述空间。例如用3bit表达主压缩编码信息时，有135byte的描述空间，能够用5个分组传输，所以能够与192kHz、8ch的大容量声音数据传输共同进行。
[0114]图3和图4是表不对压缩处理部114输入的图像数据的一例的图。表不了水平方向上η像素、垂直方向上m线的亮度信号。色差信号在444格式的情况下，是与亮度信号相同的格式。作为像素数η和线数m的一例，有n = 1920、m = 1080的所谓全HD图像和η =3840、m = 2160的所谓4k2k图像等。
[0115]此处，设用压缩处理部114压缩的图像数据的单位块(以下称为压缩块)，是水平方向I像素和垂直方向k像素。图3中，501和502表示I = 32、k = I的例子，由同一线内连续的32个像素的数据构成。压缩处理部114以该图像数据的单位进行压缩。
[0116]图4中，503和504表示I = 16,k = 2的例子，由上下2线之间连续的16个像素的数据构成。压缩处理部114以该图像数据的单位进行压缩。作为压缩处理，可以具有水平压缩部和垂直压缩部，准备垂直方向k像素数(线数)不同的kl和k2(kl〈k2)的图像数据单位块，水平压缩部对kl的图像数据单位块进行压缩，垂直压缩部134对k2的图像数据单位块进行压缩。
[0117]作为压缩的图像数据的单位的一例，用32像素为例进行说明，但也可以是64像素或128像素等单位。
[0118]在输入的色差信号是422格式的情况下，色差信号的Cb成分和Cr成分是按每I个像素交替的数据。例如4k2k图像中，可以将Cb成分和Cr成分合并作为η = 3840、m =2160的图像数据处理。一般而言Cb成分彼此之间、Cr成分彼此之间的相关性高，所以通过将Cb成分和Cr成分分别作为η = 1920、m = 2160处理，而成为仅在同一成分中压缩的图像数据的单位块，由此能够提高压缩效率。
[0119]在输入的色差信号是420格式的情况下,色差信号的Cb成分和Cr成分相对于4个像素的Y信号是I个像素的数据。例如4k2k图像中，可以将Cb成分和Cr成分合并作为η=1920、m = 2160的图像数据处理。一般而言Cb成分彼此之间、Cr成分彼此之间的相关性高，所以通过将Cb成分和Cr成分分别作为n= 1920、m = 1080处理,而成为仅在同一成分中压缩的图像数据的单位，由此能够提高压缩效率。
[0120]压缩编码信息由主压缩编码信息和副压缩编码信息构成。基于主压缩编码信息和副压缩编码信息，能够进行从压缩图像数据到原图像数据的解压缩处理。
[0121]仅用主压缩编码信息能够进行简易的解压缩处理或者部分解压缩处理。
[0122]主压缩编码信息用与副压缩编码信息相比容错性更高的传输线路传输。本实施例中，在有效期间406中传输压缩图像数据和副压缩编码信息，在消隐期间407中传输主压缩编码信息。作为主压缩编码信息在消隐期间407中的传输例，有在垂直消隐期间401中传输线路单位中共用的主压缩编码信息、在水平消隐期间404中传输与同一线中的压缩块对应的主压缩编码信息的方法。
[0123]通过采用上述结构，即使在传输错误率高的传输线路中副压缩编码信息中发生错误的情况下，主压缩编码信息中发生错误的概率也会大幅降低。因此，在传输错误率高的传输线路中，副压缩编码信息中发生错误的情况下，通过将使用主压缩编码信息简易解压缩后的图像数据或部分解压缩后的图像数据用于错误修正，能够抑制显示的紊乱。此外，通过在主压缩编码信息中包括压缩块尺寸，在副压缩编码信息中发生错误的情况下，能够在压缩块内抑制显示的紊乱。
[0124]此外，压缩编码信息可以仅由主压缩编码信息或副压缩编码信息构成。
[0125]压缩编码信息和压缩图像数据的结构例在图5中表示。
[0126]本例中，压缩块600的单位由子压缩块610、620构成，各子压缩块610、620由像素611、612、613、614 和像素 621、622、623、624 构成。
[0127]压缩后的压缩块的结构的一例在630中表示。压缩块630由压缩编码信息631和压缩图像数据632构成。压缩图像数据632是通过对像素数据611、612、613、614、621、622、623、624压缩而生成的压缩图像数据。压缩编码信息631是压缩处理中生成的信息。本结构中，在有效期间406中传输压缩编码信息的情况下，当传输错误率高时对于压缩编码信息发生错误的概率也较高，结果存在压缩块单位中容易发生显示紊乱的课题。此外，在消隐期间407中传输压缩编码信息的情况下，因为与有效期间406相比能够传输的数据量大幅减少，所以压缩编码信息量的削减成为课题。
[0128]压缩后的压缩块的结构的另一例在640中表示。本例中，使压缩编码信息由主压缩编码信息641、副压缩编码信息642、644这2种构成。压缩块640由主压缩编码信息641、副压缩编码信息642和644、压缩图像数据643和645构成。压缩图像数据643是通过对属于子压缩块610的图像数据611、612、613、614进行压缩而生成的压缩图像数据。副压缩编码信息642是对像素数据611、612、613、614的压缩处理中生成的信息。压缩图像数据645是通过对属于子压缩块620的图像数据621、622、623、624进行压缩而生成的压缩图像数据。副压缩编码信息644是对像素数据621、622、623、624的压缩处理中生成的信息。
[0129]压缩后的压缩块的结构的另一例在650中表示。本例中，使压缩编码信息由主压缩编码信息651、副压缩编码信息652这2种构成。压缩块650由主压缩编码信息651、副压缩编码信息652、压缩图像数据653构成。压缩图像数据653是通过对压缩块600中包括的图像数据611、612、613、614、621、622、623、624压缩而生成的压缩图像数据。主压缩编码信息651和副压缩编码信息652是对压缩块600的压缩处理中生成的信息。
[0130]压缩后的压缩块的结构的另一例在660中表示。本例与压缩后的压缩块650的差异在于副压缩编码信息662是对压缩后的压缩块650中的副压缩编码信息652进一步进行压缩后的信息这一点。虽然此处未图示，但也可以通过对主压缩编码信息651进一步进行压缩，而实现传输数据量的削减。
[0131]采用上述压缩后的压缩块640、650、660的结构的情况下，通过使主压缩编码信息在比副压缩编码信息容错性更高的传输线路中传输，而能够抑制在容错性高的传输线路中传输的数据量，并且抑制传输错误对显示图像(复原图像)的影响。
[0132]图6是于图5所不的压缩后的压缩块640、650、660对应的传输时序的说明图。700和702是有效期间406，701是水平消隐期间404。710、711、712是在有效期间700中传输的压缩前的I线的图像数据。本例中，对于3个压缩块710、711、712进行压缩处理。
[0133]730是对压缩块710、711、712的压缩处理中生成的主压缩编码信息。731、732、733是对压缩块710、711、712的压缩处理中生成的压缩块。压缩块由压缩图像数据和压缩处理中生成的副压缩编码信息构成。压缩后的压缩块731的结构的一例用740、750、760表示。它们分别与图5所示的子压缩块640、650、660对应。
[0134]主压缩编码信息730在比有效期间700、702容错性更高的水平消隐期间701中传输。此外，对图像数据710的压缩处理中生成的由压缩图像数据和副压缩编码信息构成的压缩后的压缩块731、732、733在水平消隐期间701后的下一个有效期间702中传输。其中，也可以在垂直消隐期间401中传输主压缩编码信息的一部分或全部。
[0135]主压缩编码信息和副压缩编码信息的一例用图28说明。
[0136]考虑进行压缩块920的单位是水平32像素、子压缩块921、922、923、924的单位是8像素的压缩处理的情况。将与开头的子压缩块921对应的压缩编码信息926作为主压缩编码信息，与此外的3个子压缩块对应的压缩编码信息927、928、929作为副压缩编码信息。
[0137]主压缩编码信息由与开头的子压缩块921对应的压缩编码信息926、和子压缩块921的解压缩处理中使用的其他压缩编码信息(例如各子压缩块中共用的共用压缩编码信息925等)构成。
[0138]副压缩编码信息由与从第2个起的子压缩块922、923、924对应的压缩编码信息927、928、929 构成。
[0139]通过采用本例的结构，在传输错误率高的传输线路中，副压缩编码信息中发生了错误的情况下，通过将使用主压缩编码信息解压缩后的属于开头的子压缩块的图像数据用于错误修正，能够抑制显示的紊乱。作为错误修正的一例，有根据属于用主压缩编码信息解压缩后的各压缩块的开头的子压缩块的图像数据，生成属于发生了错误的子压缩块的插值图像并显示的方法。
[0140]作为传输线路的一例，有在有效期间406中传输副压缩编码信息(图28(c))和压缩部输出(图28(d))、在容错性更高的水平消隐期间404中传输主压缩编码信息的方法。
[0141]主压缩编码信息和副压缩编码信息的另一例用图27说明。
[0142]考虑压缩块900的单位是水平32像素、子压缩块901、902、903、904的单位是8像素的压缩处理。
[0143]第一压缩部(压缩部A133)中，对子压缩块901、902、903、904以子压缩块单位进行第一压缩处理，生成子压缩块单位的副压缩编码信息(第一压缩编码信息905、906、907、908)和压缩图像数据(第一压缩图像数据909、910、911、912)。第二压缩部(压缩部B134)中，对输入的4个子压缩块单位的压缩图像数据(第一压缩图像数据909、910、911、912)进一步进行第二压缩处理，生成I个主压缩编码信息(第二压缩编码信息914)和压缩图像数据(第二压缩图像数据914)和压缩图像数据(第二压缩图像数据915)。通过使主压缩编码信息在比副压缩编码信息(第一压缩编码信息905、906、907、908)和压缩图像数据(第二压缩图像数据915)的传输线路容错性更高的传输线路中传输，即使在传输错误率高度的传输线路中，也能够进行直到子压缩块单位的解压缩处理，能够将错误的影响范围抑制在子压缩块范围内。
[0144]通过在第二压缩编码信息914之外还将第一压缩编码信息905、906、907、908中共用的压缩编码信息913作为主压缩编码信息传输，能够进一步提高容错性。
[0145]作为压缩编码信息的另一例，考虑例如压缩块单位是水平32像素、子压缩块单位是8像素、按子压缩块单位附加尺寸信息的压缩处理的情况。将每个子压缩块单位的尺寸信息的总和、即压缩块单位的尺寸信息包括在主压缩编码信息中，按每个子压缩块单位将尺寸信息包括在副压缩编码信息中。通过在容错性更高的传输线路中传输主压缩编码信息，在传输错误率高的传输线路中，副压缩编码信息中发生了错误的情况下，通过基于主图像编码信息生成压缩块单位的尺寸，按该尺寸跳过解压缩处理，能够防止错误对下一个压缩块的影响。
[0146]在容错性高的传输线路中，能够传输的数据量充裕的情况下，也可以将与各子压缩块对应的尺寸信息全部作为主压缩编码信息传输。该情况下，当副压缩编码信息中发生了错误时，通过基于主图像编码信息生成发生了错误的子压缩块的尺寸，不进行该尺寸的解压缩处理，能够防止错误对其他子压缩块的影响。
[0147]图7是表示压缩处理部114的结构的一例的框图。
[0148]输入部130是用于对压缩处理部114输入图像数据的输入部。
[0149]输入的图像数据被供给到压缩部A133、压缩部B134、压缩部C135。
[0150]压缩部A133、压缩部B134、压缩部C135对输入的图像数据进行分别不同的压缩处理，生成压缩编码信息和压缩图像数据。其中，由控制信号131指定的压缩部以外的压缩部，也能够通过不进行压缩处理或停止工作时钟本身，而削减消耗电力。
[0151]压缩部A133、压缩部B134、压缩部C135由对构成压缩块的多个图像数据进行压缩的压缩电路构成。作为压缩方式的一例，由在水平方向上进行Wavelet变换运算，对其运算结果编码的压缩方式等构成。压缩方式可以应用阿达马变换、游程编码、霍夫曼编码、差分编码等。
[0152]此外，作为其他压缩方式的一例，由对垂直方向的多个图像数据进行压缩的压缩电路构成。作为压缩方式的一例，由将垂直方向2线、水平方向16像素的图像数据作为压缩的图像数据的单位块，首先对于垂直方向取差分，接着对水平方向取差分。对其结果编码的压缩方式等构成。
[0153]此外，作为其他压缩方式的一例，由在输入444格式或422格式的色差信号时,疏化抽取为422格式或420格式的电路构成。输入了 444格式或422格式的情况下，在后述的图8所示的压缩处理部114的结构中，超过了规定的压缩率的情况下，也可以进行疏化抽取(間引务)为422格式或420格式的处理。
[0154]此处，压缩率指的是压缩前的数据量与压缩后的数据量的比。例如，压缩前的数据量是100、压缩后的数据量是30的情况下，压缩率是30%。从而，压缩率越高，压缩后的数据量越多，画质劣化越少。
[0155]图10是表示压缩部A133的结构的一例的框图。
[0156]输入部150是用于对压缩部A133输入图像数据的输入部。
[0157]输入部151是用于输入控制压缩部A133用的控制信号的输入部。
[0158]第一压缩部153是对输入的图像数据进行压缩处理，生成压缩编码信息和压缩图像数据的区块。由第一压缩部153生成的压缩编码信息，被供给到压缩编码信息生成部155。此外，由第一压缩部153生成的压缩图像数据，被供给到选择部156。
[0159]压缩编码信息生成部155是根据输入的压缩编码信息生成主压缩编码信息和副压缩编码信息的区块。压缩编码信息生成部155也可以具有暂时存储生成的主压缩编码信息和副压缩编码信息的存储器。
[0160]选择部156是选择从第一压缩部153供给的压缩图像数据、和从压缩编码信息生成部155供给的主压缩编码信息和副压缩编码信息并输出的区块。
[0161]图11是表示压缩部A133的结构的另一例的框图。
[0162]输入部160是用于对压缩部A133输入图像数据的输入部。
[0163]输入部161是用于输入控制压缩部A133用的控制信号的输入部。
[0164]第一压缩部163是对输入的图像数据进行第一压缩处理，生成副压缩编码信息和压缩图像数据的区块。由第一压缩部163生成的副压缩编码信息被供给到选择部166。此夕卜，由第一压缩部163生成的压缩图像数据被供给到第二压缩部164。
[0165]第二压缩部164是对输入的压缩图像数据进行第二压缩处理，生成主压缩编码信息和压缩图像数据的区块。由第二压缩部164生成的主压缩编码信息和压缩图像数据被供给到选择部166。
[0166]选择部166是选择从第一压缩部163供给的副压缩编码信息、和从第二压缩部164供给的主压缩编码信息和压缩图像数据并输出的区块。
[0167]根据本例的结构，能够进行图27所示的2级的压缩处理。此外，本例中，采用2个压缩部为例进行说明，但也可以设置3级以上的压缩部。
[0168]以上说明了动作的压缩部A133、压缩部B134、压缩部C135的输出被供给到选择部136。
[0169]本例中，用具有3个压缩部133、134、135的压缩处理部进行说明，但压缩部也可以仅有I个或2个，也可以具有4个以上压缩部。
[0170]选择部136选择压缩部A133、压缩部B134、压缩部C135中满足规定的压缩率并且画质指数较高的，供给到纠错编码生成部137。画质指数例如是表示将压缩图像数据复原后的图像数据与压缩前的图像数据的差异越小则越好的值的指数。不发生压缩损失、能够进行可逆编码的情况下是最高值。为了简化画质指数的计算，也可以按各压缩方式准备画质指数的值。与保持444格式压缩发生压缩损失的情况相比，也可以将疏化抽取为422格式后能够进行可逆编码的情况定义为较高的画质指数。在数据量因压缩反而增加的情况下，通过疏化抽取为422格式或420格式进行压缩、或者减少量化bit数可以达成规定的压缩率，但要设定与该疏化抽取和量化bit数减少相应的画质指数。
[0171]此外，也可以按照从输入部131输入的控制信号，使压缩部A133、压缩部B134、压缩部C135中的某I个的动作有效，使其他2个停止动作。该情况下，从输入部131对选择部136输入表不动作有效的压缩部的控制信息。选择部136基于该控制信息将动作有效的压缩部的输出信号输出到纠错编码生成部137。
[0172]纠错编码生成部136对用压缩部A133、压缩部B134、压缩部C135压缩后的图像数据(压缩图像数据)按单位运算纠错编码，对压缩图像数据附加，并输出到存储器控制部139。纠错方式之一有CRC(Cyclic Redundancy Check)方式和奇偶校验方式等。
[0173]也可以根据数据传输容量判别是否附加纠错编码。这是因为缆线的数据传输容量有限的情况下，附加纠错编码时会较多地疏化抽取像素或灰度等级，导致画面整体的画质劣化。如果传输容量充裕则也可以对压缩图像数据附加纠错编码，提高容错性。也可以通过与有无对压缩图像数据附加纠错的元数据一同传输，而在接收侧判别是否进行纠错处理。此外，也可以根据应用的压缩方式改变纠错处理而改变容错性水平，也可以将表示附加了何种纠错编码的信息作为元数据附加。此外，也可以不进行纠错处理，而是将输入数据直接输出。
[0174]存储器控制部139暂时性地在存储器部140中存储从纠错编码生成部137供给的压缩图像数据、主压缩编码信息和副压缩编码信息。此外，从存储器部140读取副压缩编码信息和压缩图像数据，在有效期间406中输出。此外，从存储器部140读取主压缩编码信息，在输出压缩图像数据的有效期间406前一个的水平消隐期间404中输出。此外，其他方式也可以是I线的带纠错编码的压缩图像数据、主压缩编码信息和副压缩编码信息都在I线的有效期间406内传输，实现传输量的增大。此外，也可以将纠错编码包括在主压缩编码信息中，在水平消隐期间404中输出，由此提高纠错的可靠性。
[0175]输出部132输出来自所述存储器控制部139的压缩图像数据、主压缩编码信息和副压缩编码信息。虽然未图示，图7的各区块的动作按照图1的控制部110的控制信号被控制。
[0176]图12是表 示纠错编码生成部136的结构的一例的框图。对输入部170输入压缩图像数据。将压缩图像数据输入到保持部175和纠错编码运算部173。纠错编码运算部173对输入的压缩图像数据，用生成多项式进行循环运算。
[0177]生成多项式的一例有:(式l)G(X) = X16+X12+X5+l。该生成多项式对输入的压缩图像数据中的各比特取逻辑异或进行循环运算。使运算的单位为压缩图像数据的单位。
[0178]输入部171中输入表示输入压缩图像数据的期间的信号，对时序生成部174供给。时序生成部174对压缩图像数据的有效期间进行计数，将表示处理了压缩的图像数据的单位块的运算的信号作为纠错运算结果输出时序信号，输出到数据保持部175。进而，时序生成电路174将表示压缩图像数据的输入期间的时序信号、和输出压缩图像数据和纠错编码运算结果的时序信号等一同输出到保持部175。
[0179]数据保持部175按照时序生成部174表示的时序，用例如存储器或触发器、延时元件等暂时存储纠错编码运算部173的运算结果和压缩图像数据，使它们依次输出到输出部132。
[0180]图13是表示数据传输部115的结构的一例的框图。
[0181]输入部180将压缩图像数据输出到串行器部184。此外，输入部181中输入图像数据的时钟，并输出到PLL186和输出部182。
[0182]图像数据的时钟使用与非压缩图像数据的标准时间格式中使用的像素时钟同步的时钟。例如，也可以使用将非压缩图像数据的像素时钟2分频后的时钟。该情况下，该非压缩图像数据是12bits的量化图像数据的情况下，时钟上是1/2，量化bit数上是8/12，所以上述规定的压缩率需要设定为1/3以下。时钟除2分频以外，也可以是3/4倍频或2/3倍频。通过将与非压缩图像数据的像素时钟同步的时钟用于压缩图像数据的传输，具有在接受侧复原非压缩图像数据的情况下，通过将传输时钟的2倍或4/3倍、3/2倍等倍频的时钟用作像素时钟，能够使复原数据的抖动最小化的优点。
[0183]PLL186对于输入的时钟生成倍频或分频的时钟。作为倍频的一例，有对于输入的时钟的频率5倍或10倍等。由PLL186生成的时钟可以是I种时钟，也可以是2种时钟。作为I种时钟的例子，有输入的时钟的10倍频。此外，作为2种时钟的例子，有优先考虑数据传输量的第一时钟速度、和优先考虑降低错误发生频度的比第一时钟速度慢的第二时钟速度的时钟。作为速度的一例，有使上述第一时钟速度为输入时钟的10倍频、第二时钟速度为输入时钟的5倍频等。
[0184]将由PLL186生成的倍频后的时钟输出到串行器部184。
[0185]串行器184使输入的YCbCr亮度色差信号的压缩图像数据以10倍频的时钟按Ibit串行化，输出到电平变换部185。在相对于输入到输入部181的I个时钟周期，输入到输入部180的数据有8bit的情况下，也可以使用将该8bit数据映射至IObit串行化的抑制比特流的DC成分的TMDS传输方法等。在与输出部176连接的缆线有3根的情况下，通过对每根缆线进行上述串行处理，能够发送每一输入时钟周期24bit的压缩图像数据。
[0186]电平变换部185经由输出部182输出适合缆线传输的形式的信号。
[0187]图8是表示压缩处理部114的结构的另一例的框图。
[0188]存储器控制部142暂时性地在存储器部140中存储从纠错编码生成部137供给的压缩图像数据、主压缩编码信息和副压缩编码信息。此外，从存储器部140读取副压缩编码信息和压缩图像数据，在有效期间406中输出。此外，从存储器部140读取主压缩编码信息，在输出压缩图像数据的有效期间406前一个的水平消隐期间404中输出。进而，能够从存储器部140读取压缩图像数据，供给到选择部141。
[0189]选择部141是选择从输入部130输入的图像数据、和从存储器控制部142供给的压缩图像数据143中的某一方，供给到压缩部A133、压缩部B134、压缩部C135的区块。此夕卜，也可以将从输入部130输入的图像数据输出到规定的压缩部，并且将压缩图像数据143输出到其他压缩部。根据本例的结构，能够进行图27所示的2级的压缩处理。此外，也可以进一步进行3级以上的压缩处理。
[0190]图9是表示压缩处理部114的结构的另一例的框图。
[0191]选择部138将从纠错编码生成部137供给的主压缩编码信息和副压缩编码信息输出到存储器控制部145，将从纠错编码生成部137供给的压缩图像数据输出到选择部144。
[0192]存储器控制部145暂时性地在存储器部140中存储从选择部138供给的主压缩编码信息和副压缩编码信息。此外，从存储器部140读取副压缩编码信息，通过选择部144在后述的有效期间406中输出。此外，从存储器部140读取主压缩编码信息，通过选择部144在输出副压缩编码信息的有效期间406前一个的水平消隐期间404中输出。
[0193]选择部144是选择从选择部138供给的压缩图像数据、和从存储器控制部145供给的主压缩编码信息和副压缩编码信息，输出到输出部132的区块。
[0194]本例中，选择部138也可以不通过存储器控制部145，而是将副压缩编码信息与压缩图像数据一同直接输出到选择部144。该情况下，存储器控制部145进行对主压缩编码信息的存储器写入和读取处理。通过采用本例的结构，能够将发送机100 —侧的存储器部140具有的存储量抑制为较少。
[0195]在图14?图17中表不传输主压缩编码信息的一部分的分组的一例。
[0196]图14和图16是分组的头的一例，在最初的头数据块HBO中描述表示与本发明的压缩编码传输方式相关的信息的共用的头类型OBh。HBl的各bit和HB2的Bit4?7为了将来扩展用而设为O。HB2的BitO?3所示的Eco_Packet#表示帧内的识别。图15和图17是在头之后传输的28byte的数据的一例。
[0197]图14的头中，对Eco_Packet#分配0h，表示由图14的头与图15的数据构成的分组是各帧内的共用信息(主压缩编码信息)。该分组配置在垂直消隐期间中，在各图像帧中至少发送I次。以下说明图15的数据的内容。
[0198]Color_Sample表示色彩采样信息，例如O表示YCbCr亮度色差信号中的444格式(以下称为YCbCr444)，I表示YCbCr亮度色差信号的422格式(以下称为YCbCr422)，2表示YCbCr亮度色差信号的420格式(以下称为YCbCr420)，3表示RGB信号的444格式(以下称为RGB444)，4?7用于将来扩展。也可以在422格式和420格式中进而追加分配表示CbCr的采样位置信息的BH。
[0199]Eco_Mem在传输压缩图像数据的有效期间406前一个的水平消隐期间中传输后述的图16和图17所示的传输主压缩编码信息的一部分的分组的情况下为0，在传输压缩图像数据的有效期间406后的水平消隐期间中传输的情况下为I。
[0200]CD是Color Depth (色彩深度)，例如 4h表不各YCbCr成分8bit共计 24bit Color,5h表不各YCbCr成分IObit共计30bit Color,6h表不各YCbCr成分12bit共计36bitColor，7h表示各YCbCr成分16bit共计48bit Color，其他用于将来扩展。该定义符合HDMI已规定的Deep Color Mode的定义。
[0201]Eco_FLM在帧内的所有块的压缩编码方式相同的情况下为1，在按每个块设定的情况下为O。在为I的情况下，在后述的Eco-CDO和Eco-CDl、Eco_CD2中分别描述Y、Cb、Cr的压缩编码方式。
[0202]CK_N和CK_M的比(CK_N/CM_M)表示非压缩图像数据的像素时钟与传输压缩后的数据的信道的时钟例如TMDS时钟的频率比。例如如果CM_N = I且CK_M = 2，则相对于4k2k情况下的非压缩图像数据的像素时钟594MHz，传输系统的TMDS时钟为1/2即297MHz。
[0203]Eco_Block表示构成压缩块的像素数。
[0204]Eco_CD0?Eco_CD3表示应用于各图像数据单位块的压缩编码信息的4种候选。如图18中的一例所示，从压缩的图像数据单位的压缩编码信息Ec0_C0de中选择4种。
[0205]由图16的头和图17的数据构成的分组，在各水平消隐期间中传输I个以上。图16的头中的Eco_Packet#表示各线中传输的本分组的序列号，从I开始依次增加I。
[0206]Eco_length_0?Eco_length_39表不在有效期间406中传输的压缩块的尺寸信息。作为尺寸信息的一例，有压缩块的比特尺寸、字节尺寸。此外，也可以是作为压缩块的比特尺寸、字节尺寸的源的信息。例如，压缩块尺寸S_Block取从32bit到64bit的增量为2的值的情况下，有用下式定义压缩块的比特尺寸的方法:
[0207](式 2) S_Block = 32+ (2 X Eco_length_#) (# 为 O ?39)
[0208]上述例子中，Eco_length_# 是 4b i t。
[0209]Eco_length_#可以按Y、Cb、Cr分别规定,也可以用Y、Cb和Cr的压缩块尺寸相加后的值规定。在后者的情况下，能够将Eco_length_#的传输量削减为1/3。
[0210]对压缩块单位规定的压缩编码信息，作为副压缩编码信息与压缩图像数据一同在有效期间406中传输。副压缩编码信息的种类有Eco_Error_0?39和Code_0?Code_39。
[0211]Eco_Error_0?Eco_Error_39表示纠错编码方式。纠错编码方式是在纠错编码生成部136中对有效期间406中传输的数据运算的纠错编码的方式。纠错编码方式之一有CRC(Cyclic Redundancy Check)方式和奇偶校验方式等。
[0212]Code_0?Code_39在各图像数据单位块中对各Y、Cb、Cr成分顺序描述从用图15的Eco_CD0?Eco_CD3描述的4种压缩编码信息中选择的编号。例如，如果表不开头的图像数据单位块的Y成分的压缩编码信息的Code_0是1，则指的是Eco_CDl。如果Eco_CDl表示10，则根据图18，表示对原图像的数据的444格式Y成分用差分编码方式压缩后的数据。
[0213]图4所示的将垂直2线作为图像数据单位块的情况下，第I线的Code_0表示图像数据单位块503的压缩编码信息，第2线的Code_0表示图像数据单位块504的压缩编码信
肩、O
[0214]图15的Color_Sample表示444格式的情况下，Code_l表示第一图像数据单位块的Cb的压缩编码信息，Code_2表示第一图像数据单位的Cr的压缩编码信息，Code_3表示第二图像数据单位块的Y的压缩编码信息。在Color_Sample表示420格式的情况下，Code_l表示第二图像数据单位块的Y的压缩编码信息，Code_2表示第一和第二图像数据单位的Cb (偶数线中为Cr)的压缩编码信息，Code_3表示第三图像数据单位块的Y的压缩编码信息。在C0l0r_Sample表示422格式的情况下，Code_l表示第一和第二图像数据单位块的Cb的压缩编码信息，Code_2表示第二图像数据单位的Y的压缩编码信息，Code_3表示第一和第二图像数据单位块的Cb的压缩编码信息。
[0215]此外，如果Code_0是0，则指的是Eco_CD0，如果Eco_CD0表示6，则根据图18，表示将原图像的数据的444格式的各Y、Cb、Cr成分12bit数据疏化抽取为420格式8比特。该情况下，仅用Y成分的Code_0决定Cb和Cr的传输方式，所以不需要表不Cb成分的Code_l和表不Cr成分的Code_2的信息,记为O即可。
[0216]然后，虽然在图1中未图示，但图像接收装置200中装载有保存表示图像接收装置 200 的性能的 EDID (Enhanced Extended Display Identification Data)的 ROM。也可以在该ROM中附加判别图像接收装置200是否支持压缩解压缩的信息。由此，图像传输装置100从图像接收装置200的保存了 EDID的ROM读取判别是否支持压缩解压缩的信息，如果是支持的装置，则传输压缩后的图像数据，如果是不支持的装置，则不压缩而是按现有的尺寸发送图像，由此能够保持与不支持压缩处理的图像接收装置的兼容性。此外，读取判别是否支持在有效期间406中传输编码信息用的纠错编码方式的信息，如果是支持的装置，则进行纠错编码处理，作为压缩编码信息传输，如果是不支持的装置，则不进行纠错编码处理地发送，由此能够保持与不支持压缩处理的图像接收装置的兼容性。此外，在是不支持的装置的情况下，也可以用消隐期间407中的分组的纠错功能提供对传输错误的容错性。此夕卜，能够通过在显示部208上显示而对用户通知图像接收装置不支持压缩、是现有的图像尺寸、或不支持纠错编码的消息。
[0217]该EDID的描述例在图19中表示。图19表示对称为HDM1-VSDB的区域扩展的例子。
[0218]在第6Byte的Bit2中设置表示是否支持本实施例的压缩编码传输方式的Eco_transfer标志。该区域一直作为预约区域处理，所以在不支持的传统设备中记为0，仅有支持的设备记为I，由此能够维持向后兼容性。在该Eco_transfer标志是I的情况下，Byte9和BytelO的描述有效。
[0219]Block_64和Block_128是表示压缩的图像数据单位块的大小分别支持64像素、128像素的标志。图像数据单位块的大小32像素定义为本压缩图像数据传输支持中的必要模式，为了节约EDID描述空间而不记载。
[0220]Eco-Codel?4分别是表示支持图18中表示了一例的压缩编码方式、Wavelet变换、游程编码、霍夫曼编码、差分编码的标志。
[0221]CLK_1、CLK_3/4、CLK_l/2分别是表示支持与非压缩图像数据时钟相对的TMDS传输时钟的频率是I倍、3/4倍、1/2倍的模式的标志。
[0222]Eco_Error_l?4是在支持各自规定的纠错方式的情况下为1、不支持的情况下为O的标志。
[0223]Eco_Mem在主压缩编码信息支持在传输压缩图像数据的有效期间406前一个的水平消隐期间中传输的情况下为1，在传输压缩图像数据的有效期间406后的水平消隐期间中传输的情况下为2。3表示都支持的情况，O表示都不支持的情况。
[0224]此外，将图像传输装置100作为便携设备使用的情况下，是电池驱动的装置，所以图像传输装置100的消耗电力影响连续使用时间。该情况下，能够压缩传输图像数据而降低数据传输量，减少消耗电力。该效果通过附加例如“省电模式”等功能作为图像传输装置100的工作模式，在从外部供给电源的情况下用非压缩的图像数据传输，在用电池驱动的情况下压缩传输图像数据，由此能够将连续使用时间设定为较长。
[0225]图20是表示数据接收处理部205的结构的一例的框图。[0226]输入部220将由图像发送装置100的电平变换部175变换后的信号输出到电平变换部22。
[0227]电平变换部224将由图像发送装置100电平变换后的信号变换为数字信号并输出到解串器(Deserializer)部225输出。作为电平变换的一例，有差动信号向单端信号的变换。
[0228]输入部221中输入从图像发送装置100输出的时钟，输出到PLL226。PLL226生成输入的时钟的10倍的时钟，输出到解串器部225。此外，PLL226从输出部222输出图像接收装置200内使用的像素时钟。在图像显示装置200内使用原图像的非压缩图像数据的像素时钟的情况下，PLL226从输出部223输出对于输入时钟基于图13的分组数据倍频为(CK_M/CK_N)倍后的时钟。
[0229]解串器部225将串行化后的数据按来自PLL226的时钟并行化，从输出部222输出。解串器部225将10倍时钟的数据并行化并按照规定的例如TMDS译码变换为8bit并行数据从输出部222输出。
[0230]图21是表示解压缩处理部206的结构的一例的框图。此外，图26是表示解压缩处理部206对图4所示的压缩块的处理概念的时序说明图。
[0231]输入部230是解压缩处理部206的数据输入部。输入到输入部230的数据中，具有表示图像数据的同步信号的HSYNC(图26(a))和VSYNC，在有效期间406中具有压缩图像数据和副压缩编码信息812和814，在水平消隐期间404中具有主压缩编码信息811和813。对输入部231输入复原后的非压缩图像数据的像素时钟和压缩图像数据时钟等。
[0232]HSYNC、VSYNC、压缩图像数据时钟和复原后的非压缩图像数据的像素时钟，被供给到时序生成部236。时序生成部236根据输入的HSYNC、VSYNC控制计数器，生成并输出垂直消隐期间401、垂直有效期间402、水平消隐期间404、水平有效期间405、有效期间406等的时序等控制解压缩处理部内的各区块所需的时序。
[0233]压缩编码信息提取部233提取在水平消隐期间中发送的各图像数据单位块的压缩编码信息并存储到压缩编码信息存储部234。
[0234]该存储期间在图26(c)中表示。主压缩编码信息811是与后续的压缩图像数据812对应的数据，所以在直到第2线的主压缩编码信息813到达的存储期间815中存储该信息就足够。但是，例如使2线的图像数据垂直压缩的情况下，垂直解压缩用压缩编码信息816需要保持到解压缩第2线的压缩图像数据的期间。
[0235]用纠错部235对在水平有效期间内发送的压缩图像数据进行传输系统的纠错处理。纠错部235按压缩图像数据单位与纠错编码生成部137同样地运算纠错编码。对上述运算结果与从压缩编码信息提取部233输入的纠错编码进行比较，比较结果不同的情况下进行纠错处理。纠错处理的一例有CRC运算。此外，也可以仅进行错误检测，在之后的处理中对错误进行插补。
[0236]输入的压缩图像数据被供给到解压缩部A237、解压缩部B238、解压缩部C239。
[0237]解压缩部A237、解压缩部B238、解压缩部C239基于压缩编码信息存储部234的信息，对于输入的压缩图像数据，进行分别不同的解压缩处理，生成解压缩后的图像数据，输出到选择部261。
[0238]图26(d) (e)表示对图4所示的压缩块，用解压缩部A237进行水平解压缩处理、用解压缩部B238进行垂直解压缩处理的情况下的各解压缩部的输出数据。水平解压缩图像数据818和819表示解压缩部A237的输出数据，垂直解压缩图像数据820和821表示解压缩部B237的输出数据。
[0239]选择部261基于压缩编码信息存储部234的信息，适当选择输入到输入部230的图像数据、解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出，作为复原图像数据824输出到输出部232 (图26(f))。
[0240]图25是表示对于图3所示的压缩块用解压缩部A237进行水平解压缩处理的情况下的解压缩处理部206的处理概念的时序说明图。
[0241]输入部230是解压缩处理部206的数据输入部。输入到输入部230的数据中，具有表示图像数据的同步信号的HSYNC(图26(a))和VSYNC，在有效期间406中具有压缩图像数据和副压缩编码信息802和804，在水平消隐期间404中具有主压缩编码信息801和803。对输入部231输入复原后的非压缩图像数据的像素时钟和压缩图像数据时钟等。
[0242]压缩编码信息提取部233提取在水平消隐期间中发送的各图像数据单位块的压缩编码信息并存储到压缩编码信息存储部234。
[0243]该存储期间在图25(c)中表示。主压缩编码信息801是与后续的压缩图像数据802对应的数据，所以在直到第2线的主压缩编码信息803到达的存储期间805中存储该信息就足够。
[0244]对于输入的压缩图像数据，用解压缩部A237进行水平解压缩处理，生成解压缩后的图像数据即水平解压缩图像数据806和807，输出到选择部261 (图25(d))。
[0245]选择部261基于压缩编码信息存储部234的信息，适当选择输入到输入部230的图像数据、解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出，作为复原图像数据808和809，输出到输出部232 (图25(f))。
[0246]图22是表示解压缩处理部206的结构的一例的框图。本例是采用不在水平消隐期间404、而是与有效期间406内的压缩图像数据一同传输副压缩编码信息的方式的情况下的解压缩处理部的一例。
[0247]要在有效期间406内发送的数据不仅是压缩图像数据，也一同发送压缩编码信息的情况下，根据压缩方式，存在必须降低压缩图像数据的压缩率的情况，该情况下，复原时的图像的画质劣化有可能变大。其对策是将水平消隐期间缩小为可以发送2个声音数据传输分组的程度，扩大水平有效期间。对于4k2k图像数据用非压缩图像的像素时钟594MHz的一半即297MHz时钟传输的情况下，在实施例1中，水平有效期间是1920，水平消隐期间是280。因为包括2个声音分组的传输期间和前后的保护频带的水平消隐期间有96程度即可，所以使其余184增加到水平有效期间。具有能够使水平有效期间1920扩大约9.5%程度的效果。
[0248]本例的情况下，水平同步信号的位置和宽度从规定的非压缩图像数据的标准时间偏离，所以在接收侧再现非压缩图像数据时，以对图像数据附加的SVD(Short VideoDescriptor)元数据为参考，将时间复原为标准时间格式即可。
[0249]图22中，对与图21具有同样功能的区块附加相同的编号。差异在于在纠错电路255的输出部上添加了第二影像编码信息提取部250这一点。
[0250]图21的例子中，压缩编码信息提取部233提取垂直消隐期间内的压缩编码信息(图14和图15的分组)、和水平消隐期间内的压缩编码信息(图16和图17的分组)。本例中，压缩编码信息提取部233仅提取垂直消隐期间或水平消隐期间中传输的主压缩编码信息，用压缩编码信息存储部234存储。
[0251]本例中，不是用对压缩编码信息在消隐期间内实施纠错处理的分组发送，而是改为施加与其他压缩图像数据同样的纠错处理。因此，将从第二压缩编码信息提取部250输出的纠错部255纠错处理后的主压缩编码信息、和从压缩编码信息存储部234输出的副压缩编码信息输出到解压缩部A237、解压缩部B238、解压缩部C239、选择部251。
[0252]本例中，压缩图像数据和压缩编码信息在时序上接近，所以不需要除了帧内共用的压缩编码信息外的I个水平周期中的压缩编码信息存储，所以具有能够削减电路规模的效果。
[0253]图23是表示解压缩处理部206的结构的另一例的框图。
[0254]图23中，对与图21具有同样功能的区块附加相同的编号。差异在于在各解压缩部的前级添加了选择部260这一点。
[0255]选择部261基于压缩编码信息存储部234的信息，适当选择输入到输入部230的图像数据、解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出，输出到输出部232。选择部261进而能够选择解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出中的某一个，输出到选择部260。通过采用本结构的方式，能够对输入部230中输入的压缩图像数据，进行2种方式以上的解压缩处理。
[0256]此外，虽然未图示，也可以选择解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出中的某一个，输出到压缩编码信息存储部234。通过采用该结构，能够进行例如图5的压缩后的副压缩编码信息660的解压缩处理。
[0257]图24是表示解压缩处理部206的结构的另一例的框图。图24中，对与图22具有同样功能的区块附加相同的编号。差异在于在输入部230的后端添加了存储部270这一点。
[0258]选择部271在图22所示的选择部251的功能外，还具有将选择的数据输出到存储部270的功能。存储部270是暂时存储从输入部230输入的主压缩编码信息、副压缩编码信息、压缩图像数据、和从选择部271供给的解压缩数据，供给到后级的区块的区块。通过采用这样的结构，能够对输入到输入部230的数据进行多级的解压缩处理。仅有I级解压缩处理的情况下，也可以没有从选择部271向存储部270的数据供给。
[0259]通过采用该结构，例如能够对用图8或图11所示的方式压缩后的压缩图像数据进行解压缩处理。
[0260](实施例2)
[0261]以下说明实施例1中记载的图像传输装置和图像接收装置的其他实施方式。
[0262]图29是表示串行器184的输入和输出波形的一例的图。串行器184对于输入的与YCbCr亮度色差信号的图像数据(以下称为YCbCr图像数据)、或者RGB信号的图像数据(以下称为RGB图像数据)对应的压缩图像数据，以10倍频的时钟按3个Ibit的数据分别串行化，输出到电平变换部175。
[0263]作为串行化的例子，有使8bit的YCbCr亮度色差信号或RGB信号的图像数据按10倍频的时钟从开头起以MSB或LSB的顺序输出。
[0264]电平变换部185经由输出部182输出变换为标准化的数据传输格式的信号。作为标准化的数据传输格式的一例，有TMDS方式的差动电平的信号形式等。该形式中，在图像的消隐期间中，不需要发送图像数据，所以用串行器184串行化的数据仅适用10倍频的时钟中的4bit，不使用其余6bit，由此增加对传输错误的抵抗性，能够传输图像数据以外的数据。此外，通过使用2种时钟，使由PLL186生成的时钟降低为发送图像数据的时钟的1/2以下，由此能够得到相同的效果。
[0265]图30是表示串行器184的数据结构的一例的图。串行器184的输出有3个系统，其中I个系统由同步信号(HSYNC、VSYNC)、分组头和固定bit构成。采用使用其余2个系统传输数据的结构。分组的尺寸在传输时钟中是32个周期。
[0266]图31是表示在水平消隐期间中叠加的声音数据的分组结构的一例的图。声音分组使用串行器中进行数据传输的2个系统的同一 bit生成7Byte的数据，对于上述数据附加奇偶校验等纠错编码构成子分组。用4个系统的上述子分组和分组头4Byte的格式构成水平消隐期间的分组。
[0267]该结构中，对于子分组的数据加入了纠错编码，所以对于传输线路中发生的错误能够进行修正，容错性强。此外，子分组的数据传输用的数据，由物理上不同的2个信道交错地构成，所以相对于单侧的信道中突发性发生的错误，另一方的信道不受影响，所以能够进行数据错误的修正。关于错误的纠正率，存在相对于水平有效期间为10_9、水平消隐期间为10_14的改善效果。
[0268]将压缩图像的纠错编码作为上述容错性高的分组传输即可。用水平期间的像素数为2200、水平有效期间的像素数为1920的情况说明能够传输的分组数的例子。其中，图像形式以YCbCr422为例说明。
[0269]设压缩的图像的尺寸是64像素(亮度32像素，色差32像素)时，每I线60个纠错编码(2Byte)的尺寸需要120Byte。
[0270]因为I个分组具有能够传输28Byte的容量，所以是只要5个分组就能够传输的尺寸。因为水平消隐期间是280像素，所以能够叠加8个分组。根据该结构，即使对声音分组分配最大2个分组用于192kHz8ch LPCM声音传输，也能够在水平期间中发送最大5个分组的上述纠错编码。
[0271]对于输入到数据传输部115的与RGB图像数据对应的压缩图像数据，以压缩块单位对分别决定的TMDS信道输出的情况下，在压缩块之间会产生压缩图像数据的非传输期间。在以线单位考虑的情况下，与非压缩时相比，存在不能够大幅削减水平有效期间的课题。
[0272]图32是对于数据传输部115中输入的与RGB图像数据对应的压缩图像数据，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的一例。
[0273]本实施例中，说明对于RGB图像数据，按R、G、B各成分进行压缩处理，分别生成R压缩图像数据、G压缩图像数据、B压缩图像数据的情况。图中的CRO和CRl分别是子压缩块中的压缩图像数据，压缩块由CRO和CRl构成。CR2是下一个压缩块的开头子块。CG0、CG1、CG2、CB0、CB1、CB2 也与上述 CR0、CR1、CR2 同样。
[0274]本实施例中，通过在TMDS信道O中使R压缩图像数据以比特单位紧缩地进行发送，能够削减子压缩块、压缩块之间的压缩图像数据的非传输期间。
[0275]图35是对于数据传输部115中输入的与RGB图像数据对应的压缩图像数据，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。
[0276]本实施例中，子压缩块1300、1301、1302、1305、1306、1309、1310 不能按 8bit 完全分割的情况下，通过在末端附加填充数据1303、1304、1307、1308、1311，而使子压缩块开头bit总是位于信道的开头bit。由此，能够简化图像接收装置一侧的子压缩块的接收电路。本例中，以子压缩块单位附加填充数据(Stuffing data)，但也可以如图36所示以压缩块单位进行。
[0277]图32和图35中说明的实施例中，对于输入到数据传输部115的与RGB图像数据对应的压缩图像数据，在分别决定的TMDS信道中输出，所以传输的压缩图像数据占据的传输带宽受到压缩后数据量最多的TMDS信道的限制，存在有效期间变长的课题。
[0278]图33是对于数据传输部115中输入的与RGB图像数据对应的压缩图像数据的各成分即R压缩图像数据、G压缩图像数据、B压缩图像数据，在TMDS信道0、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。
[0279]本实施例中，以子压缩块单位，按R压缩图像数据、G压缩图像数据、B压缩图像数据的顺序，在TMDS信道O、TMDS信道1、TMDS信道2中依次交错地输出。此处，以R压缩图像数据CRO为18bit、G压缩图像数据CGO为37bit、B压缩图像数据CBO为8bit、R压缩图像数据CRl为20bit、G压缩图像数据CGl为18bit、B压缩图像数据CBl为14bit的情况为例。
[0280]通过采用上述输出方式，能够在3个TMDS信道中平均地传输输入到数据传输部115的与RGB图像数据对应的压缩图像数据，所以能够缩短用于传输压缩图像数据的有效期间。本例中，以子压缩块单位按RGB顺序输出，但也可以如图34所示，以压缩块单位进行。
[0281]图37是对于输入到数据传输部115的与YCbCr444的图像数据对应的压缩图像数据，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。与YCbCr444的图像数据的各成分对应的数据量的比率，在Y图像数据、Cb图像数据、Cr图像数据中相同。其中，关于与YCbCr422的图像数据的各成分对应的数据量的比率，Y图像数据是2，相对地Cb图像数据、Cr图像数据分别是I。
[0282]1500是输入到压缩处理部114的图像数据。1501、1502、1503分别是通过对Y图像数据、Cb图像数据、Cr图像数据的压缩处理生成的压缩图像数据的各成分即Y压缩图像数据(亮度压缩图像数据)、Cb压缩图像数据(Cb色差压缩图像数据)、Cr压缩图像数据(Cr色差压缩图像数据)。
[0283]根据与色差(Cb和Cr)成分相比对亮度⑴成分的灵敏度较高的人类的视觉特性，使对Y成分的压缩率比对Cb成分和Cr成分的压缩率高，能够使Cb成分的压缩图像数据(以下称为Cb压缩图像数据)的数据量和Cr成分的压缩图像数据(以下称为Cr压缩图像数据)的数据量与Y成分的压缩图像数据(以下称为Y压缩图像数据)的数据量相比进一步削减。
[0284]在本实施例中，表示对于与图像数据的各成分对应的传输优先度高的图像数据以高压缩率进行压缩处理的一例。
[0285]具体而言，使Y压缩图像数据的传输优先度比Cb压缩图像数据和Cr压缩图像数据的传输优先度更高，关于从数据传输部115的输出比特宽度，对Y压缩图像数据分配12bit,对Cb压缩图像数据分配6bit,对Cr压缩图像数据分配6bit。[0286]使Y压缩图像数据1501、Cb压缩图像数据1502、Cr压缩图像数据1503分别在TMDS信道0(8bit/周期)、TMDS信道I (8bit/周期)、TMDS信道2(8bit/周期)中输出的情况下，传输的压缩图像数据占据的传输带宽受到压缩后的数据量最多的TMDS信道O的限制，有效期间变长。
[0287]1505、1506、1507、1508、1511是与Cb压缩图像数据(6bit/周期)和Cr压缩图像数据^bit/周期)相比、对Y压缩图像数据分配更多的信道(12bit/周期)的情况下的输出数据的一例。通过采用上述输出方式，能够缩短用于传输压缩图像数据的有效期间。
[0288]其中，输出比特宽度的分配，从控制部110对数据传输部115指示。此外，也可以与从控制部指示的图像格式(例如YCbCr444等)相应地，由数据传输部115分配预先决定的分配比率。分配比率也能够由控制部115设定。
[0289]本实施例中，以图像数据是YCbCr444的情况为例了说明，但在RGB信号等其他图像信号中，也可以对各压缩图像数据附加传输优先度并分配对输出传输线路(例如TMDS传输线路0、1、2)的输出比特宽度。例如，在图像数据是RGB信号的情况下，有使与G成分对应的传输优先度比与R成分和B成分对应的传输优先度更高的方法。具体而言，有分配12bit作为与G成分对应的输出比特宽度、分配各6bit作为与R成分和B成分对应的输出比特宽度的方法。
[0290]此外，图像数据是YCbCr444的情况下的传输优先度的另一例，有对4:2:2成分分配比其余色差成分更高的传输优先度的方法。具体而言，有分配20bit作为与4:2:2对应的输出比特宽度、对其余的Cb成分和Cr成分分配4bit的方法。
[0291]图38是对于输入到数据传输部115的Y压缩图像数据1601、Cb压缩图像数据1602、Cr压缩图像数据 1603，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。其中，1600是输入到压缩处理部114的图像数据。
[0292]本实施例中，考虑TMDS信道O的bit4、bit5、bit6、bit7和TMDS信道的bitO、bitl、bit6、bit7与其他bit相比传输错误率更低的情况。
[0293]1604、1605、1606、1607、1608、1609是对TMDS信道的传输错误率较低的bit分配Y
压缩图像数据的情况下的输出数据的一例。通过采用上述输出方式，能够降低与Y压缩图像数据对应的错误发生率。
[0294]此外，本实施例中，对1602、1605、1607分配Cb压缩图像数据，对1603、1609分配
Cr压缩图像数据。
[0295]此外，传输错误率的信息从控制部110被供给到数据传输部115。或者，也可以基于传输错误率，由控制部指定Y压缩图像数据、Cb压缩图像数据、Cr压缩图像数据向TMDS信道的bit分配。本实施例中，以YCbCr亮度色差信号为例进行了说明，但在RGB信号等其他图像形式中，也可以对各压缩图像数据附加优先度并进行向TMDS信道的bit分配。
[0296]此外，各成分的上述传输优先度也可以是各成分的压缩率。该情况下，对于高压缩率的成分增大分配的输出比特宽度，对于低压缩率的成分减小分配的输出比特宽度。例如设对YCbCr444的各成分(Y、Cb、Cr)的压缩率是80%、40%、40%的情况下，有使传输优先度分别为2、1、I的方法，或者使各成分(Y、Cb、Cr)的输出比特宽度分别为12bit、6bit、6bit的方法。
[0297](实施例3)[0298]以下说明实施例1中记载的图像传输装置和图像接收装置的其他实施方式。
[0299]本实施例中，用图30所示的水平消隐期间406中的分组区域传输主压缩编码信息。分组区域不拘于分组结构，传输各信道4比特数据。此外，在有效期间中传输副压缩编码?目息1740。
[0300]图39是表示在水平消隐期间406中传输主压缩编码信息1700时的数据传输部115的输出数据结构的一例的图。
[0301]通过采用本结构，与在有效期间中传输相比能够强化传输主压缩编码信息1700时的容错性。但是，在传输错误率高的传输线路中传输的情况下，课题在于进一步强化容错性。
[0302]图40是在水平消隐期间中在同一传输线路中传输与主压缩编码信息1700相同的主压缩编码信息1710的情况的一例。本实施例中，在主压缩编码信息1700后立刻输出主压缩编码信息1710。其中，主压缩编码信息1710也可以不在主压缩编码信息1700后立刻输出。通过采用上述结构，能够提高主压缩编码信息的冗余性，在传输错误率高的传输线路中，也能够使主压缩编码信息具有较高的容错性。其中，本实施例中的冗余度指的是追加传输的主压缩编码信息的数量。本实施例中的冗余度为I。
[0303]图41是在 水平消隐期间中在不同传输线路中传输与主压缩编码信息1700相同的主压缩编码信息1720的情况的一例。本实施例中，通过在与主压缩编码信息1700不同的信道中传输主压缩编码信息1720，而防止传输错误率在信道中的不均导致的传输容错性降低。
[0304]例如，信道O的传输错误率比信道I的传输错误率高的情况下，如图40所示对信道O分配冗余的主压缩编码信息的情况下，容错性降低，但通过如图41所示在多个信道中传输相同的主压缩编码信息，能够使与主压缩编码信息对应的错误发生率平均化。本实施例中，按信道分配2个主压缩编码信息，但也可以按bit分配。例如，有对信道O的bitO、bitl、信道I的bitO、bitl分配主压缩编码信息1700，对信道O的bit2、bit3、信道I的bit2、bit3分配主压缩编码信息1700的方法。此外，也可以与传输错误率的信息相应地变更比特分配。
[0305]图42是表示与图40和图41的实施例相比将冗余度增加到2的情况的一例的图。输出主压缩编码信息1700、和与主压缩编码信息1700相同的主压缩编码信息1730和主压缩编码信息1731。
[0306]也可以与传输错误率相应地，增加主压缩编码信息的冗余度而提高传输线路对错误的容错性。
[0307]图43是与图40和图41的实施例相比将冗余度增加到2的情况的一例。输出主压缩编码信息1700、和与主压缩编码信息1700相同的主压缩编码信息1730和主压缩编码信息1731。
[0308]也可以与传输错误率相应地增加主压缩编码信息的冗余度。
[0309]以上说明了在水平消隐期间中传输主压缩编码信息的情况下传输冗余的主压缩编码信息，但在有效期间中传输副压缩编码图像的情况下，也可以通过在有效期间中传输与副压缩编码信息相同的冗余的副压缩编码信息，而提高副压缩编码信息的容错性。
[0310]图43是表示在有效期间中传输副压缩编码信息时，使副压缩编码信息的冗余度为2的情况下的数据传输部115的输出数据结构的一例的图。
[0311]通过采用本结构，能够强化传输副压缩编码信息1740时的容错性。
[0312]也可以与传输错误率相应地增加主压缩编码信息的冗余度。
[0313](实施例4)
[0314]实施例3中，与传输错误率相应地，增大主压缩编码信息或副压缩编码信息的冗余度，但存在传输追加的冗余压缩编码信息的传输线路的传输量有限的课题。
[0315]于是，实施例4中，采用能够通过压缩率或压缩方式、和与传输错误率相应地延长或缩短水平消隐期间，增加传输冗余的压缩编码信息的传输线路的传输量的方式。
[0316]压缩率、压缩方式、水平消隐期间的延长/缩短指示、关于压缩编码信息的冗余度的信息，从控制部Iio供给到压缩处理部114和数据传输部115。
[0317]关于压缩率、压缩方式、水平消隐期间的延长/缩短指示、图像接收装置侧对压缩编码信息的冗余度的支持状况，有通过EIDI或CEC通信等从图像接收装置对图像发送装置通知的方法。
[0318]与传输错误率对应的压缩率、压缩方式、水平消隐期间的延长/缩短指示、压缩编码信息的冗余度的决定，可以由控制部110进行，也可以由压缩处理部114、数据传输部115个别地进行。
[0319]图44是将传输错误率分为3个范围，表示各范围中的压缩率和水平消隐期间和冗余度的一例的图。在传输错误率ER超过ERa的情况下(传输错误率高的情况下)，使压缩率为40%，减少生成的压缩图像数据量，并且缩短水平消隐期间，延长有效期间。由此，能够增加在有效期间中传输的副压缩编码信息的可传输量。本实施例中，使副压缩编码信息的冗余度为2，在有效期间中传输2个与副压缩编码信息内容相同的冗余的副压缩编码信息，由此提高副压缩编码信息对传输错误的耐性。
[0320]在传输错误率ER为ERb以下的情况下(传输错误率低的情况下)，使压缩率为80%，增多生成的压缩图像数据量，能够传输高画质的影像。此外，通过不插入冗余的压缩编码信息，而增多数据的非传输期间。其中，非传输期间是在有效期间406内不传输压缩图像数据和副压缩编码信息的期间、和在消隐期间407内不传输分组和主压缩编码信息的期间的合计。对于该非传输期间，通过时钟停止或以较低的时钟频率工作，能够省电。
[0321]传输错误率ER大于ERb、在ERa以下的情况下(传输错误率通常的情况下)，使压缩率为60%，使副压缩编码信息的冗余度为1，由此提高传输容错性，并且实现高画质。
[0322]图45是将传输错误率分为3个范围，表示各范围中的压缩率和水平消隐期间和冗余度的另一例的图。在传输错误率ER超过ERa的情况下(传输错误率高的情况下)，使压缩率为40%，减少生成的压缩图像数据量，并且延长水平消隐期间，延长水平消隐期间。由此，能够增加在水平消隐期间中传输的主压缩编码信息的可传输量。本实施例中，使副压缩编码信息的冗余度为1，在有效期间中传输I个与副压缩编码信息内容相同的冗余的副压缩编码信息，并且使主压缩编码信息的冗余度为1，在水平消隐期间中传输I个与主压缩编码信息内容相同的冗余的主压缩编码信息，由此提高副压缩编码信息和主压缩编码信息对传输错误的耐性。
[0323]在图44和图45中说明的压缩率以外，也可以变更压缩方式。图46是将传输错误率分为3个范围，表示各范围中的压缩方式和水平消隐期间和冗余度的一例的图。根据传输错误率ER，使压缩方式切换为方式A、方式B、方式C。在传输错误率ER大于ERa的情况下，通过采用主压缩编码信息少、能够提高冗余度的压缩方式，能够提高对传输错误的耐性。此外，通过应用能够实现高压缩率(例如图45中的压缩率40% )的压缩方式，能够增加副压缩编码信息或主压缩编码信息的可传输量。
[0324]图44和图45中，以压缩率为例进行了说明，图46中以压缩方式为例进行了说明，但也可以根据传输错误率，切换压缩率和压缩方式双方。
[0325]本实施例中，说明了为了提高对传输错误的耐性而输出冗余的主压缩编码信息或冗余的副压缩编码信息的例子，但也可以与传输错误率相应地切换纠错编码方式。此外，在传输错误率高的情况下，也可以如图45所示减少压缩后的压缩图像数据量，并且延长水平消隐期间，在水平消隐期间中传输副压缩编码信息的一部分，由此提高对传输错误的耐性。
[0326]本实施例中，说明了在传输错误率比规定值高的情况下，以低压缩率进行压缩处理来减少压缩图像数据的方法，或者使用适合低压缩率的压缩方式进行压缩处理来减少压缩图像数据的方法，或者通过延长水平消隐期间来增加与主压缩编码信息对应的传输线路的可传输量的方法，或者通过延长有效期间406来增加与副压缩编码信息对应的传输线路的可传输量的方法，但也可以使用减少声音数据来减少在水平消隐期间中传输的声音分组数的方法。减少声音数据的方法的一例，有从非压缩声音形式变为压缩形式的声音的方法，和使声道数从6声道削减为2声道的方法等。
[0327](实施例5)
[0328]实施例4中，与传输错误率相应地增大压缩率、水平消隐期间和冗余度，但存在与图像数据的内容的种类无关地决定与传输错误率对应的画质和容错性的课题。本实施例中，通过与内容的种类相应地变更压缩率、水平消隐期间和冗余度，能够具有适合内容种类的画质和传输容错性。其中,本实施例中,对传输错误率没有叙述,但本实施例中也可以进一步进行与传输错误率相应的切换。
[0329]图47是与内容种类相应地切换压缩率和水平消隐期间和冗余度的方式的一例的图。本实施例中，在内容是电影的情况下，为了高画质且提高容错性，而使压缩率为80 %，延长水平消隐期间，使主压缩编码信息的冗余度为2、副压缩编码信息的冗余度为I。另一方面，在内容是围棋/将棋的情况下，根据静止的部分多的特性，而使压缩率为40%，并且缩短水平消隐期间，使主压缩编码信息的冗余度为1、副压缩编码信息的冗余度为1，由此提高对传输错误的耐性。
[0330]此外，在内容是体育运动的情况下，运动部分较多，是难以压缩的图像，但考虑对于错误的视觉灵敏度低，而使压缩率为80%，缩短水平消隐期间，使主压缩编码信息和副压缩编码信息的冗余度都为0，即不插入冗余的压缩编码信息，由此实现高画质，同时增加数据的非传输期间。
[0331](实施例6)
[0332]实施例4中，在比规定的传输错误率低的情况下，以高压缩率增加压缩图像数据的量，实现高画质。本实施例中，用图48说明比规定的传输错误率低的情况下提高音质的方法的一例。
[0333]1800和1802是传输压缩图像数据或副压缩编码信息的有效期间406，1801是传输主压缩编码信息或声音分组的消隐期间407。1810是压缩前的图像数据。1820、1821、1822是在消隐期间1801中传输主压缩编码信息1820和声音分组1821，在有效期间1802中传输副压缩编码信息或压缩图像数据1822的情况的一例。该情况下，在消隐期间1801内能够传输的声音分组数，受到主压缩编码信息1820的传输量限制。
[0334]此处，在比规定的传输错误率低的情况下，也可以在有效期间1802中传输主压缩编码信息1830。该情况下，通过对消隐期间分配更多的声音分组，能够提高音质。
[0335]消隐期间与有效期间相比容错性更高，但能够传输的数据量在比规定的传输错误率低的情况下是1/3以下。
[0336]图49中表不了实现闻首质的方式的另一例。1910、1911、1912是不延长有效期间的情况下传输主压缩编码信息1910、声音分组1911、副压缩编码信息和压缩图像数据1912的一例。该例中，在有效期间中没有能够传输主压缩编码信息1910的空间。
[0337]于是，在比规定的传输错误率低的情况下，采取延长有效期间、在该延长的有效期间1902中传输主压缩编码信息1921的方式。其中，只要在延长后的有效期间1902内，主压缩编码信息1921、副压缩编码信息和压缩图像数据1922的配置就可以是任意的。在该方式的情况下，有效期间1902中能够传输的数据量是消隐期间中能够传输的数据量的3倍以上，所以有效期间的延长量是消隐期间中的主压缩编码信息的传输期间的1/3以下。从而，如1920所示，能够延长能够传输声音分组的消隐期间。通过增加声音数据量能够实现高音质。作为提高音质的一例，有增加声道数、用更高的声音采样频率生成声音信号、用更大的量化比特生成声音信号、缓和对高频或低频的频域限制等。
[0338]根据以上说明的本实施例，通过压缩传输图像传输装置传输的图像数据，能够在当前规定的传输线路中传输比当前规定的图像尺寸更大的尺寸的图像数据，进而通过在比图像数据的传输区域容错性更高的区域中传输作为压缩编码信息的一部分的主压缩编码信息，能够进行容错性高的压缩图像传输。
[0339]此外，在传输现在规定的图像尺寸的图像数据的情况下，能够减少规定时间单位的数据传输量、或者降低数据传输时钟，所以能够降低错误的发生频度，并且能够构建对于传输线路中的错误可靠性高的系统。
[0340]此外，能够实现即使在传输线路中发生错误而不能够进行完整的纠错的情况下，也可以进行使错误引起的画质劣化不明显的错误处理的系统。
[0341]附图符号说明
[0342]100图像传输装置
[0343]101输入部
[0344]102输入部
[0345]103输入部
[0346]104输入部
[0347]105调谐器接收处理部
[0348]106网络接收处理部
[0349]107记录介质控制部
[0350]108记录介质
[0351]109 用户 IF 部
[0352]110控制部[0353]111流控制部
[0354]112解码器部
[0355]113显示处理部
[0356]114压缩处理部
[0357]115数据传输部
[0358]116输出部
[0359]191数据总线
[0360]192数据总线
[0361]193数据总线
[0362]200图像接收装置
[0363]201输入部
[0364]202输入部
[0365]203 用户 IF 部
[0366]204控制部
[0367]205数据接收处理部
[0368]206解压缩处理部
[0369]207显示处理部
[0370]208显示部
[0371]300 缆线
【权利要求】
1.一种传输图像数据的图像传输装置，其特征在于，包括: 压缩图像数据的压缩处理单元；和 输出由所述压缩处理单元压缩后的压缩图像数据的输出单元， 所述输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
2.—种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 数据传输单元，其切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来输出数据， 所述数据传输单元分所述第一期间和所述第二期间输出所述压缩编码信息。
3.如权利要求2所述的图像传输装置，其特征在于: 所述第二期间是 水平消隐期间或垂直消隐期间。
4.如权利要求2所述的图像传输装置，其特征在于: 所述压缩处理单元进行第一压缩处理和在该第一压缩处理后进行的第二压缩处理， 所述数据传输单元在所述第二期间至少输出关于所述第二压缩处理的压缩编码信息。
5.如权利要求2所述的图像传输装置，其特征在于: 所述压缩处理单元对所述第一期间中输出的压缩编码信息和所述第二期间中输出的压缩编码信息中的至少任一方进一步进行压缩处理。
6.一种接收被压缩后的图像数据的图像接收装置，其特征在于，包括: 接收单元，其在第一期间接收被压缩后的图像数据和关于压缩处理的压缩编码信息的一部分，在与第一期间不同的第二期间接收所述关于压缩的压缩编码信息的剩余部分；和解压缩单元，其基于由所述接收单元接收到的压缩编码信息对由所述接收单元接收到的被压缩后的图像数据进行解压缩， 所述解压缩单元在第一期间中接收到的压缩编码信息中发生了错误的压缩块中，使用第二期间中接收到的压缩编码信息对所述被压缩后的图像数据进行解压缩。
7.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 压缩图像数据的步骤；和 输出压缩后的压缩图像数据的步骤， 分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
8.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来进行输出的步骤， 分所述第一期间和所述第二期间输出所述压缩编码信息。
9.一种由图像接收装置接收被压缩后的图像数据的图像接收方法，其特征在于，包括: 在第一期间接收被压缩后的图像数据和关于压缩处理的压缩编码信息的一部分，在与第一期间不同的第二期间接收所述关于压缩的压缩编码信息的剩余部分的步骤；和基于接收到的压缩编码信息对接收到的被压缩后的图像数据进行解压缩的步骤，在第一期间中接收到的压缩编码信息中发生了错误的压缩块中，使用第二期间中接收到的压缩编码信息对所述被压缩后的图像数据进行解压缩。
10.一种传输图像数据的图像传输装置，其特征在于，包括: 对由多个成分构成的图像数据进行压缩处理的压缩处理单元；和 输出所述压缩图像数据的数据传输单元， 所述数据传输单元基于图像数据的各成分来变更该图像数据的输出方法。
11.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对由多个原色成分构成的图像数据或由亮度成分和颜色成分构成的图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息；和输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述数据传输单元根据对图像数据的各成分分配的传输优先度、图像数据的各成分的压缩率的比率、或传输线路的传输错误率，至少变更输出位宽和输出位分配中的任一方来输出数据。
12.如权利要求11所述的图像传输装置，其特征在于: 对具有第一优先度的成分或具有第一压缩率的成分分配的输出位宽大于对具有比该第一优先度低的第二优先度的成分或具有比该第一压缩率低的第二压缩率的成分分配的输出位宽。
13.如权利要求11所述的图像传输装置，其特征在于: 对具有第一优先度的成分或具有第一压缩率的成分分配的输出位的传输错误率低于对具有比该第一优先度低的第二优先度的成分或具有比该第一压缩率低的第二压缩率的成分分配的输出位的传输错误率。
14.如权利要求12或13所述的图像传输装置，其特征在于: 在所述图像数据是由亮度成分和颜色成分构成的图像数据的情况下，对亮度成分分配比颜色成分高的传输优先度。
15.如权利要求12或13所述的图像传输装置，其特征在于: 在所述图像数据是RGB色差信号的情况下，对G成分分配比R成分和B成分高的传输优先度。
16.如权利要求12或13所述的图像传输装置，其特征在于: 在所述图像数据是4:4:4格式的YCbCr亮度色差信号的情况下，对4:2:2成分分配比剩余的色差成分高的传输优先度。
17.如权利要求11所述的图像传输装置，其特征在于: 具有第一优先度的压缩图像数据的传输线路的传输错误率小于具有比该第一优先度低的第二优先度的压缩图像数据的传输线路的传输错误率。
18.—种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对由多个原色成分构成的图像数据或由亮度成分和颜色成分构成的图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息；和输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述数据传输单元交织地输出压缩图像数据的各成分或者压缩图像数据的各成分。
19.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对由多个成分构成的图像数据进行压缩处理的步骤；和 输出所述压缩图像数 据的步骤， 基于图像数据的各成分来变更该图像数据的输出方法。
20.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对由多个原色成分构成的图像数据或由亮度成分和颜色成分构成的图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和输出所述压缩图像数据和所述压缩编码信息的步骤， 根据对图像数据的各成分分配的传输优先度、图像数据的各成分的压缩率的比率、或传输线路的传输错误率，至少变更输出位宽和输出位分配中的任一方来输出数据。
21.一种传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述压缩编码信息的冗余性比压缩图像数据高。
22.—种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述压缩处理单元生成相对于压缩编码信息冗余的压缩编码信息， 所述数据传输单元输出该冗余的压缩编码信息。
23.如权利要求22所述的图像传输装置，其特征在于: 根据传输错误率来改变所述冗余的压缩编码信息的个数。
24.如权利要求22或23所述的图像传输装置，其特征在于: 对相同传输线路输出所述压缩编码信息和至少I个相对于所述压缩编码信息的所述冗余的压缩编码信息。
25.如权利要求22或23所述的图像传输装置，其特征在于: 对不同传输线路输出所述压缩编码信息和至少I个相对于所述压缩编码信息的所述冗余的压缩编码信息。
26.如权利要求22或23所述的图像传输装置，其特征在于: 所述数据传输单元分传输所述压缩图像数据的第一期间和容错性比第一期间高的第二期间输出所述压缩编码信息， 还在所述第二期间中输出相对于所述第二期间中输出的所述压缩编码信息冗余的压缩编码息。
27.如权利要求22或23所述的图像传输装置，其特征在于: 所述数据传输单元分传输所述压缩图像数据的第一期间和容错性比第一期间高的第二期间输出所述压缩编码信息， 还在所述第一期间中输出相对于所述第一期间中输出的所述压缩编码信息冗余的压缩编码息。
28.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 输出所述压缩图像数据和所述压缩编码信息的步骤， 所述压缩编码信息的冗余性比压缩图像数据高。
29.一种从图像传输装置压缩并传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 输出所述压缩图像数据和所述压缩编码信息的步骤， 生成相对于压缩编码信息冗余的压缩编码信息而将其输出。
30.一种传输图 像数据的图像传输装置，其特征在于，包括: 压缩图像数据的压缩处理单元；和 输出由所述压缩处理单元压缩后的压缩图像数据的输出单元， 所述输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据， 所述压缩处理单元基于传输线路的传输错误率来变更图像数据的压缩处理。
31.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 数据传输单元，其切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来输出数据， 所述数据传输单元分所述第一期间和所述第二期间输出所述压缩编码信息， 所述压缩处理单元在传输线路的传输错误率比规定的传输错误率高的情况下，以低压缩率进行压缩处理来减少压缩图像数据，和/或提高在第一期间输出的所述压缩编码信息或在第二期间输出的所述压缩编码信息的冗余度。
32.如权利要求31所述的图像传输装置，其特征在于: 所述数据传输单元在传输线路的传输错误率比规定的传输错误率高的情况下延长所述第一期间。
33.如权利要求31所述的图像传输装置，其特征在于: 所述数据传输单元在传输线路的传输错误率比规定的传输错误率高的情况下延长所述第二期间。
34.如权利要求31所述的图像传输装置，其特征在于: 所述数据传输单元在传输线路的传输错误率比规定的传输错误率低的情况下延长所述第一期间，并且在所述第一期间输出要在所述第二期间输出的压缩编码信息。
35.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 数据传输单元，其在第一期间至少输出压缩图像数据和压缩编码信息数据，在容错性比所述第一期间高的第二期间至少输出声音数据； 所述压缩处理单元在传输线路的传输错误率比规定的传输错误率高的情况下，以低压缩率进行压缩处理来减少压缩图像数据，并且在第二期间传输压缩编码信息的至少一部分。
36.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 对传输线路输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述压缩处理单元根据内容的种类来变更压缩率或压缩方式。
37.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 压缩图像数据的步骤；和 输出压缩后的压缩图像数据的步骤， 分第一期间和与该第一期间不同的第二期间输出压缩图像数据， 基于传输线路的传输错误率来变更图像数据的压缩处理。
38.一种从图像传输装置压缩并传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来输出数据的步骤， 分所述第一期间和所述第二期间输出所述压缩编码信息， 在传输线路的传输错误率比规定的传输错误率高的情况下，以低压缩率进行压缩处理来减少压缩图像数据，和/或提高在第一期间输出的所述压缩编码信息或在第二期间输出的所述压缩编码信息的冗余度。
【文档编号】H04N21/442GK103988518SQ201180075041
【公开日】2014年8月13日 申请日期:2011年11月25日 优先权日:2011年11月25日
【发明者】稻田圭介, 甲展明, 小味弘典 申请人:日立麦克赛尔株式会社
【专利摘要】任何现有技术文献中，都没有考虑更忠实地保持并传输更大尺寸的图像(也称“影像”，下同)数据。本发明的传输图像数据的图像传输装置特征在于，具有：压缩图像数据的压缩处理单元；和输出由压缩处理单元压缩后的压缩图像数据的输出单元，输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
【专利说明】图像传输装置，图像传输方法，图像接收装置和图像接收方法
【技术领域】
[0001]本发明涉及影像信息的发送接收。
【背景技术】
[0002]近年来，数字图像处理中处理的像素数，随着面向一般用户的显示器的4k2k(3840X 2160 像素)化、播送的 HD (High Definition: 1920X 1080 像素)化、数码摄像机的影像传感器和显示器的高像素化，而逐渐增加。
[0003]在设备之间传输这些图像数据的方式，有HDMI (High-Definition MultimediaInterface (HDMI Licensing, LLC 的注册商标))标准和由 VESA (Video ElectronicsStandards Association)制定的DisplayPort (VESA的注册商标或商标)标准等。
[0004]上述HDMI的数据传输方式中，在专利文献I中记载了 “选择性地发送非压缩影像信号或者对于该非压缩影像信号用接收装置能够支持的压缩方式实施压缩处理得到的压缩影像信号，在传输线路的传输比特率内，能够良好地发送要求的比特率的影像信号”(参考专利文献I的[0048]，并且关于压缩方式，记载了“数据压缩部121-1?121-n分别对从编解码器(codec) 117输出的非压缩的影像信号以规定的压缩比进行压缩处理，输出压缩后的影像信号。数据压缩部121-1?121-n构成影像信号压缩部。数据压缩部121-1?121-n分别用相互不同的压缩方式进行数据压缩处理。例如，压缩方式可以考虑“RLE(RunLength Encoding)，，、“Wavelet，，、“SBM(Super Bit Mapping(索尼的注册商标)，，、“LLVC(LowLatency Video Codec) ”、“ZIP” 等”(参考专利文献 I 的[0077])。
[0005]此外，HDMI中，图像数据米用 TMDS (Transition Minimized DifferentialSignaling(Silicon Image, Inc.的注册商标))方式的数据传输格式,其一例在专利文献2
中表示。
[0006]先行技术文献
[0007]专利文献
[0008]专利文献1:日本特开2009-213110号公报
[0009]专利文献2:日本特表2005-514873号公报
【发明内容】
[0010]发明要解决的课题
[0011]但是，两个先行技术文献中，都没有考虑更忠实地保持并传输更大尺寸的图像(也称“影像”，下同)数据。
[0012]用于解决课题的方法
[0013]为了解决上述课题，例如采用权利要求中记载的结构。
[0014]本申请包括多种解决上述课题的手段，举其一例，是一种传输图像数据的图像传输装置，其特征在于，具有:压缩图像数据的压缩处理单元；和输出由压缩处理单元压缩后的压缩图像数据的输出单元，输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
[0015]此外，举另一例，是一种传输图像数据的图像传输装置，其特征在于，具备:对由多个成分构成的图像数据进行压缩处理的压缩处理单元；和输出压缩图像数据的数据传输单元，数据传输单元基于图像数据的各成分来变更该图像数据的输出方法。
[0016]此外，举另一例，是一种传输图像数据的图像传输装置，其特征在于，具备:压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息；和输出压缩图像数据和压缩编码信息的数据传输单元，压缩编码信息的冗余性比压缩图像数据高。
[0017]此外，举另一例，是一种传输图像数据的图像传输装置，其特征在于，具备:压缩图像数据的压缩处理单元；和输出由压缩处理单元压缩后的压缩图像数据的输出单元，输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据，压缩处理单元基于传输线路的传输错误率来变更图像数据的压缩处理。
[0018]发明效果
[0019]根据上述方法，能够更忠实地保持并传输更大尺寸的图像数据。
【专利附图】
【附图说明】
[0020]图1是第一实施例的图像传输装置和图像接收装置的一例。
[0021]图2是第一实施例的图像数据的有效/消隐期间的一例。
[0022]图3是第一实施例的压缩的图像数据的单位的一例。
[0023]图4是第一实施例的压缩的图像数据的单位的一例。
[0024]图5是第一实施例的主压缩编码信息和副压缩编码信息和压缩图像数据的结构的一例。
[0025]图6是第一实施例的数据传输的时序的一例。
[0026]图7是第一实施例的压缩处理部的一例。
[0027]图8是第一实施例的压缩处理部的一例。
[0028]图9是第一实施例的压缩处理部的一例。
[0029]图10是第一实施例的压缩部A的一例。
[0030]图11是第一实施例的压缩部A的一例。
[0031]图12是第一实施例的纠错编码生成部的一例。
[0032]图13是第一实施例的数据传输部的一例。
[0033]图14是第一实施例的压缩编码信息分组(packet)的头的一例。
[0034]图15是第一实施例的压缩编码信息分组的数据的一例。
[0035]图16是第一实施例的压缩编码信息分组的头的一例。
[0036]图17是第一实施例的压缩编码信息分组的数据的一例。
[0037]图18是第一实施例的压缩编码信息的一例。
[0038]图19是第一实施例的图像接收装置的EDID描述的一例。
[0039]图20是第一实施例的数据接收处理部的一例。
[0040]图21是第一实施例的解压缩处理部的一例。[0041]图22是第一实施例的解压缩处理部的一例。
[0042]图23是第一实施例的解压缩处理部的一例。
[0043]图24是第一实施例的解压缩处理部的一例。
[0044]图25是第一实施例的数据传输的时序的一例。
[0045]图26是第一实施例的数据传输的时序的一例。
[0046]图27是第一实施例的压缩编码信息的一例。
[0047]图28是第一实施例的压缩编码信息的一例。
[0048]图29是第二实施例的串行器(Serializer)的波形的一例。
[0049]图30是第二实施例的串行器输出的数据结构的一例。
[0050]图31是第二实施例的声音数据的分组结构的一例。
[0051]图32是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0052]图33是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0053]图34是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0054]图35是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0055]图36是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0056]图37是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0057]图38是第二实施例的与压缩图像数据的各成分对应的传输线路的比特分配的一例。
[0058]图39是第三实施例的不附加主压缩编码信息的冗余度时的数据结构的一例。
[0059]图40是第三实施例的附加了主压缩编码信息的冗余度时的数据结构的一例。
[0060]图41是第三实施例的附加了主压缩编码信息的冗余度时的数据结构的一例。
[0061]图42是第三实施例的附加了主压缩编码信息的冗余度时的数据结构的一例。
[0062]图43是第三实施例的附加了副压缩编码信息的冗余度时的数据结构的一例。
[0063]图44是第四实施例的与传输错误率对应的压缩率、水平消隐期间和冗余度的分配的一例。
[0064]图45是第四实施例的与传输错误率对应的压缩率、水平消隐期间和冗余度的分配的一例。
[0065]图46是第四实施例的与传输错误率对应的压缩方式、水平消隐期间和冗余度的分配的一例。
[0066]图47是第五实施例的与内容对应的压缩率、水平消隐期间和冗余度的分配的一例。
[0067]图48是第六实施例的主压缩编码信息、副压缩编码信息和压缩图像数据、和声音分组的传输时序的一例。[0068]图49是第六实施例的主压缩编码信息、副压缩编码信息和压缩图像数据、和声音分组的传输时序的一例。
【具体实施方式】
[0069]现有技术中，存在虽然非压缩图像数据传输方式是延迟时间最小的图像数据传输方式，但为了发送大尺寸的图像数据需要高速的传输线路的课题。为了解决该课题，提出了压缩并传输图像数据的方式，但存在传输线路上发生错误时，在由多个像素构成的压缩块单位中，显示图像紊乱的课题。此外，存在能够在确保了高容错性的消隐期间中传输的数据量比能够在有效像素期间中传输的数据量少的课题。
[0070]本实施例中，在压缩并传输图像数据的传输方式中，按每个压缩块单位进行压缩，生成压缩编码信息，在压缩编码信息中，使重要性高的压缩编码信息(以下称为主压缩编码信息)在容错性高的消隐期间中传输，由此解决该课题。此外，其他压缩编码信息(以下称为副压缩编码信息)与压缩图像数据同样在有效期间中传输。以下用【专利附图】
【附图说明】该实施例。
[0071](实施例1)
[0072]以下说明本实施例的图像传输装置和图像接收装置的实施方式。
[0073]图1是表示本实施例的图像传输系统的框图，是用缆线300使图像发送装置100与图像接收装置200连接的结构。
[0074]图像发送装置100是传输图像数据的图像发送装置，是用HDMI缆线等将为了能够接收并视听数字播送而解码后的图像数据、记录介质中记录的图像数据、用相机等拍摄的图像数输出到其他设备的设备。作为图像发送装置100的一例，有录像机、内置了录像机功能的数字TV、内置了录像机功能的个人计算机、装载了相机功能和录像机功能的便携式电话、摄录机等。
[0075]图像接收装置200是使用HDMI缆线等输入图像数据并将图像输出到监视器的显示设备。作为图像接收装置200的一例，有数字TV、显示器、投影仪、便携式电话、电子看板设备等。
[0076]缆线300是在图像发送装置100与图像接收装置200的设备之间进行图像数据等的数据通信的数据传输线路。作为缆线300的一例，有与HDMI标准或DisplayPort标准对应的有线缆线、或者进行无线方式的数据通信的数据传输线路等。
[0077]首先，说明图像发送装置100的结构。
[0078]输入部101、102、103是用于将图像数据输入到图像发送装置100的输入部。作为输入到输入部101、用调谐器接收处理部105处理的图像数据的一例，有作为来自电视台或广播卫星等中继站的播送信号输入的数字播送。对输入部101输入该来自电视台或广播卫星等中继站的播送信号。
[0079]作为输入到输入部102、用网络接收处理部106处理的图像数据的一例，有利用互
联网的宽带连接经由网络发布的数字播送、和信息内容等。
[0080]作为输入到输入部103、用记录介质控制部107处理的图像数据的一例，有与输入部103连接的外部记录介质中记录的内容。此外，作为由记录介质控制部107处理的影像数据的一例，也有图像发送装置100中内置的记录介质108中记录的内容。作为与输入部103连接的外部记录介质、或者图像发送装置100中内置的记录介质108的一例，有光盘、磁盘、半导体存储器等。
[0081]调谐器接收处理部105是将输入的播送信号变换为比特流的接收处理部，此处将RF 频段(Radio Frequency)的播送信号频率变换为 IF 频段(Intermediate Frequency),成为不依赖于接收频道的一定频段的信号，对为了传输而施加的调制操作进行解调而成为解调后的比特流。
[0082]作为比特流的一例，有MPEG2传输流(以下记作MPEG2-TS)、和符合MPEG2-TS的格式的比特流等。以下的比特流以MPEG2-TS为代表进行说明。
[0083]上述调谐器接收处理部105进而检测并纠正传输途中发生的编码的错误，对纠错后的MPEG2-TS进行加扰的解除之后，选择复用了进行视听或记录的节目的I个转发器频率，将该选择的I个转发器内的比特流分离为I个节目的音频和视频的分组。
[0084]来自上述调谐器接收处理部105的MPEG2-TS，通过数据总线181供给到流控制部
111。流控制部111为了在上述调谐器接收处理部105中保持接收分组时的间隔，而从接收的分组内检测作为时刻管理信息的PTS(Presentation Time Stamp)、和MPEG系统的基准译码器内部的STC(System Time Clock),在根据检测结果修正后的时刻附加时间戳。
[0085]将附加了上述时间戳的分组对解码器部112或者记录介质控制部107的某一方或双方供给。到解码器部112的数据总线194用于视听图像数据时的处理，到记录介质控制部107的数据总线193在将图像数据记录在记录介质中时使用。
[0086]上述流控制部111的数据总线192中输入从输入部102经由网络接收处理部106输入的MPEG2-TS。上述数据总线192是取得经由网络发布的数字播送或数字内容的输入部。
[0087]进而，与输入部103连接的外部的记录介质、或图像发送装置100中内置的记录介质108中记录的数字播送或数字内容，被记录介质控制部107读取为MPEG2-TS，通过数据总线193输入到上述流控制部111。上述流控制部111选择这些输入中的至少I个以上，输出到解码器部112。
[0088]解码器部112对从上述流控制部111输入的MPEG2-TS进行解码，将生成的图像数据输出到显示处理部113。显示处理部113对于输入的图像数据，例如实施OSD (On ScreenDisplay)叠加处理、旋转、放大或缩小处理、帧率变换处理之后,输出到压缩处理部114。
[0089]压缩处理部114对来自显示处理部113的图像数据实施压缩处理，输出到数据传输部115。
[0090]数据传输部115将用压缩处理部114压缩后的图像数据(以下称为压缩图像数据)变换为适合传输的形式的信号并从输出部116进行输出。关于图像数据的传输，适合缆线传输的形式的信号的一例在HDMI标准中有记载。HDMI中，图像数据采用TMDS方式的数据传输格式。
[0091]输入部104是用于输入控制图像发送装置100的动作用的信号的输入部。作为输入部104的一例，有从遥控器发送的信号的接收部、和装置主体上具备的按钮等。来自输入部104的控制信号，供给到用户IF109。上述用户IF109将来自输入部104的信号输出到控制部110。控制部110按照输入部104的信号，控制图像发送装置100整体。作为控制部110的一例，有微处理器等。来自图像发送装置100的图像数据，通过缆线300供给到图像接收装置200。
[0092]接着说明图像接收装置200的结构。
[0093]输入部201中输入适合缆线传输的形式的信号。输入到上述输入部201的信号，被供给到数据接收处理部205。
[0094]数据接收处理部205实施从适合缆线传输的形式的信号变换为规定的数字数据的处理，将变换后的数字数据输出到解压缩处理部206。
[0095]解压缩处理部206对用上述图像发送装置100内的压缩处理部114实施的压缩处理进行解压缩，生成图像数据，输出到显示处理部207。
[0096]显示处理部207对输入的图像数据实施显示处理。作为显示处理的一例，有OSD叠加处理、用于变换为显示部208的分辨率的放大或缩小处理、旋转处理、帧率变换处理等。显示处理部207的输出输出到显示部208。
[0097]显示部208将输入的图像数据变换为符合显示方式的信号并在画面上显示。作为显示部208的一例,有液晶显示器、等离子体显示器、有机EL(Electro-Luminescence)显示器、投影仪投影显示器等显示部。
[0098]输入部202是用于输入控制图像接收装置200的动作用的信号的输入部。作为输入部202的一例，有从遥控器发送的信号的接收部、和装置主体上具备的按钮等。来自输入部202的控制信号，被供给到用户IF203。上述用户IF203将来自输入部202的信号输出到控制部204。控制部204是按照输入部202的信号控制图像接收装置200整体的控制部。
[0099]图2是表示I帧期间的传输图像数据的有效区域和不传输图像数据的消隐期间的图。
[0100]400所示的区域表示垂直期间，垂直期间400由垂直消隐期间401和垂直有效期间402构成。VSYNC信号是在从垂直消隐期间401的开头起规定的线数的期间中为1、在其他垂直消隐期间和垂直有效期间402的期间中为O的Ibit的信号。规定的线数的一例是4线等。
[0101]403所示的区域表示水平期间，水平期间403由水平消隐期间404和水平有效期间405构成。HSYNC信号是在从水平消隐期间404的开头起规定的像素数的期间中为1、在其他水平消隐期间和水平有效期间405的期间中为O的Ibit的信号。规定的像素数的一例
是40像素。
[0102]有效期间406表示被垂直有效期间402和水平有效期间405的期间包围的区域，对该期间分配图像数据。此外，消隐期间407是被垂直消隐期间401和水平消隐期间404的期间包围的区域。
[0103]本实施例中，上述结构中，在有效期间406中发送压缩图像数据和副压缩编码信息，在消隐期间407中发送主压缩编码信息。
[0104]消隐期间407传输将声音数据和其他附属数据分组化后的数据。
[0105]对于该声音数据等的分组在消隐期间407中发送具有可靠性的分组的方法，例如在日本特表2005-514873号公报中有公开。
[0106]该结构中，对于消隐期间的分组的数据加入了纠错编码，所以对于传输线路中发生的错误能够进行修正，容错性强。此外，消隐期间的分组的数据传输用的数据，采用在物理上不同的2个信道中传输的结构，每隔一定时间切换传输的信道，所以对于单侧的信道中突发性地发生的错误，因为另一方的信道不受影响，所以能够进行数据错误的修正。关于错误的纠正率，存在相对于水平有效期间为10_9、水平消隐期间为10_14的改善效果。
[0107]本例中，在有效期间406中传输每I个时钟周期24bit的图像数据，在消隐期间407中在32个时钟周期中传输由3byte的头和28byte的数据构成的I个分组。
[0108]例如，用444格式、帧频率60Hz传输水平3840有效像素、垂直2160有效线、YCbCr亮度色差信号的各12bit的情况下，需要891MHz这样非常高的时钟频率。高时钟频率不仅需要发送接收部的成本，能够稳定发送图像的缆线长度也会变短，易用性变差。
[0109]根据本实施例，2/3压缩为594MHz、1/3压缩为297MHz，这样能够接近实用的时钟频率。此外，在YCbCr亮度色差信号的各8bit的444格式、和各12bit的422格式中，能够用1/2压缩成为297MHz这样实用的时钟频率。
[0110]水平3840有效像素、垂直2160有效线中，例如水平消隐期间是水平560消隐像素，垂直消隐期间是垂直90消隐线。以下，用将水平3840有效像素、垂直2160有效线、YCbCr亮度色差信号的各12bit的444格式、帧频率60Hz的影像信号压缩为1/3的情况为例进行说明。
[0111]压缩后的时钟频率是297MHz，在水平1940有效像素、垂直2160有效线、水平280消隐像素、垂直90消隐线的条件下传输时，容易在接收侧稳定地再现2倍频率的原时钟594MHz。在水平有效像素期间中，如果将每I个像素的YCbCr亮度色差信号的各12bit共计36bit压缩为1/3即12bit，则因为能够传输压缩后的每I个像素24bit，所以能够传输原像素的2个像素，压缩后的时钟频率是原时钟的一半。
[0112]因为每32时钟周期能够传输I个分组，所以压缩后的水平280消隐像素中能够传输最大8个分组。另一方面，声音数据能够传输每I个分组24bitX8ch。因为图像数据的水平频率是135kHz ( = 60Hz X (2160+90))，所以8ch传输192kHz采样的24bit线性PCM声音的情况下在I个水平消隐期间中需要最大2个分组。其余6个分组优选能够在168byte (=28byteX6个分组)以内描述压缩编码方式信息。
[0113]另一方面，以上述32个像素为单位块压缩的情况下，因为是水平3840有效像素，所以需要120块的YCbCr亮度色差信号的各压缩编码方式信息，共计360个描述空间。例如用3bit表达主压缩编码信息时，有135byte的描述空间，能够用5个分组传输，所以能够与192kHz、8ch的大容量声音数据传输共同进行。
[0114]图3和图4是表不对压缩处理部114输入的图像数据的一例的图。表不了水平方向上η像素、垂直方向上m线的亮度信号。色差信号在444格式的情况下，是与亮度信号相同的格式。作为像素数η和线数m的一例，有n = 1920、m = 1080的所谓全HD图像和η =3840、m = 2160的所谓4k2k图像等。
[0115]此处，设用压缩处理部114压缩的图像数据的单位块(以下称为压缩块)，是水平方向I像素和垂直方向k像素。图3中，501和502表示I = 32、k = I的例子，由同一线内连续的32个像素的数据构成。压缩处理部114以该图像数据的单位进行压缩。
[0116]图4中，503和504表示I = 16,k = 2的例子，由上下2线之间连续的16个像素的数据构成。压缩处理部114以该图像数据的单位进行压缩。作为压缩处理，可以具有水平压缩部和垂直压缩部，准备垂直方向k像素数(线数)不同的kl和k2(kl〈k2)的图像数据单位块，水平压缩部对kl的图像数据单位块进行压缩，垂直压缩部134对k2的图像数据单位块进行压缩。
[0117]作为压缩的图像数据的单位的一例，用32像素为例进行说明，但也可以是64像素或128像素等单位。
[0118]在输入的色差信号是422格式的情况下，色差信号的Cb成分和Cr成分是按每I个像素交替的数据。例如4k2k图像中，可以将Cb成分和Cr成分合并作为η = 3840、m =2160的图像数据处理。一般而言Cb成分彼此之间、Cr成分彼此之间的相关性高，所以通过将Cb成分和Cr成分分别作为η = 1920、m = 2160处理，而成为仅在同一成分中压缩的图像数据的单位块，由此能够提高压缩效率。
[0119]在输入的色差信号是420格式的情况下,色差信号的Cb成分和Cr成分相对于4个像素的Y信号是I个像素的数据。例如4k2k图像中，可以将Cb成分和Cr成分合并作为η=1920、m = 2160的图像数据处理。一般而言Cb成分彼此之间、Cr成分彼此之间的相关性高，所以通过将Cb成分和Cr成分分别作为n= 1920、m = 1080处理,而成为仅在同一成分中压缩的图像数据的单位，由此能够提高压缩效率。
[0120]压缩编码信息由主压缩编码信息和副压缩编码信息构成。基于主压缩编码信息和副压缩编码信息，能够进行从压缩图像数据到原图像数据的解压缩处理。
[0121]仅用主压缩编码信息能够进行简易的解压缩处理或者部分解压缩处理。
[0122]主压缩编码信息用与副压缩编码信息相比容错性更高的传输线路传输。本实施例中，在有效期间406中传输压缩图像数据和副压缩编码信息，在消隐期间407中传输主压缩编码信息。作为主压缩编码信息在消隐期间407中的传输例，有在垂直消隐期间401中传输线路单位中共用的主压缩编码信息、在水平消隐期间404中传输与同一线中的压缩块对应的主压缩编码信息的方法。
[0123]通过采用上述结构，即使在传输错误率高的传输线路中副压缩编码信息中发生错误的情况下，主压缩编码信息中发生错误的概率也会大幅降低。因此，在传输错误率高的传输线路中，副压缩编码信息中发生错误的情况下，通过将使用主压缩编码信息简易解压缩后的图像数据或部分解压缩后的图像数据用于错误修正，能够抑制显示的紊乱。此外，通过在主压缩编码信息中包括压缩块尺寸，在副压缩编码信息中发生错误的情况下，能够在压缩块内抑制显示的紊乱。
[0124]此外，压缩编码信息可以仅由主压缩编码信息或副压缩编码信息构成。
[0125]压缩编码信息和压缩图像数据的结构例在图5中表示。
[0126]本例中，压缩块600的单位由子压缩块610、620构成，各子压缩块610、620由像素611、612、613、614 和像素 621、622、623、624 构成。
[0127]压缩后的压缩块的结构的一例在630中表示。压缩块630由压缩编码信息631和压缩图像数据632构成。压缩图像数据632是通过对像素数据611、612、613、614、621、622、623、624压缩而生成的压缩图像数据。压缩编码信息631是压缩处理中生成的信息。本结构中，在有效期间406中传输压缩编码信息的情况下，当传输错误率高时对于压缩编码信息发生错误的概率也较高，结果存在压缩块单位中容易发生显示紊乱的课题。此外，在消隐期间407中传输压缩编码信息的情况下，因为与有效期间406相比能够传输的数据量大幅减少，所以压缩编码信息量的削减成为课题。
[0128]压缩后的压缩块的结构的另一例在640中表示。本例中，使压缩编码信息由主压缩编码信息641、副压缩编码信息642、644这2种构成。压缩块640由主压缩编码信息641、副压缩编码信息642和644、压缩图像数据643和645构成。压缩图像数据643是通过对属于子压缩块610的图像数据611、612、613、614进行压缩而生成的压缩图像数据。副压缩编码信息642是对像素数据611、612、613、614的压缩处理中生成的信息。压缩图像数据645是通过对属于子压缩块620的图像数据621、622、623、624进行压缩而生成的压缩图像数据。副压缩编码信息644是对像素数据621、622、623、624的压缩处理中生成的信息。
[0129]压缩后的压缩块的结构的另一例在650中表示。本例中，使压缩编码信息由主压缩编码信息651、副压缩编码信息652这2种构成。压缩块650由主压缩编码信息651、副压缩编码信息652、压缩图像数据653构成。压缩图像数据653是通过对压缩块600中包括的图像数据611、612、613、614、621、622、623、624压缩而生成的压缩图像数据。主压缩编码信息651和副压缩编码信息652是对压缩块600的压缩处理中生成的信息。
[0130]压缩后的压缩块的结构的另一例在660中表示。本例与压缩后的压缩块650的差异在于副压缩编码信息662是对压缩后的压缩块650中的副压缩编码信息652进一步进行压缩后的信息这一点。虽然此处未图示，但也可以通过对主压缩编码信息651进一步进行压缩，而实现传输数据量的削减。
[0131]采用上述压缩后的压缩块640、650、660的结构的情况下，通过使主压缩编码信息在比副压缩编码信息容错性更高的传输线路中传输，而能够抑制在容错性高的传输线路中传输的数据量，并且抑制传输错误对显示图像(复原图像)的影响。
[0132]图6是于图5所不的压缩后的压缩块640、650、660对应的传输时序的说明图。700和702是有效期间406，701是水平消隐期间404。710、711、712是在有效期间700中传输的压缩前的I线的图像数据。本例中，对于3个压缩块710、711、712进行压缩处理。
[0133]730是对压缩块710、711、712的压缩处理中生成的主压缩编码信息。731、732、733是对压缩块710、711、712的压缩处理中生成的压缩块。压缩块由压缩图像数据和压缩处理中生成的副压缩编码信息构成。压缩后的压缩块731的结构的一例用740、750、760表示。它们分别与图5所示的子压缩块640、650、660对应。
[0134]主压缩编码信息730在比有效期间700、702容错性更高的水平消隐期间701中传输。此外，对图像数据710的压缩处理中生成的由压缩图像数据和副压缩编码信息构成的压缩后的压缩块731、732、733在水平消隐期间701后的下一个有效期间702中传输。其中，也可以在垂直消隐期间401中传输主压缩编码信息的一部分或全部。
[0135]主压缩编码信息和副压缩编码信息的一例用图28说明。
[0136]考虑进行压缩块920的单位是水平32像素、子压缩块921、922、923、924的单位是8像素的压缩处理的情况。将与开头的子压缩块921对应的压缩编码信息926作为主压缩编码信息，与此外的3个子压缩块对应的压缩编码信息927、928、929作为副压缩编码信息。
[0137]主压缩编码信息由与开头的子压缩块921对应的压缩编码信息926、和子压缩块921的解压缩处理中使用的其他压缩编码信息(例如各子压缩块中共用的共用压缩编码信息925等)构成。
[0138]副压缩编码信息由与从第2个起的子压缩块922、923、924对应的压缩编码信息927、928、929 构成。
[0139]通过采用本例的结构，在传输错误率高的传输线路中，副压缩编码信息中发生了错误的情况下，通过将使用主压缩编码信息解压缩后的属于开头的子压缩块的图像数据用于错误修正，能够抑制显示的紊乱。作为错误修正的一例，有根据属于用主压缩编码信息解压缩后的各压缩块的开头的子压缩块的图像数据，生成属于发生了错误的子压缩块的插值图像并显示的方法。
[0140]作为传输线路的一例，有在有效期间406中传输副压缩编码信息(图28(c))和压缩部输出(图28(d))、在容错性更高的水平消隐期间404中传输主压缩编码信息的方法。
[0141]主压缩编码信息和副压缩编码信息的另一例用图27说明。
[0142]考虑压缩块900的单位是水平32像素、子压缩块901、902、903、904的单位是8像素的压缩处理。
[0143]第一压缩部(压缩部A133)中，对子压缩块901、902、903、904以子压缩块单位进行第一压缩处理，生成子压缩块单位的副压缩编码信息(第一压缩编码信息905、906、907、908)和压缩图像数据(第一压缩图像数据909、910、911、912)。第二压缩部(压缩部B134)中，对输入的4个子压缩块单位的压缩图像数据(第一压缩图像数据909、910、911、912)进一步进行第二压缩处理，生成I个主压缩编码信息(第二压缩编码信息914)和压缩图像数据(第二压缩图像数据914)和压缩图像数据(第二压缩图像数据915)。通过使主压缩编码信息在比副压缩编码信息(第一压缩编码信息905、906、907、908)和压缩图像数据(第二压缩图像数据915)的传输线路容错性更高的传输线路中传输，即使在传输错误率高度的传输线路中，也能够进行直到子压缩块单位的解压缩处理，能够将错误的影响范围抑制在子压缩块范围内。
[0144]通过在第二压缩编码信息914之外还将第一压缩编码信息905、906、907、908中共用的压缩编码信息913作为主压缩编码信息传输，能够进一步提高容错性。
[0145]作为压缩编码信息的另一例，考虑例如压缩块单位是水平32像素、子压缩块单位是8像素、按子压缩块单位附加尺寸信息的压缩处理的情况。将每个子压缩块单位的尺寸信息的总和、即压缩块单位的尺寸信息包括在主压缩编码信息中，按每个子压缩块单位将尺寸信息包括在副压缩编码信息中。通过在容错性更高的传输线路中传输主压缩编码信息，在传输错误率高的传输线路中，副压缩编码信息中发生了错误的情况下，通过基于主图像编码信息生成压缩块单位的尺寸，按该尺寸跳过解压缩处理，能够防止错误对下一个压缩块的影响。
[0146]在容错性高的传输线路中，能够传输的数据量充裕的情况下，也可以将与各子压缩块对应的尺寸信息全部作为主压缩编码信息传输。该情况下，当副压缩编码信息中发生了错误时，通过基于主图像编码信息生成发生了错误的子压缩块的尺寸，不进行该尺寸的解压缩处理，能够防止错误对其他子压缩块的影响。
[0147]图7是表示压缩处理部114的结构的一例的框图。
[0148]输入部130是用于对压缩处理部114输入图像数据的输入部。
[0149]输入的图像数据被供给到压缩部A133、压缩部B134、压缩部C135。
[0150]压缩部A133、压缩部B134、压缩部C135对输入的图像数据进行分别不同的压缩处理，生成压缩编码信息和压缩图像数据。其中，由控制信号131指定的压缩部以外的压缩部，也能够通过不进行压缩处理或停止工作时钟本身，而削减消耗电力。
[0151]压缩部A133、压缩部B134、压缩部C135由对构成压缩块的多个图像数据进行压缩的压缩电路构成。作为压缩方式的一例，由在水平方向上进行Wavelet变换运算，对其运算结果编码的压缩方式等构成。压缩方式可以应用阿达马变换、游程编码、霍夫曼编码、差分编码等。
[0152]此外，作为其他压缩方式的一例，由对垂直方向的多个图像数据进行压缩的压缩电路构成。作为压缩方式的一例，由将垂直方向2线、水平方向16像素的图像数据作为压缩的图像数据的单位块，首先对于垂直方向取差分，接着对水平方向取差分。对其结果编码的压缩方式等构成。
[0153]此外，作为其他压缩方式的一例，由在输入444格式或422格式的色差信号时,疏化抽取为422格式或420格式的电路构成。输入了 444格式或422格式的情况下，在后述的图8所示的压缩处理部114的结构中，超过了规定的压缩率的情况下，也可以进行疏化抽取(間引务)为422格式或420格式的处理。
[0154]此处，压缩率指的是压缩前的数据量与压缩后的数据量的比。例如，压缩前的数据量是100、压缩后的数据量是30的情况下，压缩率是30%。从而，压缩率越高，压缩后的数据量越多，画质劣化越少。
[0155]图10是表示压缩部A133的结构的一例的框图。
[0156]输入部150是用于对压缩部A133输入图像数据的输入部。
[0157]输入部151是用于输入控制压缩部A133用的控制信号的输入部。
[0158]第一压缩部153是对输入的图像数据进行压缩处理，生成压缩编码信息和压缩图像数据的区块。由第一压缩部153生成的压缩编码信息，被供给到压缩编码信息生成部155。此外，由第一压缩部153生成的压缩图像数据，被供给到选择部156。
[0159]压缩编码信息生成部155是根据输入的压缩编码信息生成主压缩编码信息和副压缩编码信息的区块。压缩编码信息生成部155也可以具有暂时存储生成的主压缩编码信息和副压缩编码信息的存储器。
[0160]选择部156是选择从第一压缩部153供给的压缩图像数据、和从压缩编码信息生成部155供给的主压缩编码信息和副压缩编码信息并输出的区块。
[0161]图11是表示压缩部A133的结构的另一例的框图。
[0162]输入部160是用于对压缩部A133输入图像数据的输入部。
[0163]输入部161是用于输入控制压缩部A133用的控制信号的输入部。
[0164]第一压缩部163是对输入的图像数据进行第一压缩处理，生成副压缩编码信息和压缩图像数据的区块。由第一压缩部163生成的副压缩编码信息被供给到选择部166。此夕卜，由第一压缩部163生成的压缩图像数据被供给到第二压缩部164。
[0165]第二压缩部164是对输入的压缩图像数据进行第二压缩处理，生成主压缩编码信息和压缩图像数据的区块。由第二压缩部164生成的主压缩编码信息和压缩图像数据被供给到选择部166。
[0166]选择部166是选择从第一压缩部163供给的副压缩编码信息、和从第二压缩部164供给的主压缩编码信息和压缩图像数据并输出的区块。
[0167]根据本例的结构，能够进行图27所示的2级的压缩处理。此外，本例中，采用2个压缩部为例进行说明，但也可以设置3级以上的压缩部。
[0168]以上说明了动作的压缩部A133、压缩部B134、压缩部C135的输出被供给到选择部136。
[0169]本例中，用具有3个压缩部133、134、135的压缩处理部进行说明，但压缩部也可以仅有I个或2个，也可以具有4个以上压缩部。
[0170]选择部136选择压缩部A133、压缩部B134、压缩部C135中满足规定的压缩率并且画质指数较高的，供给到纠错编码生成部137。画质指数例如是表示将压缩图像数据复原后的图像数据与压缩前的图像数据的差异越小则越好的值的指数。不发生压缩损失、能够进行可逆编码的情况下是最高值。为了简化画质指数的计算，也可以按各压缩方式准备画质指数的值。与保持444格式压缩发生压缩损失的情况相比，也可以将疏化抽取为422格式后能够进行可逆编码的情况定义为较高的画质指数。在数据量因压缩反而增加的情况下，通过疏化抽取为422格式或420格式进行压缩、或者减少量化bit数可以达成规定的压缩率，但要设定与该疏化抽取和量化bit数减少相应的画质指数。
[0171]此外，也可以按照从输入部131输入的控制信号，使压缩部A133、压缩部B134、压缩部C135中的某I个的动作有效，使其他2个停止动作。该情况下，从输入部131对选择部136输入表不动作有效的压缩部的控制信息。选择部136基于该控制信息将动作有效的压缩部的输出信号输出到纠错编码生成部137。
[0172]纠错编码生成部136对用压缩部A133、压缩部B134、压缩部C135压缩后的图像数据(压缩图像数据)按单位运算纠错编码，对压缩图像数据附加，并输出到存储器控制部139。纠错方式之一有CRC(Cyclic Redundancy Check)方式和奇偶校验方式等。
[0173]也可以根据数据传输容量判别是否附加纠错编码。这是因为缆线的数据传输容量有限的情况下，附加纠错编码时会较多地疏化抽取像素或灰度等级，导致画面整体的画质劣化。如果传输容量充裕则也可以对压缩图像数据附加纠错编码，提高容错性。也可以通过与有无对压缩图像数据附加纠错的元数据一同传输，而在接收侧判别是否进行纠错处理。此外，也可以根据应用的压缩方式改变纠错处理而改变容错性水平，也可以将表示附加了何种纠错编码的信息作为元数据附加。此外，也可以不进行纠错处理，而是将输入数据直接输出。
[0174]存储器控制部139暂时性地在存储器部140中存储从纠错编码生成部137供给的压缩图像数据、主压缩编码信息和副压缩编码信息。此外，从存储器部140读取副压缩编码信息和压缩图像数据，在有效期间406中输出。此外，从存储器部140读取主压缩编码信息，在输出压缩图像数据的有效期间406前一个的水平消隐期间404中输出。此外，其他方式也可以是I线的带纠错编码的压缩图像数据、主压缩编码信息和副压缩编码信息都在I线的有效期间406内传输，实现传输量的增大。此外，也可以将纠错编码包括在主压缩编码信息中，在水平消隐期间404中输出，由此提高纠错的可靠性。
[0175]输出部132输出来自所述存储器控制部139的压缩图像数据、主压缩编码信息和副压缩编码信息。虽然未图示，图7的各区块的动作按照图1的控制部110的控制信号被控制。
[0176]图12是表 示纠错编码生成部136的结构的一例的框图。对输入部170输入压缩图像数据。将压缩图像数据输入到保持部175和纠错编码运算部173。纠错编码运算部173对输入的压缩图像数据，用生成多项式进行循环运算。
[0177]生成多项式的一例有:(式l)G(X) = X16+X12+X5+l。该生成多项式对输入的压缩图像数据中的各比特取逻辑异或进行循环运算。使运算的单位为压缩图像数据的单位。
[0178]输入部171中输入表示输入压缩图像数据的期间的信号，对时序生成部174供给。时序生成部174对压缩图像数据的有效期间进行计数，将表示处理了压缩的图像数据的单位块的运算的信号作为纠错运算结果输出时序信号，输出到数据保持部175。进而，时序生成电路174将表示压缩图像数据的输入期间的时序信号、和输出压缩图像数据和纠错编码运算结果的时序信号等一同输出到保持部175。
[0179]数据保持部175按照时序生成部174表示的时序，用例如存储器或触发器、延时元件等暂时存储纠错编码运算部173的运算结果和压缩图像数据，使它们依次输出到输出部132。
[0180]图13是表示数据传输部115的结构的一例的框图。
[0181]输入部180将压缩图像数据输出到串行器部184。此外，输入部181中输入图像数据的时钟，并输出到PLL186和输出部182。
[0182]图像数据的时钟使用与非压缩图像数据的标准时间格式中使用的像素时钟同步的时钟。例如，也可以使用将非压缩图像数据的像素时钟2分频后的时钟。该情况下，该非压缩图像数据是12bits的量化图像数据的情况下，时钟上是1/2，量化bit数上是8/12，所以上述规定的压缩率需要设定为1/3以下。时钟除2分频以外，也可以是3/4倍频或2/3倍频。通过将与非压缩图像数据的像素时钟同步的时钟用于压缩图像数据的传输，具有在接受侧复原非压缩图像数据的情况下，通过将传输时钟的2倍或4/3倍、3/2倍等倍频的时钟用作像素时钟，能够使复原数据的抖动最小化的优点。
[0183]PLL186对于输入的时钟生成倍频或分频的时钟。作为倍频的一例，有对于输入的时钟的频率5倍或10倍等。由PLL186生成的时钟可以是I种时钟，也可以是2种时钟。作为I种时钟的例子，有输入的时钟的10倍频。此外，作为2种时钟的例子，有优先考虑数据传输量的第一时钟速度、和优先考虑降低错误发生频度的比第一时钟速度慢的第二时钟速度的时钟。作为速度的一例，有使上述第一时钟速度为输入时钟的10倍频、第二时钟速度为输入时钟的5倍频等。
[0184]将由PLL186生成的倍频后的时钟输出到串行器部184。
[0185]串行器184使输入的YCbCr亮度色差信号的压缩图像数据以10倍频的时钟按Ibit串行化，输出到电平变换部185。在相对于输入到输入部181的I个时钟周期，输入到输入部180的数据有8bit的情况下，也可以使用将该8bit数据映射至IObit串行化的抑制比特流的DC成分的TMDS传输方法等。在与输出部176连接的缆线有3根的情况下，通过对每根缆线进行上述串行处理，能够发送每一输入时钟周期24bit的压缩图像数据。
[0186]电平变换部185经由输出部182输出适合缆线传输的形式的信号。
[0187]图8是表示压缩处理部114的结构的另一例的框图。
[0188]存储器控制部142暂时性地在存储器部140中存储从纠错编码生成部137供给的压缩图像数据、主压缩编码信息和副压缩编码信息。此外，从存储器部140读取副压缩编码信息和压缩图像数据，在有效期间406中输出。此外，从存储器部140读取主压缩编码信息，在输出压缩图像数据的有效期间406前一个的水平消隐期间404中输出。进而，能够从存储器部140读取压缩图像数据，供给到选择部141。
[0189]选择部141是选择从输入部130输入的图像数据、和从存储器控制部142供给的压缩图像数据143中的某一方，供给到压缩部A133、压缩部B134、压缩部C135的区块。此夕卜，也可以将从输入部130输入的图像数据输出到规定的压缩部，并且将压缩图像数据143输出到其他压缩部。根据本例的结构，能够进行图27所示的2级的压缩处理。此外，也可以进一步进行3级以上的压缩处理。
[0190]图9是表示压缩处理部114的结构的另一例的框图。
[0191]选择部138将从纠错编码生成部137供给的主压缩编码信息和副压缩编码信息输出到存储器控制部145，将从纠错编码生成部137供给的压缩图像数据输出到选择部144。
[0192]存储器控制部145暂时性地在存储器部140中存储从选择部138供给的主压缩编码信息和副压缩编码信息。此外，从存储器部140读取副压缩编码信息，通过选择部144在后述的有效期间406中输出。此外，从存储器部140读取主压缩编码信息，通过选择部144在输出副压缩编码信息的有效期间406前一个的水平消隐期间404中输出。
[0193]选择部144是选择从选择部138供给的压缩图像数据、和从存储器控制部145供给的主压缩编码信息和副压缩编码信息，输出到输出部132的区块。
[0194]本例中，选择部138也可以不通过存储器控制部145，而是将副压缩编码信息与压缩图像数据一同直接输出到选择部144。该情况下，存储器控制部145进行对主压缩编码信息的存储器写入和读取处理。通过采用本例的结构，能够将发送机100 —侧的存储器部140具有的存储量抑制为较少。
[0195]在图14?图17中表不传输主压缩编码信息的一部分的分组的一例。
[0196]图14和图16是分组的头的一例，在最初的头数据块HBO中描述表示与本发明的压缩编码传输方式相关的信息的共用的头类型OBh。HBl的各bit和HB2的Bit4?7为了将来扩展用而设为O。HB2的BitO?3所示的Eco_Packet#表示帧内的识别。图15和图17是在头之后传输的28byte的数据的一例。
[0197]图14的头中，对Eco_Packet#分配0h，表示由图14的头与图15的数据构成的分组是各帧内的共用信息(主压缩编码信息)。该分组配置在垂直消隐期间中，在各图像帧中至少发送I次。以下说明图15的数据的内容。
[0198]Color_Sample表示色彩采样信息，例如O表示YCbCr亮度色差信号中的444格式(以下称为YCbCr444)，I表示YCbCr亮度色差信号的422格式(以下称为YCbCr422)，2表示YCbCr亮度色差信号的420格式(以下称为YCbCr420)，3表示RGB信号的444格式(以下称为RGB444)，4?7用于将来扩展。也可以在422格式和420格式中进而追加分配表示CbCr的采样位置信息的BH。
[0199]Eco_Mem在传输压缩图像数据的有效期间406前一个的水平消隐期间中传输后述的图16和图17所示的传输主压缩编码信息的一部分的分组的情况下为0，在传输压缩图像数据的有效期间406后的水平消隐期间中传输的情况下为I。
[0200]CD是Color Depth (色彩深度)，例如 4h表不各YCbCr成分8bit共计 24bit Color,5h表不各YCbCr成分IObit共计30bit Color,6h表不各YCbCr成分12bit共计36bitColor，7h表示各YCbCr成分16bit共计48bit Color，其他用于将来扩展。该定义符合HDMI已规定的Deep Color Mode的定义。
[0201]Eco_FLM在帧内的所有块的压缩编码方式相同的情况下为1，在按每个块设定的情况下为O。在为I的情况下，在后述的Eco-CDO和Eco-CDl、Eco_CD2中分别描述Y、Cb、Cr的压缩编码方式。
[0202]CK_N和CK_M的比(CK_N/CM_M)表示非压缩图像数据的像素时钟与传输压缩后的数据的信道的时钟例如TMDS时钟的频率比。例如如果CM_N = I且CK_M = 2，则相对于4k2k情况下的非压缩图像数据的像素时钟594MHz，传输系统的TMDS时钟为1/2即297MHz。
[0203]Eco_Block表示构成压缩块的像素数。
[0204]Eco_CD0?Eco_CD3表示应用于各图像数据单位块的压缩编码信息的4种候选。如图18中的一例所示，从压缩的图像数据单位的压缩编码信息Ec0_C0de中选择4种。
[0205]由图16的头和图17的数据构成的分组，在各水平消隐期间中传输I个以上。图16的头中的Eco_Packet#表示各线中传输的本分组的序列号，从I开始依次增加I。
[0206]Eco_length_0?Eco_length_39表不在有效期间406中传输的压缩块的尺寸信息。作为尺寸信息的一例，有压缩块的比特尺寸、字节尺寸。此外，也可以是作为压缩块的比特尺寸、字节尺寸的源的信息。例如，压缩块尺寸S_Block取从32bit到64bit的增量为2的值的情况下，有用下式定义压缩块的比特尺寸的方法:
[0207](式 2) S_Block = 32+ (2 X Eco_length_#) (# 为 O ?39)
[0208]上述例子中，Eco_length_# 是 4b i t。
[0209]Eco_length_#可以按Y、Cb、Cr分别规定,也可以用Y、Cb和Cr的压缩块尺寸相加后的值规定。在后者的情况下，能够将Eco_length_#的传输量削减为1/3。
[0210]对压缩块单位规定的压缩编码信息，作为副压缩编码信息与压缩图像数据一同在有效期间406中传输。副压缩编码信息的种类有Eco_Error_0?39和Code_0?Code_39。
[0211]Eco_Error_0?Eco_Error_39表示纠错编码方式。纠错编码方式是在纠错编码生成部136中对有效期间406中传输的数据运算的纠错编码的方式。纠错编码方式之一有CRC(Cyclic Redundancy Check)方式和奇偶校验方式等。
[0212]Code_0?Code_39在各图像数据单位块中对各Y、Cb、Cr成分顺序描述从用图15的Eco_CD0?Eco_CD3描述的4种压缩编码信息中选择的编号。例如，如果表不开头的图像数据单位块的Y成分的压缩编码信息的Code_0是1，则指的是Eco_CDl。如果Eco_CDl表示10，则根据图18，表示对原图像的数据的444格式Y成分用差分编码方式压缩后的数据。
[0213]图4所示的将垂直2线作为图像数据单位块的情况下，第I线的Code_0表示图像数据单位块503的压缩编码信息，第2线的Code_0表示图像数据单位块504的压缩编码信
肩、O
[0214]图15的Color_Sample表示444格式的情况下，Code_l表示第一图像数据单位块的Cb的压缩编码信息，Code_2表示第一图像数据单位的Cr的压缩编码信息，Code_3表示第二图像数据单位块的Y的压缩编码信息。在Color_Sample表示420格式的情况下，Code_l表示第二图像数据单位块的Y的压缩编码信息，Code_2表示第一和第二图像数据单位的Cb (偶数线中为Cr)的压缩编码信息，Code_3表示第三图像数据单位块的Y的压缩编码信息。在C0l0r_Sample表示422格式的情况下，Code_l表示第一和第二图像数据单位块的Cb的压缩编码信息，Code_2表示第二图像数据单位的Y的压缩编码信息，Code_3表示第一和第二图像数据单位块的Cb的压缩编码信息。
[0215]此外，如果Code_0是0，则指的是Eco_CD0，如果Eco_CD0表示6，则根据图18，表示将原图像的数据的444格式的各Y、Cb、Cr成分12bit数据疏化抽取为420格式8比特。该情况下，仅用Y成分的Code_0决定Cb和Cr的传输方式，所以不需要表不Cb成分的Code_l和表不Cr成分的Code_2的信息,记为O即可。
[0216]然后，虽然在图1中未图示，但图像接收装置200中装载有保存表示图像接收装置 200 的性能的 EDID (Enhanced Extended Display Identification Data)的 ROM。也可以在该ROM中附加判别图像接收装置200是否支持压缩解压缩的信息。由此，图像传输装置100从图像接收装置200的保存了 EDID的ROM读取判别是否支持压缩解压缩的信息，如果是支持的装置，则传输压缩后的图像数据，如果是不支持的装置，则不压缩而是按现有的尺寸发送图像，由此能够保持与不支持压缩处理的图像接收装置的兼容性。此外，读取判别是否支持在有效期间406中传输编码信息用的纠错编码方式的信息，如果是支持的装置，则进行纠错编码处理，作为压缩编码信息传输，如果是不支持的装置，则不进行纠错编码处理地发送，由此能够保持与不支持压缩处理的图像接收装置的兼容性。此外，在是不支持的装置的情况下，也可以用消隐期间407中的分组的纠错功能提供对传输错误的容错性。此夕卜，能够通过在显示部208上显示而对用户通知图像接收装置不支持压缩、是现有的图像尺寸、或不支持纠错编码的消息。
[0217]该EDID的描述例在图19中表示。图19表示对称为HDM1-VSDB的区域扩展的例子。
[0218]在第6Byte的Bit2中设置表示是否支持本实施例的压缩编码传输方式的Eco_transfer标志。该区域一直作为预约区域处理，所以在不支持的传统设备中记为0，仅有支持的设备记为I，由此能够维持向后兼容性。在该Eco_transfer标志是I的情况下，Byte9和BytelO的描述有效。
[0219]Block_64和Block_128是表示压缩的图像数据单位块的大小分别支持64像素、128像素的标志。图像数据单位块的大小32像素定义为本压缩图像数据传输支持中的必要模式，为了节约EDID描述空间而不记载。
[0220]Eco-Codel?4分别是表示支持图18中表示了一例的压缩编码方式、Wavelet变换、游程编码、霍夫曼编码、差分编码的标志。
[0221]CLK_1、CLK_3/4、CLK_l/2分别是表示支持与非压缩图像数据时钟相对的TMDS传输时钟的频率是I倍、3/4倍、1/2倍的模式的标志。
[0222]Eco_Error_l?4是在支持各自规定的纠错方式的情况下为1、不支持的情况下为O的标志。
[0223]Eco_Mem在主压缩编码信息支持在传输压缩图像数据的有效期间406前一个的水平消隐期间中传输的情况下为1，在传输压缩图像数据的有效期间406后的水平消隐期间中传输的情况下为2。3表示都支持的情况，O表示都不支持的情况。
[0224]此外，将图像传输装置100作为便携设备使用的情况下，是电池驱动的装置，所以图像传输装置100的消耗电力影响连续使用时间。该情况下，能够压缩传输图像数据而降低数据传输量，减少消耗电力。该效果通过附加例如“省电模式”等功能作为图像传输装置100的工作模式，在从外部供给电源的情况下用非压缩的图像数据传输，在用电池驱动的情况下压缩传输图像数据，由此能够将连续使用时间设定为较长。
[0225]图20是表示数据接收处理部205的结构的一例的框图。[0226]输入部220将由图像发送装置100的电平变换部175变换后的信号输出到电平变换部22。
[0227]电平变换部224将由图像发送装置100电平变换后的信号变换为数字信号并输出到解串器(Deserializer)部225输出。作为电平变换的一例，有差动信号向单端信号的变换。
[0228]输入部221中输入从图像发送装置100输出的时钟，输出到PLL226。PLL226生成输入的时钟的10倍的时钟，输出到解串器部225。此外，PLL226从输出部222输出图像接收装置200内使用的像素时钟。在图像显示装置200内使用原图像的非压缩图像数据的像素时钟的情况下，PLL226从输出部223输出对于输入时钟基于图13的分组数据倍频为(CK_M/CK_N)倍后的时钟。
[0229]解串器部225将串行化后的数据按来自PLL226的时钟并行化，从输出部222输出。解串器部225将10倍时钟的数据并行化并按照规定的例如TMDS译码变换为8bit并行数据从输出部222输出。
[0230]图21是表示解压缩处理部206的结构的一例的框图。此外，图26是表示解压缩处理部206对图4所示的压缩块的处理概念的时序说明图。
[0231]输入部230是解压缩处理部206的数据输入部。输入到输入部230的数据中，具有表示图像数据的同步信号的HSYNC(图26(a))和VSYNC，在有效期间406中具有压缩图像数据和副压缩编码信息812和814，在水平消隐期间404中具有主压缩编码信息811和813。对输入部231输入复原后的非压缩图像数据的像素时钟和压缩图像数据时钟等。
[0232]HSYNC、VSYNC、压缩图像数据时钟和复原后的非压缩图像数据的像素时钟，被供给到时序生成部236。时序生成部236根据输入的HSYNC、VSYNC控制计数器，生成并输出垂直消隐期间401、垂直有效期间402、水平消隐期间404、水平有效期间405、有效期间406等的时序等控制解压缩处理部内的各区块所需的时序。
[0233]压缩编码信息提取部233提取在水平消隐期间中发送的各图像数据单位块的压缩编码信息并存储到压缩编码信息存储部234。
[0234]该存储期间在图26(c)中表示。主压缩编码信息811是与后续的压缩图像数据812对应的数据，所以在直到第2线的主压缩编码信息813到达的存储期间815中存储该信息就足够。但是，例如使2线的图像数据垂直压缩的情况下，垂直解压缩用压缩编码信息816需要保持到解压缩第2线的压缩图像数据的期间。
[0235]用纠错部235对在水平有效期间内发送的压缩图像数据进行传输系统的纠错处理。纠错部235按压缩图像数据单位与纠错编码生成部137同样地运算纠错编码。对上述运算结果与从压缩编码信息提取部233输入的纠错编码进行比较，比较结果不同的情况下进行纠错处理。纠错处理的一例有CRC运算。此外，也可以仅进行错误检测，在之后的处理中对错误进行插补。
[0236]输入的压缩图像数据被供给到解压缩部A237、解压缩部B238、解压缩部C239。
[0237]解压缩部A237、解压缩部B238、解压缩部C239基于压缩编码信息存储部234的信息，对于输入的压缩图像数据，进行分别不同的解压缩处理，生成解压缩后的图像数据，输出到选择部261。
[0238]图26(d) (e)表示对图4所示的压缩块，用解压缩部A237进行水平解压缩处理、用解压缩部B238进行垂直解压缩处理的情况下的各解压缩部的输出数据。水平解压缩图像数据818和819表示解压缩部A237的输出数据，垂直解压缩图像数据820和821表示解压缩部B237的输出数据。
[0239]选择部261基于压缩编码信息存储部234的信息，适当选择输入到输入部230的图像数据、解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出，作为复原图像数据824输出到输出部232 (图26(f))。
[0240]图25是表示对于图3所示的压缩块用解压缩部A237进行水平解压缩处理的情况下的解压缩处理部206的处理概念的时序说明图。
[0241]输入部230是解压缩处理部206的数据输入部。输入到输入部230的数据中，具有表示图像数据的同步信号的HSYNC(图26(a))和VSYNC，在有效期间406中具有压缩图像数据和副压缩编码信息802和804，在水平消隐期间404中具有主压缩编码信息801和803。对输入部231输入复原后的非压缩图像数据的像素时钟和压缩图像数据时钟等。
[0242]压缩编码信息提取部233提取在水平消隐期间中发送的各图像数据单位块的压缩编码信息并存储到压缩编码信息存储部234。
[0243]该存储期间在图25(c)中表示。主压缩编码信息801是与后续的压缩图像数据802对应的数据，所以在直到第2线的主压缩编码信息803到达的存储期间805中存储该信息就足够。
[0244]对于输入的压缩图像数据，用解压缩部A237进行水平解压缩处理，生成解压缩后的图像数据即水平解压缩图像数据806和807，输出到选择部261 (图25(d))。
[0245]选择部261基于压缩编码信息存储部234的信息，适当选择输入到输入部230的图像数据、解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出，作为复原图像数据808和809，输出到输出部232 (图25(f))。
[0246]图22是表示解压缩处理部206的结构的一例的框图。本例是采用不在水平消隐期间404、而是与有效期间406内的压缩图像数据一同传输副压缩编码信息的方式的情况下的解压缩处理部的一例。
[0247]要在有效期间406内发送的数据不仅是压缩图像数据，也一同发送压缩编码信息的情况下，根据压缩方式，存在必须降低压缩图像数据的压缩率的情况，该情况下，复原时的图像的画质劣化有可能变大。其对策是将水平消隐期间缩小为可以发送2个声音数据传输分组的程度，扩大水平有效期间。对于4k2k图像数据用非压缩图像的像素时钟594MHz的一半即297MHz时钟传输的情况下，在实施例1中，水平有效期间是1920，水平消隐期间是280。因为包括2个声音分组的传输期间和前后的保护频带的水平消隐期间有96程度即可，所以使其余184增加到水平有效期间。具有能够使水平有效期间1920扩大约9.5%程度的效果。
[0248]本例的情况下，水平同步信号的位置和宽度从规定的非压缩图像数据的标准时间偏离，所以在接收侧再现非压缩图像数据时，以对图像数据附加的SVD(Short VideoDescriptor)元数据为参考，将时间复原为标准时间格式即可。
[0249]图22中，对与图21具有同样功能的区块附加相同的编号。差异在于在纠错电路255的输出部上添加了第二影像编码信息提取部250这一点。
[0250]图21的例子中，压缩编码信息提取部233提取垂直消隐期间内的压缩编码信息(图14和图15的分组)、和水平消隐期间内的压缩编码信息(图16和图17的分组)。本例中，压缩编码信息提取部233仅提取垂直消隐期间或水平消隐期间中传输的主压缩编码信息，用压缩编码信息存储部234存储。
[0251]本例中，不是用对压缩编码信息在消隐期间内实施纠错处理的分组发送，而是改为施加与其他压缩图像数据同样的纠错处理。因此，将从第二压缩编码信息提取部250输出的纠错部255纠错处理后的主压缩编码信息、和从压缩编码信息存储部234输出的副压缩编码信息输出到解压缩部A237、解压缩部B238、解压缩部C239、选择部251。
[0252]本例中，压缩图像数据和压缩编码信息在时序上接近，所以不需要除了帧内共用的压缩编码信息外的I个水平周期中的压缩编码信息存储，所以具有能够削减电路规模的效果。
[0253]图23是表示解压缩处理部206的结构的另一例的框图。
[0254]图23中，对与图21具有同样功能的区块附加相同的编号。差异在于在各解压缩部的前级添加了选择部260这一点。
[0255]选择部261基于压缩编码信息存储部234的信息，适当选择输入到输入部230的图像数据、解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出，输出到输出部232。选择部261进而能够选择解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出中的某一个，输出到选择部260。通过采用本结构的方式，能够对输入部230中输入的压缩图像数据，进行2种方式以上的解压缩处理。
[0256]此外，虽然未图示，也可以选择解压缩部A237的输出、解压缩部B238的输出、解压缩部C239的输出中的某一个，输出到压缩编码信息存储部234。通过采用该结构，能够进行例如图5的压缩后的副压缩编码信息660的解压缩处理。
[0257]图24是表示解压缩处理部206的结构的另一例的框图。图24中，对与图22具有同样功能的区块附加相同的编号。差异在于在输入部230的后端添加了存储部270这一点。
[0258]选择部271在图22所示的选择部251的功能外，还具有将选择的数据输出到存储部270的功能。存储部270是暂时存储从输入部230输入的主压缩编码信息、副压缩编码信息、压缩图像数据、和从选择部271供给的解压缩数据，供给到后级的区块的区块。通过采用这样的结构，能够对输入到输入部230的数据进行多级的解压缩处理。仅有I级解压缩处理的情况下，也可以没有从选择部271向存储部270的数据供给。
[0259]通过采用该结构，例如能够对用图8或图11所示的方式压缩后的压缩图像数据进行解压缩处理。
[0260](实施例2)
[0261]以下说明实施例1中记载的图像传输装置和图像接收装置的其他实施方式。
[0262]图29是表示串行器184的输入和输出波形的一例的图。串行器184对于输入的与YCbCr亮度色差信号的图像数据(以下称为YCbCr图像数据)、或者RGB信号的图像数据(以下称为RGB图像数据)对应的压缩图像数据，以10倍频的时钟按3个Ibit的数据分别串行化，输出到电平变换部175。
[0263]作为串行化的例子，有使8bit的YCbCr亮度色差信号或RGB信号的图像数据按10倍频的时钟从开头起以MSB或LSB的顺序输出。
[0264]电平变换部185经由输出部182输出变换为标准化的数据传输格式的信号。作为标准化的数据传输格式的一例，有TMDS方式的差动电平的信号形式等。该形式中，在图像的消隐期间中，不需要发送图像数据，所以用串行器184串行化的数据仅适用10倍频的时钟中的4bit，不使用其余6bit，由此增加对传输错误的抵抗性，能够传输图像数据以外的数据。此外，通过使用2种时钟，使由PLL186生成的时钟降低为发送图像数据的时钟的1/2以下，由此能够得到相同的效果。
[0265]图30是表示串行器184的数据结构的一例的图。串行器184的输出有3个系统，其中I个系统由同步信号(HSYNC、VSYNC)、分组头和固定bit构成。采用使用其余2个系统传输数据的结构。分组的尺寸在传输时钟中是32个周期。
[0266]图31是表示在水平消隐期间中叠加的声音数据的分组结构的一例的图。声音分组使用串行器中进行数据传输的2个系统的同一 bit生成7Byte的数据，对于上述数据附加奇偶校验等纠错编码构成子分组。用4个系统的上述子分组和分组头4Byte的格式构成水平消隐期间的分组。
[0267]该结构中，对于子分组的数据加入了纠错编码，所以对于传输线路中发生的错误能够进行修正，容错性强。此外，子分组的数据传输用的数据，由物理上不同的2个信道交错地构成，所以相对于单侧的信道中突发性发生的错误，另一方的信道不受影响，所以能够进行数据错误的修正。关于错误的纠正率，存在相对于水平有效期间为10_9、水平消隐期间为10_14的改善效果。
[0268]将压缩图像的纠错编码作为上述容错性高的分组传输即可。用水平期间的像素数为2200、水平有效期间的像素数为1920的情况说明能够传输的分组数的例子。其中，图像形式以YCbCr422为例说明。
[0269]设压缩的图像的尺寸是64像素(亮度32像素，色差32像素)时，每I线60个纠错编码(2Byte)的尺寸需要120Byte。
[0270]因为I个分组具有能够传输28Byte的容量，所以是只要5个分组就能够传输的尺寸。因为水平消隐期间是280像素，所以能够叠加8个分组。根据该结构，即使对声音分组分配最大2个分组用于192kHz8ch LPCM声音传输，也能够在水平期间中发送最大5个分组的上述纠错编码。
[0271]对于输入到数据传输部115的与RGB图像数据对应的压缩图像数据，以压缩块单位对分别决定的TMDS信道输出的情况下，在压缩块之间会产生压缩图像数据的非传输期间。在以线单位考虑的情况下，与非压缩时相比，存在不能够大幅削减水平有效期间的课题。
[0272]图32是对于数据传输部115中输入的与RGB图像数据对应的压缩图像数据，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的一例。
[0273]本实施例中，说明对于RGB图像数据，按R、G、B各成分进行压缩处理，分别生成R压缩图像数据、G压缩图像数据、B压缩图像数据的情况。图中的CRO和CRl分别是子压缩块中的压缩图像数据，压缩块由CRO和CRl构成。CR2是下一个压缩块的开头子块。CG0、CG1、CG2、CB0、CB1、CB2 也与上述 CR0、CR1、CR2 同样。
[0274]本实施例中，通过在TMDS信道O中使R压缩图像数据以比特单位紧缩地进行发送，能够削减子压缩块、压缩块之间的压缩图像数据的非传输期间。
[0275]图35是对于数据传输部115中输入的与RGB图像数据对应的压缩图像数据，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。
[0276]本实施例中，子压缩块1300、1301、1302、1305、1306、1309、1310 不能按 8bit 完全分割的情况下，通过在末端附加填充数据1303、1304、1307、1308、1311，而使子压缩块开头bit总是位于信道的开头bit。由此，能够简化图像接收装置一侧的子压缩块的接收电路。本例中，以子压缩块单位附加填充数据(Stuffing data)，但也可以如图36所示以压缩块单位进行。
[0277]图32和图35中说明的实施例中，对于输入到数据传输部115的与RGB图像数据对应的压缩图像数据，在分别决定的TMDS信道中输出，所以传输的压缩图像数据占据的传输带宽受到压缩后数据量最多的TMDS信道的限制，存在有效期间变长的课题。
[0278]图33是对于数据传输部115中输入的与RGB图像数据对应的压缩图像数据的各成分即R压缩图像数据、G压缩图像数据、B压缩图像数据，在TMDS信道0、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。
[0279]本实施例中，以子压缩块单位，按R压缩图像数据、G压缩图像数据、B压缩图像数据的顺序，在TMDS信道O、TMDS信道1、TMDS信道2中依次交错地输出。此处，以R压缩图像数据CRO为18bit、G压缩图像数据CGO为37bit、B压缩图像数据CBO为8bit、R压缩图像数据CRl为20bit、G压缩图像数据CGl为18bit、B压缩图像数据CBl为14bit的情况为例。
[0280]通过采用上述输出方式，能够在3个TMDS信道中平均地传输输入到数据传输部115的与RGB图像数据对应的压缩图像数据，所以能够缩短用于传输压缩图像数据的有效期间。本例中，以子压缩块单位按RGB顺序输出，但也可以如图34所示，以压缩块单位进行。
[0281]图37是对于输入到数据传输部115的与YCbCr444的图像数据对应的压缩图像数据，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。与YCbCr444的图像数据的各成分对应的数据量的比率，在Y图像数据、Cb图像数据、Cr图像数据中相同。其中，关于与YCbCr422的图像数据的各成分对应的数据量的比率，Y图像数据是2，相对地Cb图像数据、Cr图像数据分别是I。
[0282]1500是输入到压缩处理部114的图像数据。1501、1502、1503分别是通过对Y图像数据、Cb图像数据、Cr图像数据的压缩处理生成的压缩图像数据的各成分即Y压缩图像数据(亮度压缩图像数据)、Cb压缩图像数据(Cb色差压缩图像数据)、Cr压缩图像数据(Cr色差压缩图像数据)。
[0283]根据与色差(Cb和Cr)成分相比对亮度⑴成分的灵敏度较高的人类的视觉特性，使对Y成分的压缩率比对Cb成分和Cr成分的压缩率高，能够使Cb成分的压缩图像数据(以下称为Cb压缩图像数据)的数据量和Cr成分的压缩图像数据(以下称为Cr压缩图像数据)的数据量与Y成分的压缩图像数据(以下称为Y压缩图像数据)的数据量相比进一步削减。
[0284]在本实施例中，表示对于与图像数据的各成分对应的传输优先度高的图像数据以高压缩率进行压缩处理的一例。
[0285]具体而言，使Y压缩图像数据的传输优先度比Cb压缩图像数据和Cr压缩图像数据的传输优先度更高，关于从数据传输部115的输出比特宽度，对Y压缩图像数据分配12bit,对Cb压缩图像数据分配6bit,对Cr压缩图像数据分配6bit。[0286]使Y压缩图像数据1501、Cb压缩图像数据1502、Cr压缩图像数据1503分别在TMDS信道0(8bit/周期)、TMDS信道I (8bit/周期)、TMDS信道2(8bit/周期)中输出的情况下，传输的压缩图像数据占据的传输带宽受到压缩后的数据量最多的TMDS信道O的限制，有效期间变长。
[0287]1505、1506、1507、1508、1511是与Cb压缩图像数据(6bit/周期)和Cr压缩图像数据^bit/周期)相比、对Y压缩图像数据分配更多的信道(12bit/周期)的情况下的输出数据的一例。通过采用上述输出方式，能够缩短用于传输压缩图像数据的有效期间。
[0288]其中，输出比特宽度的分配，从控制部110对数据传输部115指示。此外，也可以与从控制部指示的图像格式(例如YCbCr444等)相应地，由数据传输部115分配预先决定的分配比率。分配比率也能够由控制部115设定。
[0289]本实施例中，以图像数据是YCbCr444的情况为例了说明，但在RGB信号等其他图像信号中，也可以对各压缩图像数据附加传输优先度并分配对输出传输线路(例如TMDS传输线路0、1、2)的输出比特宽度。例如，在图像数据是RGB信号的情况下，有使与G成分对应的传输优先度比与R成分和B成分对应的传输优先度更高的方法。具体而言，有分配12bit作为与G成分对应的输出比特宽度、分配各6bit作为与R成分和B成分对应的输出比特宽度的方法。
[0290]此外，图像数据是YCbCr444的情况下的传输优先度的另一例，有对4:2:2成分分配比其余色差成分更高的传输优先度的方法。具体而言，有分配20bit作为与4:2:2对应的输出比特宽度、对其余的Cb成分和Cr成分分配4bit的方法。
[0291]图38是对于输入到数据传输部115的Y压缩图像数据1601、Cb压缩图像数据1602、Cr压缩图像数据 1603，在TMDS信道O、TMDS信道1、TMDS信道2中输出的情况下的各信道中的输出波形的另一例。其中，1600是输入到压缩处理部114的图像数据。
[0292]本实施例中，考虑TMDS信道O的bit4、bit5、bit6、bit7和TMDS信道的bitO、bitl、bit6、bit7与其他bit相比传输错误率更低的情况。
[0293]1604、1605、1606、1607、1608、1609是对TMDS信道的传输错误率较低的bit分配Y
压缩图像数据的情况下的输出数据的一例。通过采用上述输出方式，能够降低与Y压缩图像数据对应的错误发生率。
[0294]此外，本实施例中，对1602、1605、1607分配Cb压缩图像数据，对1603、1609分配
Cr压缩图像数据。
[0295]此外，传输错误率的信息从控制部110被供给到数据传输部115。或者，也可以基于传输错误率，由控制部指定Y压缩图像数据、Cb压缩图像数据、Cr压缩图像数据向TMDS信道的bit分配。本实施例中，以YCbCr亮度色差信号为例进行了说明，但在RGB信号等其他图像形式中，也可以对各压缩图像数据附加优先度并进行向TMDS信道的bit分配。
[0296]此外，各成分的上述传输优先度也可以是各成分的压缩率。该情况下，对于高压缩率的成分增大分配的输出比特宽度，对于低压缩率的成分减小分配的输出比特宽度。例如设对YCbCr444的各成分(Y、Cb、Cr)的压缩率是80%、40%、40%的情况下，有使传输优先度分别为2、1、I的方法，或者使各成分(Y、Cb、Cr)的输出比特宽度分别为12bit、6bit、6bit的方法。
[0297](实施例3)[0298]以下说明实施例1中记载的图像传输装置和图像接收装置的其他实施方式。
[0299]本实施例中，用图30所示的水平消隐期间406中的分组区域传输主压缩编码信息。分组区域不拘于分组结构，传输各信道4比特数据。此外，在有效期间中传输副压缩编码?目息1740。
[0300]图39是表示在水平消隐期间406中传输主压缩编码信息1700时的数据传输部115的输出数据结构的一例的图。
[0301]通过采用本结构，与在有效期间中传输相比能够强化传输主压缩编码信息1700时的容错性。但是，在传输错误率高的传输线路中传输的情况下，课题在于进一步强化容错性。
[0302]图40是在水平消隐期间中在同一传输线路中传输与主压缩编码信息1700相同的主压缩编码信息1710的情况的一例。本实施例中，在主压缩编码信息1700后立刻输出主压缩编码信息1710。其中，主压缩编码信息1710也可以不在主压缩编码信息1700后立刻输出。通过采用上述结构，能够提高主压缩编码信息的冗余性，在传输错误率高的传输线路中，也能够使主压缩编码信息具有较高的容错性。其中，本实施例中的冗余度指的是追加传输的主压缩编码信息的数量。本实施例中的冗余度为I。
[0303]图41是在 水平消隐期间中在不同传输线路中传输与主压缩编码信息1700相同的主压缩编码信息1720的情况的一例。本实施例中，通过在与主压缩编码信息1700不同的信道中传输主压缩编码信息1720，而防止传输错误率在信道中的不均导致的传输容错性降低。
[0304]例如，信道O的传输错误率比信道I的传输错误率高的情况下，如图40所示对信道O分配冗余的主压缩编码信息的情况下，容错性降低，但通过如图41所示在多个信道中传输相同的主压缩编码信息，能够使与主压缩编码信息对应的错误发生率平均化。本实施例中，按信道分配2个主压缩编码信息，但也可以按bit分配。例如，有对信道O的bitO、bitl、信道I的bitO、bitl分配主压缩编码信息1700，对信道O的bit2、bit3、信道I的bit2、bit3分配主压缩编码信息1700的方法。此外，也可以与传输错误率的信息相应地变更比特分配。
[0305]图42是表示与图40和图41的实施例相比将冗余度增加到2的情况的一例的图。输出主压缩编码信息1700、和与主压缩编码信息1700相同的主压缩编码信息1730和主压缩编码信息1731。
[0306]也可以与传输错误率相应地，增加主压缩编码信息的冗余度而提高传输线路对错误的容错性。
[0307]图43是与图40和图41的实施例相比将冗余度增加到2的情况的一例。输出主压缩编码信息1700、和与主压缩编码信息1700相同的主压缩编码信息1730和主压缩编码信息1731。
[0308]也可以与传输错误率相应地增加主压缩编码信息的冗余度。
[0309]以上说明了在水平消隐期间中传输主压缩编码信息的情况下传输冗余的主压缩编码信息，但在有效期间中传输副压缩编码图像的情况下，也可以通过在有效期间中传输与副压缩编码信息相同的冗余的副压缩编码信息，而提高副压缩编码信息的容错性。
[0310]图43是表示在有效期间中传输副压缩编码信息时，使副压缩编码信息的冗余度为2的情况下的数据传输部115的输出数据结构的一例的图。
[0311]通过采用本结构，能够强化传输副压缩编码信息1740时的容错性。
[0312]也可以与传输错误率相应地增加主压缩编码信息的冗余度。
[0313](实施例4)
[0314]实施例3中，与传输错误率相应地，增大主压缩编码信息或副压缩编码信息的冗余度，但存在传输追加的冗余压缩编码信息的传输线路的传输量有限的课题。
[0315]于是，实施例4中，采用能够通过压缩率或压缩方式、和与传输错误率相应地延长或缩短水平消隐期间，增加传输冗余的压缩编码信息的传输线路的传输量的方式。
[0316]压缩率、压缩方式、水平消隐期间的延长/缩短指示、关于压缩编码信息的冗余度的信息，从控制部Iio供给到压缩处理部114和数据传输部115。
[0317]关于压缩率、压缩方式、水平消隐期间的延长/缩短指示、图像接收装置侧对压缩编码信息的冗余度的支持状况，有通过EIDI或CEC通信等从图像接收装置对图像发送装置通知的方法。
[0318]与传输错误率对应的压缩率、压缩方式、水平消隐期间的延长/缩短指示、压缩编码信息的冗余度的决定，可以由控制部110进行，也可以由压缩处理部114、数据传输部115个别地进行。
[0319]图44是将传输错误率分为3个范围，表示各范围中的压缩率和水平消隐期间和冗余度的一例的图。在传输错误率ER超过ERa的情况下(传输错误率高的情况下)，使压缩率为40%，减少生成的压缩图像数据量，并且缩短水平消隐期间，延长有效期间。由此，能够增加在有效期间中传输的副压缩编码信息的可传输量。本实施例中，使副压缩编码信息的冗余度为2，在有效期间中传输2个与副压缩编码信息内容相同的冗余的副压缩编码信息，由此提高副压缩编码信息对传输错误的耐性。
[0320]在传输错误率ER为ERb以下的情况下(传输错误率低的情况下)，使压缩率为80%，增多生成的压缩图像数据量，能够传输高画质的影像。此外，通过不插入冗余的压缩编码信息，而增多数据的非传输期间。其中，非传输期间是在有效期间406内不传输压缩图像数据和副压缩编码信息的期间、和在消隐期间407内不传输分组和主压缩编码信息的期间的合计。对于该非传输期间，通过时钟停止或以较低的时钟频率工作，能够省电。
[0321]传输错误率ER大于ERb、在ERa以下的情况下(传输错误率通常的情况下)，使压缩率为60%，使副压缩编码信息的冗余度为1，由此提高传输容错性，并且实现高画质。
[0322]图45是将传输错误率分为3个范围，表示各范围中的压缩率和水平消隐期间和冗余度的另一例的图。在传输错误率ER超过ERa的情况下(传输错误率高的情况下)，使压缩率为40%，减少生成的压缩图像数据量，并且延长水平消隐期间，延长水平消隐期间。由此，能够增加在水平消隐期间中传输的主压缩编码信息的可传输量。本实施例中，使副压缩编码信息的冗余度为1，在有效期间中传输I个与副压缩编码信息内容相同的冗余的副压缩编码信息，并且使主压缩编码信息的冗余度为1，在水平消隐期间中传输I个与主压缩编码信息内容相同的冗余的主压缩编码信息，由此提高副压缩编码信息和主压缩编码信息对传输错误的耐性。
[0323]在图44和图45中说明的压缩率以外，也可以变更压缩方式。图46是将传输错误率分为3个范围，表示各范围中的压缩方式和水平消隐期间和冗余度的一例的图。根据传输错误率ER，使压缩方式切换为方式A、方式B、方式C。在传输错误率ER大于ERa的情况下，通过采用主压缩编码信息少、能够提高冗余度的压缩方式，能够提高对传输错误的耐性。此外，通过应用能够实现高压缩率(例如图45中的压缩率40% )的压缩方式，能够增加副压缩编码信息或主压缩编码信息的可传输量。
[0324]图44和图45中，以压缩率为例进行了说明，图46中以压缩方式为例进行了说明，但也可以根据传输错误率，切换压缩率和压缩方式双方。
[0325]本实施例中，说明了为了提高对传输错误的耐性而输出冗余的主压缩编码信息或冗余的副压缩编码信息的例子，但也可以与传输错误率相应地切换纠错编码方式。此外，在传输错误率高的情况下，也可以如图45所示减少压缩后的压缩图像数据量，并且延长水平消隐期间，在水平消隐期间中传输副压缩编码信息的一部分，由此提高对传输错误的耐性。
[0326]本实施例中，说明了在传输错误率比规定值高的情况下，以低压缩率进行压缩处理来减少压缩图像数据的方法，或者使用适合低压缩率的压缩方式进行压缩处理来减少压缩图像数据的方法，或者通过延长水平消隐期间来增加与主压缩编码信息对应的传输线路的可传输量的方法，或者通过延长有效期间406来增加与副压缩编码信息对应的传输线路的可传输量的方法，但也可以使用减少声音数据来减少在水平消隐期间中传输的声音分组数的方法。减少声音数据的方法的一例，有从非压缩声音形式变为压缩形式的声音的方法，和使声道数从6声道削减为2声道的方法等。
[0327](实施例5)
[0328]实施例4中，与传输错误率相应地增大压缩率、水平消隐期间和冗余度，但存在与图像数据的内容的种类无关地决定与传输错误率对应的画质和容错性的课题。本实施例中，通过与内容的种类相应地变更压缩率、水平消隐期间和冗余度，能够具有适合内容种类的画质和传输容错性。其中,本实施例中,对传输错误率没有叙述,但本实施例中也可以进一步进行与传输错误率相应的切换。
[0329]图47是与内容种类相应地切换压缩率和水平消隐期间和冗余度的方式的一例的图。本实施例中，在内容是电影的情况下，为了高画质且提高容错性，而使压缩率为80 %，延长水平消隐期间，使主压缩编码信息的冗余度为2、副压缩编码信息的冗余度为I。另一方面，在内容是围棋/将棋的情况下，根据静止的部分多的特性，而使压缩率为40%，并且缩短水平消隐期间，使主压缩编码信息的冗余度为1、副压缩编码信息的冗余度为1，由此提高对传输错误的耐性。
[0330]此外，在内容是体育运动的情况下，运动部分较多，是难以压缩的图像，但考虑对于错误的视觉灵敏度低，而使压缩率为80%，缩短水平消隐期间，使主压缩编码信息和副压缩编码信息的冗余度都为0，即不插入冗余的压缩编码信息，由此实现高画质，同时增加数据的非传输期间。
[0331](实施例6)
[0332]实施例4中，在比规定的传输错误率低的情况下，以高压缩率增加压缩图像数据的量，实现高画质。本实施例中，用图48说明比规定的传输错误率低的情况下提高音质的方法的一例。
[0333]1800和1802是传输压缩图像数据或副压缩编码信息的有效期间406，1801是传输主压缩编码信息或声音分组的消隐期间407。1810是压缩前的图像数据。1820、1821、1822是在消隐期间1801中传输主压缩编码信息1820和声音分组1821，在有效期间1802中传输副压缩编码信息或压缩图像数据1822的情况的一例。该情况下，在消隐期间1801内能够传输的声音分组数，受到主压缩编码信息1820的传输量限制。
[0334]此处，在比规定的传输错误率低的情况下，也可以在有效期间1802中传输主压缩编码信息1830。该情况下，通过对消隐期间分配更多的声音分组，能够提高音质。
[0335]消隐期间与有效期间相比容错性更高，但能够传输的数据量在比规定的传输错误率低的情况下是1/3以下。
[0336]图49中表不了实现闻首质的方式的另一例。1910、1911、1912是不延长有效期间的情况下传输主压缩编码信息1910、声音分组1911、副压缩编码信息和压缩图像数据1912的一例。该例中，在有效期间中没有能够传输主压缩编码信息1910的空间。
[0337]于是，在比规定的传输错误率低的情况下，采取延长有效期间、在该延长的有效期间1902中传输主压缩编码信息1921的方式。其中，只要在延长后的有效期间1902内，主压缩编码信息1921、副压缩编码信息和压缩图像数据1922的配置就可以是任意的。在该方式的情况下，有效期间1902中能够传输的数据量是消隐期间中能够传输的数据量的3倍以上，所以有效期间的延长量是消隐期间中的主压缩编码信息的传输期间的1/3以下。从而，如1920所示，能够延长能够传输声音分组的消隐期间。通过增加声音数据量能够实现高音质。作为提高音质的一例，有增加声道数、用更高的声音采样频率生成声音信号、用更大的量化比特生成声音信号、缓和对高频或低频的频域限制等。
[0338]根据以上说明的本实施例，通过压缩传输图像传输装置传输的图像数据，能够在当前规定的传输线路中传输比当前规定的图像尺寸更大的尺寸的图像数据，进而通过在比图像数据的传输区域容错性更高的区域中传输作为压缩编码信息的一部分的主压缩编码信息，能够进行容错性高的压缩图像传输。
[0339]此外，在传输现在规定的图像尺寸的图像数据的情况下，能够减少规定时间单位的数据传输量、或者降低数据传输时钟，所以能够降低错误的发生频度，并且能够构建对于传输线路中的错误可靠性高的系统。
[0340]此外，能够实现即使在传输线路中发生错误而不能够进行完整的纠错的情况下，也可以进行使错误引起的画质劣化不明显的错误处理的系统。
[0341]附图符号说明
[0342]100图像传输装置
[0343]101输入部
[0344]102输入部
[0345]103输入部
[0346]104输入部
[0347]105调谐器接收处理部
[0348]106网络接收处理部
[0349]107记录介质控制部
[0350]108记录介质
[0351]109 用户 IF 部
[0352]110控制部[0353]111流控制部
[0354]112解码器部
[0355]113显示处理部
[0356]114压缩处理部
[0357]115数据传输部
[0358]116输出部
[0359]191数据总线
[0360]192数据总线
[0361]193数据总线
[0362]200图像接收装置
[0363]201输入部
[0364]202输入部
[0365]203 用户 IF 部
[0366]204控制部
[0367]205数据接收处理部
[0368]206解压缩处理部
[0369]207显示处理部
[0370]208显示部
[0371]300 缆线
【权利要求】
1.一种传输图像数据的图像传输装置，其特征在于，包括: 压缩图像数据的压缩处理单元；和 输出由所述压缩处理单元压缩后的压缩图像数据的输出单元， 所述输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
2.—种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 数据传输单元，其切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来输出数据， 所述数据传输单元分所述第一期间和所述第二期间输出所述压缩编码信息。
3.如权利要求2所述的图像传输装置，其特征在于: 所述第二期间是 水平消隐期间或垂直消隐期间。
4.如权利要求2所述的图像传输装置，其特征在于: 所述压缩处理单元进行第一压缩处理和在该第一压缩处理后进行的第二压缩处理， 所述数据传输单元在所述第二期间至少输出关于所述第二压缩处理的压缩编码信息。
5.如权利要求2所述的图像传输装置，其特征在于: 所述压缩处理单元对所述第一期间中输出的压缩编码信息和所述第二期间中输出的压缩编码信息中的至少任一方进一步进行压缩处理。
6.一种接收被压缩后的图像数据的图像接收装置，其特征在于，包括: 接收单元，其在第一期间接收被压缩后的图像数据和关于压缩处理的压缩编码信息的一部分，在与第一期间不同的第二期间接收所述关于压缩的压缩编码信息的剩余部分；和解压缩单元，其基于由所述接收单元接收到的压缩编码信息对由所述接收单元接收到的被压缩后的图像数据进行解压缩， 所述解压缩单元在第一期间中接收到的压缩编码信息中发生了错误的压缩块中，使用第二期间中接收到的压缩编码信息对所述被压缩后的图像数据进行解压缩。
7.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 压缩图像数据的步骤；和 输出压缩后的压缩图像数据的步骤， 分第一期间和与该第一期间不同的第二期间输出压缩图像数据。
8.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来进行输出的步骤， 分所述第一期间和所述第二期间输出所述压缩编码信息。
9.一种由图像接收装置接收被压缩后的图像数据的图像接收方法，其特征在于，包括: 在第一期间接收被压缩后的图像数据和关于压缩处理的压缩编码信息的一部分，在与第一期间不同的第二期间接收所述关于压缩的压缩编码信息的剩余部分的步骤；和基于接收到的压缩编码信息对接收到的被压缩后的图像数据进行解压缩的步骤，在第一期间中接收到的压缩编码信息中发生了错误的压缩块中，使用第二期间中接收到的压缩编码信息对所述被压缩后的图像数据进行解压缩。
10.一种传输图像数据的图像传输装置，其特征在于，包括: 对由多个成分构成的图像数据进行压缩处理的压缩处理单元；和 输出所述压缩图像数据的数据传输单元， 所述数据传输单元基于图像数据的各成分来变更该图像数据的输出方法。
11.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对由多个原色成分构成的图像数据或由亮度成分和颜色成分构成的图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息；和输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述数据传输单元根据对图像数据的各成分分配的传输优先度、图像数据的各成分的压缩率的比率、或传输线路的传输错误率，至少变更输出位宽和输出位分配中的任一方来输出数据。
12.如权利要求11所述的图像传输装置，其特征在于: 对具有第一优先度的成分或具有第一压缩率的成分分配的输出位宽大于对具有比该第一优先度低的第二优先度的成分或具有比该第一压缩率低的第二压缩率的成分分配的输出位宽。
13.如权利要求11所述的图像传输装置，其特征在于: 对具有第一优先度的成分或具有第一压缩率的成分分配的输出位的传输错误率低于对具有比该第一优先度低的第二优先度的成分或具有比该第一压缩率低的第二压缩率的成分分配的输出位的传输错误率。
14.如权利要求12或13所述的图像传输装置，其特征在于: 在所述图像数据是由亮度成分和颜色成分构成的图像数据的情况下，对亮度成分分配比颜色成分高的传输优先度。
15.如权利要求12或13所述的图像传输装置，其特征在于: 在所述图像数据是RGB色差信号的情况下，对G成分分配比R成分和B成分高的传输优先度。
16.如权利要求12或13所述的图像传输装置，其特征在于: 在所述图像数据是4:4:4格式的YCbCr亮度色差信号的情况下，对4:2:2成分分配比剩余的色差成分高的传输优先度。
17.如权利要求11所述的图像传输装置，其特征在于: 具有第一优先度的压缩图像数据的传输线路的传输错误率小于具有比该第一优先度低的第二优先度的压缩图像数据的传输线路的传输错误率。
18.—种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对由多个原色成分构成的图像数据或由亮度成分和颜色成分构成的图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息；和输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述数据传输单元交织地输出压缩图像数据的各成分或者压缩图像数据的各成分。
19.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对由多个成分构成的图像数据进行压缩处理的步骤；和 输出所述压缩图像数 据的步骤， 基于图像数据的各成分来变更该图像数据的输出方法。
20.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对由多个原色成分构成的图像数据或由亮度成分和颜色成分构成的图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和输出所述压缩图像数据和所述压缩编码信息的步骤， 根据对图像数据的各成分分配的传输优先度、图像数据的各成分的压缩率的比率、或传输线路的传输错误率，至少变更输出位宽和输出位分配中的任一方来输出数据。
21.一种传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述压缩编码信息的冗余性比压缩图像数据高。
22.—种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述压缩处理单元生成相对于压缩编码信息冗余的压缩编码信息， 所述数据传输单元输出该冗余的压缩编码信息。
23.如权利要求22所述的图像传输装置，其特征在于: 根据传输错误率来改变所述冗余的压缩编码信息的个数。
24.如权利要求22或23所述的图像传输装置，其特征在于: 对相同传输线路输出所述压缩编码信息和至少I个相对于所述压缩编码信息的所述冗余的压缩编码信息。
25.如权利要求22或23所述的图像传输装置，其特征在于: 对不同传输线路输出所述压缩编码信息和至少I个相对于所述压缩编码信息的所述冗余的压缩编码信息。
26.如权利要求22或23所述的图像传输装置，其特征在于: 所述数据传输单元分传输所述压缩图像数据的第一期间和容错性比第一期间高的第二期间输出所述压缩编码信息， 还在所述第二期间中输出相对于所述第二期间中输出的所述压缩编码信息冗余的压缩编码息。
27.如权利要求22或23所述的图像传输装置，其特征在于: 所述数据传输单元分传输所述压缩图像数据的第一期间和容错性比第一期间高的第二期间输出所述压缩编码信息， 还在所述第一期间中输出相对于所述第一期间中输出的所述压缩编码信息冗余的压缩编码息。
28.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 输出所述压缩图像数据和所述压缩编码信息的步骤， 所述压缩编码信息的冗余性比压缩图像数据高。
29.一种从图像传输装置压缩并传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 输出所述压缩图像数据和所述压缩编码信息的步骤， 生成相对于压缩编码信息冗余的压缩编码信息而将其输出。
30.一种传输图 像数据的图像传输装置，其特征在于，包括: 压缩图像数据的压缩处理单元；和 输出由所述压缩处理单元压缩后的压缩图像数据的输出单元， 所述输出单元分第一期间和与该第一期间不同的第二期间输出压缩图像数据， 所述压缩处理单元基于传输线路的传输错误率来变更图像数据的压缩处理。
31.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 数据传输单元，其切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来输出数据， 所述数据传输单元分所述第一期间和所述第二期间输出所述压缩编码信息， 所述压缩处理单元在传输线路的传输错误率比规定的传输错误率高的情况下，以低压缩率进行压缩处理来减少压缩图像数据，和/或提高在第一期间输出的所述压缩编码信息或在第二期间输出的所述压缩编码信息的冗余度。
32.如权利要求31所述的图像传输装置，其特征在于: 所述数据传输单元在传输线路的传输错误率比规定的传输错误率高的情况下延长所述第一期间。
33.如权利要求31所述的图像传输装置，其特征在于: 所述数据传输单元在传输线路的传输错误率比规定的传输错误率高的情况下延长所述第二期间。
34.如权利要求31所述的图像传输装置，其特征在于: 所述数据传输单元在传输线路的传输错误率比规定的传输错误率低的情况下延长所述第一期间，并且在所述第一期间输出要在所述第二期间输出的压缩编码信息。
35.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 数据传输单元，其在第一期间至少输出压缩图像数据和压缩编码信息数据，在容错性比所述第一期间高的第二期间至少输出声音数据； 所述压缩处理单元在传输线路的传输错误率比规定的传输错误率高的情况下，以低压缩率进行压缩处理来减少压缩图像数据，并且在第二期间传输压缩编码信息的至少一部分。
36.一种压缩并传输图像数据的图像传输装置，其特征在于，包括: 压缩处理单元，其对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码息；和 对传输线路输出所述压缩图像数据和所述压缩编码信息的数据传输单元， 所述压缩处理单元根据内容的种类来变更压缩率或压缩方式。
37.一种从图像传输装置传输图像数据的图像传输方法，其特征在于，包括: 压缩图像数据的步骤；和 输出压缩后的压缩图像数据的步骤， 分第一期间和与该第一期间不同的第二期间输出压缩图像数据， 基于传输线路的传输错误率来变更图像数据的压缩处理。
38.一种从图像传输装置压缩并传输图像数据的图像传输方法，其特征在于，包括: 对图像数据进行压缩处理，生成压缩图像数据和关于压缩处理的压缩编码信息的步骤；和 切换传输所述压缩图像数据的第一期间与容错性比所述第一期间高的第二期间来输出数据的步骤， 分所述第一期间和所述第二期间输出所述压缩编码信息， 在传输线路的传输错误率比规定的传输错误率高的情况下，以低压缩率进行压缩处理来减少压缩图像数据，和/或提高在第一期间输出的所述压缩编码信息或在第二期间输出的所述压缩编码信息的冗余度。
【文档编号】H04N21/442GK103988518SQ201180075041
【公开日】2014年8月13日 申请日期:2011年11月25日 优先权日:2011年11月25日
【发明者】稻田圭介, 甲展明, 小味弘典 申请人:日立麦克赛尔株式会社
相关技术
网友询问留言
已有0条留言
- 还没有人留言评论。精彩留言会获得点赞！
1