视频图像编码设备的制造方法
【技术领域】
[0001]本发明涉及运动图像编码设备。更具体地，本发明涉及对计算机屏幕上的视频图像进行编码的运动图像编码设备，运动图像编码方法以及程序。
【背景技术】
[0002]近年来，为了实现防止从计算机终端设备泄露信息以及促进终端上应用的管理，瘦客户端系统(think client system)已经被引入。瘦客户端系统使得服务器设备执行被输入到终端设备的、从终端设备输出的以及在终端设备上显示的所有应用，还使得该服务器设备管理与该执行有关的所有被生成的文件。
[0003]在这样的瘦客户端系统中，由该服务器设备执行的应用程序的图形数据通过诸如LAN的网络被传送至客户端终端设备，并在该终端设备的屏幕上显示。因此，当要被处理的图形数据的量增大时，或者当被连接到该服务器设备的终端设备的数量增大时，在该服务器设备上用于将该图形数据传送至终端设备的负荷增加，并且诸如响应时间恶化以及值得考虑的被连接的终端设备的数量的限制的问题出现。
[0004]因此，作为与本发明有关的第一相关技术，一种编码并传输矩形区域的图像数据的方法(例如，参看专利文件I)被提出，该矩形区域包含图像中的一个已更新区域。根据该第一相关技术，在图像中的已更新区域只是部分区域的情况下，对整个图像进行编码和传输的需求被消除，而只需要对该部分区域的图像数据进行编码和传输。因此，要被传输的数据的量可以被降低。
[0005]在另一方面，当经由通信网络传输和/或接收图像数据时，对该图像数据编码以压缩数据的量是已知的(例如，参看专利文件2)。
[0006]当诸如量化的不可逆变换被用于数据压缩中时，在接收侧被解码的图像的质量相比于在传输侧的原始图像的质量可能恶化。此外，在通信路径上发生数据丢失或传输错误等情况下，在接收侧的图像的质量可能恶化。为了阻止上文提及的原因导致的图像恶化传播至随后的帧，设计出了一种在传输视频图像时周期性地插入内部更新(内部刷新)的信号的方法。概括地讲，在内部更新中，一种将一帧划分为多个部分区域(图块)并一点一点地传输的方法被使用，因为对整个帧编码导致码的数量的显著增大。
[0007]例如，作为与本发明有关的第三相关技术，提出在传输已更新区域的码之后执行内部更新、同时在可被传输的码的剩余量的范围内在低质量图块之间循环(例如参看专利文件3)。因此，即使当一帧的图形已更新区域的范围大部分变化时，通过改变用于内部更新的目标区域的范围，也有可能获得高图像质量同时充分利用剩余波段。例如，对于没有区别的帧或者其中图形已更新区域的范围小的帧，有可能通过可以被支持在剩余波段中的大多数图块来执行内部更新。此外，通过设计以优先地在被采用低图像质量进行编码的区域的图块中、或者在已经长期未被刷新的图块中循环，有可能缩短该低质量图块在屏幕内维持的时间段。
[0008]在另一方面，作为与本发明有关的第四相关技术，提出在经历运动补偿后对已更新区域进行编码作为图像(例如参看专利文件4)。
[0009]此外，作为与本发明有关的第五相关技术，提出了对包含字符区域的块以高图像质量进行编码(例如参看专利文件5)。该第五相关技术通过以下来降低字符信息的质量的恶化:对运动图像中的要求锐化的字符区域中的量化系数进行与另一区域中的量化系数分离的更新，从而当该字符区域中的量化系数大于预先确定的阈值时，该字符区域中的量化系数变为等于或小于该阈值。
[0010]此外，作为与本发明有关的第六相关技术，提出从帧缓冲器中按宏块读出视频信号，并且当该宏块中白色等级高时，当在相邻块内存在数据时，或者当来自中值滤波器的结果示出连续性时，确定为字幕(字符区域)(例如参看专利文件6)。
[0011]专利文件1:日本未审查专利申请公开号2008-085502
[0012]专利文件2:日本专利公开号004035475
[0013]专利文件3:日本未审查专利申请公开号2010-206753
[0014]专利文件4:日本未审查专利申请公开号2009-194627
[0015]专利文件5:日本未审查专利申请公开号2002-204459
[0016]专利文件6:日本未审查专利申请公开号2005-197879。
[0017]在每帧的已输出码的量的上限被固定的情况下，对于其中已更新区域的范围大的帧，难以采用高质量对已更新区域进行编码，因此只能选择采用低质量对已更新区域进行编码。对于采用低质量被编码并传输的区域，内部更新被执行，同时在可以在随后帧中被传输的码的剩余量范围内在低质量图块之间的循环被执行。如在第三相关技术中描述的，在内部更新中，根据图块的质量以及图块未被更新的时间段来选择应当被采用高质量重传的图块。因此，当重传候选图块包括照片区域，该照片区域相比于字符区域为低质量或相比于字符区域在更长时间段内未被刷新时，发生该照片区域被优先选择，并且该字符区域长期被置于低质量的情形。
[0018]然而通常，相比于对照片信息，质量等级对字符信息具有更大的影响。这是因为字符信息的含义根据细节的形状的不同而大部分地变化，而照片信息的含义能够单独基于轮廓而被大致理解。
[0019]如上文所提及的，作为与本发明有关的第五相关技术，提出对包括字符区域的块以高质量进行编码。因此，有可能将该第五相关技术应用至与本发明有关的第三相关技术，并且当对已更新区域编码时，使得字符区域中的编码质量高于其他区域中的编码质量。然而，在已更新区域为大尺寸并包含高比例的字符区域的情况下，当已更新区域的所有码的量超过每帧可允许的码的量的上限时，不可能在所有字符区域上获得高图像质量。因此，通过上文所提及的相同方式，会发生字符区域长时间被置于低质量的情形，并且视频图像中的字符易读性降低。
【发明内容】
[0020]本发明的一个目的是提供一种运动图像编码设备，该运动图像编码设备解决上文提及的问题，即在运动图像编码设备中，该运动图像编码设备在对已更新区域编码和传输后执行内部更新，同时在能够被传输的码的剩余量的范围内在低质量图块之间循环，视频图像中的字符可读性降低。
[0021]作为本发明的第一方面，一种运动图像编码设备具有:
[0022]已更新区域编码单元，检测已输入图像信号的帧中的已更新区域，并对所述已更新区域编码；
[0023]重传候选图块提取单元，从屏幕内提取不属于当前帧中已更新区域的图块，该图块是被采用等于或小于第一质量的质量编码后被传输的部分区域；
[0024]字符似然性估计单元，对于被所述重传候选图块提取单元提取的图块，计算指示该图块为字符区域的似然性的似然值；以及
[0025]字符似然性顺序内部更新单元，按照所述似然值的降序，从被该重传候选图块提取单元提取的图块中选择图块，并且采用高于第一质量的第二质量对该图块编码，并传输结果。
[0026]此外，作为本发明的第二方面，一种运动图像编码方法包括:
[0027]检测已输入图像信号的帧中的已更新区域，并对所述已更新区域编码；
[0028]从屏幕内提取不属于当前帧中已更新区域的图块，该图块是被采用等于或小于第一质量的质量编码后被传输的部分区域；
[0029]对于被提取的图块，计算指示该图块为字符区域的似然性的似然值；以及
[0030]按照该似然值的降序，从被提取的图块中选择图块，并且采用高于第一质量的第二质量对该图块编码并传输结果。
[0031]此外，作为本发明的第三方面，一种计算机程序包括指令，用于使得计算机执行为:
[0032]已更新区域编码单元，检测已输入图像信号的帧中的已更新区域，并对所述已更新区域编码；
[0033]重传候选图块提取单元，从屏幕内提取不属于当前帧中已更新区域的图块，该图块是被采用等于或小于第一质量的质量编码后被传输的部分区域；
[0034]字符似然性估计单元，对于被所述重传候选图块提取单元提取的图块，计算指示该图块为字符区域的似然性的似然值；以及
[0035]