在多视图3dtv服务中处理边缘违反现象的方法和装置的制造方法
【技术领域】
[0001]本发明涉及处理包括多视图3D图像的数字广播信号的方法及其装置，并且尤其是，处理或者避免在提供多视图3D图像服务的过程中，出现在每个视点图像的左/右边界中的边缘违反(edge v1lat1n)现象的方法及其装置。
【背景技术】
[0002]随着3维电视(3DTV)的普及正在风行，通过数字广播发送的3D图像内容的传输和通过存储介质执行的3D图像内容的普及兴起。
[0003]通常，3D图像使用两只眼睛的立体视觉原理提供3D效果。由于人类经由两只眼睛的视差感觉视角，换言之，由于在两个彼此远离大约65mm的眼睛之间的间距造成的双目视差，所以3D图像可以以提供分别使左眼和右眼看到相关的平面图像的图像的方式提供3D效果和视角。
[0004]3D图像显示方法包括立体技术、体积的技术、全息摄影技术等等。在立体技术的情况下，其提供应当由左眼看到的左视图像，和应当由右眼看到的右视图像。立体技术允许人类使用偏振眼镜或者显示设备本身分别使左眼和右眼观看左视图像和右视图像的方式识别3D图像效果。
[0005]在立体3D图像内容的情况下，如果具有彼此不同的视点的两个类似的图像被发送，则立体技术采用接收机使用两个图像显示3D图像的技术。当3D图像由接收机显示的时候，由于在左图像和右图像之间的视差，出现双目视差。通过这样做，可以提供3D图像。
[0006]当提供3D图像的时候，被配置为由于按照每个内容的双目视差导致弹出到屏幕的前侧(到观众侧)的负视差对象、在内容内的场景、或者帧可能悬挂在屏幕的左和右边缘。在这种情况下，在由双目视差识别的深度和由屏幕边缘框识别的深度之间出现差异，并且用户可能感到失真的深度。
[0007]这种现象被称作边缘违反(edge v1lat1n)。由于边缘违反现象，观众可能感到视觉疲劳，并且对于观众来说正常地观看内容可能是困难的。目前地，3D图像接收机不具有能够处理边缘违反的单独的过程。
[0008]尤其是，在多视图3D图像的情况下，边缘违反的方面可能按照每个视点变化。目前，没有能够解决各种方面的边缘违反的方法。
[0009]在多视图3D广播环境下，按照每个3D视点，可能出现由边缘违反产生的不同水平的不便和失真。但是，当前的3DTV接收机不具有能够处理按照每个3D视点出现的失真现象的方法。
[0010]尤其是，当图像被以复制的方式包括在彼此不同的立体图像对(视图对)中的时候，发送由广播电台预先呈现的内容以防止出现由于边缘违反的失真现象的方法是不可适用的。
【发明内容】
[0011]技术任务
[0012]本发明的技术任务是解决前面提到的问题。更具体地说，本发明的技术任务是有效地解决在提供多视图3D图像广播服务的情况下能够发生的各种方面的边缘违反。
[0013]技术方案
[0014]为了实现这些目的和其他的优点，和按照本发明的目的，如在此处实施和广泛地描述的，按照一个实施例，一种接收多视图3D图像广播信号的方法，其处理在多视图3D图像中的边缘违反，包括步骤:接收用于多视图3D图像广播的广播信号，从接收的广播信号中解码包括在第一视点的3D图像中的第一左图像数据和第一右图像数据，从接收的广播信号中解析3D图像处理信息，使用第一左图像数据、第一右图像数据和3D图像处理信息产生在第二视点的3D图像中包括的第二左图像数据和第二右图像数据之中的至少一个或多个数据，解析包括在3D图像处理信息中的3D边缘违反区域检测函数信息，使用3D边缘违反区域检测函数信息提取出现在第二视点的3D图像中的边缘违反的区域并处理区域的边缘违反，以及显示第一视点的3D图像和第二视点的3D图像。
[0015]优选地，3D边缘违反区域检测函数信息包括识别用于提取边缘违反区域的函数类型的函数类型信息，和表示用于识别的函数的系数值的系数信息。
[0016]优选地，3D图像处理信息进一步包括预期捕捉第二左图像和第二右图像的照相机的位置信息，和表示第一视点的3D图像的边缘违反区域的信息。
[0017]优选地，3D图像处理信息进一步包括边缘处理信息，该边缘处理信息包含有关能够在由接收机产生的一个或多个视点的3D图像中出现的边缘违反信息。
[0018]优选地，边缘处理信息包括有关存在于在至少一个或多个视点的3D图像中包括的左图像中的边缘违反区域的像素数目的信息，和有关存在于在至少一个或多个视点的3D图像中包括的右图像中的边缘违反区域的像素数目的信息。
[0019]优选地，边缘处理信息进一步包括指定处理存在于在至少一个或多个视点的3D图像中包括的左图像和右图像中的边缘违反方法的信息。
[0020]优选地，边缘处理信息进一步包括在存在于在至少一个或多个视点的3D图像中包括的左图像和右图像中的边缘违反被处理之后，识别至少一个或多个视点的3D图像的最小视差的?目息。
[0021]优选地，3D图像处理信息经由SEI (辅助的增强信息)消息被发送。
[0022]优选地，3D图像处理信息经由PMT (节目图表)、VCT (虚拟频道表)、EIT (事件信息表)或者SDT (服务描述表)被发送。
[0023]为了进一步实现这些和其它的优点，并且按照本发明的目的，按照不同的实施例，一种接收多视图3D图像广播信号的方法，其处理在多视图3D图像中的边缘违反，包括步骤:接收用于多视图3D图像广播的广播信号，从接收的广播信号中解码包括在第一视点的3D图像中的第一左图像数据和第一右图像数据，从接收的广播信号中解析3D图像处理信息，使用第一左图像数据、第一右图像数据和3D图像处理信息产生在第二视点的3D图像中包括的第二左图像数据和第二右图像数据之中的至少一个或多个数据，其中产生在第二视点的3D图像中包括的第二左图像数据和第二右图像数据之中的至少一个或多个数据的步骤包括下述步骤:将在第一视点的3D图像中包括的像素映射到第二视点的3D图像，并且从映射处理中提取在第二视点的3D图像中出现的边缘违反区域，处理第二视点的3D图像的边缘违反，以及显示第一视点的3D图像和第二视点的3D图像。
[0024]优选地，3D图像处理信息包括有关捕捉第一视点的3D图像的照相机的照相机参数的信息，并且产生在第二视点的3D图像中包括的第二左图像数据和第二右图像数据之中的至少一个或多个数据的步骤使用有关照相机参数的信息产生在第二视点的3D图像中包括的第二左图像数据和第二右图像数据之中的至少一个或多个数据。
[0025]优选地，提取在第二视点的3D图像中出现的边缘违反区域的步骤分别地检测在第二视点的3D图像的左图像和右图像中包括的像素，并且检测其中包括存在于左图像中而不存在于右图像中的像素或者存在于右图像中而不存在于左图像中的像素的区域作为边缘违反的区域。
[0026]有益效果
[0027]按照本发明，在观看多视图3D图像的情况下，能够处理每个视点的边缘违反。
[0028]按照本发明，能够对没有由发送端发送的视点的3D图像执行边缘处理。
[0029]按照本发明，虽然发送端没有提供为执行边缘处理所必需的信息(边缘违反信息)，接收机也可以执行边缘处理。
【附图说明】
[0030]图1是按照本发明的一个实施例，用于显示多视图3D图像方法的示意图；
[0031]图2是按照本发明的一个实施例，用于边缘违反的示意图；
[0032]图3是按照本发明的一个实施例，用于处理边缘违反方法的示意图；
[0033]图4是按照本发明的不同的实施例，用于处理边缘违反方法的示意图；
[0034]图5是按照本发明的一个实施例，用于经由SEI (辅助的增强信息)消息示意3D_view_processing_info 结构的表；
[0035]图6是按照本发明的一个实施例，用于3D_view_processing_info语法的表；
[0036]图7是按照本发明的一个实施例，用于3D_edge_handling_info O元素语法的表;
[0037]图8是按照本发明的一个实施例，用于3D边缘违反区域检测器函数信息(3D_EVAD_funct1n_info O)元素的表；
[0038]图9是按照本发明的一个实施例，用于示意边缘处理信息的情形的示意图；
[0039]图10是按照本发明的一个实施例，用于示意允许接收端扣除有关虚拟3D图像的边缘处理信息的相关函数情形的示意图；
[0040]图11是按照本发明的一个实施例，用于接收机自身执行边缘违反处理而无需单独的信令的公式的示意图；
[0041]图12是按照本发明的一个实施例，用于执行由接收机自身执行的边缘违反处理而无需单独的信令的情形的示意图；
[0042]图13是按照本发明的一个实施例，用于多视图3D图像接收机的示意图。
【具体实施方式】
[0043]现在将详细地介绍本发明的优选实施例，其例子在伴随的附图中图示。但是，本发明可以不受该实施例的限制。
[0044]虽然在本说明书中使用的术语是从考虑到功能当前和广泛地使用的常规的术语中选择出来的，它们可以按照从事于相应的领域中的技术人员的意图、习惯、新技术的出现等等变化。有时候，某些术语可以由申请人任意地选择。在这种情况下，任意地选择的术语的含义将在说明书的详细说明的相应的部分中描述。因此，在本说明书中使用的术语需要基于相应的术语的实质上的含义和在本说明书中公开的整个内容解释，而不是认为是术语的简单名称。
[0045]表示3维图像的方法可以包括考虑两个视点的立体技术，和考虑超过3个视点的多视图图像技术(或者多视图技术)。相比较地，常规的单视图图像技术可以被称作单视觉图像技术。
[0046]立体技术使用通过以彼此远离某个距离的左照相机和右照相机拍摄相同的对象获得的一对图像，即，左视图像(在下文中，左图像)和右视图像(在下文中，右图像)。或者，立体技术使用基础图像和附加图像的一对图像。多视图技术使用通过以具有某个距离和角度的3个以上的照相机拍摄获得的3个以上的图像。多视图技术对应于在每个视点中提供立体技术的左/右图像的技术。
[0047]按照本发明，立体技术包括并排、上下、棋盘技术等等。并排技术是通过分别在左图像和右图像的每个上水平地执行一半下采样，和在左侧区域中设置一个采样的图像，和在右侧区域中设置另一个采样的图像配置一个立体图像的技术。上下技术是通过分别在左图像和右图像的每个上垂直地执行一半下采样，和在上区域中设置一个采样的图像，和在下区域中设置另一个采样的图像配置一个立体图像的技术。棋盘技术是通过以左图像和右图像分别地水平和垂直地相交的方式执行一半下采样配置一个图像的技术。但是，按照本发明的立体技术可以不受前面提到的示例限制。
[0048]作为一个例子，能够无需经过前面提到的下采样过程，以收发具有完整分辨率的两个图像的方式提供3D图像服务。在这种情况下，可以分开地配置分别发送左图像和右图像的传输流。尤其是，一个特定的传输流发送左图像，并且另一个传输流可以发送右图像。在这种情况下，传输流的每个可以作为用于2D图像服务的流使用。
[0049]图1是按照本发明的一个实施例，用于显示多视图3D图像方法的示意图。
[0050]参考图1，两个或更多个视点的3D图像可以经由单个显示板提供。
[0051]图1示出提供3个视点的3D图像的方案。立体3D图像可以在每个视点中提供。在这种情况下，包括在每个立体3D图像中的视频元素流可以在彼此不同的3D图像中共同使用。例如，