运动自适应图像处理的制作方法

文档序号:7663947阅读:118来源:国知局

专利名称::运动自适应图像处理的制作方法
技术领域
:本发明涉及运动自适应图像处理。技术背景视频图像捕获表现为空间和时间的采样过程。被捕获的图像作为一组以列或行排列的像素。连续图像在时间上间隔的瞬间被捕获。复杂化题常i柳了隔行视频获取和处理。御新亍视劍言号中,針图像被处理为两组或场交替行的像素。例如,奇数行可以被包含在一场中,而偶数行能够被包含在下--场中。对于在视频信号带宽中的非实质增加,隔行技术的优点是其给出明显的双倍图JM率,从而减小闪烁效应。如果尝试获取或处理具有对于各自的采样速率而言太高的空间或时间频率的年见频资料,所有这些方面的采样育改多引起混叠交M。但是在隔行到逐行扫描视频转换的区域中,特定的混叠问题将鹏述。如果需要在隔行视频和逐行扫描(非隔行)视频间转换,夷卩么对于非运动图像仅仅需要插入两个连续场来重建具有当前所有像素行的非隔憎贞。然而,如果存在任何有效的场间运动,该方案可以不工作。在这种环境中在场中丢失的像素行从相同场的其他像素中肖3皮适当的导出。换句话说,场内内插处理lte用。实际上,视频W以包含图像序列,在其中一些区職现为运动图像而另一些区域不表现为动态图像。例如,当新闻广播员对固定摄像机讲话,新闻广播员的嘴、脸和头可以显著i艇动,同时他们糊区干、桌子和他们后面的墙不显著地运动。因此,上述记录的不同转换策略在同一图像的不同区域中可以是飽的。因此对于给出的像素决定应用明p个策略是重要的。特别的,当存在图像的运动部分时在图像场之间的交织的效果要差于单一图像场的内插,由于当来自不同图像场的交替行具有明显不同图像内容时其会弓跑在最终图像中的条纹效果。此外,在一些环境下,对于一些连续的场,其还有可能是明显不同的,尽管缺少真实的运动。特别的,当出现一个在^Jl突然的改变(例如,当M切换到室内时,或者^照明或^^页闪效果时)。在这种环境下还期望避免在图像的受影像部分中的图像场之间交错。本发明的一个目的就影離或者陶氐这一问题。
发明内容本发明的一方面,一禾中图像处理方、^括步骤计算在当前图像场和相邻图像场的对应块之间的像素值之差的差度量,计算关于至少一个所淑、J"应块的像素值的可变性的可变性度量,确定差度量是否大于可变ftit量,并且如果^M大于可变性度量,为当前图像场的对应块中的像素设置相应的图像间混合{1/人而指示当前图像场应当与超多一个预定范围的像素i體的相邻图像场混合。本发明的另一方面,一种图像处理设备包括,差计算體,用Ti十算在当前图像场和相邻图像场的对应i央之间的像素值之差的差度量,可变性计算装置,用于计算对应于至少一个所应块的像素值的可变性的可变'^,比较^g,用于确定差度量是否大于可变tttt,修改装置,用于为像素设置一个图像间混合值,并且其中如果差度量大于可對娘量,贝'據数据修改装置为当前图像场的对应块中的像素设置相应的图间像混合f彭人而指示当前图像场应当与在至多一个预定范围的像素位置的相邻图像场混合。有利地,再次,i^方面使得3拉的运动的检测改变到遊卖的图像场,并且来设置或者克服存在影响的像素的图像间混合参数,从而卩Ml顿这對象素进行隔行到逐行扫描转换期间4顿交错并且因此斷氐了il^t图像质量有害的影响。此外,本发明的其他方面和特fjBI31权利要求来限定。下面将参考下面的附图,Mil^具体实施例的描述,使得本发明的J^目的、特征以及优点更为清楚,其中图1图解说明了平面屏幕显示配置;图2图解说明了在演播室环境中的视频混合操作;图3图解说明了隔行到逐行转换器;图4a到4c图解说明了梯g测;图5和6a到6e图解说明了空间块匹,作;图7a到7b图解说明了混叠情形;图8a到8d图解说明了混叠检测技术;图9a图解说明了运动自适应内插;图9b图解说明了在^^l见频场中的运动检测;图10图解说明了高频校验操作;附图11示意性地示出了修改的图像块的一部分;附图12示意性ite出了该图像处理方法的凝呈图。图l图解说明了平面屏幕显示配置IO,包括隔行视频资料源20、隔行至隨行扫描转换器30和如液晶(LCD)或等离子体显示器的显示面板40。其图解说明了隔行到逐行扫描转换的典自用,其中许多广衝言号是隔行格式而许多平板显示器是以逐行格式为最成功的操作。因此在图l中,由隔行视频资料源20接收的广謝言号!細来生成隔行信号以显示。其乡超隔行到逐行扫描转换器30以f^人隔行扫描信号中生成逐行扫描信号。传邀合显示器40的是逐行扫描信号。可以理解,隔行视频资料源20可以不需要是广播接收器,但是可以为视频重现装置如DVD播放器、网络连接如因特网连接等等。图2图解说明了在演播室环境中的视频混合操作,为了给出隔行到逐行扫描转!敏用的另一^H列子。扭1:,提供了隔行资料源50和逐行扫描资料源60。这些,以为摄像机、视步踵现體如视频磁带记录器或硬盘记录器,广播接收器良3^似的。隔行资料源50的隔行输出被掛共给隔行到逐行扫描转换器70以生成逐行扫描信号。该逐行扫描信号连同来自源60的逐行扫描资料一起由视频混合器80处理以生成处理后的逐行扫擗俞出。当然,如果需要的话,视频混合器80的逐行扫擗俞出育嫩转换回到隔行格式,例如,对于后续的广播或记录。从中可以働早到,视频混合器80只是视频处理體的一1i列子;可代替的,数對贴殿娘单元例如能被用在图2中的这个{體。图3图解说明了隔行到逐行转换器。概括i井,转换器包括场内内插器如空间内插器100,运动自适应内插器110和一组三场存储器120。图3中的转换器以与输入隔t,l;相同的重复频率生繊出逐行扫描帧。因此,对转换器駐要的需求是在針隔行场生成'丢失"像素以将隔,"銷专变为逐行扫描帧。其育feM:两禾中方法之一超U。一方面,空间内插器iooaai空间内插在相关场中生成'丢失"像素。?奂句话说,这是场内操作。另一方面,运动自适应内插器ffiil从相对极性的邻接场插入像素以生成丢失像素。其仅当在场之间不存在图^it动时有效,因此图3的基本结构为当运动自适应内插器110的输出被用在图f紘动没有被检测至啲像素位S时,空间内插器100的输出,細在图j紘动被检测到的图像位置。对于简单的操作,空间内插MWM象素0进行操作,动自适应内插器选择空间内插器的输出,择从相对极性的另一个场中选择像素用于f俞出,或混合,两个。运动自,内插器将在以下被更加详细的描述。首先,空间内插器将被简单描述。空间内插器包括l:27j^H象M放器130,空间块匹配器140,最小化iHM选择器150,对角线内插器160,圆点噪声消减器170,和凯尔系数校正器180。这些的*操作总结如下。縮放器130被俞入隔行场的每两个像素之间禾,水平线性内插来生成一个附加的像素值(也就是1:2缩方娥作)。因此,水平^f,率(至少按照有效像素值的数目)被加倍,但是鄉b阶颇于垂直^f摔而言没有不同。空间块匹配器140和对角线内插器160的所有操作!細来检测与在新的像素被内插的像素位置相关的图像特征的定向,然后沿着图像特征方向来应用内插。因此如果当前像劍體将被内插位于例如与水平成4义t的对角线图像特征(行、逝彖等),新像素的内插会髓该45°的方向发生。鹏向给出一个比限制水平或垂直内插更好的输出结果。该处理的关键部分明显的是在WM象素健检测图像特征的方向。现錄图4A4C,该检测禾佣块匹配处棘l^l行。图4A图解说明了围绕在未知像素220(内部具有问号牛斜己的圈)的隨周围的两刊象^±央200、210之间的^c加勺块匹配。真正地,在当前图中j顿的符号尉旨示一个已知像素的正方形,然而圆斷旨示一个将由对角线内插器160来内插的像素。图4A4C中的阴影是示意性的图像特征的^。因此,錄图4A,围绕在未知像素j體220周围的块200、210之间的j^J力的块匹配被获得,指示1/2的图像特征的梯度。现在转向图4C,图像特征是垂直的并且这又是afii央230、240之间的成功的块匹配。然而,在图犯中,图像特征具有1/1的梯度。在趨的像素<體的爽]:不可能获得j^加勺块匹配。在块250、260之间的^J力的匹配出现在半个識的像素位置上。从而,为了检测这种特性的梯度(实际上比l/2更尖锐的招可梯度),需要在子像素精确度±#作。在当前情形中,fflil使用来自l:2縮放器中的像素,半像素的精确度!棘用。如果仍需4細更高精确度(例如四分之一像素精确度),那么检测到依然微于垂直的梯度。图5和图6A-6E图解说明了空间块匹,作。如上戶;fi己录的,空间块匹配在子像素精确^Jll^l行,在这种情况中为半像素精确度。±央尺寸的范围被〗顿,具有相应的检索范围(相关于在测试下的像素j體的最大位移)。考虑1:2縮方作,t^X寸的例子和M范围被下表戶;^合出<table>tableseeoriginaldocumentpage9</column></row><table>图5图解说明了围绕在未知像素位置320上的3v(垂直)乘7h(水平)像素300、310的两个块之间的块匹,作。Md,为块的水平中心距离测试下的像素^g的水平位移。应用于块匹配的劍牛是这些块必须总是Sfi在观赋下的像素j體上。同样,块被示出在实际像素位移中禾維的纖数目(因此m的位移对应于2m内插像素的位移)。从而,在图5中示出的特定的块尺寸允许九个可能的测试包括-2像素(图6A)-1像素(图6B)0像素(图6C),+1像素(图6D),和+2像素(图6E)的位移。注意所述位移^^距离中心的位移。这两个±央在相对的方向上移动相等的数量。娥尔位移被l顿是因为另夕卜匹配i央可以检测与测试下的像素不相关的行或边缘。針匹配块的纟树差的和(SAD)被计算。其被如下定义<formula>formulaseeoriginaldocumentpage10</formula>其中x^y标当前像素的坐标(y是帧行数目),d是所领赋的位移,以及n是所述块的"^N5"(块的宽度等于n,-2n+l)。概^i井,SAD值为三个颜色元素(红,纟斜n蓝)组合而成,以及最小标准化SAD值决定内,繊度。各种检查用于避免如下所述的j顿内插。测量被用于避免混叠瞎形所弓胞的问题。图7A和7B图解说明了一种可能的混叠瞎形。参看图7A,块340和350之间的匹配±^未知像素330应该是暗灰色。这里,匹配块是100o/。成功并因此SAD值是0(注意这是一个示意性的例子)。然而,在图7B中,块360和370之间的匹配块也是100%成功,又一次给出为0的SAD值。图7B的匹配i^^示未知像素330应该是亮灰色。匹配i央结果的冲突是图7A和7B中所示的图像部分中对角线上紧密间隔的图像特征之间的混ft^物。当它首先^Th对角线都是同等有效时(例如,从左上到右下的陡对角线或是一从右上至U左下的更平缓的对角线),处理规则被设立以允许进行适当的选择。规贝啲基础是块匹iei程被限制以使得仅有被认为"行片断'的区域被检测。也就是说,块匹配中的*±央都应该包含行片断。数字化的行片断被认为具有两种特性。首先,正被讨论的块的疗髓中心扫描线无变化,以及其次是在正被讨论的块中的扫描线之间具有垂直转变。这對寺性被测试的方式M图8A-8D被描述。在图8A中,一源场包括多个对角线。图8B示意性说明了图8A中图像中的一行像素。图8C和8D图解说明了图犯中所示对角线的两个纖。从中可见,这些J^彖中的^h都具有IS^i:单调变化的像素的一部分。再回头錄图8A,从中可见这些片断在相邻像素行之间显现为垂直转变。那么,回到图7A和7B,根据J^规则图7A的块匹配!财巨^S行图7B中的块匹配。这是因为图7B中两个块的像素的中心线表现为在亮度上单调变化,而图7A的块340,350的像素的中心线不是。关于^h颜色分量(如,R,G和B)的测试被分别执行。所有三个测i^i、须分别fflil。可选择的是,例如为节约硬件,少于三个测试M^l行。例如,只有亮度,或是只有一个颜色分量被测试。当然,可选择的,YCbCr或YPbPr标可以被测试。对角线内插器160是一个简单的像素平均器;会l个方向其可以拾取该方向上在下一行的像素和该方向上iti:一行的像素并m它们进行平均。圆点噪声消减器170进行应用于对角线内插器160输出的处理。一个测试被应用于检测内插像素是否在四个相邻的垂直和水刑象素的最大和最小值内,例如,该内插像素正上,正下,Iffi和正右的像素。注意内插像素上边和下边的像素是实像素,而左边和右边的像素是内插像素本身。如果内插像素不在这个范围内,贝廿;使v作为所考虑像素的初始值,并使v'为v,被夹紧为所述4个局部相邻像素的范围内。使新像素{|^1<0^[1^,+(l-kDNR)v,其中kDNR是可编程的常数。现在描述a/亇、系f(^iE器180的操作。在目前的讨论中,参照凯尔系数可以简单地帮助解释示范性的系统的这部分的操作。滤波器的实际JOT是简化了对于源图像没有使用对其可获得的全带宽的知识,无论是由于扫描作i^劍顿滤波处3l^誠的。该01/亇、系数是^行扫描和隔行图像特性的。为了表现被扫描的信息,通常认为可能垂直带宽中仅有70%(i0/亇、系数)被(应该被)表现。因此当执行隔行向逐行扫描转换时,尝试产生全垂直带宽图像是具有潜在危险的。可替代的是,〗顿州尝来解决UW、系数小于1。--种州穀A/亇、系数的方法是在招可隔行到逐行的扫描算法的输出帧上4顿70%带宽滤波器,然而,帧中的一个场是'真实'娜-例如,其被正确采样,贝味自该场的内容fflil定义一定是理想的。因而使用只滤波内插行的方法。图9a示意性说明了运动自适应内插器110的操作。内插器110包括场间块匹配器600,可选的高频检测器610和混合器620。场间块匹配器600使用来自当前输A^和三个场存储器120的数据以执行场间运动比较。这包括将当前场(图9b中的&)的像素决与同在前场(Fw—2)中对应的定位块比较以及同样地比较同类型的在前场(/^)和在前场(Fw_3)。这些比较结果被用来检测图像中的运动禾號。特别是,舰差〖(SWAD)如下产生。是:4个匹配块l^l行以产生2个SWAD,S1^4Z)w和S1^4Z)w在场^和&—2中的5hx4v加权块匹配。在场/^和&-3中的5hx3v力口权块匹配。-在场/^,和&_3中的lhxlv力口权块匹配。-在场&和&—2中的lhx2v力卩权块匹配。力[l权块匹配对重合像素之间的加丰3^^t差求和,SWAD。^sw」z)=yyyw(血,^)|/^—(血,-3(血,办)|(dx,dy)是在当前像素的帧相刘體ckdy的值。典翻鹏胁5hx4v块[12/102423/102428/102423/102412/102432/102462/102477/102462/102432/102432/102462/102477/102462/102432/102412/102423/102428/102423/102412/102415hx3v块[20/102439/102448/102439/102420/102448/腿94/腿U7/腿94/廳48/画20/102439/102448/102439/102420/1024]这些匹配块lhx2v块[128/256128/2561lhxlv块[255/256]-实际无加权对第一两个SWAD求和给出了基于区域的匹配块,S脇D皿,对后者两个SWAD求和给出了局部匹配块,S^4A。c所有三个颜色元素以相同的方式对SWAD起作用。系统需要只维f^H象素的三元素的SAD,然后它们被加权和合并来自块中其他像素的值。这意处理的这方面仅需要大约10bpp(每像素比特)的5行存储。可选择的是,高频雜测器610被安排检测输A^中的高频率。算法是基于下面的原理。如果交错两个源场产生很多高频率育疆,则设法确定输入题度静止的。只有静止视频可以产生可靠的高频率;高度混叠运动可以产生高频率,但是这不是场间内插所需要的情形。如驟动出现,贝U会产生高频率,其中场被不正确交错。参看图10,高频测器使用来自当前场&的当前内插像素之上和之下的行和来自对应于丢失行的在前场/V,的行。HFC可以被认为是5x3相邻像素检测。/^C^w和/ZFC^^是两个可编程的常数,其中前者大于后者。设置标己exceededHighEnergy=false#^分量(或是它们的子集)(RGB/YPbPr)-YPbPr^^在高清晰系统中的色空间,在标准清晰系统中都以同样方法用于YCbCr:设置energy=0对于具有水,體x二2,-1,0,1,2(相对于当前像素)的像素,使隔行(Fv—,)场ll^v。,以及当前场的上一行和下一行的值为v—,和^,贝lj:如果vo〈min(v),v—),设置diff^min(VhV陽)-vOv。或如果vO〉max(vl,v-1),设置diff=v0-max(vl,v-1)或设置difiK)如與d^7/R:一w),设置energyenergy+(/^C^威-/^C,w'2"weighting[x]或如爽參脏一),设置面『面gy+(腿-脏一)*weighting[x]如果energy〉〃FC函謂",设置*射己exceededHighEnergy=true这结繊亍于齡分量上的处理。随后,如果exceededHighEnergy,e,给S^4D^增加可编程的常数值,L戸,o的增加将趋向于,在那输出,的运动自,像素的使用。混合器620依据标准S,i^^禾口S脇Z)丄。^和不同的阀值/Zm^运行如果S附A。^〉//^A,仅使用空间内插场&否则如果S1^4D舰4>//7m^2,仅使用空间内插场否则如果S附化腦<欲^^3,仅使用场/^,否则混合场/^,和&4吏a=(//w"/22-S)^4Z)朋^)/(//^m/i2-//"5/23)所得像素值^a^—,+(1《)Fn^。换句话说,a标像蔬动并决定来自场内和场间内插器的贡献。同时仅有/^,和/^itM等式中混合,从中可以意i形U,在其中的附加图像场或部分在给定的像素位置与/^—,和&,混合,例如如果根本没有运动,可以是用于图像的交替行的^的未i^波行,或是更早的图像场/^—3。如上所述的,可以理解图像场中具有決^动的区域不应当被交错,因为在自不同图像场的交替行具有明显不同的内容时这将导致一个结果图像中的斑纹或者条纹。但是,在一些环境下,连续的图像场可能不同的,尽管缺少随后的实际运动。特别是,当照明发生突然变化时(例如,当室内灯光点亮时,或者具有照明或者频闪效果时),ffliii^SWAD分析检测不到这个。因此,在本发明的一个实施例中,掛共一种用于检测该环境的體,其替换(ovemde)战计算的数值a,将其设置为指雜动并且因此促使了在图像的相关区域的空间内插而不是使用图像交错。在本发明的实施例中,如果满足下面的不等式,分别包括有全部或者部分连续图像场的两个对应块被确定为具有较大场差(不考虑运动)IDCn-DCn—,I>(SDn+SDn力/2,其中DC"—,是在当前和先前图像场内的对应块的像素繊的平均值,并且SDw斧,是这些块的像素娜的标准偏差。因此,当图像场N和N-1中对应块的平均像素值之间的差大于这些i央的像素值的平均标准偏差时,则这些i央被分类为具有较大的场差。i婉应的像素值典型地涉及離和/或色度。例如,像素腿一个红、绿、蓝信道的对应附旨示亮度的和赫平均值。可謝《的,任意或者所有独立的彩色信道可以直接i顿或者作为對直信号来指/^feit。在下面的例子中,如J^万述的一个不等式被用于每一镇择的彩色信道,并且如果满足招可一个不等式,贝鹏定一个大的场差。当在当前图像场中的i央(扯面所述的场N中)被分类为具有大的场差时,该块中像素的oc值被设置为零。此外,可选的,该±央周围紧紧相邻的所有块的像素的a值也被设置为零。当a二0,则最纟對象素值aFn-!+(l-ot)FN'斷氐为FN',即在谢象素的图像串观的空间内插版本。因此,Mil以这种形式使得oc=0,只有空间内插纟絵顿应于分类为具有大场差并且被修改为具有a值为零的对应块的转换的图像的一部分中出现。在本发明的一个实施例中,具有32个7K刑象素和16个垂直像素的i央,細于上述观ij试中。但是,可以意i顿j,缶可适当尺寸的块者阿以被《柳,尽管如果这些块都太小,那么用于确定一个大场差的平均和标准偏對直就会变为不可靠的。在图像的一个或者多个纖附近的块被扩展为包括直到纖的其余像素。但是,舰战方式修&M^块中的a值会导致招艘被替代的相邻未^f》响区域和修改i央之间视觉上的不遊卖,例如,i細一个交错等级从而产生它们对输出图像的贡献。附图11示出了修改块的拐角上的一對象素,其中阴影对应于,ot值,如下面描述的。舰参考附图ll,为了斷氐不i^卖效果,朝着修改i央的纖1101、1102的oc值基于J^ii动分析将从零向先前计算它们的值逐步转变。例如,跨越在附图ll中确定的四个象素的序列,朝着修改块的ii^行进,利用下面表格的组合来产生有效的oc值<table>tableseeoriginaldocumentpage15</column></row><table>在—hi^表格中,像素1是修改i央最里面的像素,并且像素4是块的边缘的像素,如图所示。但是,可以意识到,转换区域可以是招可适合的尺寸,而水平和垂駄小可以不同,并且全部可以在该修改的块内,也可以全鹏修改的±妙卜且相邻于修改的块,^S^tM修改的块的边界。其中,一刊象素相邻于聚集了两W专变区域的块的拐角,根据其最微的边缘来确定其a值。其中一^M彦改块与另一^M彦改i央紧紧相邻,这一ii^^接的转变区:^^^须的。在一个替代实施例中,M满足下面的不等式来确定当具有力l/差时遊卖图像场的两个块的分类IDCn-DCn—,I〉Max(SDN,SDN-!),其中所有的项都是被在先前定义的,并且函数Max返回入值的最大值。可选的,IDCn-DCn-I禾口(SDn+SDn-)或者Max(SDN,SDN-)的平方被用于J^计算中。因此,一船也,在遊卖图傲汤的对应的i央之间的明显的差别的确定是基于在这些i央之间的差度量与这些块中至少一个块的可变^SS的比较。在一个替代实施例中,一个调谐参数TuningParam被提供到下面的不等式中,例如给出,IDCN-DC嗣I*TuningParam〉Max(SDn,SDn.O或者IDCn-DCn—'I*TuningParam〉(SDn+SD]^)/2。这调谐参数在满足不等式时劍共了一个判断或者加权,从而提供了一4^:或者较小的敏感度以在图像场之间改变。可以理解到该调诣嘍数还可以被相加或糊皮相乘。可以意识到,潜在地可以f顿多于一个的调谐或者加权参数。例如,如果|DCn-DCjwI*small>Max(SDN,SDN-)则^a限制在数值的25%;如果IDCn-DQ^I*medium>Max(sdn,sdn-,)则^I紐限制在数值的50%;如果|DCn-DCn—!I*large>Max(SDN,SDN.)则^I紐限制在数值的75%;否则a保持不变。其中,small、medium和large是不同的调仏嗜数值,每一个者依调谐中使用。对a的修改可以是招可M的修改,并且可选他是DCN、DQ、SDn或者SDfw值的全部或其中一部分的函数。在本发明的一个实施例中,块的差别的确定以及招可随后的a值数据的修改^M:场间i央匹配器600来实现。但是,本领嫩术人员可以意i形i腔一功能原则上可以由樹可转换器70的樹可元件来实现,其位于该图像处理链路的适当部分中以便执fiH亥功能。下翻每参考附图12描述描述一种用于将隔行图像转换为逐行扫描图像的相应方法,其包括以下步骤计算(si)在当前图像场禾財目邻图像场的对应i央之间的像素值之差的差隨;计算(s2)来自所舰应块的至4"个中的像素值的可变性的可對4M:,确定(S3)差itfi是否大于可变ttJM,并且如果差度量大于可变ffiti,为当前图像场的对应块中的WM象素设置(S4)图像间混合值从而指示当前图像场不应当与在该像素位置处的先前图像场混合或者当前图像场应当被混合到至多-个页定范围(例如,Mil设定ocii^0,从而指^^动以及接着促t口、使用像素的空间内插版本,或^li立将(X值设定为其原始值的最大比例,限制了混合的范围)。如果差隨没有M可变ftjM:,则OC值不免影响。可以意识到对于本领i5M术人员来说,对应于在此公开的设备的而作出的对i^方法的5M被认为不超出本发明的范風包括4OT在块的i^的OC值转变区域;"顿--个可替代的不等式来确定是在多个块之间是否具有力汤差;以及-鹏调谐参数。本领术人员还可以意识到在本实施例中,在当前禾咣前图像场之间的比较可以替代地在当前和未来图^^之间,其中一个或者多个图像场的延时在处理期间被4顿,从而实现获得相邻的未来图像场。因此,^j絵在扭脸上的当辦贞和先前或者遊卖图像场的相邻场之间执行比较。还可以意识到,与使用0^1^零^没有运动并且因此只使用空间内插相比,可选择的4柳一个微于零的(X值,其中最终混合等级小于一个阈值等级(该阈值是一个根据经验确定的可以禾佣的等级一或者取决于视觉上无伤害的或者视觉上不可检测的一是结果图像的典型的或者平均观歸)。因此,大体上,在,实施例中,任意的图像内混合值Ct被设置以指示当前图像场与相邻图像场混合至仅仅一个有限范围或者根本就没有被混合。本领知:^术人员将意i顿J场Fm和fn—,的混合题舒图像序列中的隔行图像的多个潜在混合有玄ii^择之一。归纳F^到Fsx和Fw—!到Fm,内插模式的选择可定义如下Mode1:0个场系统延戮如说明书中)Fs^和场Fw相关的内,fiiFM=场&—Mode2:l个场系统延ia向后混合Fs^和场F^相关的内J歃l)FM:场FN-2Mode3:1个场系统延ia向前混合F^禾口场F^相关的内J歃I/FM,Fn因此,例如混合的像素值等于a/^+(1-。可以意识到在适当的软件控制下本发明能以可编程的或半编程的硬件操作来实现。其可以^il常目的的计^n^如ASIC(专用集成电路)或FPGA(现场可编程门阵歹!J)的配置。1件可以被提供在承载或诸如:或固态存储器的存储媒介上,或作为信号经由诸如网络或因特网连接的传输媒介,或经由J^的组合。尽管参考附图再次详细描述了本发明示出的实施例,可以理解本发明并没有限制于这對寺定实施例,并且允许本领域的技术人员在不超出本发明的权利要求定义的范围和精神的情况下,做出各种修改和^^。一些示例参数<table>tableseeoriginaldocumentpage18</column></row><table>权利要求1.一种图像处理方法,包括步骤计算在当前图像场和相邻图像场的对应块之间的像素值之差的差度量;计算关于所述对应块中的至少一个的像素值的可变性的可变性度量;确定差度量是否大于可变性度量;和如果差度量大于可变性度量,为当前图像场的对应块中的像素设置相应的图像间混合值以便指示当前图像场应当与在该像素的位置处的相邻图像场混合到至多一个预定范围。2.根据权利要求1的图像处理方法,其中相邻图像场是先前图像场。3.根据权利要求1的图像处理方法,其中计算差i!S的步骤包M^骤基于^^对应块的相应像素ltt确定该^h对应块的平均值;以及从其它平均值中减去一个平均值并且取结果值的模数为差&t。4.根据权利要求1的图像处理方法,其中计r^变'ffit量的步骤包括基于W^对应块的相应像素tK确定该旨对应块的可变性值;以及M应块的可变性值的平均值为可变性度量。5.根据权利要求1的图像处理方法,其中计算可变性度量的步骤包括基于^h对应块的相应像素fK确定该^h对应块的可变性值;以及取泰示对应块的最大块可变性的可变性值为可变性度量。6.根据权禾腰求4的图像处理方法,其中基于"对应块的相应像素值,齡对应块的可变性鶴标准偏差。7.根据权利要求1的图像处理方法,包鄉骤據隨和变化&M的比较中包括至d^个第一加权值,该加权值或賴一个加权值是可调节的以便改变这样的点在该点处的像素数据弓l,SS大于8.根据权利要求1的图像处理方法,其中对于关于当前图像场的对应块的边缘的预定位置处的一系列像素,图像间混合值从当前图像场的对应块的中央离开跨越一系歹l」像素从指示当前图像场不应当与相邻图像场混合的一个值转变到基于运动分析的一^H直。9.一种图像处理设备,包括難计離,用"Pi十算在当前图像场和相邻图像场的对应i央之间的像素值之差的差itS;可变性计算器,用^i十算关于所^t应块中的至少一个的像素值的可变性的可变附疆比较器,用于确定差itS是否大于可变ftM,以及数据修改器,用于设置像素的图像内混合值,并且其中招喿作中,如果差隨大于可变十被量,贝廿数据修改器为当前图像场的对应块中的像素设置相应的图像间混合值以便指示当前图像场应当与在该像素的位置处的相邻图像场混合到至多一个预定范围。10.根据权利要求9的图像处理设备,其中相邻图像场是先前图像场。11.根据权利要求9的图像处理设备,其中Mii:计算器用于基于^^对应块的相应像素^tt确定该^对应块的平均值;以及从其它平均值中减去一个平均值并且取结果值的模数为差度量。12.根据权禾腰求9的图像处理设备,其中可变性计算器用于基于*对应块的相应像素{确定该*对应块的可变性值;以及TO应块的标准偏對直的平均JI^可变^M。13.根据权利要求9的图像处理设备,其中可变性计算器用于基于*对应块的相应像素{!*确定该^对应块的可变性值;以及TO应块的标准偏對Ji的^itt可变i4ia。14.根据权利要求12的图像处理设备,其中基于^^对应块的相应像素值,針对应块的可变附战标准偏差。15.根据权利要求9的图像处理设备,其中至少第一加权值作中是可调节的以便改变这样的点在该点处的像素数据弓l,tt大于可变性度量。16.根据权利要求9的图像处理设备,其中娜修改器对于关于当前图像场的对应块的边缘的预定位置处的一系列像素,修改图像间混合值以便从当前图像场的对应块的中央离开跨越一系列像素从指示当前图像场不应当与相邻图像场混合的一个值转变到基于运动分析的一个值。17.—种M载体,包掛十穀几可读指令,当计穀几执行时,使得计嶽几实现权利要求1的方法。18.一种数据载体,包括计算机可读指令,当计算机执行时,使得计算机可以如权利要求9的图像处理设备操作。全文摘要本发明涉及运动自适应图像处理。一种用于图像转换的图像处理方法,包括步骤,计算在当前图像场和先前图像场的对应块之间的像素值之差的差度量,计算来自所述对应块中的至少一个的像素值的可变性的可变性度量,确定差度量是否大于可变性度量,如果差度量大于可变性度量,则为当前图像场的对应块中的每个像素设置图像间混合值以便指示当前图像场不应当与在该像素的位置处的先前图像场混合。文档编号H04N5/44GK101282415SQ20071016912公开日2008年10月8日申请日期2007年12月6日优先权日2006年12月6日发明者J·E·伯恩斯,K·J·沙曼,N·I·桑德斯,R·M·S·波特申请人:索尼英国有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1