一种基于移动终端的预览图像处理方法及移动终端的制作方法

文档序号:10492523阅读:273来源:国知局
一种基于移动终端的预览图像处理方法及移动终端的制作方法
【专利摘要】本发明公开了一种基于移动终端的预览图像处理方法,所述移动终端包括第一摄像头和第二摄像头,所述方法包括:将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式;获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集的第一预览图像和第二预览图像;对所述第一预览图像和所述第二预览图像进行背景虚化处理,生成目标图像。本发明还提供一种相应的移动终端。本发明提供的基于移动终端的预览图像处理方法,能够在预览时获取同一画面在不同焦距的图像,从而实现实时预览具有背景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效果,而不能在预览时实现所见即所得的问题。
【专利说明】
-种基于移动终端的预览图像处理方法及移动终端
技术领域
[0001] 本发明实施例设及图像处理技术领域,尤其设及一种基于移动终端的预览图像处 理方法及移动终端。
【背景技术】
[0002] 智能手机由于硬件的限制,很难拍出具有背景虚化效果的照片,即主体比较清晰, 背景比较模糊的照片。目前实现背景虚化效果的方法一般是通过拍摄不同焦距的多张图片 进行处理合成。比如拍摄一张焦距对到主体上的图片,再拍摄一张焦距在无穷远的图片,经 虚化算法处理后最终合成一张具有背景虚化效果的图片。
[0003] 由此可知,现有的拍照技术中,只有在拍照时才能实现背景虚化的效果,不能在预 览界面实现实时的背景虚化效果,无法实现所见即所得。

【发明内容】

[0004] 本发明实施例提供了一种基于移动终端的预览图像处理方法及移动终端,W解决 现有的拍照技术不能在预览界面实现实时的背景虚化效果的问题。
[0005] 第一方面,本发明实施例提供了一种基于移动终端的预览图像处理方法,所述移 动终端包括第一摄像头和第二摄像头,所述方法包括:
[0006] 将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式;
[0007] 获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集的第一预 览图像和第二预览图像;
[000引对所述第一预览图像和所述第二预览图像进行背景虚化处理,生成目标图像。
[0009] 另一方面,本发明实施例还提供了一种移动终端,所述移动终端包括第一摄像头 和第二摄像头,所述移动终端还包括:
[0010] 对焦模块,用于将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模 式;
[0011] 获取模块,用于获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别 采集的第一预览图像和第二预览图像;
[0012] 虚化模块,用于对所述获取模块获取的所述第一预览图像和所述第二预览图像进 行背景虚化处理,生成目标图像。
[0013] 运样,本发明实施例提供的基于移动终端的预览图像处理方法,将移动终端的第 一摄像头和第二摄像头分别设置为不同的对焦模式,从而获取第一摄像头和第二摄像头在 不同的对焦模式下分别采集的第一预览图像和第二预览图像,进而对采集的第一预览图像 和第二预览图像进行背景虚化处理,生成目标图像。所W,本发明实施例的基于移动终端的 预览图像处理方法,能够在预览时获取同一画面在不同焦距的图像,从而实现实时预览具 有背景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效果,而不能在 预览时实现所见即所得的问题。
【附图说明】
[0014] 为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例描述中所需 要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例, 对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可W根据运些附图获 得其他的附图。
[0015] 图1表示本发明第一实施例的基于移动终端的预览图像处理方法的流程图;
[0016] 图2表示本发明第二实施例的基于移动终端的预览图像处理方法的流程图;
[0017] 图3表示本发明第=实施例的基于移动终端的预览图像处理方法的流程图;
[0018] 图4表示本发明第四实施例的移动终端的结构框图之一;
[0019] 图5表示本发明第四实施例的移动终端的结构框图之二;
[0020] 图6表示本发明第四实施例的移动终端的结构框图之 [0021 ]图7表示本发明第五实施例的移动终端的结构框图;
[0022] 图8表示本发明第六实施例的移动终端的结构框图。
【具体实施方式】
[0023] 下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完 整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发 明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施 例,都属于本发明保护的范围。
[0024] 第一实施例
[0025] 本发明实施例应用于具有拍照功能的移动终端,如智能手机、平板电脑等,且该移 动终端包括第一摄像头和第二摄像头,如图1所示,为本发明的第一实施例提供的基于移动 终端的预览图像处理方法的流程图,该方法包括:
[0026] 步骤101、将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式。
[0027] 其中,不同的对焦模式是根据背景虚化算法需求与一个摄像头的既有对焦策略决 定的。本发明的实施例所应用的移动终端包括第一摄像头和第二摄像头,则根据背景虚化 算法需求与一个摄像头的既有对焦策略,将该移动终端的第一摄像头和第二摄像头设置到 不同的对焦模式上,使得在实际拍照之前进行图像预览时,即可获得不同摄像头捕捉的不 同焦距的预览图像。
[0028] 步骤102、获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集 的第一预览图像和第二预览图像。
[0029] 当通过步骤101将移动终端的第一摄像头和第二摄像头分别设置到不同的对焦模 式上之后,可通过步骤102获取第一摄像头在其对应的对焦模式下采集的第一预览图像,W 及第二摄像头在其对应的对焦模式下采集的第二预览图像。
[0030] 其中,所述第一预览图像与所述第二预览图像属于同一拍摄场景。另外,优选地, 所述第一预览图像与所述第二预览图像的采集时刻相同。即,所述第一预览图像和所述第 二预览图像是所述第一摄像头和所述第二摄像头在同一时刻,在不同的对焦模式下分别采 集的同一拍摄场景的图像。
[0031] 步骤103、对所述第一预览图像和所述第二预览图像进行背景虚化处理,生成目标 图像。
[0032] 本发明实施例中,背景虚化处理是指获取主体清晰,而主体之外的区域相对模糊 的图像。在步骤103中,是将从步骤102中获取的具有不同焦距的第一预览图像和第二预览 图像进行背景虚化处理,从而获得主体清晰而主体之外的区域相对模糊的预览图像。因此, 步骤103中生成的目标图像即为主体清晰而主体之外的区域相对模糊的预览图像。
[0033] 另外,生成目标图像之后,该目标图像则显示在移动终端的显示屏上,从而达到在 移动终端的预览界面实时显示具有背景虚化效果的图像的效果。
[0034] 优选地,可在该移动终端上设置一个背景虚化模式启动开关,该开关可W是W硬 件按钮的形式设置在移动终端上,当该硬件按钮按下时,则开启背景虚化模式。或者,还可 在相机的预览界面上设置一个开关,当用户在相机的预览界面下,手动滑动移动终端的触 摸显示屏的相应位置将该开关打开时,则开启背景虚化模式。其中,该移动终端开启背景虚 化模式后,第一摄像头和第二摄像摄像头被打开,进而可在相机的预览界面实时预览具有 背景虚化效果的图像。由此可知,背景虚化模式启动开关的设置,为用户提供了更多的预览 模式选择,提升了用户的使用体验。
[0035] 本发明实施例的基于移动终端的预览图像处理方法,通过将移动终端的第一摄像 头和第二摄像头设置到不同的对焦模式上,从而能够在实际拍照之前进行图像预览时即可 获得不同摄像头捕捉的不同焦距的预览图像,进而对获取的不同焦距的预览图像进行背景 虚化处理,生成主体清晰而主体之外的区域相对模糊的目标图像,从而实现实时预览具有 背景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效果,而不能在预 览时实现所见即所得的问题。
[0036] 第二实施例
[0037] 本发明实施例应用于具有拍照功能的移动终端,如智能手机、平板电脑等,且该移 动终端包括第一摄像头和第二摄像头,如图2所示,为本发明的第二实施例提供的基于移动 终端的预览图像处理方法的流程图,该方法包括:
[0038] 步骤201、将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式。
[0039] 其中,不同的对焦模式是根据背景虚化算法需求与一个摄像头的既有对焦策略决 定的。本发明的实施例所应用的移动终端包括第一摄像头和第二摄像头,则根据背景虚化 算法需求与一个摄像头的既有对焦策略,将该移动终端的第一摄像头和第二摄像头设置到 不同的对焦模式上,使得在实际拍照之前进行图像预览时,即可获得不同摄像头捕捉的不 同焦距的预览图像。
[0040] 在本发明的实施例中,第一摄像头的对焦模式为自动调焦模式,第二摄像头的对 焦模式为远焦模式。其中,对应地,移动终端的两个摄像头,可均采用具有自动对焦功能的 模组,将其中一个焦距固定到远焦模式;或者采用一个具有自动对焦功能的模组,搭配一个 具有更长焦距的定焦模组,W达到更好的效果。
[0041] 其中,在自动调焦模式下,第一摄像头会随场景变化做持续对焦W对准中屯、区域 的主体,当检测到用户的触屏行为时,则W触屏区域为目标进行对焦,当开启人脸识别后, 一旦识别到人脸则W人脸为目标进行对焦。在远焦模式下,第二摄像头的焦距一般为无穷 远。
[0042] 步骤202、获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集 的第一预览图像和第二预览图像。
[0043] 其中,所述第一预览图像与所述第二预览图像属于同一拍摄场景。另外,优选地, 所述第一预览图像与所述第二预览图像的采集时刻相同。即,所述第一预览图像和所述第 二预览图像是所述第一摄像头和所述第二摄像头在同一时刻,在不同的对焦模式下分别采 集的同一拍摄场景的图像。
[0044] 本发明的实施例中,第一摄像头的对焦模式为自动调焦模式,第二摄像头的对焦 模式为远焦模式。所W,第一预览图是第一摄像头在自动调焦模式下采集的焦点在被拍摄 对象上的图像,且被拍摄对象所处区域的清晰度高于该区域之外的其他区域的清晰度。第 二预览图像是第二摄像头在远焦模式下采集的焦点在被拍摄对象后方,例如焦点在无穷远 处的图像,且被拍摄对象所处区域的清晰度低于该区域之外的其他区域的清晰度。
[0045] 步骤203、根据所述第一预览图像和所述第二预览图像,确定所述第一预览图像中 的背景区域。
[0046] 其中,第一预览图像的焦点位于被拍摄对象上,第二预览图像的焦点位于被拍摄 对象后方,所W,第一预览图像中的被拍摄对象,相对于第二预览图像中的被拍摄对象较为 清晰。因此,将第一预览图像的模糊程度与第二预览图像的模糊程度进行对比,可W从第一 预览图像中确定出第一预览图像的背景区域。
[0047] 具体地,步骤203包括:
[004引通过逐个像素比较方式,确定所述第一预览图像和所述第二预览图像的模糊程 度;
[0049] 根据所述第一预览图像和所述第二预览图像的模糊程度,将所述第一预览图像中 比所述第二预览图像中对应位置更模糊的图像区域确定为所述第一预览图像中的背景区 域。
[0050] 其中,模糊程度的确定可W采用比较对比度的方法。对于一个场景来说,图像的清 晰度不同,其对比度会有所不同。对于第一摄像头采集的第一预览图像和第二摄像头采集 的第二预览图像,二者图像内容一致,但相对来说,在远焦模式下采集的图像中,背景比较 清晰而主体相对模糊;在自动调焦模式下采集的图像中,主体比较清晰而背景相对模糊。
[0051] 因此,对于第一预览图像,其比第二预览图像更模糊的地方可被判定为背景区域, 其比第二预览图像更清晰的地方可被判定为主体区域。此处可逐个像素地比较两个摄像头 采集到的预览图像,计算其对比度,根据对比度的不同来判定二者的模糊程度,进而区分出 主体区域和背景区域。
[0052] 其中,对于某一幅图像,其所包括的各个像素点均具有自身的对比度,且各个像素 点的对hk麽而格昭加下公古讲巧A宵.
[0化3]
[0054]其中,i表示第i个像素点,j表示第i个像素点周围的第j个像素点,且1 y如,且n 为正整数,r(i,j)表示第i个像素点与其周围的第j个像素点间的灰度差,p(i,j)为第i个像 素点与其周围的第j个像素点间灰度差的概率分布。另外,一般情况下,n取值为4或者8,即 某一像素点的对比度,通常计算该像素点与其周围4个或8个像素的灰度值之差来获取。其 中,像素点的对比度越小,则该像素点越模糊。因此,通过将第一预览图像与第二预览图像, 按照逐个像素比较的方式,比较像素点的对比度,可W确定第一预览图像和第二预览图像 的模糊程度。即第一预览图像和第二预览图像的同一位置处的像素点,对比度大的像素点 的较为清晰,对比度小的像素点较为模糊。所W,第一预览图像中比第二预览图像中对应位 置更模糊的图像区域被确定为第一预览图像中的背景区域。
[0055] 步骤204、对所述第一预览图像中的所述背景区域进行虚化处理,生成目标图像。
[0056] 其中,虽然第一预览图像中的背景区域相较于主体区域较为模糊,但是该背景区 域内的图像仍是不具有虚化效果的图像,所W,通过步骤203确定出第一预览图像中的背景 区域后,还需要进一步对该区域中的图像进行虚化处理,从而得到具有背景虚化效果的目 标图像。生成目标图像之后,该目标图像则显示在移动终端的显示屏上,从而达到在移动终 端的预览界面实时显示具有背景虚化效果的图像的效果。
[0057] 另外,步骤203和步骤204的处理过程,会耗费一定时间,如果不能在一帖的时间内 处理完成,会拖低帖率,影响体验。同时该过程会比较耗时,所W,可W将该过程的处理放到 外置数字信号处理器(Digital Si即al Processor,DSP)中处理,W提高实时性和用户体 验。
[0058] 优选地,可在该移动终端上设置一个背景虚化模式启动开关,该开关可W是W硬 件按钮的形式设置在移动终端上,当该硬件按钮按下时,则启动背景虚化模式。或者,还可 在相机的预览界面上设置一个开关,当用户在相机的预览界面下,手动滑动移动终端的触 摸显示屏的相应位置将该开关打开时,则开启背景虚化模式。其中,该移动终端开启背景虚 化模式后,相应摄像头被打开,进而在相机的预览界面实时预览具有背景虚化效果的图像。 由此可知,背景虚化模式启动开关的设置,为用户提供了更多的预览模式选择,提升了用户 的使用体验。
[0059] 本发明实施例的基于移动终端的预览图像处理方法,通过将移动终端的第一摄像 头做自动调焦,将第二摄像头设置为远焦模式,来获取焦点在被拍摄主体上的第一预览图 像和焦点在被拍摄主体后方的第二预览图像,从而根据第一预览图像和第二预览图像确定 出第一预览图像中的背景区域,并将该背景区域虚化处理,得到具有背景虚化效果的目标 图像。因此,本发明实施例的基于移动终端的预览图像处理方法,能够实现实时预览具有背 景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效果,而不能在预览 时实现所见即所得的问题。
[0060] 第=实施例
[0061] 本发明实施例应用于具有拍照功能的移动终端,如智能手机、平板电脑等,且该移 动终端包括第一摄像头和第二摄像头,如图3所示,为本发明的第=实施例提供的基于移动 终端的预览图像处理方法的流程图,该方法包括:
[0062] 步骤301、将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式。
[0063] 其中,不同的对焦模式是根据背景虚化算法需求与一个摄像头的既有对焦策略决 定的。本发明的实施例所应用的移动终端包括第一摄像头和第二摄像头,则根据背景虚化 算法需求与一个摄像头的既有对焦策略,将该移动终端的第一摄像头和第二摄像头设置到 不同的对焦模式上,使得在实际拍照之前进行图像预览时,即可获得不同摄像头捕捉的不 同焦距的预览图像。
[0064] 在本发明的实施例中,第一摄像头的对焦模式为自动调焦模式,第二摄像头的对 焦模式为近焦模式。其中,在自动调焦模式下,第一摄像头会随场景变化做持续对焦W对准 中屯、区域的主体,当检测到用户的触屏行为时,则W触屏区域为目标进行对焦,当开启人脸 识别后,一旦识别到人脸则W人脸为目标进行对焦。
[0065] 步骤302、获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集 的第一预览图像和第二预览图像。
[0066] 其中,所述第一预览图像与所述第二预览图像属于同一拍摄场景。另外,优选地, 所述第一预览图像与所述第二预览图像的采集时刻相同。即,所述第一预览图像和所述第 二预览图像是所述第一摄像头和所述第二摄像头在同一时刻,在不同的对焦模式下分别采 集的同一拍摄场景的图像。
[0067] 本发明的实施例中,第一摄像头的对焦模式为自动调焦模式,所W第一预览图是 第一摄像头在自动调焦模式下采集的焦点在被拍摄对象上的图像,且被拍摄对象所处区域 的清晰度高于该区域之外的其他区域的清晰度。
[0068] 第二摄像头的对焦模式为近焦模式,所W,第二预览图像的背景本身即是模糊的 (若不是微距拍摄,整个画面一般都是模糊的),所W本发明的实施例通过第二摄像头在近 焦模式获取图像模糊的第二预览图像,从而节省了后续对背景区域虚化处理的步骤。
[0069] 步骤303、获取用户输入的枢图指令。
[0070] 其中,所述枢图指令为用户从移动终端中输入的自动枢图指令,例如用户在移动 终端的预览界面上在对应人物位置处手动滑动;或者所述枢图指令为用户从移动终端中输 入的套索枢图指令,例如用户用手在移动终端的预览界面中绘制一个封闭图形;或者所述 枢图指令为用户从移动终端中输入的固定形状枢图指令,例如移动终端的预览界面上设置 有一个枢图启动开关,则用户打开该开关时,移动终端自动默认某个长方形或屯、形为枢图 区域。
[0071] 步骤304、根据所述枢图指令获取枢图区域。
[0072] 其中,若用户在移动终端的预览界面上在对应人物位置处手动滑动,则枢图区域 为对应的人像所在的区域;若用户用手在移动终端的预览界面中绘制了一个封闭图形,贝U 枢图区域为该封闭图形所包括的区域;若所述枢图指令为用户从移动终端中输入的固定形 状枢图指令,则枢图区域为移动终端默认的某个长方形或屯、形里面的区域。
[0073] 步骤305、通过预设枢图算法,在所述第一预览图像中获取所述枢图区域内的图像 数据,并将所述枢图区域内的图像数据确定为第一待合成图像。
[0074] 其中,所述枢图区域内的图像数据属于用户需要突出的主体,即清晰的主体区域。 因为第一预览图像数据的焦点位于被拍摄对象上,所W第一预览图像数据中包括的图像属 于清晰图像,所W当从步骤304中获取到枢图区域后,可从第一预览图像数据中获取位于该 枢图区域内的清晰的图像数据,即确定出第一待合成图像。
[0075] 步骤306、将所述枢图区域映射到所述第二预览图像上,并在所述第二预览图像中 获取所述枢图区域外的图像数据,并将所述枢图区域外的图像数据确定为第二待合成图 像。
[0076] 由于将摄像头马达拉到近焦位置时背景本身就是模糊的(若不是微距拍摄,整个 画面一般都是模糊的),所W第二预览图像本身即是图像模糊的图像,因而可将第二预览图 像中位于枢图区域外的图像数据作为具有虚化效果的背景,即将其确定为第二待合成图 像。
[0077] 其中,所述预设枢图算法可W采用图形分割边缘跟踪与a估计算法相结合。即图形 分割边缘跟踪算法将枢图区域的轮廓勾勒出来,然后利用a估计算法进行细致的边缘处理, 从而将前景区域与背景区域明确区别出来,W使得在步骤305中获取前景区域内的图像数 据,即确定第一待合成图像;在步骤306中将确定的背景区域映射到第二预览图像上,来获 取背景区域内的图像数据,即确定第二待合成图像。(其中,图像上的任何一点的色彩都可 看成是由前景颜色和背景颜色混合而成,而a则表示前景颜色所占的比重。)
[0078] 在本发明实施例中,所述预设枢图算法通过图形分割边缘跟踪与a估计算法相结 合,可W实现全自动精确枢图,从而使得最终获得的目标图像的主体区域与背景区域的合 成效果更好,进一步提升用户的视觉体验。
[0079] 步骤307、将所述第一待合成图像与所述第二待合成图像进行图像合成处理,生成 目标图像。
[0080] 在步骤305中确定出了用户需要突出的主体区域(即第一待合成图像),在步骤306 中确定出了背景区域(即第二待合成图像),所W可W直接将二者合成处理,最终生成主体 清晰而背景模糊的目标图像。
[0081] 生成目标图像之后,该目标图像则显示在移动终端的显示屏上,从而达到在移动 终端的预览界面实时显示具有背景虚化效果的图像的效果。
[0082] 优选地,可在该移动终端上设置一个背景虚化模式启动开关,该开关可W是W硬 件按钮的形式设置在移动终端上,当该硬件按钮按下时,则启动背景虚化模式。或者,还可 在相机的预览界面上设置一个开关,当用户在相机的预览界面下,手动滑动移动终端的触 摸显示屏的相应位置将该开关打开时,则开启背景虚化模式。其中,该移动终端开启背景虚 化模式后,相应摄像头被打开,进而在相机的预览界面实时预览具有背景虚化效果的图像。 由此可知,背景虚化模式启动开关的设置,为用户提供了更多的预览模式选择,提升了用户 的使用体验。
[0083] 本发明实施例的基于移动终端的预览图像处理方法,通过移动终端的第一摄像头 做自动调焦,第二摄像头设置在近焦模式,来获取焦点在被拍摄主体上的第一预览图像和 图像模糊的第二预览图像,从而根据用户输入的枢图指令从第一预览图像中确定出用户所 要突出的清晰主体区域(即第一待合成图像),从第二预览图像中确定出清晰主体区域之外 的区域(即第二待合成图像),并进行合成处理,获得具有背景虚化效果的目标图像。因此, 本发明实施例的基于移动终端的预览图像处理方法,能够实现实时预览具有背景虚化效果 的图像的效果,解决了只有在拍照时才能实现背景虚化的效果,而不能在预览时实现所见 即所得的问题。
[0084] 第四实施例
[0085] 如图4所示,为本发明的第四实施例提供的移动终端的结构框图。图4所示的移动 终端400包括:对焦模块401、获取模块402、虚化模块403。
[0086] 对焦模块401,用于将所述第一摄像头和所述第二摄像头分别设置为不同的对焦 模式;
[0087] 获取模块402,用于获取所述第一摄像头和所述第二摄像头在不同的对焦模式下 分别采集的第一预览图像和第二预览图像;
[0088] 虚化模块403,用于对所述获取模块402获取的所述第一预览图像和所述第二预览 图像进行背景虚化处理,生成目标图像。
[0089] 优选地,所述第一摄像头的对焦模式为自动调焦模式,所述第二摄像头的对焦模 式为远焦模式。
[0090] 如图5所示,所述虚化模块403包括:
[0091] 第一确定单元4031,用于根据所述第一预览图像和所述第二预览图像,确定所述 第一预览图像中的背景区域;
[0092] 虚化单元4032,用于对所述第一确定单元4031确定的所述第一预览图像中的所述 背景区域进行虚化处理,生成目标图像。
[0093] 优选地,所述第一确定单元4031包括:
[0094] 比较子单元40311,用于通过逐个像素比较方式,确定所述第一预览图像和所述第 二预览图像的模糊程度;
[00M]确定子单元40312,用于根据所述比较子单元40311确定的所述第一预览图像和所 述第二预览图像的模糊程度,将所述第一预览图像中比所述第二预览图像中对应位置更模 糊的图像区域确定为所述第一预览图像中的背景区域。
[0096] 优选地,所述第一摄像头的对焦模式为自动调焦模式,所述第二摄像头的对焦模 式为近焦模式。
[0097] 如图6所示,所述虚化模块403包括:
[0098] 获取单元4033,用于获取用户输入的枢图指令;
[0099] 第二确定单元4034,用于根据所述获取单元4033获取的所述枢图指令,确定枢图 区域;
[0100] 第一枢图单元4035,用于通过预设枢图算法,在所述第一预览图像中获取所述第 二确定单元4034确定的所述枢图区域内的图像数据,并将所述枢图区域内的图像数据确定 为第一待合成图像;
[0101] 第二枢图单元4036,用于将所述第二确定单元4034确定的所述枢图区域映射到所 述第二预览图像上,并在所述第二预览图像中获取所述枢图区域外的图像数据,并将所述 枢图区域外的图像数据确定为第二待合成图像;
[0102] 合成单元4037,用于将所述第一待合成图像与所述第二待合成图像进行图像合成 处理,生成目标图像。
[0103] 移动终端400能够实现图1至图3的方法实施例中移动终端实现的各个过程,为避 免重复,运里不再寶述。
[0104] 本发明实施例的移动终端400,通过对焦模块401将移动终端400的第一摄像头和 第二摄像头设置为不同的对焦模式,W使得获取模块402获取第一摄像头和第二摄像头在 不同对焦模式下分别采集的第一预览图像和第二预览图像,进而通过虚化模块403对获取 模块402获取的第一预览图像和第二预览图像进行背景虚化处理,生成目标图像,从而实现 实时预览具有背景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效 果,而不能在预览时实现所见即所得的问题。
[0105] 第五实施例
[0106] 图7是本发明另一个实施例的移动终端的框图。具体地,图7中的移动终端700可W 为手机、平板电脑、个人数字助理(Personal Digital Assis化nt,PDA)、或车载电脑等。
[0107] 图7所示的移动终端700包括:至少一个处理器701、存储器702、至少一个网络接口 704、其他用户接口 703和拍照组件706,拍照组件706包括第一摄像头和第二摄像头。移动终 端700中的各个组件通过总线系统705禪合在一起。可理解,总线系统705用于实现运些组件 之间的连接通信。总线系统705除包括数据总线之外,还包括电源总线、控制总线和状态信 号总线。但是为了清楚说明起见,在图7中将各种总线都标为总线系统705。
[0108] 其中,用户接口 703可W包括显示器、键盘或者点击设备。例如,鼠标,轨迹球 (trac化all)、触感板或者触摸屏等。
[0109] 可W理解,本发明实施例中的存储器702可W是易失性存储器或非易失性存储器, 或可包括易失性和非易失性存储器两者。其中,非易失性存储器可W是只读存储器(Readonly Memo 巧, ROM)、可编程只读存储器 (Programmable ROM, PROM)、可擦除可编程只读存储 器巧rasable PR0M,EPR0M)、电可擦除可编程只读存储器化Iectrically EPR0M,EEPR0M)或 闪存。易失性存储器可W是随机存取存储器(Random Access Memory,RAM),其用作外部高 速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器 (Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器 (Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,孤RSDRAM)、增强型同步动态随机存取存储器化nhanced SDRAM,ESDRAM)、同步连接 动态随机存取存储器(Synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本文描述的系统和方法的存储器702旨在包括但不限于运些和任意其 它适合类型的存储器。
[0110] 在一些实施方式中,存储器702存储了如下的元素,可执行模块或者数据结构,或 者他们的子集,或者他们的扩展集:操作系统7021和应用程序7022。
[0111] 其中,操作系统7021,包含各种系统程序,例如框架层、核屯、库层、驱动层等,用于 实现各种基础业务W及处理基于硬件的任务。应用程序7022,包含各种应用程序,例如媒体 播放器(Media Player)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例 方法的程序可W包含在应用程序7022中。
[0112] 在本发明实施例中,通过调用存储器702存储的程序或指令,具体的,可W是应用 程序7022中存储的程序或指令,分别设置拍照组件706中第一摄像头和第二摄像头为不同 的对焦模式,然后通过处理器701获取所述第一摄像头和所述第二摄像头在不同的对焦模 式下分别采集的第一预览图像和第二预览图像,从而对所述第一预览图像和所述第二预览 图像进行背景虚化处理,生成目标图像。
[0113] 上述本发明实施例掲示的方法可W应用于处理器701中,或者由处理器701实现。 处理器701可能是一种集成电路忍片,具有信号的处理能力。在实现过程中,上述方法的各 步骤可W通过处理器701中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理 器701可W是通用处理器、数字信号处理器化igital Si即al Processor,DSP)、专用集成电 路(Application Specific Integrated Circuit,ASIC)、现成可编程口阵列(Field Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立口或者晶体管逻辑器件、 分立硬件组件。可W实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用 处理器可W是微处理器或者该处理器也可W是任何常规的处理器等。结合本发明实施例所 公开的方法的步骤可W直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件 及软件模块组合执行完成。软件模块可W位于随机存储器,闪存、只读存储器,可编程只读 存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于 存储器702,处理器701读取存储器702中的信息,结合其硬件完成上述方法的步骤。
[0114] 可W理解的是,本文描述的运些实施例可W用硬件、软件、固件、中间件、微码或其 组合来实现。对于硬件实现,处理单元可W实现在一个或多个专用集成电路(Application Specific Integrated Circuits,ASIC)、数字信号处理器(Digital Si即al Processing, DSP)、数字信号处理设备(DSP Device,DSPD)、可编程逻辑设备(Programmable Logic Device,PLD)、现场可编程口阵列(Field-Programmable Gate ArrayJPGA)、通用处理器、 控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
[0115] 对于软件实现,可通过执行本文所述功能的模块(例如过程、函数等)来实现本文 所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可W在处理器中或在 处理器外部实现。
[0116] 优选地,所述第一摄像头的对焦模式为自动调焦模式,所述第二摄像头的对焦模 式为远焦模式。
[0117] 对应地,处理器701在对所述第一预览图像和所述第二预览图像进行背景虚化处 理,生成目标图像时,具体用于:根据所述第一预览图像和所述第二预览图像,确定所述第 一预览图像中的背景区域;对所述第一预览图像中的所述背景区域进行虚化处理,生成目 标图像。
[0118] 优选地,所述处理器701在根据所述第一预览图像和所述第二预览图像,确定所述 第一预览图像中的背景区域时,具体用于:通过逐个像素比较方式,确定所述第一预览图像 和所述第二预览图像的模糊程度;根据所述第一预览图像和所述第二预览图像的模糊程 度,将所述第一预览图像中比所述第二预览图像中对应位置更模糊的图像区域确定为所述 第一预览图像中的背景区域。
[0119] 优选地,作为另一个实施例,所述第一摄像头的对焦模式为自动调焦模式,所述第 二摄像头的对焦模式为近焦模式。
[0120] 对应地,处理器701在对所述第一预览图像和所述第二预览图像进行背景虚化处 理,生成目标图像时,还用于:获取用户输入的枢图指令;根据所述枢图指令,确定枢图区 域;通过预设枢图算法,在所述第一预览图像中获取所述枢图区域内的图像数据,并将所述 枢图区域内的图像数据确定为第一待合成图像;将所述枢图区域映射到所述第二预览图像 上,并在所述第二预览图像中获取所述枢图区域外的图像数据,并将所述枢图区域外的图 像数据确定为第二待合成图像;将所述第一待合成图像与所述第二待合成图像进行图像合 成处理,生成目标图像。
[0121] 移动终端700能够实现前述实施例中移动终端实现的各个过程,为避免重复,运里 不再寶述。
[0122] 本发明实施例的移动终端700,通过将拍照组件706中包括的第一摄像头和第二摄 像头分别设置为不同的对焦模式,从而能够在实际拍照之前进行图像预览时就可W获得所 述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集的第一预览图像和第二预 览图像,进而对第一预览图像和第二预览图像进行背景虚化处理,生成目标图像,实现实时 预览具有背景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效果,而 不能在预览时实现所见即所得的问题,提升了用户的使用体验。
[0123] 第六实施例
[0124] 图8是本发明另一个实施例的移动终端的结构框图。具体地,图8中的移动终端800 可W为手机、平板电脑、个人数字助理(Personal Digital Assistant,PDA)、或车载电脑 等。
[01巧]图8中的移动终端800包括射频(Radio化equency,RF)电路810、存储器820、输入 单元830、显示单元840、处理器860、拍照组件850、音频电路870、WiFi(Wireless Fidelity) 板块880和电源890,其中,拍照组件850包括束一摄像头和束^摄像头。
[0126] 其中,输入单元830可用于接收用户输入的数字或字符信息,W及产生与移动终端 800的用户设置W及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元830可 W包括触控面板831。触控面板831,也称为触摸屏,可收集用户在其上或附近的触摸操作 (比如用户使用手指、触笔等任何适合的物体或附件在触控面板831上的操作),并根据预先 设定的程式驱动相应的连接装置。
[0127] 可选的,触控面板831可包括触摸检测装置和触摸控制器两个部分。其中,触摸检 测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸 控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器860,并 能接收处理器860发来的命令并加W执行。此外,可W采用电阻式、电容式、红外线W及表面 声波等多种类型实现触控面板831。除了触控面板831,输入单元830还可W包括其他输入设 备832,其他输入设备832可W包括但不限于物理键盘、功能键(比如音量控制按键、开关按 键等)、轨迹球、鼠标、操作杆等中的一种或多种。
[0128] 其中,显示单元840可用于显示由用户输入的信息或提供给用户的信息W及移动 终端800的各种菜单界面。显示单元840可包括显示面板841,可选的,可W采用LCD或有机发 光二极管((Organic Light-Emitting Diode,OLED)等形式来配置显示面板841。
[0129] 应注意,触控面板831可W覆盖显示面板841,形成触摸显示屏,当该触摸显示屏检 测到在其上或附近的触摸操作后,传送给处理器860W确定触摸事件的类型,随后处理器 860根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。
[0130] 触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区 及该常用控件显示区的排列方式并不限定,可W为上下排列、左右排列等可W区分两个显 示区的排列方式。该应用程序界面显示区可W用于显示应用程序的界面。每一个界面可W 包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区 也可W为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如, 设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。
[0131] 其中处理器860是移动终端800的控制中屯、,利用各种接口和线路连接整个手机的 各个部分,通过运行或执行存储在第一存储器821内的软件程序和/或模块,W及调用存储 在第二存储器822内的数据,执行移动终端800的各种功能和处理数据,从而对移动终端800 进行整体监控。可选的,处理器860可包括一个或多个处理单元。
[0132] 在本发明实施例中,通过将拍照组件850中第一摄像头和第二摄像头设置为不同 的对焦模式,并使得处理器860通过调用存储该第一存储器821内的软件程序和/或模块和/ 或该第二存储器822内的数据,来获取所述第一摄像头和所述第二摄像头在不同的对焦模 式下分别采集的第一预览图像和第二预览图像,并对所述第一预览图像和所述第二预览图 像进行背景虚化处理,生成目标图像。
[0133] 优选地,所述第一摄像头的对焦模式为自动调焦模式,所述第二摄像头的对焦模 式为远焦模式。
[0134] 对应地,处理器860在对所述第一预览图像和所述第二预览图像进行背景虚化处 理,生成目标图像时,具体用于:根据所述第一预览图像和所述第二预览图像,确定所述第 一预览图像中的背景区域;对所述第一预览图像中的所述背景区域进行虚化处理,生成目 标图像。
[0135] 优选地,处理器860在根据所述第一预览图像和所述第二预览图像,确定所述第一 预览图像中的背景区域时,具体用于:通过逐个像素比较方式,确定所述第一预览图像和所 述第二预览图像的模糊程度;根据所述第一预览图像和所述第二预览图像的模糊程度,将 所述第一预览图像中比所述第二预览图像中对应位置更模糊的图像区域确定为所述第一 预览图像中的背景区域。
[0136] 优选地,作为另一个实施例,所述第一摄像头的对焦模式为自动调焦模式,所述第 二摄像头的对焦模式为近焦模式。
[0137] 对应地,处理器860在对所述第一预览图像和所述第二预览图像进行背景虚化处 理,生成目标图像时,还用于:获取用户输入的枢图指令;根据所述枢图指令,确定枢图区 域;通过预设枢图算法,在所述第一预览图像中获取所述枢图区域内的图像数据,并将所述 枢图区域内的图像数据确定为第一待合成图像;将所述枢图区域映射到所述第二预览图像 上,并在所述第二预览图像中获取所述枢图区域外的图像数据,并将所述枢图区域外的图 像数据确定为第二待合成图像;将所述第一待合成图像与所述第二待合成图像进行图像合 成处理,生成目标图像。
[0138] 移动终端800能够实现前述实施例中移动终端实现的各个过程,为避免重复,运里 不再寶述。
[0139] 本发明实施例的移动终端800,将拍照组件850中包括的第一摄像头和第二设置头 设置为不同的对焦模式,从而能够在实际拍照之前进行图像预览时就可W获取到所述第一 摄像头和所述第二摄像头在不同的对焦模式下分别采集的第一预览图像和第二预览图像, 进而对对所述第一预览图像和所述第二预览图像进行背景虚化处理,生成目标图像,实现 实时预览具有背景虚化效果的图像的效果,解决了只有在拍照时才能实现背景虚化的效 果,而不能在预览时实现所见即所得的问题,提升用户的使用体验。
[0140] 本领域普通技术人员可W意识到,结合本文中所公开的实施例描述的各示例的单 元及算法步骤,能够W电子硬件、或者计算机软件和电子硬件的结合来实现。运些功能究竟 W硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员 可W对每个特定的应用来使用不同方法来实现所描述的功能,但是运种实现不应认为超出 本发明的范围。
[0141] 所属领域的技术人员可W清楚地了解到,为描述的方便和简洁,上述描述的系统、 装置和单元的具体工作过程,可W参考前述方法实施例中的对应过程,在此不再寶述。
[0142] 在本申请所提供的实施例中,应该理解到,所掲露的装置和方法,可W通过其它的 方式实现。例如,W上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为 一种逻辑功能划分,实际实现时可W有另外的划分方式,例如多个单元或组件可W结合或 者可W集成到另一个系统,或一些特征可W忽略,或不执行。另一点,所显示或讨论的相互 之间的禪合或直接禪合或通信连接可W是通过一些接口,装置或单元的间接禪合或通信连 接,可W是电性,机械或其它的形式。
[0143] 所述作为分离部件说明的单元可W是或者也可W不是物理上分开的,作为单元显 示的部件可W是或者也可W不是物理单元,即可W位于一个地方,或者也可W分布到多个 网络单元上。可W根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的效 果。
[0144] 另外,在本发明各个实施例中的各功能单元可W集成在一个处理单元中,也可W 是各个单元单独物理存在,也可W两个或两个W上单元集成在一个单元中。
[0145] 所述功能如果W软件功能单元的形式实现并作为独立的产品销售或使用时,可W 存储在一个计算机可读取存储介质中。基于运样的理解,本发明的技术方案本质上或者说 对现有技术做出贡献的部分或者该技术方案的部分可WW软件产品的形式体现出来,该计 算机软件产品存储在一个存储介质中,包括若干指令用W使得一台计算机设备(可W是个 人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。 而前述的存储介质包括:U盘、移动硬盘、R0M、RAM、磁碟或者光盘等各种可W存储程序代码 的介质。
[0146] W上所述,仅为本发明的【具体实施方式】,但本发明的保护范围并不局限于此,任何 熟悉本技术领域的技术人员在本发明掲露的技术范围内,可轻易想到变化或替换,都应涵 盖在本发明的保护范围之内。因此,本发明的保护范围应W权利要求的保护范围为准。
【主权项】
1. 一种基于移动终端的预览图像处理方法,所述移动终端包括第一摄像头和第二摄像 头,其特征在于,所述方法包括: 将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式; 获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集的第一预览图 像和第二预览图像; 对所述第一预览图像和所述第二预览图像进行背景虚化处理,生成目标图像。2. 根据权利要求1所述的方法,其特征在于,所述第一摄像头的对焦模式为自动调焦模 式,所述第二摄像头的对焦模式为远焦模式。3. 根据权利要求2所述的方法,其特征在于,所述对所述第一预览图像和所述第二预览 图像进行背景虚化处理,生成目标图像的步骤,包括: 根据所述第一预览图像和所述第二预览图像,确定所述第一预览图像中的背景区域; 对所述第一预览图像中的所述背景区域进行虚化处理,生成目标图像。4. 根据权利要求3所述的方法,其特征在于,所述根据所述第一预览图像和所述第二预 览图像,确定所述第一预览图像中的背景区域的步骤,包括: 通过逐个像素比较方式,确定所述第一预览图像和所述第二预览图像的模糊程度; 根据所述第一预览图像和所述第二预览图像的模糊程度,将所述第一预览图像中比所 述第二预览图像中对应位置更模糊的图像区域确定为所述第一预览图像中的背景区域。5. 根据权利要求1所述的方法,其特征在于,所述第一摄像头的对焦模式为自动调焦模 式,所述第二摄像头的对焦模式为近焦模式。6. 根据权利要求5所述的方法,其特征在于,所述对所述第一预览图像和所述第二预览 图像进行背景虚化处理,生成目标图像的步骤,包括: 获取用户输入的抠图指令; 根据所述抠图指令,确定抠图区域; 通过预设抠图算法,在所述第一预览图像中获取所述抠图区域内的图像数据,并将所 述抠图区域内的图像数据确定为第一待合成图像; 将所述抠图区域映射到所述第二预览图像上,并在所述第二预览图像中获取所述抠图 区域外的图像数据,并将所述抠图区域外的图像数据确定为第二待合成图像; 将所述第一待合成图像与所述第二待合成图像进行图像合成处理,生成目标图像。7. -种移动终端,所述移动终端包括第一摄像头和第二摄像头,其特征在于,所述移动 终端还包括: 对焦模块,用于将所述第一摄像头和所述第二摄像头分别设置为不同的对焦模式; 获取模块,用于获取所述第一摄像头和所述第二摄像头在不同的对焦模式下分别采集 的第一预览图像和第二预览图像; 虚化模块,用于对所述获取模块获取的所述第一预览图像和所述第二预览图像进行背 景虚化处理,生成目标图像。8. 根据权利要求7所述的移动终端,其特征在于,所述第一摄像头的对焦模式为自动调 焦模式,所述第二摄像头的对焦模式为远焦模式。9. 根据权利要求8所述的移动终端,其特征在于,所述虚化模块包括: 第一确定单元,用于根据所述第一预览图像和所述第二预览图像,确定所述第一预览 图像中的背景区域; 虚化单元,用于对所述第一确定单元确定的所述第一预览图像中的所述背景区域进行 虚化处理,生成目标图像。10. 根据权利要求9所述的移动终端,其特征在于,所述第一确定单元包括: 比较子单元,用于通过逐个像素比较方式,确定所述第一预览图像和所述第二预览图 像的模糊程度; 确定子单元,用于根据所述比较子单元确定的所述第一预览图像和所述第二预览图像 的模糊程度,将所述第一预览图像中比所述第二预览图像中对应位置更模糊的图像区域确 定为所述第一预览图像中的背景区域。11. 根据权利要求7所述的移动终端,其特征在于,所述第一摄像头的对焦模式为自动 调焦模式,所述第二摄像头的对焦模式为近焦模式。12. 根据权利要求11所述的移动终端,其特征在于,所述虚化模块包括: 获取单元,用于获取用户输入的抠图指令; 第二确定单元,用于根据所述获取单元获取的所述抠图指令,确定抠图区域; 第一抠图单元,用于通过预设抠图算法,在所述第一预览图像中获取所述第二确定单 元确定的所述抠图区域内的图像数据,并将所述抠图区域内的图像数据确定为第一待合成 图像; 第二抠图单元,用于将所述第二确定单元确定的所述抠图区域映射到所述第二预览图 像上,并在所述第二预览图像中获取所述抠图区域外的图像数据,并将所述抠图区域外的 图像数据确定为第二待合成图像; 合成单元,用于将所述第一待合成图像与所述第二待合成图像进行图像合成处理,生 成目标图像。
【文档编号】H04N5/232GK105847674SQ201610176146
【公开日】2016年8月10日
【申请日】2016年3月25日
【发明人】王康康, 殷求明
【申请人】维沃移动通信有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1