一种图像处理方法及移动终端与流程

文档序号:13014013阅读:151来源:国知局
技术领域
本发明涉及通信技术领域,尤其涉及一种图像处理方法及移动终端。


背景技术:

随着通信技术的发展,移动终端的功能越来越多样化。例如,许多移动终
端都具有拍照功能,在拍照过程中,用户可选择与当前环境(例如,光照、场
景等)相应的拍照模式来进行拍照。目前,拍照模式包括图像增强模式,图像
增强模式包括夜景模式、高动态范围(High-DynamicRange,HDR)模式等。
图像增强算法主要在电子设备的硬件抽象层(HAL)中实现,其输入的数据是
YUV420格式的图像数据,即对YUV420格式的多个图像数据帧执行合成增强技
术,来提升拍摄夜景、高反差场景时的图像质量。
然而,现有的图像增强方法,首先将Raw格式图像转换为YUV格式图像,
然后再对YUV格式图像进行图像增强处理。但是,Raw格式图像的数据位宽(例
如,10比特)大于YUV格式图像的数据位宽(例如,8比特),因此,在将Raw
格式图像转换为YUV格式图像时会损失一部分数据,然后再进行图像增强处理,
导致图像增强效果减弱。


技术实现要素:

本发明实施例提供一种图像处理方法及移动终端,以解决现有的图像增强
方法由于图像处理时变换到更低的位宽导致数据损失,导致图像增强效果减弱
的问题。
第一方面,本发明实施例提供一种图像处理方法,应用于具有摄像头的移
动终端,该图像处理方法包括:
获取所述摄像头连续采集的多帧原始图像;
通过预设算法将所述多帧原始图像进行合成处理,得到第一中间图像;
对所述第一中间图像进行图像处理,得到第二中间图像;
对所述第二中间图像进行图像压缩处理,得到最终图像;
其中,所述多帧原始图像和第一中间图像均为10比特位宽的Raw格式图
像,所述第二中间图像为8比特位宽的YUV格式图像,最终图像为8比特位宽
的JPEG格式图像。
第二方面,本发明实施例还提供一种移动终端,包括摄像头,该移动终端
还包括:
图像获取模块,用于获取所述摄像头连续采集的多帧原始图像;
图像合成模块,用于通过预设算法将所述图像获取模块获取的多帧原始图
像进行合成处理,得到第一中间图像;
图像处理模块,用于对所述图像合成模块得到的第一中间图像进行图像处
理,得到第二中间图像;图像压缩处理模块,用于对所述图像处理模块得到的
第二中间图像进行图像压缩处理,得到最终图像;
其中,所述多帧原始图像和第一中间图像均为10比特位宽的Raw格式图
像,所述第二中间图像为8比特位宽的YUV格式图像,最终图像为8比特位宽
的JPEG格式图像。
这样,本发明实施例中,通过基于Raw域的合成增强算法对从相机获得的
Raw格式图像进行合成,再对合成的图像进行图像处理,能够避免在合成增强
之前的图像处理损失过多细节,因此能够获得比先进行图像处理再进行合成增
强的现有多帧合成增强技术更好的合成效果,从而提高了合成图像的质量,增
强了用户体验。在本发明的实施例中,通过使用比Raw域更宽的数据带宽来执
行合成增强算法,从而提高更大处理空间以保证运算精度并获得更好细节展现
的图像,能够在使用移动终端对多帧图像进行合成增强处理时获得更宽的动态
范围、更少的图像噪声、更多的图像细节,从而可提升图像增强效果。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描
述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是
本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性

的前提下,还可以根据这些附图获得其他的附图。
图1是本发明的图像处理方法的第一实施例的流程图;
图2是本发明的图像处理方法的第二实施例的流程图;
图3a是本发明的移动终端的第一实施例的框图之一;
图3b是本发明的移动终端的第一实施例的框图之二;
图4是本发明的移动终端的第二实施例的框图;
图5是本发明的移动终端的第三实施例的框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清
楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部
的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳
动前提下所获得的所有其他实施例,都属于本发明保护的范围。
第一实施例
参见图1,为本发明图像处理方法的第一实施例的流程图,该图像处理方
法应用于具有摄像头的移动终端,该图像处理方法包括:
步骤101,获取所述摄像头连续采集的多帧原始图像。
本发明实施例中,步骤101之前,进一步包括:接收用户的拍照功能启动
请求,然后根据该拍照功能启动请求,显示拍照预览界面。
本发明实施例中,显示出拍照预览界面之后,接收用户的图像增强模式请
求,然后根据该图像增强模式请求,进入图像增强模式。图像增强模式包括夜
景模式和HDR模式等,其中,夜景模式用于夜景图像合成处理,HDR模式用于
HDR图像合成处理,其中,HDR图像合成处理是指将三张不同曝光值的图像合
成一张高动态范围的图像,以三帧不同曝光值的图像中的一张正常曝光图像为
基准,分别在三帧图像中的一帧低曝光和一帧高曝光图像中搜索亮暗部分像素
信息并补充到正常曝光图像中,最后输出合成后的图像。
本发明实施例中,进入图像增强模式之后,开始获取所述摄像头连续采集
的多帧原始图像,其中,所述摄像头所连续采集的多帧原始图像为10比特位
宽的Raw格式图像,本步骤是为了获取步骤102的合成处理所需的多帧原始图

像。
步骤102,通过预设算法将所述多帧原始图像进行合成处理,得到第一中
间图像。
在本发明实施例中,可使用一个临时数据存储空间来存储这些原始图像,
并且使用零快门延迟(ZeroShutterLag,ZSL)模式来更新相机实时拍摄的
图像,即,使用最新获得的图像来替换最初的图像。当用户选择多帧图像增强
模式中的一种模式时,可存储与选择的模式相应的数量的最新图像,并对存储
的图像执行基于Raw域的合成增强算法。例如,当用户选择夜景模式时,可存
储最新的六帧原始图像,并对存储的六帧原始图像执行基于Raw域的合成增强
算法。当用户选择HDR模式时,可存储最新的三个原始图像,并对存储的三个
原始图像执行基于Raw域的合成增强算法。
本步骤中,通过预设算法将所述多帧原始图像进行合成处理,得到10比
特位宽的第一中间图像,可使图像的动态范围更宽,图像噪声更少,并能够展
现更多的图像细节。
步骤103,对所述第一中间图像进行图像处理,得到第二中间图像。
在本发明的实施例中,可通过对10比特位宽的第一中间图像进行图像处
理来产生8比特位宽的YUV格式图像。这里,图像处理包括一些常规的图像处
理操作,例如,马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强
处理等。这里,YUV格式图像可以是图像格式为4:2:0的YUV格式图像。
步骤104,对所述第二中间图像进行图像压缩处理,得到最终图像。
在本发明的实施例中,可对产生的8比特位宽的YUV格式图像进行JPEG
压缩以获得8比特位宽的JPEG格式图像,并存储获得的8比特位宽的JPEG
格式图像以作为拍照的结果图像保存呈现给用户。
本发明实施例的图像处理方法,通过获取所述摄像头连续采集的多帧原始
图像,通过预设算法将所述多帧原始图像进行合成处理,得到第一中间图像,
对所述第一中间图像进行图像处理,得到第二中间图像,对所述第二中间图像
进行图像压缩处理,得到最终图像。本发明实施例的图像处理方法通过基于
Raw域的合成增强算法对从相机获得的Raw格式图像进行合成,再对合成的图
像进行图像处理,能够避免在合成增强之前的图像处理损失过多细节,因此能

够获得比先进行图像处理再进行合成增强的现有多帧合成增强技术更好的合
成效果,能够在使用移动终端对多帧图像进行合成增强处理时获得更宽的动态
范围、更少的图像噪声、更多的图像细节,从而可提升图像增强效果。
第二实施例
参照图2,为本发明图像处理方法的第二实施例的流程图,该图像处理方
法应用于具有摄像头的移动终端,该图像处理方法包括:
步骤201,获取所述摄像头连续采集的多帧原始图像。
本发明实施例中,步骤201之前,进一步包括:接收用户的拍照功能启动
请求,然后根据该拍照功能启动请求,显示拍照预览界面。
本发明实施例中,显示出拍照预览界面之后,接收用户的图像增强模式请
求,然后根据该图像增强模式请求,进入图像增强模式。在图像增强模式下,
可进行夜景图像合成处理或HDR图像合成处理。
本发明实施例中,进入图像增强模式之后,开始获取所述摄像头连续采集
的多帧原始图像,其中,摄像头所连续采集的多帧原始图像为10比特位宽的
Raw格式图像。
步骤202,将所述多帧原始图像转换为16比特位宽,得到多帧16比特位
宽图像。
本步骤中,通过将所述多帧原始图像转换为16比特位宽,以保证图像运
算的数据带宽,保证运算精度。
步骤203,将所述多帧16比特位宽图像校正至同一拍摄角度,得到多帧
相同角度图像。
本发明实施例中,采用运动检测算法将所述多帧16比特位宽图像校正至
同一拍摄角度,具体地,以所述多帧16比特位宽图像中的第一帧图像为基准,
对所述多帧16比特位宽图像中的除了所述第一帧图像外的其他帧16比特位宽
图像进行运动检测校正,使所述16比特位宽图像校正至同一拍摄角度,得到
多帧相同角度图像。其中,运动检测算法可以是视频压缩的运动检测校正算法
或光流算法。第一帧图像可以指所述多帧16比特位宽图像之中的在时间上摄
像头最早采集的一帧原始图像。
具体地,在夜景模式中,以摄像头所采集的六帧原始图像中的第一帧图像

为基准,对其他五帧原始图像进行运动检测校正,使六帧原始图像校正至同一
拍摄角度,得到六帧相同角度图像。在HDR模式中,以摄像头所采集的三帧原
始图像中的第一帧图像为基准,对其他两帧原始图像进行运动检测校正,使三
帧原始图像校正至同一拍摄角度,得到三帧相同角度图像。
步骤204,对所述多帧相同角度图像依次进行均值滤波处理、亮度增强处
理和小波去噪处理,得到一帧16比特位宽的低噪声图像。
本步骤中,均值滤波处理过程包括:对所述多帧相同角度图像中每帧图像
进行均值滤波处理,得到多帧中间图像。
其中,所述对所述多帧相同角度图像中每帧图像进行均值滤波处理具体包
括:将以所述多帧相同角度图像中每帧图像的每个像素点为中心的与该像素点
临近的八个像素点作为滤波模板,对所述滤波模板中的所有像素点的像素值进
行求平均值运算,得到平均像素值,用所述平均像素值来代替每个像素点的像
素值,得到多帧中间图像。
例如,在夜景模式中,以六帧相同角度图像中的第一帧图像中的像素点a
为例,在第一帧图像中,将以像素点a为中心的与像素点a临近的八个像素点
作为滤波模板,对上述八个像素点的像素值进行求平均值运算,得到平均像素
值,用所述平均像素值来代替像素点a的像素值,其他像素点的处理方式和像
素点a均相同。对六帧相同角度图像中的第二帧图像至第六帧图像执行与第一
帧图像相同的处理,得到六帧中间图像。
本步骤中,亮度增强处理过程具体包括:将所述多帧中间图像中每个像素
点的像素值进行累加得到每个像素点的累加像素值,将每个像素点的累加像素
值减去预设像素值阈值作为该像素点的最终像素值,当每个像素点都得到最终
像素值时,得到一帧16比特位宽的亮度增强中间图像。
例如,在夜景模式中,将六帧中间图像中的第一帧图像中的像素点a、第
二帧图像中的像素点a、第三帧图像中的像素点a、第四帧图像中的像素点a、
第五帧图像中的像素点a和第六帧图像中的像素点a的像素值进行累加,得到
像素点a的累加像素值,将像素点a的累加像素值减去预设像素值阈值,并将
得到的差值作为像素点a的最终像素值,其它像素点的处理与像素点a相同,
从而将六帧中间图像合成为一帧亮度增强中间图像。
本步骤中,小波去噪处理过程具体包括:使用边缘检测算法获得所述亮度
增强中间图像的图像内容边缘信息,根据获得的图像内容边缘信息将所述亮度
增强中间图像划分成多个区域,并分别对每个区域执行小波去噪,得到一帧
16比特位宽的低噪声图像。
例如,在夜景模式中,使用边缘检测算法检测由六帧中间图像合成的一帧
亮度增强中间图像的图像内容边缘信息,根据检测到的图像内容边缘信息将所
述亮度增强中间图像划分成多个区域,并分别对每个区域执行小波去噪。
步骤205,对所述低噪声图像进行局部曲线适配,将所述低噪声图像压缩
至10比特位宽,得到第一中间图像。
本发明实施例中,局部曲线适配是指对于二维空间曲线,在一个维度中某
一取值范围内对应的另一维度值进行增加或减小操作。
本步骤中,局部曲线适配过程具体包括:统计所述低噪声图像在0到(216-1)
的像素值范围中的每个像素值上的像素数,将0到(216-1)的像素值范围划分
为N个区域段,分别统计每个区域段中的像素数,分别通过将每个区域段中的
像素数除以总像素数获得每个区域段的像素数占比,对像素数占比小于或等于
预设阈值的区域段进行压缩,不对像素数占比大于所述预设阈值的区域段进行
压缩,从而将16比特位宽的低噪声图像至10比特位宽,得到第一中间图像,
其中,N为大于0的整数。其中,N和预设阈值可由用户预先设置,例如,N
取值为10,预设阈值取值为20%。
采用局部曲线适配的优点在于基于图像内容进行适配,而不是简单的压缩,
因此,通过局部曲线适配来进行压缩的操作可提升先前较暗的区域的增亮,具
有亮度增强的功能。
步骤206,对所述第一中间图像进行图像处理,得到第二中间图像。
在本发明的实施例中,可通过对10比特位宽的第一中间图像进行图像处
理来产生8比特位宽的YUV格式图像。这里,图像处理包括一些常规的图像处
理操作,例如,马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强
处理等。这里,YUV格式图像可以是图像格式为4:2:0的YUV格式图像。
步骤207,对所述第二中间图像进行图像压缩处理,得到最终图像。
在本发明的实施例中,可对产生的8比特位宽的YUV格式图像进行JPEG

压缩以获得JPEG格式图像,并存储获得的8比特位宽的JPEG格式图像以作为
拍照的结果图像保存呈现给用户。
本发明的图像处理方法的第一实施例和第二实施例可应用于具有拍照功
能的任何移动终端,诸如,智能手机、平板电脑、个人数字助理等。
可选地,本发明的图像处理方法的第一实施例和第二实施例的合成处理可
由支持相机原始域操作的移动终端芯片执行。
可选地,本发明的图像处理方法的第一实施例和第二实施例的合成处理可
由移动终端的外置ARM核或DSP核的芯片执行。这里,外置的芯片可通过MIPI
CSI接口与移动终端中的相机模块连接。在获得多个多帧原始图像之后,将获
得的多帧原始图像传送到外置芯片进行合成处理。在外置芯片上对多帧原始图
像进行合成处理之后,将合成的第一中间图像传送回移动终端的芯片以进行图
像处理以及图像压缩处理。例如,可以选用强大的专用图像处理DSP核来实现
外置芯片。因此,利用外置芯片的优点在于可以提升图像处理的速度和质量。
本发明实施例的图像处理方法,通过获取所述摄像头连续采集的多帧原始
图像,将所述多帧原始图像转换为16比特位宽,得到多帧16比特位宽图像,
将所述多帧16比特位宽图像校正至同一拍摄角度,得到多帧相同角度图像,
对所述多帧相同角度图像依次进行均值滤波处理、亮度增强处理和小波去噪处
理,得到一帧16比特位宽的低噪声图像得到第一中间图像,对所述低噪声图
像进行局部曲线适配,将所述低噪声图像压缩至10比特位宽,得到第一中间
图像,对所述第一中间图像进行图像处理,得到第二中间图像,对所述第二中
间图像进行图像压缩处理,得到最终图像。本发明实施例的图像处理方法通过
基于Raw域的合成增强算法对从相机获得的Raw格式图像进行合成,再对合成
的图像进行图像处理,能够避免在合成增强之前的图像处理损失过多细节,因
此能够获得比先进行图像处理再进行合成增强的现有多帧合成增强技术更好
的合成效果,从而提高了合成图像的质量,增强了用户体验。此外,本发明实
施例的图像处理方法通过将所述多帧原始图像转换为16比特位宽,基于16
比特位宽进行合成增强处理,从而保证图像运算的数据带宽,保证运算精度。
此外,本发明实施例的图像处理方法通过对所述低噪声图像进行局部曲线适配,
将所述低噪声图像压缩至10比特位宽,从而提升先前较暗的区域的增亮,提

高了亮度增强的效果。
第三实施例
参照图3a,图3a为本发明移动终端的第一实施例的结构框图之一,图3a
中的移动终端300包括摄像头,所述移动终端300还包括:图像获取模块301、
图像合成模块302、图像处理模块303、图像压缩处理模块304。
在本发明实施例中,图像获取模块301用于获取所述摄像头连续采集的多
帧原始图像。
具体地,在图像获取模块301获取所述摄像头连续采集的多帧原始图像之
前,移动终端300可接收用户的拍照功能启动请求,然后根据该拍照功能启动
请求,显示拍照预览界面。显示出拍照预览界面之后,移动终端300可接收用
户的图像增强模式请求,然后根据该图像增强模式请求,进入图像增强模式。
在图像增强模式下,移动终端300可进行夜景图像合成处理或HDR图像合成处
理。进入图像增强模式之后,图像获取模块301开始获取所述摄像头连续采集
的多帧原始图像,其中,摄像头所连续采集的多帧原始图像为10比特位宽的
Raw格式图像。
在本发明实施例中,图像合成模块302用于通过预设算法将所述图像获取
模块301获取的多帧原始图像进行合成处理,得到第一中间图像。
具体地,可使用一个临时数据存储空间来存储这些原始图像,并且使用零
快门延迟(ZeroShutterLag,ZSL)模式来更新相机实时拍摄的图像,即,
使用最新获得的图像来替换最初的图像。当用户选择多帧图像增强模式中的一
种模式时,图像合成模块302可存储与选择的模式相应的数量的最新图像,并
对存储的图像执行基于Raw域的合成增强算法。例如,当用户选择夜景模式时,
图像合成模块302可存储最新的六帧原始图像,并对存储的六帧原始图像执行
基于Raw域的合成增强算法。当用户选择HDR模式时,图像合成模块302可存
储最新的三个原始图像,并对存储的三个原始图像执行基于Raw域的合成增强
算法。
通过预设算法将所述多帧原始图像进行合成处理,得到10比特位宽的第
一中间图像,可使图像的动态范围更宽,图像噪声更少,并能够展现更多的图
像细节。
在本发明实施例中,图像处理模块303用于对所述图像合成模块302得到
的第一中间图像进行图像处理,得到第二中间图像。
具体地,图像处理模块303可通过对10比特位宽的第一中间图像进行图
像处理来产生8比特位宽的YUV格式图像。这里,图像处理包括一些常规的图
像处理操作,例如,马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩
增强处理等。这里,YUV格式图像可以是图像格式为4:2:0的YUV格式图像。
在本发明实施例中,图像压缩处理模块304用于对所述图像处理模块303
得到的第二中间图像进行图像压缩处理,得到最终图像。
具体地,图像压缩处理模块304可对产生的8比特位宽的YUV格式图像进
行JPEG压缩以获得JPEG格式图像,并存储获得的JPEG格式图像以作为拍照
的结果图像保存呈现给用户。
可选地,如图3b所示,本发明的移动终端的第一实施例的图像合成模块
302还包括:位宽转换单元3021、拍摄角度校正单元3022、图像处理单元3023、
局部曲线适配单元3024。
在本发明实施例中,位宽转换单元3021用于将多帧10比特的原始图像转
换为16比特位宽,得到多帧16比特位宽图像。这样可提高多帧图像增强算法
的处理空间,获得更好的细节展现的图像。
在本发明实施例中,拍摄角度校正单元3022用于将所述位宽转换单元
3021得到的多帧16比特位宽图像校正至同一拍摄角度,得到多帧相同角度图
像。
具体地,拍摄角度校正单元3022可采用运动检测算法将所述多帧16比特
位宽图像校正至同一拍摄角度。具体地,拍摄角度校正单元3022还用于以所
述多帧16比特位宽图像中的第一帧图像为基准,对所述多帧16比特位宽图像
中的除了所述第一帧图像外的其他帧16比特位宽图像进行运动检测校正,使
所述16比特位宽图像校正至同一拍摄角度,得到多帧相同角度图像。其中,
运动检测算法可以是视频压缩的运动检测校正算法或光流算法。第一帧图像可
以指所述多帧16比特位宽图像之中的在时间上摄像头最早采集的一帧原始图
像。
在本发明实施例中,图像处理单元3023用于对所述多帧相同角度图像依

次进行均值滤波处理、亮度增强处理和小波去噪处理,得到一帧16比特位宽
的低噪声图像。
具体地,图像处理单元3023可包括均值滤波处理子单元30231、亮度增
强处理子单元30232和小波去噪处理子单元30233。
均值滤波处理子单元30231用于对所述多帧相同角度图像中每帧图像进
行均值滤波处理,得到多帧中间图像。具体地,均值滤波处理子单元30231
还用于将以所述多帧相同角度图像中每帧图像中每个像素点为中心的与该像
素点临近的八个像素点作为滤波模板,对所述滤波模板中的所有像素点的像素
值进行求平均值运算,得到平均像素值,用所述平均像素值来代替每个像素点
的像素值,得到多帧中间图像。
亮度增强处理子单元30232用于对多帧中间图像进行亮度增强处理。具体
地,亮度增强处理子单元30232还用于:将所述多帧中间图像中每个像素点的
像素值进行累加得到每个像素点的累加像素值,将每个像素点的累加像素值减
去预设像素值阈值作为该像素点的最终像素值,当每个像素点都得到最终像素
值时,得到一帧16比特位宽的亮度增强中间图像。
小波去噪处理子单元30233用于对亮度增强中间图像进行小波去噪处理。
具体地,小波去噪处理子单元30233还用于:使用边缘检测算法获得所述亮度
增强中间图像的图像内容边缘信息,根据获得的图像内容边缘信息将所述亮度
增强中间图像划分成多个区域,并分别对每个区域执行小波去噪,得到一帧
16比特位宽的低噪声图像。
在本发明实施例中,局部曲线适配单元3024用于对所述低噪声图像进行
局部曲线适配,将所述低噪声图像压缩至10比特位宽,得到第一中间图像。
具体地,局部曲线适配是指对于二维空间曲线,在一个维度中某一取值范
围内对应的另一维度值进行增加或减小操作。
局部曲线适配单元3024还用于统计所述低噪声图像在0到(216-1)的像
素值范围中的每个像素值上的像素数,将0到(216-1)的像素值范围划分为N
个区域段,分别统计每个区域段中的像素数,分别通过将每个区域段中的像素
数除以总像素数获得每个区域段的像素数占比,对像素数占比小于或等于预设
阈值的区域段进行压缩,不对像素数占比大于所述预设阈值的区域段进行压缩,

从而将16比特位宽的低噪声图像至10比特位宽,得到第一中间图像,其中,
N为大于0的整数。其中,N和预设阈值可由用户预先设置。例如,N取值为
10,预设阈值取值为20%。
本发明实施例中,采用局部曲线适配的优点在于基于图像内容进行适配,
而不是简单的压缩,因此,通过局部曲线适配来进行压缩的操作可提升先前较
暗的区域的增亮,具有亮度增强的功能。
这里,采用局部曲线适配的优点在于基于图像内容进行适配,而不是简单
的压缩,因此,通过局部曲线适配来进行压缩的操作可提升先前较暗的区域的
增亮,具有亮度增强的功能。
本发明实施例的移动终端300可以是具有拍照功能的任何移动终端,诸如,
智能手机、平板电脑、个人数字助理等。
可选地,图像合成模块302的操作可由支持相机原始域操作的移动终端芯
片执行。
可选地,图像合成模块302的操作可由移动终端的外置ARM核或DSP核的
芯片执行。这里,外置的芯片可通过MIPICSI接口与移动终端中的相机模块
连接。在获得多个多帧原始图像之后,将获得的多帧原始图像传送到外置芯片
进行合成处理。在外置芯片上对多帧原始图像进行合成处理之后,将合成的第
一中间图像传送回移动终端的芯片以进行图像处理以及图像压缩处理。例如,
可以选用强大的专用图像处理DSP核来实现外置芯片。因此,利用外置芯片的
优点在于可以提升图像处理的速度和质量。
本发明实施例的移动终端300通过上述模块,通过基于Raw域的合成增强
算法对从相机获得的Raw格式图像进行合成,再对合成的图像进行图像处理,
能够避免在合成增强之前的图像处理损失过多细节,因此能够获得比先进行图
像处理再进行合成增强的现有多帧合成增强技术更好的合成效果,从而提高了
合成图像的质量,增强了用户体验。此外,本发明实施例的移动终端300通过
上述模块将所述多帧原始图像转换为16比特位宽,基于16比特位宽进行合成
增强处理,从而保证图像运算的数据带宽,保证运算精度。此外,本发明实施
例的移动终端300通过上述模块对所述低噪声图像进行局部曲线适配,将所述
低噪声图像压缩至10比特位宽,从而提升先前较暗的区域的增亮,提高了亮

度增强的效果。
第四实施例
参照图4,图4为本发明的移动终端400的第二实施例的框图,移动终端
400包括:至少一个处理器401、存储器402、至少一个网络接口404和其他
用户接口403、拍照模组406,拍照模组406包括摄像头。移动终端400中的
各个组件通过总线系统405耦合在一起。可理解,总线系统405用于实现这些
组件之间的连接通信。总线系统405除包括数据总线之外,还包括电源总线、
控制总线和状态信号总线。但是为了清楚说明起见,在图4中将各种总线都标
为总线系统405。
其中,用户接口403可以包括显示器、键盘或者点击设备(例如,鼠标,
轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本发明实施例中的存储器402可以是易失性存储器或非易失性
存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以
是只读存储器(Read-OnlyMemory,ROM)、可编程只读存储器(ProgrammableROM,
PROM)、可擦除可编程只读存储器(ErasablePROM,EPROM)、电可擦除可编程
只读存储器(ElectricallyEPROM,EEPROM)或闪存。易失性存储器可以是随
机存取存储器(RandomAccessMemory,RAM),其用作外部高速缓存。通过示例
性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器
(StaticRAM,SRAM)、动态随机存取存储器(DynamicRAM,DRAM)、同步动态
随机存取存储器(SynchronousDRAM,SDRAM)、双倍数据速率同步动态随机存
取存储器(DoubleDataRateSDRAM,DDRSDRAM)、增强型同步动态随机存取存
储器(EnhancedSDRAM,ESDRAM)、同步连接动态随机存取存储器
(SynchlinkDRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM,
DRRAM)。本发明实施例描述的系统和方法的存储器402旨在包括但不限于这
些和任意其它适合类型的存储器。
在一些实施方式中,存储器402存储了如下的元素,可执行模块或者数据
结构,或者他们的子集,或者他们的扩展集:操作系统4021和应用程序4022。
其中,操作系统4021,包含各种系统程序,例如框架层、核心库层、驱
动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序4022,

包含各种应用程序,例如媒体播放器(MediaPlayer)、浏览器(Browser)等,
用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序
4022中。
在本发明实施例中,通过调用存储器402存储的程序或指令,具体的,可
以是应用程序4022中存储的程序或指令。处理器401用于获取所述拍照模组
406的摄像头连续采集的多帧原始图像;通过预设算法将所述多帧原始图像进
行合成处理,得到第一中间图像;对所述第一中间图像进行图像处理,得到第
二中间图像;对所述第二中间图像进行图像压缩处理,得到最终图像,其中,
所述多帧原始图像和第一中间图像均为10比特位宽的Raw格式图像,所述第
二中间图像为8比特位宽的YUV格式图像,最终图像为8比特位宽的JPEG格
式图像。
上述本发明实施例揭示的方法可以应用于处理器401中,或者由处理器
401实现。处理器401可能是一种集成电路芯片,具有信号的处理能力。在实
现过程中,上述方法的各步骤可以通过处理器401中的硬件的集成逻辑电路或
者软件形式的指令完成。上述的处理器401可以是通用处理器、数字信号处理
器(DigitalSignalProcessor,DSP)、专用集成电路(ApplicationSpecific
IntegratedCircuit,ASIC)、现成可编程门阵列(FieldProgrammableGateArray,
FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处
理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明
实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用
译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,
闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器
等本领域成熟的存储介质中。该存储介质位于存储器402,处理器401读取存
储器402中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本发明实施例描述的这些实施例可以用硬件、软件、固件、
中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多
个专用集成电路(ApplicationSpecificIntegratedCircuits,ASIC)、数字信
号处理器(DigitalSignalProcessing,DSP)、数字信号处理设备(DSPDevice,

DSPD)、可编程逻辑设备(ProgrammableLogicDevice,PLD)、现场可编程门阵
列(Field-ProgrammableGateArray,FPGA)、通用处理器、控制器、微控制器、
微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本发明实施例所述功能的模块(例如过程、函
数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过
处理器执行。存储器可以在处理器中或在处理器外部实现。
可选地,处理器401还用于:将所述多帧原始图像转换为16比特位宽,
得到多帧16比特位宽图像;将所述多帧16比特位宽图像校正至同一拍摄角度,
得到多帧相同角度图像;对所述多帧相同角度图像依次进行均值滤波处理、亮
度增强处理和小波去噪处理,得到一帧16比特位宽的低噪声图像;对所述低
噪声图像进行局部曲线适配,将所述低噪声图像压缩至10比特位宽,得到第
一中间图像。
可选地,处理器401还用于:以所述多帧16比特位宽图像中的第一帧图
像为基准,对所述多帧16比特位宽图像中的除了所述第一帧图像外的其他帧
16比特位宽图像进行运动检测校正,使所述16比特位宽图像校正至同一拍摄
角度,得到多帧相同角度图像。
可选地,处理器401还用于:将以所述多帧相同角度图像中每帧图像的每
个像素点为中心的与该像素点临近的八个像素点作为滤波模板,对所述滤波模
板中的所有像素点的像素值进行求平均值运算,得到平均像素值,用所述平均
像素值来代替每个像素点的像素值,得到多帧中间图像;将所述多帧中间图像
中每个像素点的像素值进行累加得到每个像素点的累加像素值,将每个像素点
的累加像素值减去预设像素值阈值作为该像素点的最终像素值,当每个像素点
都得到最终像素值时,得到一帧16比特位宽的亮度增强中间图像;使用边缘
检测算法检测所述亮度增强中间图像的图像内容边缘信息,根据检测到的图像
内容边缘信息将所述亮度增强中间图像划分成多个区域,并分别对每个区域执
行小波去噪,得到一帧16比特位宽的低噪声图像。
可选地,处理器401还用于:统计所述低噪声图像在0到(216-1)的像素
值范围中的每个像素值上的像素数,将0到(216-1)的像素值范围划分为N
个区域段,分别统计每个区域段中的像素数,分别通过将每个区域段中的像素

数除以总像素数获得每个区域段的像素数占比,对像素数占比小于或等于预设
阈值的区域段进行压缩,不对像素数占比大于所述预设阈值的区域段进行压缩,
从而将16比特位宽的低噪声图像至10比特位宽,得到第一中间图像,其中,
N为大于0的整数。
可选地,处理器401还用于:对所述第一中间图像进行马赛克处理、锐化
处理、去噪处理、色彩转换处理、色彩增强处理。
可选地,通过预设算法将所述多帧原始图像进行合成处理的操作可由移动
终端的外置ARM核或DSP核的芯片执行。
移动终端400能够实现前述实施例中移动终端实现的各个过程,为避免重
复,这里不再赘述。
本发明实施例的移动终端400通过上述模块,通过基于Raw域的合成增强
算法对从相机获得的Raw格式图像进行合成,再对合成的图像进行图像处理,
能够避免在合成增强之前的图像处理损失过多细节,因此能够获得比先进行图
像处理再进行合成增强的现有多帧合成增强技术更好的合成效果,从而提高了
合成图像的质量,增强了用户体验。此外,本发明实施例的移动终端400通过
上述模块将所述多帧原始图像转换为16比特位宽,基于16比特位宽进行合成
增强处理,从而保证图像运算的数据带宽,保证运算精度。此外,本发明实施
例的移动终端400通过上述模块对所述低噪声图像进行局部曲线适配,将所述
低噪声图像压缩至10比特位宽,从而提升先前较暗的区域的增亮,提高了亮
度增强的效果。
第五实施例
参见图5,图5是本发明的移动终端的第三实施例的框图。移动终端可以
为手机、平板电脑、个人数字助理(PersonalDigitalAssistant,PDA)、或
车载电脑等。
图5中的移动终端包括射频(RadioFrequency,RF)电路510、存储器520、
输入单元530、显示单元540、拍照模组550、处理器560、音频电路570、WiFi
(WirelessFidelity)模块580和电源590,其中,拍照模组550包括摄像头。
其中,输入单元530可用于接收用户输入的数字或字符信息,以及产生与
移动终端的用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,

该输入单元530可以包括触控面板531。触控面板531,也称为触摸屏,可收
集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体
或附件在触控面板531上的操作),并根据预先设定的程式驱动相应的连接装
置。可选的,触控面板531可包括触摸检测装置和触摸控制器两个部分。其
中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号
传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转
换成触点坐标,再送给该处理器560,并能接收处理器560发来的命令并加以
执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实
现触控面板531。除了触控面板531,输入单元530还可以包括其他输入设备
532,其他输入设备532可以包括但不限于物理键盘、功能键(比如音量控制
按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,显示单元540可用于显示由用户输入的信息或提供给用户的信息以
及移动终端的各种菜单界面。显示单元540可包括显示面板541,可选的,可
以采用LCD或有机发光二极管(OrganicLight-EmittingDiode,OLED)等形
式来配置显示面板541。
应注意,触控面板531可以覆盖显示面板541,形成触摸显示屏,当该触
摸显示屏检测到在其上或附近的触摸操作后,传送给处理器560以确定触摸事
件的类型,随后处理器560根据触摸事件的类型在触摸显示屏上提供相应的视
觉输出。
触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面
显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列
等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用
程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌
面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。
该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、
滚动条、电话本图标等应用程序图标等。
其中,处理器560是移动终端的控制中心,利用各种接口和线路连接整个
手机的各个部分,通过运行或执行存储在第一存储器521内的软件程序和/或
模块,以及调用存储在第二存储器522内的数据,执行移动终端的各种功能和

处理数据,从而对移动终端进行整体监控。可选的,处理器560可包括一个
或多个处理单元。
在本发明实施例中,通过调用存储该第一存储器521内的软件程序和/或
模块和/或该第二存储器522内的数据,处理器560用于获取拍照模组550的
摄像头连续采集的多帧原始图像;通过预设算法将所述多帧原始图像进行合成
处理,得到第一中间图像;对所述第一中间图像进行图像处理,得到第二中间
图像;对所述第二中间图像进行图像压缩处理,得到最终图像,其中,所述多
帧原始图像和第一中间图像均为10比特位宽的Raw格式图像,所述第二中间
图像为8比特位宽的YUV格式图像,最终图像为8比特位宽的JPEG格式图像。
可选地,处理器560还用于:将所述多帧原始图像转换为16比特位宽,
得到多帧16比特位宽图像;将所述多帧16比特位宽图像校正至同一拍摄角度,
得到多帧相同角度图像;对所述多帧相同角度图像依次进行均值滤波处理、亮
度增强处理和小波去噪处理,得到一帧16比特位宽的低噪声图像;对所述低
噪声图像进行局部曲线适配,将所述低噪声图像压缩至10比特位宽,得到第
一中间图像。
可选地,处理器560还用于:以所述多帧16比特位宽图像中的第一帧图
像为基准,对所述多帧16比特位宽图像中的除了所述第一帧图像外的其他帧
16比特位宽图像进行运动检测校正,使所述16比特位宽图像校正至同一拍摄
角度,得到多帧相同角度图像。
可选地,处理器560还用于:将以所述多帧相同角度图像中每帧图像的每
个像素点为中心的与该像素点临近的八个像素点作为滤波模板,对所述滤波模
板中的所有像素点的像素值进行求平均值运算,得到平均像素值,用所述平均
像素值来代替每个像素点的像素值,得到多帧中间图像;将所述多帧中间图像
中每个像素点的像素值进行累加得到每个像素点的累加像素值,将每个像素点
的累加像素值减去预设像素值阈值作为该像素点的最终像素值,当每个像素点
都得到最终像素值时,得到一帧16比特位宽的亮度增强中间图像;使用边缘
检测算法检测所述亮度增强中间图像的图像内容边缘信息,根据检测到的图像
内容边缘信息将所述亮度增强中间图像划分成多个区域,并分别对每个区域执
行小波去噪,得到一帧16比特位宽的低噪声图像。
可选地,处理器560还用于:统计所述低噪声图像在0到(216-1)的像素
值范围中的每个像素值上的像素数,将0到(216-1)的像素值范围划分为N
个区域段,分别统计每个区域段中的像素数,分别通过将每个区域段中的像素
数除以总像素数获得每个区域段的像素数占比,对像素数占比小于或等于预设
阈值的区域段进行压缩,不对像素数占比大于所述预设阈值的区域段进行压缩,
从而将16比特位宽的低噪声图像至10比特位宽,得到第一中间图像,其中,
N为大于0的整数。
可选地,处理器560还用于:对所述第一中间图像进行马赛克处理、锐化
处理、去噪处理、色彩转换处理、色彩增强处理。
可选地,通过预设算法将所述多帧原始图像进行合成处理的操作可由移动
终端的外置ARM核或DSP核的芯片执行。
移动终端能够实现前述实施例中移动终端实现的各个过程,为避免重复,
这里不再赘述。
本发明实施例的移动终端通过上述模块,通过基于Raw域的合成增强算法
对从相机获得的Raw格式图像进行合成,再对合成的图像进行图像处理,能够
避免在合成增强之前的图像处理损失过多细节,因此能够获得比先进行图像处
理再进行合成增强的现有多帧合成增强技术更好的合成效果,从而提高了合成
图像的质量,增强了用户体验。此外,本发明实施例的移动终端通过上述模块
将所述多帧原始图像转换为16比特位宽,基于16比特位宽进行合成增强处理,
从而保证图像运算的数据带宽,保证运算精度。此外,本发明实施例的移动终
端通过上述模块对所述低噪声图像进行局部曲线适配,将所述低噪声图像压缩
至10比特位宽,从而提升先前较暗的区域的增亮,提高了亮度增强的效果。
本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描
述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件
的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的
特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方
法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述
的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,

在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通
过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,
所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方
式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可
以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通
信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电
性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为
单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者
也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全
部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,
也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元
中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用
时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技
术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以
以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括
若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络
设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介
质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码
的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于
此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到
变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应
以权利要求的保护范围为准。
当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1