防抖处理方法、装置、存储介质及移动终端与流程

本申请实施例涉及移动终端技术领域，尤其涉及一种防抖处理方法、装置、存储介质及移动终端。

背景技术：

目前，拍照功能已成为多数移动终端的标准配置，终端用户可通过随身携带的移动终端轻松快捷的实现拍照操作。用户在交通工具等非静态环境下进行拍照时，会发生抖动导致图像不清晰。

技术实现要素：

本申请实施例提供了一种防抖处理方法、装置、存储介质及移动终端，可以提高图像清晰态度。

第一方面，本申请实施例提供了一种防抖处理方法，包括：

根据目标物体的深度信息确定物距方向的物距抖动量；

根据加速度信息确定旋转抖动量；

根据所述物距抖动量和所述旋转抖动量进行抖动校正。

第二方面，本申请实施例提供了一种防抖处理装置，包括：

物距抖动量确定模块，用于根据目标物体的深度信息确定物距方向的物距抖动量；

旋转抖动量确定模块，用于根据加速度信息确定旋转抖动量；

抖动校正模块，用于根据所述物距抖动量确定模块确定的所述物距抖动量和所述旋转抖动量确定模块确定的所述旋转抖动量进行抖动校正。

第三方面，本申请实施例提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本申请实施例所述的防抖处理方法。

第四方面，本申请实施例提供了一种移动终端，包括存储器，处理器及存储在存储器上并可在处理器运行的计算机程序，所述处理器执行所述计算机程序时实现如本申请实施例所述的防抖处理方法。

本申请实施例中提供的防抖处理方案，首先，根据目标物体的深度信息确定物距方向的物距抖动量；然后，根据加速度信息确定旋转抖动量；最后，根据所述物距抖动量和所述旋转抖动量进行抖动校正。通过采用上述技术方案，能够避免在多个方向发生抖动时图像不清晰，能够提高图像清晰度。

附图说明

图1为本申请实施例提供的一种防抖处理方法的流程示意图；

图2为本申请实施例提供的另一种防抖处理方法的流程示意图；

图3为本申请实施例提供的另一种防抖处理方法的流程示意图；

图4为本申请实施例提供的另一种防抖处理方法的流程示意图；

图5为本申请实施例提供的另一种防抖处理方法的流程示意图；

图6为本申请实施例提供的另一种防抖处理方法的流程示意图；

图7为本申请实施例提供的一种防抖处理装置的结构框图；

图8为本申请实施例提供的一种移动终端的结构示意图。

具体实施方式

下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

目前，拍照功能已成为多数移动终端的标准配置，终端用户可通过随身携带的移动终端轻松快捷的实现拍照操作。用户在交通工具等非静态环境下进行拍照时，会发生多个方向上的大幅抖动，此时若用户进行拍照则会由于抖动量较大导致图像不清晰。因此，移动终端的图像拍摄功能仍需要改进。

本申请实施例提供了一种防抖处理方法，能够获取物距抖动量和旋转抖动量，并根据物距抖动量和旋转抖动量进行抖动校正，相对于目前的运动补偿能够大幅降低物距方向上抖动造成的图像不清晰的问题，在进行较正式参照物距抖动量，进而提高图像清晰度。具体方案如下所示：

图1为本申请实施例提供的一种防抖处理方法的流程示意图，该方法适用于在抖动幅度较大的环境下进行拍摄的情况。该方法可以由具有拍照功能的移动终端来执行，该移动终端可以为智能手机、平板电脑、可穿戴设备(智能手表或智能眼镜)等，该方法具体包括如下步骤：

步骤110、根据目标物体的深度信息确定物距方向的物距抖动量。

目标物体可以通过图像分析确定，可选的，通过人脸识别将人像确定为目标物体。通过深度传感器可获取到终端距离目标物体的深度信息。根据深度信息的变化值确定物距抖动量。

步骤120、根据加速度信息确定旋转抖动量。

通过加速度传感器或陀螺仪获取加速度信息。根据加速度信息可以确定纵向的抖动量。

步骤130、根据物距抖动量和旋转抖动量进行抖动校正。

如果物距抖动量和旋转抖动量位于相同方向，则使用物距抖动量和旋转抖动量进行相校正，矫正后对拍摄得到的目标图像进行抖动校正。

如果物距抖动量和旋转抖动量位于不同方向，则分别使用物距抖动量和旋转抖动量进行抖动校正。

可选的，根据物距抖动量确定缩放比例。根据旋转抖动量确定旋转角度。根据缩放比例和旋转角度对预设曝光时间内的图像进行抖动校正。

物距抖动量可以表示终端与目标物体之间的距离抖动量。使用物距抖动量对目标图像进行放大或缩小，使用旋转图像对目标头像进行旋转校正。

本申请实施例提供了一种防抖处理方法，首先，根据目标物体的深度信息确定物距方向的物距抖动量。然后，根据加速度信息确定旋转抖动量。最后，根据物距抖动量和旋转抖动量进行抖动校正，本申请实施例提供的防抖处理方法能够获取物距抖动量和旋转抖动量，并根据物距抖动量和旋转抖动量进行抖动校正，相对于目前的运动补偿能够大幅降低物距方向上抖动造成的图像不清晰的问题，在进行较正式参照物距抖动量，进而提高图像清晰度。

图2为本申请实施例提供的另一种防抖处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：

步骤210、在预览帧图像中检测目标物体。

步骤220、获取目标物体的深度信息。

步骤230、如果目标物体的深度信息变化量大于预设阈值，则根据目标物体的深度信息确定物距抖动量。

预设阈值可以通过经过训练的机器学习模型确定。若深度信息变化量小于预设阈值，则无需进行物距方向的抖动校正。

步骤240、根据加速度信息确定旋转抖动量。

步骤250、根据物距抖动量和旋转抖动量进行抖动校正。

本申请实施例提供的防抖处理方法，能够根据深度信息变化量计算物距抖动量，更加准确的计算物距抖动量，提高校正准确度。

图3为本申请实施例提供的另一种防抖处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：

步骤310、在预览帧图像中检测目标物体。

步骤320、获取目标物体的深度信息。

步骤330、如果目标物体上至少一个特征点的深度信息变化量大于预设阈值，则根据至少一个特征点的深度信息变化量确定物距抖动量。

检测目标物体类型，如果为人像，则可获取人像中特征点。特征点可以包括面部上的特征点，例如鼻子、眼睛、眉毛和嘴上的特征点。

步骤340、根据加速度信息确定旋转抖动量。

步骤350、根据物距抖动量和旋转抖动量进行抖动校正。

本申请实施例提供的防抖处理方法，能够根据特征点计算深度信息抖动量，更加准确的计算物距抖动量，提高校正准确度。

图4为本申请实施例提供的另一种防抖处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：

步骤410、在预览帧图像中检测目标物体。

步骤420、如果预设时长内，预览帧图像中目标物体相同，则获取目标物体的深度信息。

步骤430、如果目标物体的深度信息变化量大于预设阈值，则根据目标物体的深度信息确定物距抖动量。

步骤440、根据加速度信息确定旋转抖动量。

步骤450、根据物距抖动量和旋转抖动量进行抖动校正。

本申请实施例提供的防抖处理方法，能够在用户对准目标物体后确定物距抖动量，避免不必要的物距抖动量检测，提高资源利用率。

图5为本申请实施例提供的另一种防抖处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：

步骤510、根据目标物体的深度信息确定物距方向的物距抖动量。

步骤520、根据加速度信息确定旋转抖动量。

步骤530、如果目标物体为文档，则在预览帧图像中根据物距抖动量确定目标物体的缩放比例。

在运动中拍摄文档时，由于运动导致终端在物距方向的物距抖动量因此会文档图像会模糊。根据物距抖动量可以确定目标物体的缩放比例。

步骤540、根据抖动校正确定目标物体的旋转角度。

步骤550、根据缩放比例和旋转角度对预览帧图像进行显示校正。

本申请实施例提供的防抖处理方法，能够在拍摄文档图像时，检测根据物距抖动量确定目标物体的缩放比例，防止因物距方向位移较大导致文档的预览图像不清楚，使得预览图像中文档不再抖动，进而用户能够基于稳定的文档确定拍摄内容，进而提高拍摄准确度。

图6为本申请实施例提供的另一种防抖处理方法的流程示意图，作为对上述实施例的进一步说明，该方法包括如下步骤：

步骤610、根据目标物体的深度信息确定物距方向的物距抖动量。

步骤620、根据加速度信息确定旋转抖动量。

步骤630、如果目标物体为文档，则在预览帧图像中根据物距抖动量确定目标物体的缩放比例。

步骤640、根据抖动校正确定目标物体的旋转角度。

步骤650、根据缩放比例和旋转角度对预览帧图像进行显示校正。

步骤660、根据缩放指令调整预览帧图像中目标物体的比例。

步骤670、当接收到拍照指令时，根据预览帧图像对应的校正参数获取目标图像。

本申请实施例提供的防抖处理方法，能够在稳定显示文本文档后，根据用户在预览帧图像中输入的缩放指令对拍摄对象进行调整，实现文本拍摄防抖，提高拍摄效率。

图7为本申请实施例提供的一种防抖处理装置的结构框图，该装置可由软件和/或硬件实现，一般集成在具有拍照功能的移动终端中，可以执行上述各实施例所述的防抖处理方法。如图7所示，该装置包括：物距抖动量确定模块710、旋转抖动量确定模块720和抖动校正模块730。

物距抖动量确定模块710，用于根据目标物体的深度信息确定物距方向的物距抖动量；

旋转抖动量确定模块720，用于根据加速度信息确定旋转抖动量；

抖动校正模块730，用于根据所述物距抖动量确定模块710确定的所述物距抖动量和所述旋转抖动量确定模块720确定的所述旋转抖动量进行抖动校正。

进一步的，物距抖动量确定模块710用于：在预览帧图像中检测目标物体；

获取所述目标物体的深度信息；

如果所述目标物体的深度信息变化量大于预设阈值，则根据所述目标物体的深度信息确定物距抖动量。

进一步的，物距抖动量确定模块710用于如果所述目标物体的深度信息变化量大于预设阈值，则根据所述目标物体的深度信息确定物距抖动量，包括：

所述如果所述目标物体上至少一个特征点的深度信息变化量大于预设阈值，则根据所述至少一个特征点的深度信息变化量确定物距抖动量。

进一步的，物距抖动量确定模块710用于获取所述目标物体的深度信息，包括

如果预设时长内，预览帧图像中目标物体相同，则获取所述目标物体的深度信息。

进一步的，抖动校正模块730用于：

根据所述物距抖动量确定缩放比例；

根据所述旋转抖动量确定旋转角度；

根据所述缩放比例和所述旋转角度对预设曝光时间内的图像进行抖动校正。

进一步的，抖动校正模块730用于：

如果所述目标物体为文档，则在预览帧图像中根据物距抖动量确定目标物体的缩放比例；

根据所述抖动校正确定所述目标物体的旋转角度；

根据所述缩放比例和所述旋转角度对所述预览帧图像进行显示校正。

进一步的，抖动校正模块730在根据所述缩放比例和所述旋转角度对所述预览帧图像进行显示校正之后，还用于：

根据缩放指令调整预览帧图像中所述目标物体的比例；

当接收到拍照指令时，根据预览帧图像对应的校正参数获取目标图像。

本申请实施例提供了一种防抖处理装置，首先，物距抖动量确定模块710根据目标物体的深度信息确定物距方向的物距抖动量。然后，旋转抖动量确定模块720根据加速度信息确定旋转抖动量。最后，抖动校正模块730根据物距抖动量确定模块710确定物距抖动量和旋转抖动量确定模块720确定的旋转抖动量进行抖动校正，本申请实施例提供的防抖处理方法能够获取物距抖动量和旋转抖动量，并根据物距抖动量和旋转抖动量进行抖动校正，相对于目前的运动补偿能够大幅降低物距方向上抖动造成的图像不清晰的问题，在进行较正式参照物距抖动量，进而提高图像清晰度。

上述装置可执行本申请前述所有实施例所提供的方法，具备执行上述方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本申请前述所有实施例所提供的方法。

图8是本申请实施例提供的一种终端设备的结构示意图。如图8所示，该终端可以包括：壳体(图中未示出)、存储器801、中央处理器(centralprocessingunit，cpu)802(又称处理器，以下简称cpu)、存储在存储器801上并可在处理器802上运行的计算机程序、电路板(图中未示出)和电源电路(图中未示出)。所述电路板安置在所述壳体围成的空间内部；所述cpu802和所述存储器801设置在所述电路板上；所述电源电路，用于为所述终端的各个电路或器件供电；所述存储器801，用于存储可执行程序代码；所述cpu802通过读取所述存储器801中存储的可执行程序代码来运行与所述可执行程序代码对应的程序。

所述终端还包括：外设接口803、rf(radiofrequency，射频)电路805、音频电路806、扬声器811、电源管理芯片808、输入/输出(i/o)子系统809、触摸屏812、其他输入/控制设备810以及外部端口804，这些部件通过一个或多个通信总线或信号线807来通信。

应该理解的是，图示终端设备800仅仅是终端的一个范例，并且终端设备800可以具有比图中所示出的更多的或者更少的部件，可以组合两个或更多的部件，或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。

下面就本实施例提供的用于一种终端设备进行详细的描述，该终端设备以智能手机为例。

存储器801，所述存储器801可以被cpu802、外设接口803等访问，所述存储器801可以包括高速随机存取存储器，还可以包括非易失性存储器，例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

外设接口803，所述外设接口803可以将设备的输入和输出外设连接到cpu802和存储器801。

i/o子系统809，所述i/o子系统809可以将设备上的输入输出外设，例如触摸屏812和其他输入/控制设备810，连接到外设接口803。i/o子系统809可以包括显示控制器8091和用于控制其他输入/控制设备810的一个或多个输入控制器8092。其中，一个或多个输入控制器8092从其他输入/控制设备810接收电信号或者向其他输入/控制设备810发送电信号，其他输入/控制设备810可以包括物理按钮(按压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击滚轮。值得说明的是，输入控制器8092可以与以下任一个连接：键盘、红外端口、usb接口以及诸如鼠标的指示设备。

其中，按照触摸屏的工作原理和传输信息的介质分类，触摸屏812可以为电阻式、电容感应式、红外线式或表面声波式。按照安装方式分类，触摸屏812可以为：外挂式、内置式或整体式。按照技术原理分类，触摸屏812可以为：矢量压力传感技术触摸屏、电阻技术触摸屏、电容技术触摸屏、红外线技术触摸屏或表面声波技术触摸屏。

触摸屏812，所述触摸屏812是用户终端与用户之间的输入接口和输出接口，将可视输出显示给用户，可视输出可以包括图形、文本、图标、视频等。可选的，触摸屏812将用户在触屏幕上触发的电信号(如接触面的电信号)，发送给处理器802。

i/o子系统809中的显示控制器8091从触摸屏812接收电信号或者向触摸屏812发送电信号。触摸屏812检测触摸屏上的接触，显示控制器8091将检测到的接触转换为与显示在触摸屏812上的用户界面对象的交互，即实现人机交互，显示在触摸屏812上的用户界面对象可以是运行游戏的图标、联网到相应网络的图标等。值得说明的是，设备还可以包括光鼠，光鼠是不显示可视输出的触摸敏感表面，或者是由触摸屏形成的触摸敏感表面的延伸。

rf电路805，主要用于建立智能音箱与无线网络(即网络侧)的通信，实现智能音箱与无线网络的数据接收和发送。例如收发短信息、电子邮件等。

音频电路806，主要用于从外设接口803接收音频数据，将该音频数据转换为电信号，并且将该电信号发送给扬声器811。

扬声器811，用于将智能音箱通过rf电路805从无线网络接收的语音信号，还原为声音并向用户播放该声音。

电源管理芯片808，用于为cpu802、i/o子系统及外设接口所连接的硬件进行供电及电源管理。

在本实施例中，中央处理器802用于：

根据目标物体的深度信息确定物距方向的物距抖动量；

根据加速度信息确定旋转抖动量；

根据所述物距抖动量和所述旋转抖动量进行抖动校正。

进一步的，所述根据目标物体的深度信息确定物距方向的物距抖动量，包括：

在预览帧图像中检测目标物体；

获取所述目标物体的深度信息；

如果所述目标物体的深度信息变化量大于预设阈值，则根据所述目标物体的深度信息确定物距抖动量。

进一步的，所述如果所述目标物体的深度信息变化量大于预设阈值，则根据所述目标物体的深度信息确定物距抖动量，包括：

所述如果所述目标物体上至少一个特征点的深度信息变化量大于预设阈值，则根据所述至少一个特征点的深度信息变化量确定物距抖动量。

进一步的，所述获取所述目标物体的深度信息，包括

如果预设时长内，预览帧图像中目标物体相同，则获取所述目标物体的深度信息。

进一步的，所述根据所述物距抖动量和所述旋转抖动量进行抖动校正，包括：

根据所述物距抖动量确定缩放比例；

根据所述旋转抖动量确定旋转角度；

根据所述缩放比例和所述旋转角度对预设曝光时间内的图像进行抖动校正。

进一步的，所述根据所述物距抖动量和所述旋转抖动量进行抖动校正，包括：

如果所述目标物体为文档，则在预览帧图像中根据物距抖动量确定目标物体的缩放比例；

根据所述抖动校正确定所述目标物体的旋转角度；

根据所述缩放比例和所述旋转角度对所述预览帧图像进行显示校正。

进一步的，在根据所述缩放比例和所述旋转角度对所述预览帧图像进行显示校正之后，还包括：

根据缩放指令调整预览帧图像中所述目标物体的比例；

当接收到拍照指令时，根据预览帧图像对应的校正参数获取目标图像。

本申请实施例还提供一种包含终端设备可执行指令的存储介质，所述终端设备可执行指令在由终端设备处理器执行时用于执行一种图像白平衡校准方法，该方法包括：

根据目标物体的深度信息确定物距方向的物距抖动量；

根据加速度信息确定旋转抖动量；

根据所述物距抖动量和所述旋转抖动量进行抖动校正。

进一步的，所述根据目标物体的深度信息确定物距方向的物距抖动量，包括：

在预览帧图像中检测目标物体；

获取所述目标物体的深度信息；

如果所述目标物体的深度信息变化量大于预设阈值，则根据所述目标物体的深度信息确定物距抖动量。

进一步的，所述如果所述目标物体的深度信息变化量大于预设阈值，则根据所述目标物体的深度信息确定物距抖动量，包括：

所述如果所述目标物体上至少一个特征点的深度信息变化量大于预设阈值，则根据所述至少一个特征点的深度信息变化量确定物距抖动量。

进一步的，所述获取所述目标物体的深度信息，包括

如果预设时长内，预览帧图像中目标物体相同，则获取所述目标物体的深度信息。

进一步的，所述根据所述物距抖动量和所述旋转抖动量进行抖动校正，包括：

根据所述物距抖动量确定缩放比例；

根据所述旋转抖动量确定旋转角度；

根据所述缩放比例和所述旋转角度对预设曝光时间内的图像进行抖动校正。

进一步的，所述根据所述物距抖动量和所述旋转抖动量进行抖动校正，包括：

如果所述目标物体为文档，则在预览帧图像中根据物距抖动量确定目标物体的缩放比例；

根据所述抖动校正确定所述目标物体的旋转角度；

根据所述缩放比例和所述旋转角度对所述预览帧图像进行显示校正。

进一步的，在根据所述缩放比例和所述旋转角度对所述预览帧图像进行显示校正之后，还包括：

根据缩放指令调整预览帧图像中所述目标物体的比例；

当接收到拍照指令时，根据预览帧图像对应的校正参数获取目标图像。

本申请实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、rf等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本申请操作的计算机程序代码，程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++，还包括常规的过程式程序设计语言—诸如”c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的应用推荐操作，还可以执行本申请任意实施例所提供的防抖处理方法中的相关操作。

注意，上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解，本申请不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此，虽然通过以上实施例对本申请进行了较为详细的说明，但是本申请不仅仅限于以上实施例，在不脱离本申请构思的情况下，还可以包括更多其他等效实施例，而本申请的范围由所附的权利要求范围决定。