降低移动终端功耗的方法、装置、存储介质和移动终端与流程

本发明涉及移动终端技术领域，尤其涉及一种降低移动终端功耗的方法、装置、计算机可读存储介质和移动终端。

背景技术：

随着移动终端制造技术以及互联网的快速发展，移动终端已经成为人们生活中不可或缺的通讯及娱乐工具。人们为了能够更好地获得使用体验，会在移动终端中安装各种各样的应用程序。例如，可在移动终端中安装利用结构光原理的相机应用程序，其中，该相机应用程序利用结构光原理实现拍摄功能。

相关技术中，移动终端中的相机应用程序通过结构光进行图像拍摄时，移动终端通常利用高分辨率来获取该被拍摄物体的深度信息。然而，移动终端计算高分辨率的深度信息，会造成移动终端的功耗过大，这样在用户反复使用该相机应用程序时，会大大减少移动终端的续航时间，导致用户体验变差。

技术实现要素：

本发明的目的旨在至少在一定程度上解决上述的技术问题之一。

为此，本发明的第一个目的在于提出一种降低移动终端功耗的方法。该方法不仅智能化的保证了3d深度信息的基本功能，而且还保证了移动终端的续航时间。

本发明的第二个目的在于提出一种降低移动终端功耗的装置。

本发明的第三个目的在于提出一种计算机可读存储介质。

本发明的第四个目的在于提出一种移动终端。

为达到上述目的，本发明第一方面实施例提出的降低移动终端功耗的方法，包括：监测移动终端的电池的当前剩余电量；根据所述电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域；通过结构光组件，对所述目标待采集区域进行图像采集以获取所述目标待采集区域的结构光图像；根据所述目标分辨率对所述结构光图像进行解调，获取所述目标待采集区域的深度信息。

根据本发明实施例的降低移动终端功耗的方法，在用户每次使用该移动终端进行拍摄时，可以根据移动终端中电池的当前剩余电量实时调整3d成像所需的目标分辨率和目标待采集区域，进而根据该目标分辨率和目标待采集区域实现结构光拍摄功能，不仅智能化的保证了3d深度信息的基本功能，而且还保证了移动终端的续航时间。

为达到上述目的，本发明第二方面实施例提出的降低移动终端功耗的装置，包括：监测模块，用于监测移动终端的电池的当前剩余电量；确定模块，用于根据所述电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域；图像采集模块，用于通过结构光组件，对所述目标待采集区域进行图像采集以获取所述目标待采集区域的结构光图像；深度信息获取模块，用于根据所述目标分辨率对所述结构光图像进行解调，获取所述目标待采集区域的深度信息。

根据本发明实施例的降低移动终端功耗的装置，可通过监测模块监测移动终端的电池的当前剩余电量，确定模块根据电池的当前剩余电量实时确定三维成像所需的目标分辨率和目标待采集区域，图像采集模块通过结构光组件，对目标待采集区域进行图像采集以获取目标待采集区域的结构光图像，深度信息获取模块根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息，这样，在用户每次使用该移动终端进行拍摄时，可以根据移动终端中电池的当前剩余电量实时调整3d成像所需的目标分辨率和目标待采集区域，进而根据该目标分辨率和目标待采集区域实现结构光拍摄功能，不仅智能化的保证了3d深度信息的基本功能，而且还保证了移动终端的续航时间。

为达到上述目的，本发明第三方面实施例提出的一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行本发明第一方面实施例所述的降低移动终端功耗的方法。

为达到上述目的，本发明第四方面实施例提出的移动终端，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行本发明第一方面实施例所述的降低移动终端功耗的方法。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明一个实施例的降低移动终端功耗的方法的流程图。

图2是根据本发明实施例的确定目标分辨率和目标待采集区域的流程图；

图3是根据本发明一个实施例的目标待采集区域的深度信息的测量示例图；

图4是根据本发明一个实施例的获得目标待采集区域的深度信息的原理示例图；

图5是根据本发明一个实施例的降低移动终端功耗的装置的结构示意图；

图6为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

可以理解，本发明所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本发明的范围的情况下，可以将第一客户端称为第二客户端，且类似地，可将第二客户端称为第一客户端。第一客户端和第二客户端两者都是客户端，但其不是同一客户端。

下面参考附图描述本发明实施例的降低移动终端功耗的方法、装置、计算机可读存储介质和移动终端。

图1是根据本发明一个实施例的降低移动终端功耗的方法的流程图。需要说明的是，本发明实施例的降低移动终端功耗的方法可应用于本发明实施例的降低移动终端功耗的装置，该装置可被配置于移动终端。其中，该移动终端可以是手机、平板电脑、个人数字助理等具有各种操作系统的硬件设备。还需要说明的是，该移动终端应具有利用结构光原理进行图像拍摄的功能。

如图1所示，该降低移动终端功耗的方法可以包括：

s110，监测移动终端的电池的当前剩余电量。

可选地，在监测到用户使用移动终端的拍摄功能时，可通过移动终端的操作系统中自带的电池信息获取工具，获取该移动终端中电池的相关信息，其中，该相关信息可包括但不限于电池的电池剩余容量(即上述的当前剩余电量)、电池最大值、图标id、电池的电压、电池的温度、电池类型、充电方式、电池状态和健康状态等。这样，从该相关信息中即可获取到该电池的当前剩余电量。

例如，以移动终端的操作系统为安卓android操作系统为例，可以利用android操作系统中的broadcastreceiver机制，来获取电池电量变化的action_battery_changedintent，进而获取当前android设备的电池状态。具体实现过程可包括以下步骤：1)创建一个监听action_battery_changed事件的intentfilter；2)创建一个broadcastreceiver对象，该对象可以接收broadcastintent；3)注册broadcastreceiver对象来监听action_battery_changed事件；4)在broadcastreceiver对象中，重写onreceive方法，并在onreceive方法的传入参数intent中获取需要的电池状态信息。其中，该电池状态信息中即包括电池的当前剩余电量。

又如，以移动终端的操作系统为ios操作系统为例，可通过ios操作系统中提供的电池电量的获取接口工具，比如uidevice获取接口，可以利用该uidevice获取接口以获取移动终端的当前剩余电量。

s120，根据电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域。

可选地，可预先制定一个电池电量、深度分辨率信息与待采集区域三者之间的对应表格，其中，该表格中的电池电量、深度分辨率信息与待采集区域三者之间具有一一对应关系。例如，如下面表格1所示，为电池电量、深度分辨率信息与待采集区域三者之间的对应表格的示例，可以看出，电池的当前剩余电量的不同，会相应的对应不同的深度分辨率信息与待采集区域。

表格1

可选地，在本步骤中，在获得电池的当前剩余电量时，可根据该电池的当前剩余电量，从预先制定的电池电量、深度分辨率信息与待采集区域三者之间的对应表格中，找出对应的深度分辨率信息和待采集区域，其中，该深度分辨率信息即为上述三维成像所需的目标分辨率，该待采集区域即为上述三维成像所需的目标待采集区域。

作为一种示例，如图2所示，上述根据电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域的具体实现过程可包括以下步骤：

s210，当电池的当前剩余电量大于第一阈值时，确定三维成像所需的目标分辨率为第一分辨率，并将目标物体的整体区域作为目标待采集区域。

s220，当电池的当前剩余电量小于或等于第二阈值且大于第三阈值时，确定三维成像所需的目标分辨率为第一分辨率，并将目标物体的脸部区域作为目标待采集区域。

s220，当电池的当前剩余电量小于或等于第四阈值时，确定三维成像所需的目标分辨率为第二分辨率，并将目标物体的脸部区域作为目标待采集区域。

其中，在本发明的实施例中，上述第一分辨率大于第二分辨率，上述第一阈值大于第二阈值，第二阈值大于第三阈值，第三阈值大于第四阈值。例如，该第一阈值可为80％，该第二阈值可为45％，该第三阈值可为55％，该第四阈值可为25％。

也就是说，当电池的当前剩余电量很高时，可采用高分辨率对目标物体的整体区域深度信息进行计算；当电池的当前剩余电量处于一定范围(如45％～55％)时，只采用高分辨率对目标物体的脸部深度信息进行计算；当电池的当前剩余电量更低(如低于25％)时，降低脸部深度信息分辨率计算。这样，不仅智能化的保证了三维(英文简称：3d)深度信息的基本功能，并且保证了移动终端的续航时间。

s130，通过结构光组件，对目标待采集区域进行图像采集以获取目标待采集区域的结构光图像。

作为一种示例，该结构光组件可包括投射装置(如结构光投射器)和摄像头，该结构光组件可设置于移动终端中。其中，该投射装置可向被测物体所处的空间投射一个预设的散斑图案，其中，该散斑图案中具有多个光斑点。摄像头可用以对已投射过散斑图案的被测物体进行采集，以得到带有散斑图案的被测物体的结构光图像。

在本步骤中，可通过投射装置向目标待采集区域所处的空间投射预设的散斑图案，并通过摄像头对目标待采集区域进行采集，得到带有散斑图案的目标待采集区域的结构光图像。

可以理解，如图3所示，光学投射装置将一个预设的散斑图案投射到被测物体(如目标待采集区域)所处的空间内，在目标待采集区域的表面上形成由目标待采集区域形状所调制的光条的三维图像。该三维图像由处于移动终端的另一位置的摄像头探测，从而获得光条二维畸变图像(即上述的结构光图像)。

s140，根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息。

在如上本发明的实施例中，光条的畸变程度取决于投射装置与摄像头之间的相对位置和目标待采集区域表面轮廓，直观上，沿光条显示出的位移(或偏移)与目标待采集区域表面高度成比例，扭曲表示了平面的变化，不连续显示了表面的物理间隙，当投射装置与摄像头之间的相对位置一定时，由畸变的二维图像(即上述的结构光图像)的坐标即可重现目标待采集区域表面的三维轮廓，即该三维轮廓即理解为目标待采集区域的深度图像，进而从该深度图像中获取该目标待采集区域的深度信息。

可选地，在本步骤中，可根据目标分辨率，利用预设公式经对结构光图像进行计算后得到目标待采集区域的深度信息。

也就是说，可通过移动终端的投射装置向目标待采集区域所处的空间投射一个散斑图案，该散斑图案中具有多个光斑点，该散斑图案被投射到目标待采集区域表面上时，该散斑图案中的好多光斑点的位置由于目标待采集区域表面的原因而发生了偏移，这样，利用预设公式根据相对于光斑点的初始位置偏移的量计算出目标待采集区域的深度信息。

作为一种示例，上述预设公式为：

其中，(x,y,z)为目标待采集区域的深度信息的坐标，b为投射装置与摄像头之间的基线间距，f为摄像头的焦距，θ为投射装置向目标待采集区域所处的空间投射预设的散斑图案时的投影角度，(x',y')为带有散斑图案的目标待采集区域的结构光图像。

为了更加清楚的说明上述预设公式的原理，下面以投射的散斑图案中的一个单点为例说明，如图4所示，通过上述预设公式即可获得投射点的深度信息。也就是说，通过从已知角度投影一个激光点到目标待采集区域上，然后用摄像头获取该点的二维畸变图像(即上述的结构光图像)，并确定投射装置与摄像头之间相距一个基线距离b，这样，将已知投影角度、投射装置与摄像头之间的基线间距、摄像头的焦距、该单点对应的二维畸变图像的坐标，代入上述预设公式(1)即可得到该单点对应的目标待采集区域的深度信息的坐标。由此，实现了由畸变的二维图像坐标重现物体表面的三维轮廓的目的，进而得到了目标待采集区域的深度信息。

根据本发明实施例的降低移动终端功耗的方法，可监测移动终端的电池的当前剩余电量，并根据电池的当前剩余电量实时确定三维成像所需的目标分辨率和目标待采集区域，并通过结构光组件，对目标待采集区域进行图像采集以获取目标待采集区域的结构光图像，以及根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息，这样，在用户每次使用该移动终端进行拍摄时，可以根据移动终端中电池的当前剩余电量实时调整3d成像所需的目标分辨率和目标待采集区域，进而根据该目标分辨率和目标待采集区域实现结构光拍摄功能，不仅智能化的保证了3d深度信息的基本功能，而且还保证了移动终端的续航时间。

与上述几种实施例提供的降低移动终端功耗的方法相对应，本发明的一种实施例还提供一种降低移动终端功耗的装置，由于本发明实施例提供的降低移动终端功耗的装置与上述几种实施例提供的降低移动终端功耗的方法相对应，因此在前述降低移动终端功耗的方法的实施方式也适用于本实施例提供的降低移动终端功耗的装置，在本实施例中不再详细描述。图5是根据本发明一个实施例的降低移动终端功耗的装置的结构示意图。如图5所示，该降低移动终端功耗的装置可以包括：监测模块510、确定模块520、图像采集模块530和深度信息获取模块540。

具体地，监测模块510用于监测移动终端的电池的当前剩余电量。

确定模块520用于根据所述电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域。

可选地，可预先制定一个电池电量、深度分辨率信息与待采集区域三者之间的对应表格，其中，该表格中的电池电量、深度分辨率信息与待采集区域三者之间具有一一对应关系。例如，如上面表格1所示，为电池电量、深度分辨率信息与待采集区域三者之间的对应表格的示例，可以看出，电池的当前剩余电量的不同，会相应的对应不同的深度分辨率信息与待采集区域。

作为一种示例，确定模块520根据所述电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域的具体实现过程可如下：在电池的当前剩余电量大于第一阈值时，确定三维成像所需的目标分辨率为第一分辨率，并将目标物体的整体区域作为目标待采集区域；在电池的当前剩余电量小于或等于第二阈值且大于第三阈值时，确定三维成像所需的目标分辨率为第一分辨率，并将目标物体的脸部区域作为目标待采集区域；在电池的当前剩余电量小于或等于第四阈值时，确定三维成像所需的目标分辨率为第二分辨率，并将目标物体的脸部区域作为目标待采集区域。其中，第一分辨率大于第二分辨率，第一阈值大于第二阈值，第二阈值大于第三阈值，第三阈值大于第四阈值。

图像采集模块530用于通过结构光组件，对所述目标待采集区域进行图像采集以获取所述目标待采集区域的结构光图像。作为一种示例，该结构光组件可包括投射装置和摄像头。其中，在本示例中，图像采集模块530可具体用于：通过投射装置向目标待采集区域所处的空间投射预设的散斑图案，并通过摄像头对目标待采集区域进行采集，得到带有散斑图案的目标待采集区域的结构光图像。

深度信息获取模块540用于根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息。可选地，深度信息获取模块540可根据目标分辨率，利用预设公式经对结构光图像进行计算后得到目标待采集区域的深度信息。

作为一种示例，上述预设公式为：

其中，(x,y,z)为目标待采集区域的深度信息的坐标，b为投射装置与摄像头之间的基线间距，f为摄像头的焦距，θ为投射装置向目标待采集区域所处的空间投射预设的散斑图案时的投影角度，(x',y')为带有散斑图案的目标待采集区域的结构光图像。

根据本发明实施例的降低移动终端功耗的装置，可通过监测模块监测移动终端的电池的当前剩余电量，确定模块根据电池的当前剩余电量实时确定三维成像所需的目标分辨率和目标待采集区域，图像采集模块通过结构光组件，对目标待采集区域进行图像采集以获取目标待采集区域的结构光图像，深度信息获取模块根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息，这样，在用户每次使用该移动终端进行拍摄时，可以根据移动终端中电池的当前剩余电量实时调整3d成像所需的目标分辨率和目标待采集区域，进而根据该目标分辨率和目标待采集区域实现结构光拍摄功能，不仅智能化的保证了3d深度信息的基本功能，而且还保证了移动终端的续航时间。

上述降低移动终端功耗的装置中各个模块的划分仅用于举例说明，在其他实施例中，可将降低移动终端功耗的装置按照需要划分为不同的模块，以完成上述降低移动终端功耗的装置的全部或部分功能。

本发明实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行以下步骤：

s110’，监测移动终端的电池的当前剩余电量；

s120’，根据电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域；

s130’，通过结构光组件，对目标待采集区域进行图像采集以获取目标待采集区域的结构光图像；

s140’，根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息。

本发明实施例还提供一种移动终端。上述移动终端中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义isp(imagesignalprocessing，图像信号处理)管线的各种处理单元。图6为一个实施例中图像处理电路的示意图。如图6所示，为便于说明，仅示出与本发明实施例相关的图像处理技术的各个方面。

如图6所示，图像处理电路包括成像设备610、isp处理器630和控制逻辑器640。成像设备610可包括具有一个或多个透镜612、图像传感器614的摄像头和结构光投射器616。结构光投射器616将结构光投影至被测物。其中，该结构光图案可为激光条纹、格雷码、正弦条纹、或者，随机排列的散斑图案等。图像传感器614捕捉投影至被测物形成的结构光图像，并将结构光图像发送至isp处理器630，由isp处理器630对结构光图像进行解调获取被测物的深度信息。同时，图像传感器614也可以捕捉被测物的色彩信息。当然，也可以由两个图像传感器614分别捕捉被测物的结构光图像和色彩信息。

其中，以散斑结构光为例，isp处理器630对结构光图像进行解调，具体包括，从该结构光图像中采集被测物的散斑图像，将被测物的散斑图像与参考散斑图像按照预定算法进行图像数据计算，获取被测物上散斑图像的各个散斑点相对于参考散斑图像中的参考散斑点的移动距离。利用三角法转换计算得到散斑图像的各个散斑点的深度值，并根据该深度值得到被测物的深度信息。

当然，还可以通过双目视觉的方法或基于飞行时差tof的方法来获取该深度图像信息等，在此不做限定，只要能够获取或通过计算得到被测物的深度信息的方法都属于本实施方式包含的范围。

在isp处理器630接收到图像传感器614捕捉到的被测物的色彩信息之后，可被测物的色彩信息对应的图像数据进行处理。isp处理器630对图像数据进行分析以获取可用于确定和/或成像设备610的一个或多个控制参数的图像统计信息。图像传感器614可包括色彩滤镜阵列(如bayer滤镜)，图像传感器614可获取用图像传感器614的每个成像像素捕捉的光强度和波长信息，并提供可由isp处理器630处理的一组原始图像数据。

isp处理器630按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，isp处理器630可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的图像统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

isp处理器630还可从图像存储器620接收像素数据。图像存储器620可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括dma(directmemoryaccess，直接直接存储器存取)特征。

当接收到原始图像数据时，isp处理器630可进行一个或多个图像处理操作。

在isp处理器630获取到被测物的色彩信息和深度信息后，可对其进行融合，得到三维图像。其中，可通过外观轮廓提取方法或轮廓特征提取方法中的至少一种提取相应的被测物的特征。例如通过主动形状模型法asm、主动外观模型法aam、主成分分析法pca、离散余弦变换法dct等方法，提取被测物的特征，在此不做限定。再将分别从深度信息中提取到被测物的特征以及从色彩信息中提取到被测物的特征进行配准和特征融合处理。这里指的融合处理可以是将深度信息以及色彩信息中提取出的特征直接组合，也可以是将不同图像中相同的特征进行权重设定后组合，也可以有其他融合方式，最终根据融合后的特征，生成三维图像。

三维图像的图像数据可发送给图像存储器620，以便在被显示之前进行另外的处理。isp处理器630从图像存储器620接收处理数据，并对所述处理数据进行原始域中以及rgb和ycbcr颜色空间中的图像数据处理。三维图像的图像数据可输出给显示器660，以供用户观看和/或由图形引擎或gpu(graphicsprocessingunit，图形处理器)进一步处理。此外，isp处理器630的输出还可发送给图像存储器620，且显示器660可从图像存储器620读取图像数据。在一个实施例中，图像存储器620可被配置为实现一个或多个帧缓冲器。此外，isp处理器630的输出可发送给编码器/解码器650，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器660设备上之前解压缩。编码器/解码器650可由cpu或gpu或协处理器实现。

isp处理器630确定的图像统计信息可发送给控制逻辑器640单元。控制逻辑器640可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的图像统计信息，确定成像设备610的控制参数。

以下为运用图6中图像处理技术实现降低移动终端功耗的方法的步骤：

s210’，监测移动终端的电池的当前剩余电量；

s220’，根据电池的当前剩余电量确定三维成像所需的目标分辨率和目标待采集区域；

s230’，通过结构光组件，对目标待采集区域进行图像采集以获取目标待采集区域的结构光图像；

s240’，根据目标分辨率对结构光图像进行解调，获取目标待采集区域的深度信息。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(read-onlymemory，rom)等。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。