图像处理方法及装置、计算机可读介质及终端设备与流程

本公开涉及电子设备技术领域，具体涉及一种图像处理方法、一种图像处理装置、一种计算机可读介质以及一种终端设备。

背景技术：

手机等智能移动终端设备的功能日益丰富，除基础的通讯功能外，还可以通过应用程序进行视频通话。现有技术中，在进行视频通话时，若通话的一个终端以非正常的视频方向进行摄像时，例如翻转90°、180°或270°时，则通话的另一终端会接收到视角被翻转的视频画面，使得另一端的终端的视频画面视角出现翻转，不利于用户的正常观看。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

技术实现要素：

本公开提供一种接近检测方法、一种接近检测装置、一种计算机可读介质以及一种终端设备，能够实现在视频通话时对视频画面的角度自动进行纠正。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的第一方面，提供一种图像处理方法，包括：

第一终端响应于被触发的目标事件，采集视频数据，并获取屏幕方向参数；

在根据所述屏幕方向参数识别所述第一终端屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息；

在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；其中，所述旋转选择菜单包括确认旋转选项；

响应于被选择的执行旋转选项，在与所述第一终端视频通话的第二终端显示旋转后的视频数据。

根据本公开的第二方面，提供一种图像处理装置，包括：

屏幕方向参数获取模块，用于第一终端响应于被触发的目标事件，采集视频数据，并获取屏幕方向参数；

状态信息获取模块，用于在根据所述屏幕方向参数识别所述第一终端屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息；

菜单显示控制模块，用于在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；其中，所述旋转选择菜单包括确认旋转选项；

旋转执行模块，用于响应于被选择的执行旋转选项，在与所述第一终端视频通话的第二终端显示旋转后的视频数据。

根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的图像处理方法。

根据本公开的第四方面，提供一种终端设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现上述的图像处理方法。

本公开的一种实施例所提供的图像处理方法，通过在识别到触发目标事件时开始采集视频数据，同时获取终端当前时刻的屏幕方向参数，以及根据传感器参数确定终端是否处于稳定状态；在识别到终端当前屏幕被翻转且处于稳定状态时，可以提供一旋转选择菜单，从而可以使用户根据实际需求选择是否对当前的视频视角进行旋转，实现用户的自主选择。进而在用户选择旋转时，可以自动对当前视频数据的视角翻转到正常视角，使接收侧的第二终端可以接收到正常视角的视频，便于第二终端侧的用户观看。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示意性示出本公开示例性实施例中一种图像处理方法的流程示意图；

图2示意性示出本公开示例性实施例中一种系统架构示意图；

图3示意性示出本公开示例性实施例中一种图像处理方法的流程示意图；

图4示意性示出本公开示例性实施例中一种显示旋转选择菜单的示意图；

图5示意性示出本公开示例性实施例中一种第一终端发起视频通话时的屏幕翻转的视频画面的示意图；

图6示意性示出本公开示例性实施例中一种第一终端发起的视频通话时的执行视角翻转后的视频画面的示意图；

图7示意性示出本公开示例性实施例中一种第二终端接收的未执行视角翻转的视频画面的示意图；

图8示意性示出本公开示例性实施例中一种第二终端接收的执行视角翻转的视频画面的示意图；

图9示意性示出本公开示例性实施例中一种图像处理装置的组成示意图；

图10示意性示出本公开示例性实施例中一种终端设备的电子设备结构示意图。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。

此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

现有智能终端设备中，例如手机和平板电脑，在进行视频通话时，若视频通话的发起方终端以非正常视频方向摄像(90°、180°、270°)时，视频通话的“接收方”将会收到屏幕颠倒视角翻转的视频数据。在视频通话功能时非常不友好，因为用户在主观或客观的将移动终端设备方向选择后进行视频时，例如：手机充电端口被占用，无法竖直放置等情形下，接收方端用户都将收到一个旋转后的画面。不利用用户正常观看。或者，在一些方案中，

针对上述的现有技术的缺点和不足，本示例实施方式中提供了一种图像处理方法。参考图1中所示，上述的图像处理方法可以包括以下步骤：

s11，第一终端响应于被触发的目标事件，采集视频数据，并获取屏幕方向参数；

s12，在根据所述屏幕方向参数识别所述第一终端屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息；

s13，在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；其中，所述旋转选择菜单包括确认旋转选项；

s14，响应于被选择的执行旋转选项，在与所述第一终端视频通话的第二终端显示旋转后的视频数据。

本示例实施方式所提供的图像处理方法中，一方面，通过在识别到触发目标事件时开始采集视频数据，同时获取终端当前时刻的屏幕方向参数，以及根据传感器参数确定终端是否处于稳定状态；在识别到终端当前屏幕被翻转且处于稳定状态时，可以提供一旋转选择菜单，从而可以使用户根据实际需求选择是否对当前的视频视角进行旋转，实现用户的自主选择。另一方面，在用户选择执行旋转时，可以自动对当前视频数据的视角翻转到正常视角，使接收侧的第二终端可以接收到正常视角的视频，便于第二终端侧的用户观看。

下面，将结合附图及实施例对本示例实施方式中的图像处理方法的各个步骤进行更详细的说明。

步骤s11，第一终端响应于被触发的目标事件，采集视频数据，并获取屏幕方向参数。

本示例实施方式中，上述的图像处理方法可以应用于配置有前置摄像组件的智能终端设备。例如，配置有前置摄像头的手机、平板电脑等。举例来说，上述的目标事件可以是在应用程序中的视频通话的激活操作，例如微信、qq中视频通话控件的选择操作；或者，也可以终端设备的中系统工具中的视频通话功能的激活，例如对volte视频通话的选中操作等等。

举例来说，参考图2所示，视频通话的发起端，第一终端101可以通过网络103与第二终端102进行视频通话。其中，网络103可以包括各种连接类型，例如有线通信链路、无线通信链路等等。第一终端101和第二终端102可以是配置有摄像组件的智能手机或平板电脑。

对于视频通话的发起端，第一终端101在启动视频通话功能时，便可以通过前置摄像头或后置摄像头开始采集视频数据；同时，可以在第一终端获取屏幕方向参数。具体来说，可以在，目标事件被触发时，创建一获取旋转角度进程，读取屏幕旋转角度来获取当前的屏幕的旋转值。例如，在开始采集视频数据时，可以通过display类中的getrotation()方法获取屏幕的旋转值，进而判断第一终端方向是否改变。当返回值为180时，说明屏幕颠倒翻转；当返回值为90时，说明屏幕进行了90°旋转。例如，参考图5所示，第一终端在发起视频通话时，第一终端屏幕被翻转了180°；当前画面中小窗为第一终端采集的视角被翻转的视频，大窗为第二终端采集的正常视角的视频画面。对应的，对于第二终端，参考图7所示，大窗显示的接收于第一终端的非正常视角的视频画面，小窗显示第二终端采集的正常视角的用户视频画面。

或者，若读取旋转值为0，则说明屏幕未旋转。此时，可以执行周期性的屏幕方向参数的监控，从而可以在视屏通话过程中，可以实时的监控屏幕方向是否发送改变，直至视频通话结束。举例来说，监控周期可以根据用户需求进行配置，例如配置监控周期为1s、3s等时长。

步骤s12，在根据所述屏幕方向参数识别所述第一终端屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息；

本示例实施方式中，在第一终端确定发生屏幕旋转时，便可以获取多个传感器的当前时刻的传感器参数，判断第一终端当前时刻的状态信息。具体来说，可以采集重力传感器的输出参数和加速度传感器的输出参数。具体的，上述的步骤s12可以包括：

步骤s121，调用传感器管理服务获取重力传感器输出重力传感器的输出参数和加速度传感器的输出参数；

步骤s122，在所述重力传感器输出重力传感器的输出参数和加速度传感器的输出参数一致时，判断所述第一终端为稳定状态；或者

步骤s123，在所述重力传感器输出重力传感器的输出参数和加速度传感器的输出参数不一致时，判断所述第一终端为非稳定状态。

举例来说，可以通过传感器管理服务(sensormanager)中的sensor.type_gravity获取重力传感器的输出，通过传感器管理服务中的sensor.type_linear_acceleration获取加速度传感器的输出。在两传感器的输出结果相同，或者近似，或者数值差在一定范围内时，判断第一终端为稳定状态；例如，当设备处于静止的稳定状态时这两个输出的结果是相同。或者，在两传感器的输出结果不同时，则判断为非稳定状态，此时可以将流程回滚至步骤s11以重新开始在下一监控周期对屏幕方向进行识别。

步骤s13，在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；其中，所述旋转选择菜单包括确认旋转选项；

本示例实施方式中，举例来说，如图3所示流程图，在通过传感器的参数判断第一终端当前为稳定状态时，可以生成一包括旋转选择菜单的弹窗，将该弹窗显示在第一终端的交互界面中，供用户选择。其中，上述的旋转选择菜单可以包括多个选项；例如，参考图4所示，旋转选择菜单40可以包括确认旋转选项、不执行旋转选项以及不旋转且不再提醒选项。

步骤s14，响应于被选择的执行旋转选项，在与所述第一终端视频通话的第二终端显示旋转后的视频数据。

本示例实施方式中，在用户在第一终端的交互界面中选择执行旋转选项后，可以生成对应的旋转控制指令。第一终端执行该旋转控制指令。

举例来说，可以在第一终端侧执行旋转，具体可以包括：

步骤s211，根据所述屏幕方向参数确定待执行的旋转角度；

步骤s212，所述第一终端调用媒体录制端口对根据所述旋转角度对所述视频数据进行固定旋转，并将旋转后的视频数据发送至所述第二终端以使所述第二终端显示旋转后的视频数据。

举例而言，在确定执行旋转后，可以根据前序步骤中获取的屏幕方向参数获取对应的旋转角度，通过该旋转角度可以将视频数据的视角恢复到正常视角。例如，当屏幕方向参数的返回值为90时，说明第一终端屏幕进行了90°旋转，则对应的待执行的旋转角度为270°；或者，当屏幕方向参数的返回值为180时，说明第一终端屏幕进行了180°旋转，则对应的待执行的旋转角度为180°。

或者，也可以根据所述屏幕方向参数确定屏幕翻转角度，并确定所述屏幕翻转角度对应的角度范围；再根据所述角度范围确定对应的所述待执行的旋转角度。举例来说，可对旋转角度做一个模糊判断，相差不到20°情况，都将进行视频旋转。例如在识别屏幕旋转70°～100°时，都将判断其为90°。

本示例实施方式中，在确定旋转角度后，在第一终端，便可以利用mediarecorder.setorientationhint()接口，在第一终端侧对视频数据进行固定旋转，再将旋转后的视频传输至第二终端，从而在第二终端侧显示视角修正后，正常视角的视频。例如，参考图8所示，第二终端显示视角修正后的正常视角的视频；此外，对应第一终端，也可以显示视角修正后的视频，如图6所示，在小窗中显示视角修正后的视频。若未修正视角，则第二终端显示如图7所示的被翻转视角的视频。

或者，本示例实施方式中，举例来说，也可以在第二终端侧执行旋转，具体可以包括：

步骤s221，根据所述屏幕方向参数确定待执行的旋转角度；

步骤s222，将所述视频数据和所述旋转角度发送至所述第二终端，以使所述第二终端根据所述旋转角度对所述视频数据进行旋转并显示旋转后的视频数据。

具体的，在第一终端确定待执行的旋转角度后，可以将采集的视频数据和旋转角度打包发送至第二终端，使得第二终端在接收到视频数据后根据旋转角度在第二终端侧对视频进行旋转。此外，数据包中还可以包括用于标记视频需要执行旋转的旋转标签，该标签可以数据包的包头中进行改写。

另外，在第二终端侧，在接收到包含旋转角度的视频数据时，也可以在第二终端的交互界面中生成视角旋转的选择菜单，由第二终端侧的用户决定是否对接收的视频数据的视角进行旋转。

或者，在本公开的其他示例性实施方式中，若用户选择不执行旋转选项，上述的方法还可以包括：

步骤s31，响应于被选择的不执行旋转选项，所述第一终端将采集的所述视频数据发送至所述第二终端；以及

步骤s32，按预设时间周期获取所述第一终端的当前时刻的屏幕方向参数，并在根据所述屏幕方向参数识别屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息；在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；或者

步骤s33，在根据所述屏幕方向参数识别屏幕未翻转时，将所述视频数据发送至所述第二终端。

举例来说，若用户选择不执行翻转，则可以直接将采集的视频数据发送至第二终端。此时第二终端显示的视频为视角翻转的非正常视角的视频，如图7所示。

另外，在本次的视频通话过程中，可以按预设周期的时间节点，重新获取屏幕方向以及传感器的参数，并基于此判断当前的视频通话中是否需要在第一终端侧对视频数据经视角的翻转，直至当前的视频通话结束。

或者，本示例实施方式中，在用户选择不选择且不再提示选项时，则当前的视频通话过程中不再采集屏幕方向参数，直至视频通话结束。

本公开实施例所提供的方法，通过在用户启用视频通话功能时，触发对屏幕方向参数的识别，并在识别到终端当前屏幕存在旋转时通过多个传感器参数确定当前的状态，从而在稳定状态时可以对视频数据进行翻转，使得传输的视频为正常视角的视频数据，避免视频通话的另一端接收到视角被翻转的视频数据，能够在视频通话的另一端显示正常的视频数据。并且，在视频通话的过程中，在第一终端，可以周期性的获取屏幕方向参数，从而可以在视频通话过程中，用户翻转手机时，可以及时的对视频数据的视角进行修正。

需要注意的是，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

进一步的，参考图9所示，本示例的实施方式中还提供一种图像处理装置90，应用于终端设备，包括：屏幕方向参数获取模块901、状态信息获取模块902、菜单显示控制模块903和旋转执行模块904。其中，所述屏幕方向参数获取模块901可以用于第一终端响应于被触发的目标事件，采集视频数据，并获取屏幕方向参数。

所述状态信息获取模块902可以用于在根据所述屏幕方向参数识别所述第一终端屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息。

所述菜单显示控制模块903可以用于在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；其中，所述旋转选择菜单包括确认旋转选项。

所述旋转执行模块904可以用于响应于被选择的执行旋转选项，在与所述第一终端视频通话的第二终端显示旋转后的视频数据。

在本公开的一种示例中，所述屏幕方向参数获取模块901可以包括：响应于被触发的目标事件创建获取旋转角度进程，以获取所述第一终端屏幕的旋转值。

在本公开的一种示例中，所述传感器参数包括：重力传感器的输出参数和加速度传感器的输出参数。

状态信息获取模块902可以包括：传感器参数获取单元、第一状态判断单元和第二状态判断单元(图中未示出)。

所述传感器参数获取单元可以用于调用传感器管理服务获取重力传感器输出重力传感器的输出参数和加速度传感器的输出参数。

所述第一状态判断单元可以用于在所述重力传感器输出重力传感器的输出参数和加速度传感器的输出参数一致时，判断所述第一终端为稳定状态。

所述第二状态判断单元可以用于在所述重力传感器输出重力传感器的输出参数和加速度传感器的输出参数不一致时，判断所述第一终端为非稳定状态。

在本公开的一种示例中，所述旋转执行模块904可以包括：第一旋转角度获取单元、第一旋转执行单元(图中未示出)。

所述第一旋转角度获取单元可以用于根据所述屏幕方向参数确定待执行的旋转角度。

所述第一旋转执行单元可以用于所述第一终端调用媒体录制端口对根据所述旋转角度对所述视频数据进行固定旋转，并将旋转后的视频数据发送至所述第二终端以使所述第二终端显示旋转后的视频数据。

在本公开的一种示例中，所述旋转执行模块904可以包括：第二旋转角度获取单元、第二旋转执行单元(图中未示出)。其中，

所述第二旋转角度获取单元可以用于根据所述屏幕方向参数确定待执行的旋转角度。

所述第二旋转执行单元可以用于将所述视频数据和所述旋转角度发送至所述第二终端，以使所述第二终端根据所述旋转角度对所述视频数据进行旋转并显示旋转后的视频数据。

在本公开的一种示例中，所述旋转选择菜还包括：不执行旋转选项。所述装置90还可以包括：第二执行单元(图中未示出)。

所述第二执行单元可以用于响应于被选择的不执行旋转选项，所述第一终端将采集的所述视频数据发送至所述第二终端；以及按预设时间周期获取所述第一终端的当前时刻的屏幕方向参数，并在根据所述屏幕方向参数识别屏幕翻转时，获取目标传感器的传感器参数以确定所述第一终端的状态信息；在确定所述第一终端为稳定状态时，在所述第一终端的交互界面中显示旋转选择菜单；或者在根据所述屏幕方向参数识别屏幕未翻转时，将所述视频数据发送至所述第二终端。

在本公开的一种示例中，所述所述第一旋转角度获取单元可以用于根据所述屏幕方向参数确定屏幕翻转角度，并确定所述屏幕翻转角度对应的角度范围；并根据所述角度范围确定对应的所述待执行的旋转角度。

上述的图像处理装置中各模块的具体细节已经在对应的图像处理方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

图10示出了适于用来实现本发明实施例的无线通信设备的示意图。

需要说明的是，图10示出的电子设备600仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图10所示，电子设备600具体可以包括：处理器610、内部存储器621、外部存储器接口622、通用串行总线(universalserialbus，usb)接口630、充电管理模块640、电源管理模块641、电池642、天线1、天线2、移动通信模块650、无线通信模块660、音频模块670、扬声器671、受话器672、麦克风673、耳机接口674、传感器模块680、显示屏690、摄像模组691、指示器692、马达693、按键694以及用户标识模块(subscriberidentificationmodule，sim)卡接口695等。其中传感器模块680可以包括深度传感器6801、压力传感器6802、陀螺仪传感器6803、气压传感器6804、磁传感器6805、加速度传感器6806、距离传感器6807、接近光传感器6808、指纹传感器6809、温度传感器6810、触摸传感器6811、环境光传感器6812及骨传导传感器6813等。

可以理解的是，本申请实施例示意的结构并不构成对电子设备600的具体限定。在本申请另一些实施例中，电子设备600可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。

处理器610可以包括一个或多个处理单元，例如：处理器610可以包括应用处理器(applicationprocessor，ap)、调制解调处理器、图形处理器(graphicsprocessingunit，gpu)、图像信号处理器(imagesignalprocessor，isp)、控制器、视频编解码器、数字信号处理器(digitalsignalprocessor，dsp)、基带处理器和/或神经网络处理器(neural-etworkprocessingunit，npu)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

处理器610中还可以设置存储器，用于存储指令和数据。存储器可以存储用于实现六个模块化功能的指令：检测指令、连接指令、信息管理指令、分析指令、数据传输指令和通知指令，并由处理器610来控制执行。在一些实施例中，处理器610中的存储器为高速缓冲存储器。该存储器可以保存处理器610刚用过或循环使用的指令或数据。如果处理器610需要再次使用该指令或数据，可从所述存储器中直接调用。避免了重复存取，减少了处理器610的等待时间，因而提高了系统的效率。

在一些实施例中，处理器610可以包括一个或多个接口。接口可以包括集成电路(inter-integratedcircuit，i2c)接口、集成电路内置音频(inter-integratedcircuitsound，i2s)接口、脉冲编码调制(pulsecodemodulation，pcm)接口、通用异步收发传输器(universalasynchronousreceiver/rransmitter，uart)接口、移动产业处理器接口(mobileindustryprocessorinterface，mipi)、通用输入输出(general-purposeinput/output，gpio)接口、用户标识模块(subscriberidentitymodule，sim)接口和/或通用串行总线(universalserialbus，usb)接口等。

i2c接口是一种双向同步串行总线，包括一根串行数据线(serialdataline，sda)和一根串行时钟线(serailclockline，scl)。在一些实施例中，处理器610可以包含多组i2c总线。处理器610可以通过不同的i2c总线接口分别耦合触摸传感器6811、充电器、闪光灯、摄像模组691等。例如：处理器610可以通过i2c接口耦合触摸传感器6811，使处理器610与触摸传感器6811通过i2c总线接口通信，实现电子设备600的触摸功能。

i2s接口可以用于音频通信。在一些实施例中，处理器610可以包含多组i2s总线。处理器610可以通过i2s总线与音频模块670耦合，实现处理器610与音频模块670之间的通信。在一些实施例中，音频模块670可以通过i2s接口向无线通信模块660传递音频信号，实现通过蓝牙耳机接听电话的功能。

pcm接口也可以用于音频通信，将模拟信号抽样，量化和编码。在一些实施例中，音频模块670与无线通信模块660可以通过pcm总线接口耦合。在一些实施例中，音频模块670也可以通过pcm接口向无线通信模块660传递音频信号，实现通过蓝牙耳机接听电话的功能。所述i2s接口和所述pcm接口都可以用于音频通信。

uart接口是一种通用串行数据总线，用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中，uart接口通常被用于连接处理器610与无线通信模块660。例如：处理器610通过uart接口与无线通信模块660中的蓝牙模块通信，实现蓝牙功能。在一些实施例中，音频模块670可以通过uart接口向无线通信模块660传递音频信号，实现通过蓝牙耳机播放音乐的功能。

mipi接口可以被用于连接处理器610与显示屏690，摄像模组691等外围器件。mipi接口包括摄像头串行接口(cameraserialinterface，csi)，显示屏串行接口(displayserialinterface，dsi)等。在一些实施例中，处理器610和摄像模组691通过csi接口通信，实现电子设备600的拍摄功能。处理器610和显示屏690通过dsi接口通信，实现电子设备600的显示功能。

gpio接口可以通过软件配置。gpio接口可以被配置为控制信号，也可被配置为数据信号。在一些实施例中，gpio接口可以用于连接处理器610与摄像模组691、显示屏690、无线通信模块660、音频模块670、传感器模块680等。gpio接口还可以被配置为i2c接口，i2s接口，uart接口，mipi接口等。

usb接口630是符合usb标准规范的接口，具体可以是miniusb接口，microusb接口，usbtypec接口等。usb接口630可以用于连接充电器为电子设备600充电，也可以用于电子设备600与外围设备之间传输数据。也可以用于连接耳机，通过耳机播放音频。该接口还可以用于连接其他电子设备，例如ar设备等。

可以理解的是，本发明实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对电子设备600的结构限定。在本申请另一些实施例中，电子设备600也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。

充电管理模块640用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块640可以通过usb接口630接收有线充电器的充电输入。在一些无线充电的实施例中，充电管理模块640可以通过电子设备600的无线充电线圈接收无线充电输入。充电管理模块640为电池642充电的同时，还可以通过电源管理模块641为电子设备供电。

电源管理模块641用于连接电池642、充电管理模块640与处理器610。电源管理模块641接收电池642和/或充电管理模块640的输入，为处理器610、内部存储器621、显示屏690、摄像模组691和无线通信模块660等供电。电源管理模块641还可以用于监测电池容量，电池循环次数，电池健康状态(漏电，阻抗)等参数。在其他一些实施例中，电源管理模块641也可以设置于处理器610中。在另一些实施例中，电源管理模块641和充电管理模块640也可以设置于同一个器件中。

电子设备600的无线通信功能可以通过天线1、天线2、移动通信模块650、无线通信模块660、调制解调处理器以及基带处理器等实现。

天线1和天线2用于发射和接收电磁波信号。电子设备600中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。

移动通信模块650可以提供应用在电子设备600上的包括2g/3g/4g/5g等无线通信的解决方案。移动通信模块650可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(lownoiseamplifier，lna)等。移动通信模块650可以由天线1接收电磁波，并对接收的电磁波进行滤波、放大等处理，传送至调制解调处理器进行解调。移动通信模块650还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。在一些实施例中，移动通信模块650的至少部分功能模块可以被设置于处理器610中。在一些实施例中，移动通信模块650的至少部分功能模块可以与处理器610的至少部分模块被设置在同一个器件中。

调制解调处理器可以包括调制器和解调器。其中，调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后，被传递给应用处理器。应用处理器通过音频设备(不限于扬声器671，受话器672等)输出声音信号，或通过显示屏690显示图像或视频。在一些实施例中，调制解调处理器可以是独立的器件。在另一些实施例中，调制解调处理器可以独立于处理器610，与移动通信模块650或其他功能模块设置在同一个器件中。

无线通信模块660可以提供应用在电子设备600上的包括无线局域网(wirelesslocalareanetworks，wlan)(如无线保真(wirelessfidelity，wi-fi)网络)、蓝牙(bluetooth，bt)、全球导航卫星系统(globalnavigationsatellitesystem，gnss)、调频(frequencymodulation，fm)、近距离无线通信技术(nearfieldcommunication，nfc)、红外技术(infrared，ir)等无线通信的解决方案。无线通信模块660可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块660经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器610。无线通信模块660还可以从处理器610接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。

在一些实施例中，电子设备600的天线1和移动通信模块650耦合，天线2和无线通信模块660耦合，使得电子设备600可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(globalsystemformobilecommunications，gsm)，通用分组无线服务(generalpacketradioservice，gprs)，码分多址接入(codedivisionmultipleaccess，cdma)，宽带码分多址(widebandcodedivisionmultipleaccess，wcdma)，时分码分多址(time-divisioncodedivisionmultipleaccess，tdscdma)，长期演进(longtermevolution，lte)，bt，gnss，wlan，nfc，fm，和/或ir技术等。所述gnss可以包括全球卫星定位系统(globalpositioningsystem，gps)，全球导航卫星系统(globalnavigationsatellitesystem，glonass)，北斗卫星导航系统(beidouavigationsatellitesystem，bds)，准天顶卫星系统(quasi-zenithsatellitesystem，qzss)和/或星基增强系统(satellitebasedaugmentationsystems，sbas)。

电子设备600通过gpu、显示屏690及应用处理器等实现显示功能。gpu为图像处理的微处理器，连接显示屏690和应用处理器。gpu用于执行数学和几何计算，用于图形渲染。处理器610可包括一个或多个gpu，其执行程序指令以生成或改变显示信息。

显示屏690用于显示图像，视频等。显示屏690包括显示面板。显示面板可以采用液晶显示屏(liquidcrystaldisplay，lcd)，有机发光二极管(organiclight-emittingdiode，oled)，有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganiclightemittingdiode，amoled)，柔性发光二极管(flexlight-emittingdiode，fled)，miniled，microled，micro-oled，量子点发光二极管(quantumdotlightemittingdiodes，qled)等。在一些实施例中，电子设备600可以包括1个或n个显示屏690，n为大于1的正整数。

电子设备600可以通过isp、摄像模组691、视频编解码器、gpu、显示屏690及应用处理器等实现拍摄功能。

isp用于处理摄像模组691反馈的数据。例如，拍照时，打开快门，光线通过镜头被传递到摄像头感光元件上，光信号转换为电信号，摄像头感光元件将所述电信号传递给isp处理，转化为肉眼可见的图像。isp还可以对图像的噪点，亮度，肤色进行算法优化。isp还可以对拍摄场景的曝光，色温等参数优化。在一些实施例中，isp可以设置在摄像模组691中。

摄像模组691用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(chargecoupleddevice，ccd)或互补金属氧化物半导体(complementarymetal-oxide-semiconductor，cmos)光电晶体管。感光元件把光信号转换成电信号，之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb，yuv等格式的图像信号。在一些实施例中，电子设备600可以包括1个或n个摄像模组691，n为大于1的正整数，若电子设备600包括n个摄像头，n个摄像头中有一个是主摄像头。

数字信号处理器用于处理数字信号，除了可以处理数字图像信号，还可以处理其他数字信号。例如，当电子设备600在频点选择时，数字信号处理器用于对频点能量进行傅里叶变换等。

视频编解码器用于对数字视频压缩或解压缩。电子设备600可以支持一种或多种视频编解码器。这样，电子设备600可以播放或录制多种编码格式的视频，例如：动态图像专家组(movingpictureexpertsgroup，mpeg)1，mpeg2，mpeg3，mpeg4等。

npu为神经网络(neural-network，nn)计算处理器，通过借鉴生物神经网络结构，例如借鉴人脑神经元之间传递模式，对输入信息快速处理，还可以不断的自学习。通过npu可以实现电子设备600的智能认知等应用，例如：图像识别，人脸识别，语音识别，文本理解等。

外部存储器接口622可以用于连接外部存储卡，例如microsd卡，实现扩展电子设备600的存储能力。外部存储卡通过外部存储器接口622与处理器610通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。

内部存储器621可以用于存储计算机可执行程序代码，所述可执行程序代码包括指令。内部存储器621可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储电子设备600使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器621可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universalflashstorage，ufs)等。处理器610通过运行存储在内部存储器621的指令和/或存储在设置于处理器中的存储器的指令，执行电子设备600的各种功能应用以及数据处理。

电子设备600可以通过音频模块670、扬声器671、受话器672、麦克风673、耳机接口674及应用处理器等实现音频功能。例如音乐播放、录音等。

音频模块670用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块670还可以用于对音频信号编码和解码。在一些实施例中，音频模块670可以设置于处理器610中，或将音频模块670的部分功能模块设置于处理器610中。

扬声器671，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备600可以通过扬声器671收听音乐，或收听免提通话。

受话器672，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备600接听电话或语音信息时，可以通过将受话器672靠近人耳接听语音。

麦克风673，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风673发声，将声音信号输入到麦克风673。电子设备600可以设置至少一个麦克风673。在另一些实施例中，电子设备600可以设置两个麦克风673，除了采集声音信号，还可以实现降噪功能。在另一些实施例中，电子设备600还可以设置三个，四个或更多麦克风673，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。

耳机接口674用于连接有线耳机。耳机接口674可以是usb接口630，也可以是3.5mm的开放移动电子设备平台(openmobileterminalplatform，omtp)标准接口，美国蜂窝电信工业协会(cellulartelecommunicationsindustryassociationoftheusa，ctia)标准接口。

深度传感器6801用于获取景物的深度信息。在一些实施例中，深度传感器可以设置于摄像模组691。

压力传感器6802用于感受压力信号，可以将压力信号转换成电信号。在一些实施例中，压力传感器6802可以设置于显示屏690。压力传感器6802的种类很多，如电阻式压力传感器，电感式压力传感器，电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器6802，电极之间的电容改变。电子设备600根据电容的变化确定压力的强度。当有触摸操作作用于显示屏690，电子设备600根据压力传感器6802检测所述触摸操作强度。电子设备600也可以根据压力传感器6802的检测信号计算触摸的位置。在一些实施例中，作用于相同触摸位置，但不同触摸操作强度的触摸操作，可以对应不同的操作指令。例如：当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时，执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时，执行新建短消息的指令。

陀螺仪传感器6803可以用于确定电子设备600的运动姿态。在一些实施例中，可以通过陀螺仪传感器6803确定电子设备600围绕三个轴(即，x，y和z轴)的角速度。陀螺仪传感器6803可以用于拍摄防抖。示例性的，当按下快门，陀螺仪传感器6803检测电子设备600抖动的角度，根据角度计算出镜头模组需要补偿的距离，让镜头通过反向运动抵消电子设备600的抖动，实现防抖。陀螺仪传感器6803还可以用于导航，体感游戏场景。

气压传感器6804用于测量气压。在一些实施例中，电子设备600通过气压传感器6804测得的气压值计算海拔高度，辅助定位和导航。

磁传感器6805包括霍尔传感器。电子设备600可以利用磁传感器6805检测翻盖皮套的开合。在一些实施例中，当电子设备600是翻盖机时，电子设备600可以根据磁传感器6805检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态，设置翻盖自动解锁等特性。

加速度传感器6806可检测电子设备600在各个方向上(一般为三轴)加速度的大小。当电子设备600静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态，应用于横竖屏切换，计步器等应用。

距离传感器6807，用于测量距离。电子设备600可以通过红外或激光测量距离。在一些实施例中，拍摄场景，电子设备600可以利用距离传感器6807测距以实现快速对焦。

接近光传感器6808可以包括例如发光二极管(led)和光检测器，例如光电二极管。发光二极管可以是红外发光二极管。电子设备600通过发光二极管向外发射红外光。电子设备600使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时，可以确定电子设备600附近有物体。当检测到不充分的反射光时，电子设备600可以确定电子设备600附近没有物体。电子设备600可以利用接近光传感器6808检测用户手持电子设备600贴近耳朵通话，以便自动熄灭屏幕达到省电的目的。接近光传感器6808也可用于皮套模式，口袋模式自动解锁与锁屏。

指纹传感器6809用于采集指纹。电子设备600可以利用采集的指纹特性实现指纹解锁，访问应用锁，指纹拍照，指纹接听来电等。

温度传感器6810用于检测温度。在一些实施例中，电子设备600利用温度传感器6810检测的温度，执行温度处理策略。例如，当温度传感器6810上报的温度超过阈值，电子设备600执行降低位于温度传感器6810附近的处理器的性能，以便降低功耗实施热保护。在另一些实施例中，当温度低于另一阈值时，电子设备600对电池642加热，以避免低温导致电子设备600异常关机。在其他一些实施例中，当温度低于又一阈值时，电子设备600对电池642的输出电压执行升压，以避免低温导致的异常关机。

触摸传感器6811，也称“触控器件”。触摸传感器6811可以设置于显示屏690，由触摸传感器6811与显示屏690组成触摸屏，也称“触控屏”。触摸传感器6811用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏690提供与触摸操作相关的视觉输出。在另一些实施例中，触摸传感器6811也可以设置于电子设备600的表面，与显示屏690所处的位置不同。

环境光传感器6812用于感知环境光亮度。电子设备600可以根据感知的环境光亮度自适应调节显示屏690亮度。环境光传感器6812也可用于拍照时自动调节白平衡。环境光传感器6812还可以与接近光传感器6808配合，检测电子设备600是否在口袋里，以防误触。

骨传导传感器6813可以获取振动信号。在一些实施例中，骨传导传感器6813可以获取人体声部振动骨块的振动信号。骨传导传感器6813也可以接触人体脉搏，接收血压跳动信号。在一些实施例中，骨传导传感器6813也可以设置于耳机中，结合成骨传导耳机。音频模块670可以基于所述骨传导传感器6813获取的声部振动骨块的振动信号，解析出语音信号，实现语音功能。应用处理器可以基于所述骨传导传感器6813获取的血压跳动信号解析心率信息，实现心率检测功能。

按键694包括开机键，音量键等。按键694可以是机械按键。也可以是触摸式按键。电子设备600可以接收按键输入，产生与电子设备600的用户设置以及功能控制有关的键信号输入。

马达693可以产生振动提示。马达693可以用于来电振动提示，也可以用于触摸振动反馈。例如，作用于不同应用(例如拍照，音频播放等)的触摸操作，可以对应不同的振动反馈效果。作用于显示屏690不同区域的触摸操作，马达693也可对应不同的振动反馈效果。不同的应用场景(例如：时间提醒，接收信息，闹钟，游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。

指示器692可以是指示灯，可以用于指示充电状态，电量变化，也可以用于指示消息，未接来电，通知等。

sim卡接口695用于连接sim卡。sim卡可以通过插入sim卡接口695，或从sim卡接口695拔出，实现和电子设备600的接触和分离。电子设备600可以支持1个或n个sim卡接口，n为大于1的正整数。sim卡接口695可以支持nanosim卡，microsim卡，sim卡等。同一个sim卡接口695可以同时插入多张卡。所述多张卡的类型可以相同，也可以不同。sim卡接口695也可以兼容不同类型的sim卡。sim卡接口695也可以兼容外部存储卡。电子设备600通过sim卡和网络交互，实现通话以及数据通信等功能。在一些实施例中，电子设备600采用esim，即：嵌入式sim卡。esim卡可以嵌在电子设备600中，不能和电子设备600分离。

特别地，根据本发明的实施例，下文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分从网络上被下载和安装，和/或从可拆卸介质被安装。在该计算机程序被中央处理单元(cpu)执行时，执行本申请的系统中限定的各种功能。

需要说明的是，本发明实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(erasableprogrammablereadonlymemory，eprom)、闪存、光纤、便携式紧凑磁盘只读存储器(compactdiscread-onlymemory，cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。

需要说明的是，作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该电子设备执行时，使得该电子设备实现如下述实施例中所述的方法。例如，所述的电子设备可以实现如图1所示的各个步骤。

此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。