图像采集控制方法和图像采集控制装置与流程

本公开涉及图像采集技术领域，尤其涉及图像采集控制方法，图像采集控制装置、电子设备和计算机可读存储介质。

背景技术：

为了提高手机的屏幕占比，相关技术中采用将前置摄像头安装在显示面板下方的方式，同时位于前置摄像头上方的显示面板又能显示图像，使得前置摄像头不影响手机的屏幕占比。

由于在前置摄像头上方设置有显示面板，而显示面板显示画面会影响前置摄像头采集图像的效果，所以相关技术中在前置摄像头采集图像时，会控制前置摄像头上方的显示面板停止显示图像。

这虽然使得前置摄像头可以良好地采集图像，但是却中断了显示面板显示图像的过程，容易对用户的观看体验造成影响。

技术实现要素：

本公开提供图像采集控制方法，图像采集控制装置、电子设备和计算机可读存储介质，以解决相关技术中的不足。

根据本公开实施例的第一方面，提出一种图像采集控制方法，适用于终端，所述终端包括显示面板和图像采集设备，所述显示面板包括第一显示区域，所述图像采集设备设置在所述第一显示区域下方，所述方法包括：

在所述终端接收到通过所述图像采集设备采集图像的指令时，控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示，其中，所述预设时间段小于人眼视觉响应时间；

控制所述图像采集设备在所述预设时间段内采集图像。

可选地，所述显示面板还包括第二显示区域，所述控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示包括：

在所述显示面板连续n帧显示同一图像的过程中，控制所述第一显示区域在所述n帧中预设帧对应的预设时间段内暂停显示，且控制所述第二显示区域在所述预设帧对应的预设时间段内继续显示，其中，n为正整数。

可选地，所述预设帧包括所述n帧中除了第1帧以外的帧。

可选地，n＝2。

可选地，所述控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示包括：

在所述第一显示区域显示所述预设帧图像时，控制所述第一显示区域中的像素单元行在开启过程中的一个或多个预设时间段内暂停显示。

可选地，所述第一显示区域中的像素单元行包括多行像素单元，所述方法还包括：

将从第一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，到最后一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，按照每行像素单元的位置合成为一张图像。

可选地，所述一个或多个预设时间段为多个预设时间段。

可选地，所述预设帧为一帧或非连续的多帧。

根据本公开实施例的第二方面，提出一种图像采集控制装置，适用于终端，所述终端包括显示面板和图像采集设备，所述显示面板包括第一显示区域，所述图像采集设备设置在所述第一显示区域下方，所述装置包括：

显示控制模块，被配置为在所述终端接收到通过所述图像采集设备采集图像的指令时，控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示，其中，所述预设时间段小于人眼视觉响应时间；

采集控制模块，被配置为控制所述图像采集设备在所述预设时间段内采集图像。

可选地，所述显示面板还包括第二显示区域，所述显示控制模块被配置为，在所述显示面板连续n帧显示同一图像的过程中，控制所述第一显示区域在所述n帧中预设帧对应的预设时间段内暂停显示，且控制所述第二显示区域在所述预设帧对应的预设时间段内继续显示，其中，n为正整数。

可选地，所述预设帧包括所述n帧中除了第1帧以外的帧。

可选地，n＝2。

可选地，所述显示控制模块被配置为，在所述第一显示区域显示所述预设帧图像时，控制所述第一显示区域中的像素单元行在开启过程中的一个或多个预设时间段内暂停显示。

可选地，所述第一显示区域中的像素单元行包括多行像素单元，所述装置还包括：

图像合成模块，被配置为将从第一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，到最后一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，按照每行像素单元的位置合成为一张图像。

可选地，所述一个或多个预设时间段为多个预设时间段。

可选地，所述预设帧为一帧或非连续的多帧。

根据本公开实施例的第三方面，提出一种电子设备，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为执行上述任一实施例所述方法中的步骤。

根据本公开实施例的第四方面，提出一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一实施例所述方法中的步骤。

本公开的实施例提供的技术方案可以包括以下有益效果：

根据本公开的实施例，在所述终端接收到通过所述图像采集设备采集图像的指令时，若所述显示面板在显示图像，可以控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段(预设时间段小于人眼视觉响应时间)内暂停显示。由于人眼观看图像会有视觉残留，所以第一显示区域仅在预设帧暂停显示，人眼仍会残留预设帧上一帧的图像，而预设帧上一帧的图像一般与预设帧图像差异很小，所以人眼残留的图像与显示面板中第二显示区域所显示的预设帧图像仍能够组成一张图像，从而几乎不会影响用户的观看体验。而在第一显示区域暂停显示时，第一显示区域不会因显示图像而对图像采集设备造成遮挡，从而控制所述图像采集设备在所述预设时间段内可以采集到清晰的图像。据此，实现了在不对用户的观看体验造成影响的情况下，通过屏下图像采集设备采集图像。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是根据本公开的实施例示出的一种图像采集控制方法的示意流程图。

图2是根据本公开的实施例示出的另一种图像采集控制方法的示意流程图。

图3是根据本公开的实施例示出的显示面板连续n帧显示同一图像的过程中第一显示区域的时序示意图。

图4是根据本公开的实施例示出的另一种图像采集控制方法的示意流程图。

图5是根据本公开的实施例示出的又一种图像采集控制方法的示意流程图。

图6是根据本公开的实施例示出的像素单元行在开启过程中的多个预设时间段内暂停显示的时序示意图。

图7是根据本公开的实施例示出的一种图像采集控制装置的示意框图。

图8是根据本公开的实施例示出的另一种图像采集控制装置的示意框图。

图9是根据本公开的实施例示出的一种用于图像采集控制的装置的示意框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

图1是根据本公开的实施例示出的一种图像采集控制方法的示意流程图。本公开的实施例所示的图像采集控制方法可以适用于终端，所述终端包括显示面板和图像采集设备的电子设备，例如手机、平板电脑、个人计算机等，所述图像采集设备可以作为终端的前置摄像头。

所述显示面板包括第一显示区域，所述图像采集设备设置在所述第一显示区域下方。显示面板所处平面对图像采集设备的视场角的截面的形状和面积，可以与第一显示区域的面积和形状相同，当然，处于冗余度的考虑，也可以将第一显示区域的面积和形状设置的稍大。

所述第一显示区域为有机发光二极管(organiclightemittingdiode，简称oled)显示面板，由于有机发光二极管可以具备较高的透过率，从而使得图像采集设备可以透过第一显示区域获取终端正面的图像。其中，所述第一显示区域并不限于一个区域，也不限于一类区域。

如图1所示，所述图像采集控制方法可以包括以下步骤：

在步骤s1中，在所述终端接收到通过所述图像采集设备采集图像的指令时，控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示，其中，所述预设时间段小于人眼视觉响应时间；

在该实施例中，预设时间段是指，显示预设帧图像的时间段中一预先指定的时间段。例如，显示预设帧图像的时间段为[t1，t2]，其中，t1<t2；预设时间段可以为[t3，t4]，其中，t1<t3<t4<t2。

其中，可选的，显示预设帧图像的时间段中可以确定出多个预设时间段，各个预设时间段小于人眼视觉响应时间。其中，各个预设时间段可以包括第一子预设时间段和第二子预设时间段，第一子预设时间段和第二子预设时间段可以不相同，但均小于人眼视觉响应时间。

在该实施例中，预设帧图像可以是图像采集设备接收到采集图像的指令后的任一满足预设条件的图像帧。优选的，预设帧图像是多个连续的、用于显示同一图像的图像帧中的一帧或多帧，且该一帧或多帧不包括多个连续帧中的第一帧。

其中，人眼视觉响应时间可以是10ms。

在步骤s2中，控制所述图像采集设备在所述预设时间段内采集图像。

在一个实施例中，在所述终端接收到通过所述图像采集设备采集图像的指令时，若所述显示面板在显示图像，可以控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示。

由于人眼观看图像会有视觉残留，所以第一显示区域仅在预设帧暂停显示，并且所述预设时间段小于人眼视觉响应时间，人眼仍会残留预设帧上一帧的图像，而不会察觉到第一显示区域在预设时间段内暂停显示，而预设帧上一帧的图像一般与预设帧图像差异很小，所以人眼残留的图像与显示面板中第二显示区域所显示的预设帧图像仍能够组成一张图像，从而几乎不会影响用户的观看体验。

而在第一显示区域暂停显示时，第一显示区域不会因显示图像而对图像采集设备造成遮挡，从而控制所述图像采集设备在所述预设时间段内可以采集到清晰的图像。据此，实现了在不对用户的观看体验造成影响的情况下，通过屏下图像采集设备采集图像。

在相关技术中，控制图像采集设备采集图像的策略，仅是用户需要执行图像采集即控制图像采集设备开启，用户指示关闭则关闭。本公开实施例，考虑到相关技术往往造成图像采集设备开启时图像消失，呈现给用户的是视觉上图像中断，影响用户观看体验。本公开实施例兼顾了图像采集和图像显示，在图像显示时段内足够短的时间内(也即，小于用户视觉响应时间)开启图像采集设备、停止画面显示，也即，将执行一次图像采集的过程控制为在多个间断的时段内执行，包括一个或多个开启-关闭-开启的过程，每个“开启”的时长足够短，小于用户视觉响应时间，使得图像采集操作不会对用户观看图像的视觉效果造成影响。

图2是根据本公开的实施例示出的另一种图像采集控制方法的示意流程图。如图2所示，所述显示面板还包括第二显示区域，其中，第二显示区域可以是有机发光二极管显示面板，也可以是液晶显示面板，优选为有机发光二极管显示面板。

在一个实施例中，第一显示区域的透过率比第二显示区域的透过率高，例如第一显示区域在未显示图像时，透过率可以大于或等于90％，其中，可以通过降低第一显示区域中单位像素的密度(例如提高像素的面积，减少布线)，改变第一显示区域中有机发光二极管阴极、阳极的材料(例如采用透过率比现有技术中镁银合金的透过率更高的材料)来等方式来提高第一显示区域的透过率。

其中，所述控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示包括：

在步骤s11中，在所述显示面板连续n帧显示同一图像的过程中，控制所述第一显示区域在所述n帧中预设帧对应的预设时间段内暂停显示，且控制所述第二显示区域在所述预设帧对应的预设时间段内继续显示。

在一个实施例中，在所述终端接收到通过所述图像采集设备采集图像的指令时，可以延长显示面板显示同一图像的帧数，例如可以连续n帧显示同一图像。以下主要在n＝2的情况下对本公开的实施例进行示例性说明。

例如在接收到通过所述图像采集设备采集图像的指令之前，显示面板可以将每张图像显示一帧，而在接收到通过所述图像采集设备采集图像的指令之后，显示面板可以将每张图像连续显示2帧。而在连续显示2帧同一图像的过程中，可以控制第一显示区域在这两帧中的预设帧对应的预设时间段内暂停显示，并控制第二显示区域在预设帧对应的预设时间段内继续显示。

其中，预设帧可以是这2帧中的第1帧，也可以是这2帧中的第2帧。

在预设帧是这2帧中的第1帧的情况下，由于人眼观看图像会有视觉残留，所以第一显示区域仅在第1帧暂停显示，人眼仍会残留第1帧上一帧的图像，而第1帧上一帧的图像一般与第1帧图像一般差异很小，所以人眼残留的图像与显示面板中第二显示区域所显示的第1帧图像仍能够组成一张图像，并且第一显示区域未在第1帧显示的图像，能够在第2帧显示出来，确保用户仍能获取到图像在第一显示区域所包含的信息，从而更大程度上不对用户的观看体验造成影响。

在预设帧是这2帧中的第2帧的情况下，由于人眼观看图像会有视觉残留，所以第一显示区域仅在第2帧暂停显示，人眼仍会残留第1帧的图像，而第2帧的图像与第1帧图像相同，所以人眼残留的图像与显示面板中第二显示区域所显示的第2帧图像可以组成连续显示的图像，从而不会影响用户的观看体验。

图3是根据本公开的实施例示出的显示面板连续n帧显示同一图像的过程中第一显示区域的时序示意图。

如图3所述，当信号为高电平时第一显示区域中的像素单元关闭，当信号为低电平时第一显示区域中的像素单元开启，那么显示面板连续显示2帧同一图像的过程中，在显示面板显示第1帧图像时，第一显示区域中的像素单元先接收到高电平的信号重置，然后接到低电平的信号开启像素单元显示图像，在显示面板显示第2帧图像时，第一显示区域中的像素单元始终接收高电平的信号保持，从而暂停显示图像。

而在显示面板显示第1帧图像时和显示第2帧图像时，第二显示区域中的像素单元都是先接收到高电平的信号重置，然后接到低电平的信号开启像素单元显示图像。

可选地，所述预设帧包括所述n帧中除了第1帧以外的帧。

在一个实施例中，在显示面板连续n帧显示同一图像的情况下，可以在这n帧中第1帧之后的帧对应的时段内，控制第一显示区域暂停显示，据此，可以保证第一显示区域暂定显示之前，第一显示区域已经显示过其暂停显示的图像，从而在第一显示区域暂定显示时，用户眼中残留的图像能够与第二显示区域显示的图像完美的组成一张图像，以便提供用户更好的观看体验。

可选地，n＝2。

在一个实施例中，可以连续2帧显示同一图像，据此，不会过多地连续显示多帧图像，有利于避免用户连续观看到多张图像而影响观看体验。

图4是根据本公开的实施例示出的另一种图像采集控制方法的示意流程图。如图4所示，所述控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示包括：

在步骤s12中，在所述第一显示区域显示所述预设帧图像时，控制所述第一显示区域中的像素单元行在开启过程中的一个或多个预设时间段内暂停显示。

在一个实施例中，第一显示区域中的像素单元可以以行扫描的方式逐行开启，在像素单元行开启的过程中，可以控制像素单元行在一个或多个预设时间段内暂停显示，从而在预设时间内，暂停显示的像素单元行不会因显示图像而对图像采集设备造成遮挡，进而控制所述图像采集设备在所述预设时间段内可以透过像素单元行采集图像。

在一个实施例中，第一显示区域中的像素单元行，可以连续多行同时开启，从而在这多个像素单元行暂停显示时，图像采集设备可以透过这多个像素单元行采集图像。

由于光在传播过程中会发生衍射，图像采集设备在透过一个像素单元行采集图像时，可能会采集到衍射较为严重的图像，导致图像不清晰。而根据本实施例，则可以透过多个像素单元行采集图像，从而缓解甚至避免采集图像过程中光的衍射问题，确保采集到清晰的图像。

图5是根据本公开的实施例示出的又一种图像采集控制方法的示意流程图。如图5所示，所述方法还包括：

在步骤s3中，将从第一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，到最后一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，按照每行像素单元的位置合成为一张图像。

在一个实施例中，由于每个像素单元行暂停显示期间，透过像素单元行采集到的图像，只是一行图像，因此将从第一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，到最后一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，按照每行像素单元的位置合成为一张图像，可以得到透过第一显示区域拍摄到的一张完整图像。

优选地，所述一个或多个预设时间段为多个预设时间段。

由于一个像素单元行开启的时间段较短，虽然在像素单元行开启的时间段内暂停显示一个预设时间段来供图像采集设备采集图像，是可以采集到图像的，但是暂停时间过长会严重影响用户的观看体验，所以设置暂停的一个预设时间段也是较短的，这可能导致图像采集设备采集图像的曝光不足。

根据本公开的实施例，配置多个预设时间段暂停显示供图像采集设备采集图像，在确保每个预设时间段不过长的基础上，可以延长多个预设时间段总的时长，有利于保证图像采集设备采集图像具有足够得到曝光。

需要说明的是，图像采集设备在多个预设时间段可以采集同一张图像，也可以采集不同图像，本实施例中保证图像采集设备采集图像具有足够得到曝光，是针对图像采集设备在多预设子时间段采集同一张图像而言的，图像采集设备在每个预设时间段可以分别进行一次曝光，进而将子多个预设时间段分别曝光得到的图像叠加起来得到具有足够曝光的一张图像。

图6是根据本公开的实施例示出的像素单元行在开启过程中的多个预设时间段内暂停显示的时序示意图。

如图6所示，对于某个像素单元行而言，在该像素单元行开启的时间段内，可以在4个预设时间段暂停显示。

可选地，所述预设帧为一帧或非连续的多帧。

在一个实施例中，可以控制第一显示区域在显示面板显示一帧图像的时段内暂停显示，也可以控制第一显示区域在显示面板显示非连续的多帧的时段内进行显示，具体可以根据需要进行显示。

例如不需要较多的曝光，那么可以控制第一显示区域在显示面板显示一帧图像的时段内暂停显示，据此可以使得第一显示区域尽可能少地不显示图像，有利于保证用户的观看体验。

例如需要较多的曝光，那么可以控制第一显示区域在显示面板显示非连续的多帧的时段内进行显示，据此可以使得图像采集设备能够在非连续的多帧的时间段内采集图像，保证图像采集设备采集图像具有足够得到曝光。

并且第一显示区域暂停显示是在非连续的多帧，而非连续帧，因此仍能确保用户在观看到暂停显示的帧时，眼中残留上一帧已显示的图像，以便保证用户的观看体验。

需要说明的是，图像采集设备在多帧的时间段可以采集同一张图像，也可以采集不同图像，本实施例中保证图像采集设备采集图像具有足够得到曝光，是针对图像采集设备在多帧的时间段采集同一张图像而言的，图像采集设备在每个帧的时间段可以分别进行一次曝光，进而将子多个时间段分别曝光得到的图像叠加起来得到具有足够曝光的一张图像。

与前述的图像采集控制方法的实施例相对应，本公开还提供了图像采集控制装置的实施例。

图7是根据本公开的实施例示出的一种图像采集控制装置的示意框图。本公开的实施例所示的图像采集控制装置可以适用于终端，所述终端包括显示面板和图像采集设备的电子设备，例如手机、平板电脑、个人计算机等，所述图像采集设备可以作为终端的前置摄像头。

所述显示面板包括第一显示区域，所述图像采集设备设置在所述第一显示区域下方。显示面板所处平面对图像采集设备的视场角的截面的形状和面积，可以与第一显示区域的面积和形状相同，当然，处于冗余度的考虑，也可以将第一显示区域的面积和形状设置的稍大。

所述第一显示区域为有机发光二极管显示面板，由于有机发光二极管可以具备较高的透过率，从而使得图像采集设备可以透过第一显示区域获取终端正面的图像。其中，所述第一显示区域并不限于一个区域，也不限于一类区域。

如图7所示，所述图像采集控制装置可以包括：

显示控制模块1，被配置为在所述终端接收到通过所述图像采集设备采集图像的指令时，控制所述第一显示区域在所述显示面板显示预设帧图像的预设时间段内暂停显示，其中，所述预设时间段小于人眼视觉响应时间；

采集控制模块2，被配置为控制所述图像采集设备在所述预设时间段内采集图像。

可选地，所述显示控制模块被配置为，在所述显示面板连续n帧显示同一图像的过程中，控制所述第一显示区域在所述n帧中预设帧对应的预设时间段内暂停显示，且控制所述第二显示区域在所述预设帧对应的预设时间段内继续显示。

可选地，所述预设帧包括所述n帧中除了第1帧以外的帧。

可选地，n＝2。

可选地，所述显示控制模块被配置为，在所述第一显示区域显示所述预设帧图像时，控制所述第一显示区域中的像素单元行在开启过程中的一个或多个预设时间段内暂停显示。

图8是根据本公开的实施例示出的另一种图像采集控制装置的示意框图如图8所示，所述装置还包括：

图像合成模块3，被配置为将从第一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，到最后一行像素单元在预设时间段内暂停显示时所述图像采集设备采集图像，按照每行像素单元的位置合成为一张图像。

可选地，所述一个或多个预设时间段为多个预设时间段。

可选地，所述预设帧为一帧或非连续的多帧。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在相关方法的实施例中进行了详细描述，此处将不做详细阐述说明。

对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本公开方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

本公开的实施例还提出一种电子设备，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为执行上述任一实施例所述方法中的步骤。

本公开的实施例还提出一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一实施例所述方法中的步骤。

图9是根据本公开的实施例示出的一种用于图像采集控制的装置900的示意框图。例如，装置900可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图9，装置900可以包括以下一个或多个组件：处理组件902，存储器904，电源组件906，多媒体组件908，音频组件910，输入/输出(i/o)的接口912，传感器组件914，以及通信组件916。

处理组件902通常控制装置900的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件902可以包括一个或多个处理器920来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件902可以包括一个或多个模块，便于处理组件902和其他组件之间的交互。例如，处理组件902可以包括多媒体模块，以方便多媒体组件908和处理组件902之间的交互。

存储器904被配置为存储各种类型的数据以支持在装置900的操作。这些数据的示例包括用于在装置900上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器904可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(sram)，电可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。

电源组件906为装置900的各种组件提供电力。电源组件906可以包括电源管理系统，一个或多个电源，及其他与为装置900生成、管理和分配电力相关联的组件。

多媒体组件908包括在所述装置900和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(lcd)和触摸面板(tp)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件908包括一个前置摄像头和/或后置摄像头。当装置900处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件910被配置为输出和/或输入音频信号。例如，音频组件910包括一个麦克风(mic)，当装置900处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器904或经由通信组件916发送。在一些实施例中，音频组件910还包括一个扬声器，用于输出音频信号。

i/o接口912为处理组件902和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件914包括一个或多个传感器，用于为装置900提供各个方面的状态评估。例如，传感器组件914可以检测到装置900的打开/关闭状态，组件的相对定位，例如所述组件为装置900的显示器和小键盘，传感器组件914还可以检测装置900或装置900一个组件的位置改变，用户与装置900接触的存在或不存在，装置900方位或加速/减速和装置900的温度变化。传感器组件914可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件914还可以包括光传感器，如cmos或ccd图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件914还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件916被配置为便于装置900和其他设备之间有线或无线方式的通信。装置900可以接入基于通信标准的无线网络，如wifi，2g或3g，4glte、5gnr或它们的组合。在一个示例性实施例中，通信组件916经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件916还包括近场通信(nfc)模块，以促进短程通信。例如，在nfc模块可基于射频识别(rfid)技术，红外数据协会(irda)技术，超宽带(uwb)技术，蓝牙(bt)技术和其他技术来实现。

在示例性实施例中，装置900可以被一个或多个应用专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理设备(dspd)、可编程逻辑器件(pld)、现场可编程门阵列(fpga)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述任一实施例所述的方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器904，上述指令可由装置900的处理器920执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。

本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。