一种数据处理方法及相关设备与流程

本申请涉及信息处理领域，尤其涉及一种数据处理方法及相关设备。

背景技术：

随着网络通信技术的进步和宽带网络的提速，视频直播技术得到的迅速的发展。

在视频直播中使用硬件编码，可以有效降低中央处理器(cpu，centralprocessingunit)占用率，降低卡顿率。但是由于网络波动，用户在视频直播过程中，可能有动态修改码率的需求，当前所有直播软件必须先停止直播，重置编码器，才能达到修改码率的目的。

这样就会导致在直播以及观看直播的过程中，降低直播者以及用户的使用体验。

技术实现要素：

本申请提供了一种数据处理方法及相关设备，可以在编码器对图像帧进行编码的过程中，对图像质量参数进行调整，而无需终止编码过程，进而使得视频的输出不会中断，提高用户体验。

本申请实施例第一方面提供一种数据处理方法，包括：

在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值，其中，n为大于或等于1的正整数，所述n个图像帧通过目标编码器进行持续编码；

获取所述目标编码器的第一属性参数；

基于调整后的所述图像质量参数的参数值以及所述第一属性参数对所述目标编码器进行重配置；

基于重配置后的所述目标编码器对所述n个图像帧进行编码，并输出编码后的所述n个图像帧。

可选地，所述基于调整后的所述图像质量参数的参数值以及所述属性参数对所述目标编码器进行重配置包括：

根据调整后的所述图像质量参数的参数值修改所述第一属性参数，得到第二属性参数；

基于所述第二属性参数对所述目标编码器进行重配置。

可选地，所述根据调整后的所述图像质量参数的参数值修改所述第一属性参数，得到第二属性参数包括：

根据调整后的所述图像质量参数的参数值修改目标属性参数的参数值，以得到所述第二属性参数，所述目标属性参数为所述第一属性参数中与所述图像质量参数对应的参数。

可选地，当所述图像质量参数为码率时，所述目标属性参数为平均码率、缓存区大小以及视频缓存检验器vbv初始延迟；当所述图像质量参数为分辨率时，所述目标属性参数为编码宽度以及编码高度。

可选地，所述在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值包括：

接收目标操作指令；

响应于所述目标操作指令，并根据所述目标操作指令调整所述图像质量参数的参数值。

可选地，所述在n个图像帧处于持续编码的时间段内获取图像质量参数的参数值包括：

确定当前时刻的网速；

根据所述当前时刻的网速调整所述图像质量参数的参数值。

本申请实施例第二方面提供了一种终端，包括：

调整单元，用于在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值，其中，n为大于或等于1的正整数，所述n个图像帧通过目标编码器进行持续编码；

获取单元，用于获取所述目标编码器的第一属性参数；

配置单元，用于基于调整后的所述图像质量参数的参数值以及所述第一属性参数对所述目标编码器进行重配置；

编码单元，用于基于重配置后的所述目标编码器对所述n个图像帧进行编码，并输出编码后的所述n个图像帧。

可选地，所述配置单元具体用于：

根据调整后的所述图像质量参数的参数值修改所述第一属性参数，得到第二属性参数；

基于所述第二属性参数对所述目标编码器进行重配置。

可选地，所述配置单元根据调整后的所述图像质量参数的参数值修改所述第一属性参数，得到第二属性参数包括：

根据调整后的所述图像质量参数的参数值修改目标属性参数的参数值，以得到所述第二属性参数，所述目标属性参数为所述第一属性参数中与所述图像质量参数对应的参数。

可选地，当所述图像质量参数为码率时，所述目标属性参数为平均码率、缓存区大小以及视频缓存检验器vbv初始延迟；当所述图像质量参数为分辨率时，所述目标属性参数为编码宽度以及编码高度。

可选地，所述调整单元具体用于：

接收目标操作指令；

响应于所述目标操作指令，并根据所述目标操作指令调整所述图像质量参数的参数值。

可选地，所述调整单元还具体用于：

确定当前时刻的网速；

根据所述当前时刻的网速获取调整所述图像质量参数的参数值。

本申请实施例第三方面提供了一种计算机装置，其包括至少一个连接的处理器、存储器和收发器，其中，所述存储器用于存储程序代码，所述程序代码由所述处理器加载并执行以实现上述各方面所述的数据处理方法的步骤。

本申请实施例第四方面提供了一种计算机可读存储介质，其包括指令，当其在计算机上运行时，使得计算机执行上述各方面所述的数据处理方法的步骤。

综上所述，可以看出，本申请提供的实施例中，可以在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值，并基于调整后的图像质量参数的参数值以及编码器的属性参数对编码器进行重配置，并基于重配置后的目标编码器对所述n个图像帧进行编码，输出编码后的所述n个图像帧。这样，可以在编码器对图像帧进行编码的过程中，对图像质量参数进行调整，而无需终止编码过程，进而使得视频的输出不会中断，提高用户体验。

附图说明

图1为本申请实施例提供数据处理方法的网络架构示意图：

图2为视频帧的编码过程中修改图像质量参数的流程示意图；

图3为更新硬件编码器的图像质量参数的流程示意图；

图4为本申请实施例提供的数据处理方法的一个流程示意图；

图5为本申请实施例提供的数据处理方法的界面示意图；

图6为本申请实施例提供的终端的虚拟结构示意图；

图7为本申请实施例提供的终端的硬件结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块，本申请中所出现的模块的划分，仅仅是一种逻辑上的划分，实际应用中实现时可以有另外的划分方式，例如多个模块可以结合成或集成在另一个系统中，或一些特征向量可以忽略，或不执行，另外，所显示的或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，模块之间的间接耦合或通信连接可以是电性或其他类似的形式，本申请中均不作限定。并且，作为分离部件说明的模块或子模块可以是也可以不是物理上的分离，可以是也可以不是物理模块，或者可以分布到多个电路模块中，可以根据实际的需要选择其中的部分或全部模块来实现本申请方案的目的。

下面结合图1对本申请实施例提供的数据处理方法的网络架构图进行说明：

如图1所示，其中，本申请中的101为终端、103为服务器，服务器103通过网络102与终端101建立通信连接，服务器103与终端101通过网络102传输数据。具体的，终端101在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值，其中，n为大于或等于1的正整数，所述n个图像帧通过目标编码器进行持续编码，并获取所述目标编码器的第一属性参数；之后，基于调整后的所述图像质量参数的参数值以及所述第一属性参数对所述目标编码器进行重配置；且基于重配置后的所述目标编码器对所述n个图像帧进行编码，得到编码后的所述n个图像帧；最后将编码后的n个图像之输出至服务器103执行相应的操作。这样，即可以在对n个图像帧进行持续编码的过程中修改图像质量参数的参数值而无需中断编码进程。

对于一般通过硬件编码过程，首先初始化(nvenc_init_codec)硬件编码器(hardware-encoder)，然后不断循环将图像帧送入硬件编码器(avcodec_send_frame)，之后获得编码的帧(avcodec_receive_packet)，最后将编码的帧发送给服务器。如果在对图像帧进行编码的过程中，需要更改硬件编码参数，则停止硬件编码器的运行，然后在初始化(nvenc_init_codec)硬件编码器的过程中重新设置编码器参数，这样在就会导致编码过程中断，不能获得连续编码的帧。

有鉴于此，本申请提供了一种数据处理方法，可以在对图像帧进行编码的过程中，无需停止硬件编码器的运行也可以对硬件编码器的属性参数进行修改，防止图像帧的编码中断，进而造成输出视频的中断，提高用户体验。

请参阅图2，图2为视频帧的编码过程中修改图像质量参数的流程示意图，包括：

201、初始化硬件编码器。可以对硬件编码器进行初始化处理。

202、获取视频帧，该视频帧为待编码的视频帧，此处具体不限定获取视频帧的方式。

需要说明的是，通过步骤201可以初始化硬件编码器，通过步骤202可以获取视频帧，然而这两个步骤之间并没有先后执行顺序的限制，可以先执行步骤201，也可以先执行步骤202，或者同时执行，具体不做限定。

203、将视频帧循环发送至硬件编码器，通过硬件编码器对视频帧进行编码。

在对硬件编码器进行初始化以及获取视频帧之后，可以循环的将视频帧发送至硬件编码器，并通过硬件编码器对视频帧进行编码。

204、更新硬件编码器的参数。

在对视频帧进行持续编码的过程中，当用户需要修改图像质量参数时，可以获取到该调整后的图像质量参数，并通过该图像质量参数更新硬件编码器，并通过更新图像质量参数后的硬件编码器进行编码。

205、将编码后的视频帧发送至服务器。

下面结合图3对更新硬件编码器的参数的流程进行说明，图3为更新硬件编码器的图像质量参数的流程示意图，包括：

301、用户设备图像质量参数。

可以在对视频帧进行持续编码的过程中获取用户设置的图像质量参数，该图像质量参数可以为码率和/或分辨率。

302、将硬件编码器的参数与图像质量参数合并得到合并参数。

可以从硬件编码器的核心拷贝出与图像质量参数相对应的硬件编码器的参数，之后将用户设备的图像质量参数与从硬件编码器中拷贝出的参数进行合并，得到合并参数，并通过合并参数重置硬件编码器，例如该图像质量参数为码率，则从硬件编码器核心中拷贝出平均码率(averagebitrate)、缓存区(buff)大小(vbvbuffersize)以及视频缓存检验器(videobufferverifier，vbv)初始延迟(vbvinitialdelay)，当该图像质量参数为分辨率时，则从硬件编码器核心拷贝出编码宽度以及编码高度。之后，将拷贝出的参数与用户设置的参数进行合并，当图像质量参数为码率时，可以通过图像质量参数的参数值更改平均码率、buff大小以及vbv初始延迟的值，例如码率当前的参数值为4000，用户将码率调整为2000，则可以通过更改平均码率、buff大小以及vbv初始延迟的参数值，来达到修改码率的目的，也即averagebitrate＝2000，vbvbuffersize＝2000*fps，vbvinitialdelay＝vbvbuffersize，这样即可以得到合并后的参数；当图像质量参数为分辨率时，可以通过分辨率的参数值修改编码宽度以及编码高度，例如当前分辨率为1920*1080，用户将分辨率调整为1440*900，则可以将编码宽度修改为1440，将编码高度修改为900，即得到合并参数。

这样可以在持续对视频帧进行编码的过程中，修改图像质量参数而不终端对视频帧的编码。

需要说明的是该数据处理方法应用于终端设备，该终端设备可以为包括手机、平板电脑、pda(personaldigitalassistant，个人数字助理)、pos(pointofsales，销售终端)、车载电脑等任意终端设备，本申请实施例中，以终端设备为手机为例进行说明。

请参阅图4，图4为本申请实施例提供的数据处理方法的一个流程示意图，包括：

401、在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值。

本实施例中，终端在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值，其中，该n个图像帧通过目标编码器进行持续编码，n为大于或等于1的正整数，该图像质量参数包括码率和/或分辨率，也就是说，终端可以首先获取到一个参数值，该参数值为调整图像质量参数的参数值。具体的：终端可以通过两种不同的方式来获取调整图像质量参数的参数值：

1、根据用户的操作指令获取调整图像质量参数的参数值。

接收目标操作指令；

响应于目标操作指令，并根据目标操作指令调整图像质量参数的参数值。

本实施例中，终端在通过目标编码器对n个图像帧进行持续编码的过程中，可以接收到目标操作指令，并根据目标操作指令获取调整图像质量参数的参数值。也就是说，终端接收用户的指令，并根据该指令生成对应的操作。

在一个实施例中，生成目标操作指令的操作至少包括手势操作、滑动操作、点击操作以及声控操作中的一种，例如当用户对终端的显示屏进行点击操作时，终端可以接收到该点击操作，此时，该点击操作即生成操作指令，也就是说，可以提前定义操作指令，例如提前定义滑动操作为调整图像质量参数的参数值的操作(如左滑操作、右滑操作、上滑操作以及下滑操作等等)，或者定义点击操作为调整图像质量参数的参数值的操作(如单击操作或双击操作等等)，或者定义手势操作为调整图像质量参数的参数值的操作(如向左摆动手腕或手臂，向右摆动手腕或手臂，如四根手指收缩操作或者三根手指上滑操作等等)，或者定义声控操作为调整图像质量参数的参数值的操作(如收到调整图像质量参数的参数值的声音以及具体的参数值的声音)，上述仅为举例说明，并不代表对生成目标操作指令的操作进行限定。

2、根据当前时刻的网速获取调整图像指令参数的参数值。

确定当前时刻的网速；

根据当前时刻的网速获取调整图像质量参数的参数值。

本实施例中，终端可以提前定义一个映射关系，该映射关系为不同的网速区间与图像质量参数的参数值之间的映射关系，例如网速在3mb/s至5mb/s时对应的码率为2000，对应的分辨率为1440*900，当然也还可以是其他的数值对应关系，具体不做限定。这样，只需要知道当前时刻的网速以及当前时刻的图像质量参数的参数值，既可以确定是否需要对当前时刻的图像质量参数的参数值进行调整。

需要说明的是，终端在通过目标编码器对n个图像帧进行编码之前，还可以接收用户的操作指令，并根据操作指令选择目标编码器的型号或者版本等等，另外，该目标编码器可以是硬件编码器也可以是软件编码器，具体不做限定。

402、获取目标编码器的第一属性参数。

本实施例中，终端可以获取目标编码器的第一属性参数，其中，该第一属性参数为目标编码器的固有参数，包括码率、分辨率、编码方式、码率属于动态码率还是静态码率、编码宽度、编码高度、每秒传输帧数(fps，framespersecond)、编码版本号以及扩展编码参数等等。

需要说明的是，终端通过步骤401可以在n个图像帧处于持续编码的时间段内调整图像质量参数的参数值，通过步骤402可以获取目标编码器的第一属性参数，然而这两个步骤之间并没有先后执行顺序的限制，可以先执行步骤401，也可以先执行步骤402，或者同时执行，具体不做限定。

403、基于调整后的图像质量参数的参数值以及第一属性参数对目标编码器进行重配置。

本实施例中，终端在得到调整后的图像质量参数的参数值以及得到第一属性参数之后，可以基于调整后的图像质量参数的参数值以及第一属性参数对目标编码器进行重配置。具体的，终端根据调整后的图像质量参数的参数值修改第一属性参数，得到第二属性参数；

基于第二属性参数对目标编码器进行重配置。

也就是说，终端可以根据调整后的图像质量参数的参数值修改该第一属性参数，得到第二属性参数，之后，基于第二属性参数对目标编码器进行重配置。

在一个实施例中，终端根据调整后的图像质量参数的参数值修改目标属性参数的参数值，以得到第二属性参数，目标属性参数为第一属性参数中与图像质量参数对应的参数。

本实施例中，终端可以首先确定第一属性参数中与图像质量参数对应的目标属性参数，之后基于调整后的图像质量参数的参数值修改目标属性参数的参数值，以得到第二属性参数，其中，该图像质量参数包括码率和/或分辨率，当该图像质量参数为码率时，该目标属性参数为平均码率(averagebitrate)、缓存区(buff)大小(vbvbuffersize)以及视频缓存检验器(videobufferverifier，vbv)初始延迟(vbvinitialdelay)，当该图像质量参数为分辨率时，目标属性参数为编码宽度以及编码高度。

也就是说，当用户对码率的参数值进行调整时，可以通过调整后的码率的参数值，更改平均码率、buff大小以及vbv初始延迟的值，例如码率当前的参数值为4000，用户将码率调整为2000，则可以通过更改平均码率、buff大小以及vbv初始延迟的参数值，来达到修改码率的目的，也即averagebitrate＝2000，vbvbuffersize＝2000*fps，vbvinitialdelay＝vbvbuffersize；当用户对分辨率的参数值进行调整时，可以通过分辨率的参数值修改编码宽度以及编码高度，例如当前分辨率为1920*1080，用户将分辨率调整为1440*900，则可以将编码宽度修改为1440，将编码高度修改为900，即得到第二属性参数，之后基于第二属性参数对目标编码器进行重配置。

404、基于重配置后的目标编码器对n个图像帧进行编码，并输出编码后的n个图像帧。

本实施例中，在基于图像质量参数的参数值以及第一属性参数对目标编码器进行重配置后，可以基于重配置后的目标编码器继续对n个图像帧进行编码，并输入编码后的n个图像帧。

综上所述，可以看出，本申请提供的实施例中，可以在n个图像帧处于持续编码的时间段内调整图像质量参数的参数值，并基于调整后的图像质量参数的参数值以及编码器的属性参数对编码器进行重配置，并基于重配置后的目标编码器对所述n个图像帧进行编码，输出编码后的所述n个图像帧。这样，可以在编码器对图像帧进行编码的过程中，对图像质量参数进行调整，而无需终止编码过程，进而使得视频的输出不会中断，提高用户体验。

下面结合图5，以终端为手机进行说明：

请参阅图5，图5为本申请实施例提供的数据处理方法的一个界面示意图，用户在通过直播应用程序进行直播的过程中，发现网速降低了，为了提高直播的流畅度，此时，可以对直播的画质进行调整，也即对码率或者分辨率进行调整，例如将区域501中的码率“4000”，调整为“2000”，此时，终端可以接收到该调整后的码率的参数值“2000”，终端可以获取直播应用程序对应的编码器的第一属性参数，并通过码率的参数值“2000”对第一属性参数中的平均码率、buff大小以及vbv初始延迟的参数值进行修改(也即averagebitrate＝2000，vbvbuffersize＝2000*fps，vbvinitialdelay＝vbvbuffersize)，得到第二属性参数，之后基于第二属性参数对直播应用程序对应的编码器进行重配置，即可以对直播画面的码率进行降低，并通过重配置后的编码器继续进行编码，并输出画面。这样，无需停止直播，可以对码率和/或分辨率进行调整，提高用户体验。

需要说明的是，终端还可以接收用户对图5中区域502的操作指令，根据智能配置对视频帧的编码进行相应的设置，具体的，可以提前定义一个映射关系以及预设规则，通过该映射关系以及预设规则对视频帧编码进行相应的设置：该映射关系为不同的网速区间与图像质量参数的参数值之间的映射关系，例如网速在3mb/s至5mb/s时对应的码率为2000，对应的分辨率为1440*900，当然也还可以是其他的数值对应关系，具体不做限定。这样，只需要知道当前时刻的网速以及当前时刻的图像质量参数的参数值，既可以确定是否需要对当前时刻的图像质量参数的参数值进行调整。该预设规则为选择软件编码器的规则，通过该规则来确定什么时候选用h264软件编码器对视频帧进行编码，什么时候选用h265软件编码器对视频帧进行编码，例如当主播的人数达到一个预设值，例如10万时，选用h265软件编码器，当小于这个预设值时，选用h264软件编码器。上述对映射关系以及预设规则的说明仅为举例说明，并不代表对其的限定。

上面从数据处理方法的方法角度对本申请进行说明，下面从终端的角度对本申请进行说明。

请参阅图6，图6为本申请实施例提供的一种数据处理装置的虚拟结构示意图，该数据处理装置包括：

调整单元601，用于在n个图像帧处于持续编码的时间段内获取调整图像质量参数的参数值，其中，n为大于或等于1的正整数，所述n个图像帧通过目标编码器进行持续编码；

获取单元602，用于获取所述目标编码器的第一属性参数；

配置单元603，用于基于调整后的所述图像质量参数的参数值以及所述第一属性参数对所述目标编码器进行重配置；

编码单元604，用于基于重配置后的所述目标编码器对所述n个图像帧进行编码，并输出编码后的所述n个图像帧。

可选地，所述配置单元603具体用于：

根据调整后的所述图像质量参数的参数值修改所述第一属性参数，得到第二属性参数；

基于所述第二属性参数对所述目标编码器进行重配置。

可选地，所述配置单元603根据调整后的所述图像质量参数的参数值修改所述第一属性参数，得到第二属性参数包括：

根据调整后的所述图像质量参数的参数值修改目标属性参数的参数值，以得到所述第二属性参数，所述目标属性参数为所述第一属性参数中与所述图像质量参数对应的参数。

可选地，当所述图像质量参数为码率时，所述目标属性参数为平均码率、缓存区大小以及视频缓存检验器vbv初始延迟；当所述图像质量参数为分辨率时，所述目标属性参数为编码宽度以及编码高度。

可选地，所述调整单元601具体用于：

接收目标操作指令；

响应于所述目标操作指令，并根据所述目标操作指令调整所述图像质量参数的参数值。

可选地，所述调整单元601还具体用于：

确定当前时刻的网速；

根据所述当前时刻的网速获取调整所述图像质量参数的参数值。

综上所述，可以看出，本申请提供的实施例中，可以在n个图像帧处于持续编码的时间段内调整图像质量参数的参数值，并基于调整后的图像质量参数的参数值以及编码器的属性参数对编码器进行重配置，并基于重配置后的目标编码器对所述n个图像帧进行编码，输出编码后的所述n个图像帧。这样，可以在编码器对图像帧进行编码的过程中，对图像质量参数进行调整，而无需终止编码过程，进而使得视频的输出不会中断，提高用户体验。

图7示出的是与本发明实施例提供的终端相关的手机的部分结构的框图。参考图7，手机包括：射频(radiofrequency，rf)电路710、存储器720、输入单元730、显示单元740、传感器750、音频电路760、无线保真(wirelessfidelity，wifi)模块770、处理器780、以及电源790等部件。本领域技术人员可以理解，图7中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

下面结合图7对手机的各个构成部件进行具体的介绍：

rf电路710可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，给处理器780处理；另外，将设计上行的数据发送给基站。通常，rf电路710包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier，lna)、双工器等。此外，rf电路710还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(globalsystemofmobilecommunication，gsm)、通用分组无线服务(generalpacketradioservice，gprs)、码分多址(codedivisionmultipleaccess，cdma)、宽带码分多址(widebandcodedivisionmultipleaccess，wcdma)、长期演进(longtermevolution，lte)、电子邮件、短消息服务(shortmessagingservice，sms)等。

存储器720可用于存储软件程序以及模块，处理器780通过运行存储在存储器720的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器720可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器720可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元730可用于接收输入的数字或字符信息，以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地，输入单元730可包括触控面板731以及其他输入设备732。触控面板731，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板731上或在触控面板731附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板731可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器780，并能接收处理器780发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板731。除了触控面板731，输入单元730还可以包括其他输入设备732。具体地，其他输入设备732可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元740可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元740可包括显示面板741，可选的，可以采用液晶显示器(liquidcrystaldisplay，lcd)、有机发光二极管(organiclight-emittingdiode，oled)等形式来配置显示面板741。进一步的，触控面板731可覆盖显示面板741，当触控面板731检测到在其上或附近的触摸操作后，传送给处理器780以确定触摸事件的类型，随后处理器780根据触摸事件的类型在显示面板741上提供相应的视觉输出。虽然在图7中，触控面板731与显示面板741是作为两个独立的部件来实现手机的输入和输入功能，但是在某些实施例中，可以将触控面板731与显示面板741集成而实现手机的输入和输出功能。

手机还可包括至少一种传感器750，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板741的亮度，接近传感器可在手机移动到耳边时，关闭显示面板741和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路760、扬声器761，传声器762可提供用户与手机之间的音频接口。音频电路760可将接收到的音频数据转换后的电信号，传输到扬声器761，由扬声器761转换为声音信号输出；另一方面，传声器762将收集的声音信号转换为电信号，由音频电路760接收后转换为音频数据，再将音频数据输出处理器780处理后，经rf电路710以发送给比如另一手机，或者将音频数据输出至存储器720以便进一步处理。

wifi属于短距离无线传输技术，手机通过wifi模块770可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图7示出了wifi模块770，但是可以理解的是，其并不属于手机的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器780是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器720内的软件程序和/或模块，以及调用存储在存储器720内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器780可包括一个或多个处理单元；优选的，处理器780可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器780中。

手机还包括给各个部件供电的电源790(比如电池)，优选的，电源可以通过电源管理系统与处理器780逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管未示出，手机还可以包括摄像头、蓝牙模块等，在此不再赘述。

在本申请实施例中，上述由终端所执行的操作可以由该处理器780来执行。

本申请实施例还提供了一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现上述所述数据处理方法的步骤。

本申请实施例还提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行上述所述数据处理方法的步骤。

本申请实施例还提供了一种终端设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，所述程序代码由所述处理器加载并执行以实现上述所述数据处理方法的步骤。

本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行上述所述数据处理方法的步骤。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(cpu)、输入/输出接口、网络接口和内存。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(ram)和/或非易失性内存等形式，如只读存储器(rom)或闪存(flashram)。存储器是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd-rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitorymedia)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。

本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。

以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。