一种图像处理方法及装置与流程

本技术涉及图像处理及显示，尤其涉及一种图像处理方法及装置。

背景技术：

1、目前，随着科学技术的不断发展，电子设备(例如智能手机、平板电脑等设备)越来越普及，而手写输入也变得越来越普遍和重要，因此，对手写输入的流畅性能提出了更高的要求。

2、目前，当用户在电子设备上基于手写笔执行点击、移动、或提笔等操作时，电子设备可以检测到输入事件，并对该输入事件进行响应。当前电子设备对此类输入事件进行响应的方式为，电子设备执行普通合成流程，从而显示合成后的图像帧。在普通合成流程中，电子设备在周期n内对与输入事件对应的图层进行绘制、渲染处理，在周期n+1内对渲染后的图层进行合成处理，且在周期n+2内对合成的图像帧进行显示，n为正整数。可见，普通合成流程所需的处理时间较长。

3、用户在基于手写笔进行操作时，可能会执行基于手写笔的书写操作。电子设备在检测到该书写操作对应的输入事件时，会进入普通合成流程，那么电子设备需要较长时间才能完成对该输入事件的响应，在此期间内，电子设备可能无法显示该输入事件的结果，对于用户来说，电子设备的显示类似于出现了卡顿现象。可见由于电子设备的处理速度较慢，影响了电子设备的显示流畅性。

技术实现思路

1、本技术实施例提供一种图像处理方法及装置，用于提高电子设备的显示流畅性。

2、第一方面，本技术实施例提供一种图像处理方法，可应用于包括显示单元的电子设备。该方法包括：检测到作用于所述显示单元的输入事件，并确定所述输入事件的类型，所述输入事件为通过输入装置输入的事件，所述输入装置用于通过与所述显示单元的接触向所述电子设备输入信息；基于所述输入事件的类型，对所述输入事件进行响应，获得第一图像。

3、上述技术方案中，电子设备可以对输入事件的类型进行区分，从而基于输入事件的类型对输入事件进行响应。例如，当输入事件为书写类型的事件时，则可以启用非普通合成流程对该输入事件进行响应，当输入事件为非书写类型的事件时，则可以启用普通合成流程。非普通合成流程下，电子设备对于输入事件的响应时间可以较短，因此通过启用非普通合成流程可以缩短电子设备的响应时长，从而提升电子设备的显示流畅性。

4、在一种可能的实施方式中，所述确定所述输入事件的类型，包括：如果所述输入事件对应的接触时长大于或等于第一阈值，确定所述输入事件的类型为第一类型，否则确定所述输入事件的类型为第二类型，其中，所述接触时长为所述输入装置在执行所述输入事件时与所述显示单元的接触时长；或，如果所述输入事件对应的接触压力大于或等于第二阈值，确定所述输入事件的类型为第一类型，否则确定所述输入事件的类型为第二类型，其中，所述接触压力为所述输入装置在执行所述输入事件时对所述显示单元形成的压力；或，如果所述输入事件对应的接触面积大于或等于第三阈值，确定输入事件的类型为第一类型，否则确定输入事件的类型为第二类型，其中，所述接触面积为所述输入装置在执行所述输入事件时在所述显示单元上形成的痕迹对应的面积。

5、上述方案中，电子设备可以基于输入事件对应的接触时长、接触压力、接触面积，来确定输入事件的类型。例如，第一类型可以为书写类型，第二类型可以为非书写类型，这样，电子设备可以根据输入事件的类型，进行精准响应。

6、在一种可能的实施方式中，在所述基于所述输入事件的类型，对所述输入事件进行响应之前，所述方法还包括：当所述输入事件的类型为第一类型时，将所述电子设备内的图层合成线程迁移到第一流程，所述第一流程内包括所述电子设备内的ui绘制线程和图层渲染线程；其中，所述ui绘制线程用于对所述输入事件对应的图层进行绘制，所述图层渲染线程用于对绘制完成的所述图层进行渲染，所述图层合成线程用于将渲染完成的所述图层合成到所述图层对应的显示区域。

7、上述方案中，当电子设备确定输入事件的类型为第一类型时，即输入事件为书写类型的事件时，电子设备可以将电子设备内的图层合成线程迁移到第一流程，也就是说，电子设备可以将图层合成线程、ui绘制线程和图层渲染线程设置在一个流程中执行，这样，可以确保高效的完成对输入事件对应的图层进行绘制、渲染以及合成，实现对书写类型的输入事件的快速响应，缩短对书写类型的响应时长。

8、在一种可能的实施方式中，所述将所述电子设备内的图层合成线程迁移到第一流程，包括：设置第一标志位，以将所述图层合成线程迁移到所述第一流程，其中，所述第一标志位用于调整所述图层合成线程所属的流程。

9、在上述方案中，电子设备可以通过设置用于调整图层合成线程所属的流程对应的第一标志位，实现将图层合成线程迁移到第一流程，从而可以高效的完成对输入事件对应的图层进行绘制、渲染以及合成，实现对输入事件的快速响应，从而提升电子设备的显示单元显示图像的流畅性。

10、在一种可能的实施方式中，在所述基于所述输入事件的类型，对所述输入事件进行响应之前，所述方法还包括：当所述输入事件的类型为第一类型时，在所述电子设备的处理器的第一核心上，部署所述电子设备内的ui绘制线程、图层渲染线程、以及图层合成线程，其中，所述第一核心为所述处理器所包括的性能参数的值大于第四阈值的核心；或，当所述输入事件的类型为第一类型时，将所述电子设备内的图层合成线程的优先级调整为高优先级，或，将所述电子设备内的ui绘制线程、图层渲染线程以及图层合成线程的优先级调整为高优先级；其中，所述ui绘制线程用于对所述输入事件对应的图层进行绘制，所述图层渲染线程用于对绘制完成的所述图层进行渲染，所述图层合成线程用于将渲染完成的所述图层合成到所述图层对应的显示区域。

11、上述方案中，当电子设备确定输入事件的类型为第一类型时，即输入事件为书写类型的事件时，电子设备可以在其处理器的第一核心上，部署电子设备内的ui绘制线程、图层渲染线程、以及图层合成线程，显然，是将ui绘制线程、图层渲染线程、以及图层合成线程设置在可以高速处理线程的第一核心上，从而可以加快ui绘制线程、图层渲染线程、以及图层合成线程的执行，即缩短了对书写类型的输入事件的响应时长。在上述方案中，电子设备还可以单独调整图层合成线程的优先级，或者将ui绘制线程、图层渲染线程、以及图层合成线程的优先级均进行调整，这样，可以缩短图层合成线程的执行时长，或者缩短ui绘制线程、图层渲染线程以及图层合成线程的执行时长。

12、在一种可能的实施方式中，在所述基于所述输入事件的类型，对所述输入事件进行响应之前，所述方法还包括：当所述输入事件的类型为第一类型时，确定所述输入事件对应的目标应用；基于所述目标应用的运行数据，调整所述电子设备的处理器的工作频率。

13、上述方案中，当电子设备确定输入事件的类型为第一类型时，则可以基于输入事件对应的目标应用的运行数据，调整电子设备的处理器的工作频率，显然，可以通过调整电子设备的处理器的工作频率，可以加快部署在该电子设备的处理器上的线程的处理速度。

14、在一种可能的实施方式中，所述基于所述输入事件的类型，对所述输入事件进行响应，获得第一图像，包括：响应于第一垂直同步信号，通过所述电子设备内的ui绘制线程绘制所述输入事件对应的图层，通过所述电子设备内的图层渲染流程对绘制完成的所述图层进行渲染，并通过所述电子设备的图层合成线程合成渲染完成的所述图层，获得所述第一图像；响应于第二垂直同步信号，在所述显示单元中显示所述第一图像，其中，所述第一垂直同步信号和所述第二垂直同步信号是基于所述显示单元对应生成的。

15、上述方案中，当电子设备确定输入事件的类型为第一类型时，电子设备可以在一个垂直信号周期中完成图层数据绘制、渲染和合成。即电子设备进行图层的绘制，渲染和合成所需时长小于或者等于一个同步周期。也就是说，当输入事件为第一类型时，电子设备对输入事件的响应时长可以缩短为一个垂直信号同步周期，相对于现有技术中的普通合成流程的两个垂直信号同步周期的处理方式，缩短了响应时长，从而提升电子设备的显示单元显示图像的流畅性。

16、在一种可能的实施方式中，所述基于所述输入事件的类型，对所述输入事件进行响应，获得第一图像，包括：当所述输入事件的类型为第二类型时，响应于第三垂直同步信号，通过所述电子设备内的ui绘制线程绘制所述输入事件对应的图层，通过电子设备内的图层渲染流程，对绘制完成的所述图层进行渲染；响应于第四垂直同步信号，通过所述电子设备内的图层合成线程合成渲染完成的所述图层，获得第一图像；响应于第五垂直同步信号，在所述显示单元中显示所述第一图像，其中，所述第三垂直同步信号、第四垂直同步信号以及所述第五垂直同步信号是基于所述显示单元对应生成的。

17、上述方案中，当电子设备确定输入事件的类型为第二类型时，图层合成线程基于第四垂直同步信号对应执行，可以完整的对输入事件对应的渲染后的图层进行合成，实现了对输入事件的响应，即由于图层合成线程在一个单独的垂直信号同步周期内执行，从而可以实现对非书写类型对应的输入事件的所有图像帧的合成，进而可以在显示单元将所有图像帧进行显示，即避免了出现由于丢失部分图像帧，导致显示内容不连续所对应的卡顿情况，从而可以提升电子设备的显示单元显示图像的流畅性。

18、第二方面，提供一种通信装置，所述通信装置可以为上述第一方面所述的电子设备，或为包括该电子设备的通信设备，或为该电子设备中的功能模块，例如基带装置或芯片系统等。一种可选的实现方式中，所述通信装置包括基带装置和射频装置。另一种可选的实现方式中，所述通信装置包括处理单元(有时也称为处理模块)和收发单元(有时也称为收发模块)。收发单元能够实现发送功能和接收功能，在收发单元实现发送功能时，可称为发送单元(有时也称为发送模块)，在收发单元实现接收功能时，可称为接收单元(有时也称为接收模块)。发送单元和接收单元可以是同一个功能模块，该功能模块称为收发单元，该功能模块能实现发送功能和接收功能；或者，发送单元和接收单元可以是不同的功能模块，收发单元是对这些功能模块的统称。

19、其中，所述处理单元，用于检测到作用于所述显示单元的输入事件，并确定所述输入事件的类型，所述输入事件为通过输入装置输入的事件，所述输入装置用于通过与所述显示单元的接触向所述电子设备输入信息；所述处理单元，还用于基于所述输入事件的类型，对所述输入事件进行响应，获得第一图像。

20、在一种可选的实施方式中，所述通信装置还包括存储单元(有时也称为存储模块)，所述处理单元用于与所述存储单元耦合，并执行所述存储单元中的程序或指令，使能所述通信装置执行上述第一方面所述的电子设备的功能。

21、第三方面，本技术实施例提供一种通信装置，该通信装置可以为电子设备，或者为用于电子设备中的芯片或芯片系统。该通信装置包括通信接口以及处理器，可选的，还包括存储器。其中，该存储器用于存储计算机程序，处理器与存储器、通信接口耦合，当处理器读取所述计算机程序或指令时，使通信装置执行上述第一方面中由电子设备所执行的方法。

22、第四方面，本技术实施例提供一种计算机可读存储介质，所述计算机可读存储介质用于存储计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行如上述第一方面所述的方法。

23、第五方面，本技术实施例提供一种计算机程序产品，包括计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行如上述第一方面所述的方法。

24、第六方面，本技术实施例提供一种芯片系统，包括处理器和接口，所述处理器用于从所述接口调用并运行指令，以使所述芯片系统实现上述第一方面所述的方法。

25、上述第二方面至第六方面的有益效果，参见第一方面的有益效果，不重复赘述。