一种显示方法、电子设备及存储介质与流程

文档序号:30514257发布日期:2022-06-25 02:48阅读:76来源:国知局
一种显示方法、电子设备及存储介质与流程

1.本技术涉及终端技术领域,尤其涉及一种显示方法、电子设备及存储介质。


背景技术:

2.低温多晶氧化物(low temperature polycrystalline oxide,ltpo)显示屏指的是在有机发光二极管(organic light-emitting diode,oled)显示屏的基材中多加了一层氧化物,降低了激发像素点所需要的能耗,从而能够降低电子设备显示时的功耗。
3.其中,ltpo显示屏能够支持多种刷新率(如从120赫兹(hz)到1hz);ltpo显示屏的刷新率会随着电子设备运行的应用而动态调整。当电子设备运行不同应用时,电子设备的ltpo显示屏的刷新率不同。例如,当电子设备运行应用1时,电子设备的ltpo显示屏的刷新率为刷新率a(如60hz);当电子设备运行应用2时,电子设备的ltpo显示屏的刷新率为刷新率b(如120hz)。相关技术中,当电子设备运行应用时,若该应用的界面发生动态变化,则电子设备在显示发生动态变化后的该应用的界面时会出现卡顿的问题。


技术实现要素:

4.本技术实施例提供一种显示方法、电子设备及存储介质,用于解决电子设备在显示发生动态变化后的界面时出现的卡顿问题。
5.为达到上述目的,本技术的实施例采用如下技术方案:
6.第一方面,提供一种显示方法,该方法应用于电子设备,电子设备支持第一刷新率和第二刷新率;该方法包括:电子设备控制显示屏以第一刷新率显示第一画面;第一刷新率小于第一阈值;第一画面对应至少一个显示图层;当电子设备检测到第一画面的显示图层更新时,电子设备控制显示屏以第二刷新率显示第二画面;第二画面包括更新后的显示图层,第二刷新率大于第一刷新率。
7.基于第一方面,由于第一刷新率小于第一阈值,因此在电子设备控制显示屏以第一刷新率显示第一画面的情况下,当电子设备检测到第一画面的显示图层更新时,即第一画面的显示图层发生了变化,则电子设备控制显示屏以第二刷新率显示第二画面,第二画面包括更新后的显示图层;并且由于第二刷新率大于第一刷新率,因此当电子设备显示更新后的显示图层时,电子设备会提高显示屏的刷新率,从而解决了电子设备在更新后的显示图层时出现的卡顿问题。
8.在第一方面的一种可能的实现方式中,电子设备检测到第一画面的显示图层更新,包括:电子设备检测到第一指令;第一指令用于触发电子设备显示第一图层,第一图层不同于至少一个显示图层;电子设备响应于第一指令,检测到第一画面的显示图层更新。
9.在该实现方式中,当电子设备检测到第一指令时,由于第一指令用于触发电子设备显示第一图层,第一图层不同于至少一个显示图层,即第一图层为新增的显示图层,因此当电子设备响应于第一指令时,检测到第一画面的显示图层更新(即有新增的显示图层),有利于降低设备功耗。
10.在第一方面的一种可能的实现方式中,电子设备控制显示屏以第二刷新率显示第二画面,包括:电子设备根据第一图层的属性信息创建第一图层,并控制显示屏以第二刷新率显示第二画面;第一图层的属性信息包括第一图层的窗口大小、窗口位置或者窗口名称中的至少一种。
11.在该实现方式中,电子设备可以根据第一图层的属性信息创建第一图层,在创建好第一图层后控制显示屏以第二刷新率显示第二画面,能够进一步解决电子设备显示第一图层时出现的卡顿问题。
12.在第一方面的一种可能的实现方式中,电子设备检测到第一画面的显示图层更新,包括:电子设备获取图像变化信息;图像变化信息用于触发电子设备显示第二图层;第二图层隐藏在第三图层之下;第二图层和第三图层为至少一个显示图层中的其中两个显示图层;电子设备根据图像变化信息,检测到第一画面的显示图层更新。
13.在该实现方式中,当电子设备获取图像变化信息时,由于图像变化信息用于触发电子设备显示第二图层,第二图层隐藏在第三图层之下;第二图层和第三图层为至少一个显示图层中的其中两个显示图层;也就是说,图像变化信息能触发电子设备由显示第三图层变化为显示第二图层,即电子设备的显示图层发生了变化,因此电子设备可以根据图像变化信息,检测到第一画面的显示图层更新,有利于降低设备功耗。
14.在第一方面的一种可能的实现方式中,电子设备控制显示屏以第二刷新率显示第二画面,包括:当电子设备确定第二图层需要显示时,电子设备控制显示屏以第二刷新率显示第二画面。
15.在该实现方式中,当电子设备确定第二图层需要显示时,电子设备才会控制显示屏以第二刷新率显示第二画面,这样一来,能够在降低设备功耗的同时,能够更好的解决卡顿问题。
16.在第一方面的一种可能的实现方式中,电子设备确定第二图层需要显示,包括:电子设备将第二图层的属性信息与第三图层的属性信息进行对比,确定第二图层需要显示;属性信息包括图层大小、图层位置或者图层透明度中的至少一种。
17.在该实现方式中,电子设备将第二图层(即新图层)与第三图层(即旧图层)的属性信息进行对比,确定第二图层需要显示,这样,可以减少判断显示第二图层出现的失误。
18.在第一方面的一种可能的实现方式中,电子设备包括:图像合成系统;电子设备根据第一图层的属性信息创建第一图层,包括:图像合成系统根据第一图层的属性信息创建第一图层。
19.在第一方面的一种可能的实现方式中,电子设备包括:图像缓存队列;电子设备获取图像变化信息,包括:图像缓存队列获取图像变化信息;电子设备根据图像变化信息,检测到第一画面的显示图层更新,包括:图像缓存队列根据图像变化信息,检测到第一画面的显示图层更新。
20.在第一方面的一种可能的实现方式中,电子设备包括图像合成系统;电子设备确定第二图层需要显示,包括:图像合成系统将第二图层的属性信息与第三图层的属性信息进行对比,确定第二图层需要显示。
21.在第一方面的一种可能的实现方式中,第一图层用于显示音量调节控件;或者,第一图层用于显示截图;或者,第一图层用于显示弹窗;或者,第一图层用于显示消息未读提
示;或者,第一图层用于显示应用红包。
22.在该实现方式中,第一图层用于显示音量调节控件;或者用于显示截图;或者用于显示弹窗;或者用于显示消息未读提示;或者用于显示应用红包,可以看出,第一图层显示的画面都是在用户没有触控显示屏的情况下,新增显示图层;这样一来,在没有用户触控显示屏的情况下,电子设备检测到第一画面的显示图层有更新时,提高显示屏的刷新率,能够进一步解决卡顿问题,提高用户体验。
23.在第一方面的一种可能的实现方式中,第一画面和所述第二画面包括目标窗口;目标窗口通过轮播的方式循环显示第三图层和所述第二图层。
24.在该实现方式中,由于目标窗口通过轮播的方式循环显示第三图层和第二图层,即目标窗口显示的画面会定时的发生变化,在这种场景下,电子设备可以在目标窗口循环显示不同显示图层的情况下,提高显示屏的刷新率,有利于进一步提高用户体验。
25.在第一方面的一种可能的实现方式中,电子设备控制显示屏以第一刷新率显示第一画面,包括:电子设备控制显示屏以第三刷新率显示第三画面;电子设备确定第三画面在预设时长内未发生变化,控制显示屏以第一刷新率显示所述第一画面。
26.在该实现方式中,当电子设备确定第三画面在预设时长内未发生变化时,电子设备控制显示屏以第一刷新率显示第一画面,由于第一刷新率小于第一阈值,即第一刷新率为低刷新率,从而能够降低设备功耗。
27.在第一方面的一种可能的实现方式中,电子设备检测到第一指令,包括:电子设备响应于用户对目标控件的操作,检测到第一指令;目标控件包括音量键或者锁屏键;或者,电子设备接收第一应用的消息后,检测到第一指令。
28.在该实现方式中,电子设备可以响应于用户对目标控件的操作,检测到第一指令;或者电子设备接收第一应用的消息后,检测到第一指令;由于目标控件包括音量键或者锁屏键,即该第一指令是用户未触摸显示屏时电子设备检测到的指令,因此在电子设备根据第一指令检测到显示图层发生变化,并提高显示屏的刷新率,有利于提高用户体验。
29.第二方面,提供一种电子设备,该电子设备具有实现上述第一方面所述的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
30.第三方面,提供一种电子设备,电子设备支持第一刷新率和第二刷新率;该电子设备包括显示屏、存储器和一个或多个处理器;显示屏、存储器和处理器耦合;存储器用于存储计算机程序代码;计算机程序代码包括计算机指令;当处理器执行计算机指令时,使得电子设备执行如下步骤:电子设备控制显示屏以第一刷新率显示第一画面;第一刷新率小于第一阈值;第一画面对应至少一个显示图层;当电子设备检测到第一画面的显示图层更新时,电子设备控制显示屏以第二刷新率显示第二画面;第二画面包括更新后的显示图层,第二刷新率大于第一刷新率。
31.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设备具体执行如下步骤:电子设备检测到第一指令;第一指令用于触发电子设备显示第一图层,第一图层不同于至少一个显示图层;电子设备响应于第一指令,检测到第一画面的显示图层更新。
32.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设
备具体执行如下步骤:电子设备根据第一图层的属性信息创建第一图层,并控制显示屏以第二刷新率显示第二画面;第一图层的属性信息包括第一图层的窗口大小、窗口位置或者窗口名称中的至少一种。
33.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设备具体执行如下步骤:电子设备获取图像变化信息;图像变化信息用于触发电子设备显示第二图层;第二图层隐藏在第三图层之下;第二图层和第三图层为至少一个显示图层中的其中两个显示图层;电子设备根据图像变化信息,检测到第一画面的显示图层更新。
34.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设备具体执行如下步骤:当电子设备确定第二图层需要显示时,电子设备控制显示屏以第二刷新率显示第二画面。
35.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设备具体执行如下步骤:电子设备将第二图层的属性信息与第三图层的属性信息进行对比,确定第二图层需要显示;属性信息包括图层大小、图层位置或者图层透明度中的至少一种。
36.在第三方面的一种可能的实现方式中,电子设备包括图像合成系统;当处理器执行计算机指令时,使得电子设备具体执行如下步骤:图像合成系统根据第一图层的属性信息创建第一图层。
37.在第三方面的一种可能的实现方式中,电子设备包括图像缓存队列;当处理器执行计算机指令时,使得电子设备具体执行如下步骤:图像缓存队列获取图像变化信息;当处理器执行计算机指令时,使得电子设备具体执行如下步骤:图像缓存队列根据图像变化信息,检测到第一画面的显示图层更新。
38.在第三方面的一种可能的实现方式中,电子设备包括图像合成系统;当处理器执行计算机指令时,使得电子设备具体执行如下步骤:图像合成系统将第二图层的属性信息与第三图层的属性信息进行对比,确定第二图层需要显示。
39.在第三方面的一种可能的实现方式中,第一图层用于显示音量调节控件;或者,第一图层用于显示截图;或者,第一图层用于显示弹窗;或者,第一图层用于显示消息未读提示;或者,第一图层用于显示应用红包。
40.在第三方面的一种可能的实现方式中,第一画面和所述第二画面包括目标窗口;目标窗口通过轮播的方式循环显示第三图层和所述第二图层。
41.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设备具体执行如下步骤:电子设备控制显示屏以第三刷新率显示第三画面;电子设备确定第三画面在预设时长内未发生变化,控制显示屏以第一刷新率显示所述第一画面。
42.在第三方面的一种可能的实现方式中,当处理器执行计算机指令时,使得电子设备具体执行如下步骤:电子设备响应于用户对目标控件的操作,检测到第一指令;目标控件包括音量键或者锁屏键;或者,电子设备接收第一应用的消息后,检测到第一指令。
43.第四方面,提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当计算机指令在计算机上运行时,使得计算机可以执行上述第一方面中任一项所述的显示方法。
44.第五方面,提供了一种包含指令的计算机程序产品,当该指令在计算机上运行时,使得计算机可以执行上述第一方面中任一项所述的显示方法。
45.其中,第二方面至第五方面中任一种设计方式所带来的技术效果可参见第一方面中不同设计方式所带来的技术效果,此处不再赘述。
附图说明
46.图1a为本技术实施例提供的一种显示屏的刷新率切换的界面示意图一;
47.图1b为本技术实施例提供的一种显示屏的刷新率切换的界面示意图二;
48.图1c为本技术实施例提供的一种显示屏的显示画面对应的显示图层的示意图;
49.图2为本技术实施例提供的一种应用场景的示意图一;
50.图3为本技术实施例提供的一种应用场景的示意图二;
51.图4为本技术实施例提供的一种应用场景的示意图三;
52.图5为本技术实施例提供的一种应用场景的示意图四;
53.图6为本技术实施例提供的一种应用场景的示意图五;
54.图7为本技术实施例提供的一种视频应用首页的界面示意图;
55.图8为本技术实施例提供的一种应用场景的示意图六;
56.图9为本技术实施例提供的一种应用场景的示意图七;
57.图10为本技术实施例提供的一种应用场景的示意图八;
58.图11为本技术实施例提供的一种电子设备的硬件结构示意图;
59.图12为本技术实施例提供的一种电子设备的软件框架示意图;
60.图13为本技术实施例提供的一种电子设备界面显示处理的流程示意图;
61.图14为本技术实施例提供的一种显示方法的流程示意图一;
62.图15为本技术实施例提供的一种显示方法的流程示意图二;
63.图16为本技术实施例提供的一种芯片系统的结构示意图。
具体实施方式
64.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行描述。其中,在本技术的描述中,除非另有说明,“/”表示前后关联的对象是一种“或”的关系,例如,a/b可以表示a或b;本技术中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,a和/或b,可以表示:单独存在a,同时存在a和b,单独存在b这三种情况,其中a,b可以是单数或者复数。并且,在本技术的描述中,除非另有说明,“多个”是指两个或多于两个。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b,或c中的至少一项(个),可以表示:a,b,c,a-b,a-c,b-c,或a-b-c,其中a,b,c可以是单个,也可以是多个。另外,为了便于清楚描述本技术实施例的技术方案,在本技术的实施例中,采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分。本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定,并且“第一”、“第二”等字样也并不限定一定不同。同时,在本技术实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本技术实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念,便于理解。
65.为了便于理解,下面先对本技术实施例涉及的相关术语及概念进行介绍。
66.(1)显示屏的刷新率
67.显示屏的刷新率是指显示屏每秒画面被刷新的次数,其单位是hz。
68.(2)输出帧率
69.输出帧率是应用程序每秒将图像数据输出给显示屏的帧数,其单位为fps(frames per second,每秒传输帧数)。输出帧率指每秒输出的帧数。帧是影像动画中最小单位的单幅影像画面,一帧就是一幅静止的画面,连续的帧就形成了动画。在一些实施例中,当应用程序运行时的业务场景不同时,应用程序每秒将图像数据输出给显示屏的帧数(即应用程序的输出帧率)也会不同。例如,应用程序在运行的业务场景为静态场景(如应用程序显示的界面静止不动的场景),此时应用程序的输出帧率例如可以为30fps;而当应用程序在运行的业务场景为动态场景(如播放视频的场景),此时应用程序的输出帧率例如可以为60fps。
70.(3)显示帧率
71.显示帧率是指应用程序在显示屏上实际显示的帧率,其单位也是fps。
72.其中,显示帧率是由显示屏的刷新率和输出帧率决定的。
73.当输出帧率小于显示屏的刷新率时,显示帧率约等于输出帧率。例如,输出帧率是30fps,显示屏的刷新率是60hz。为了保证画面显示的连续性,显示屏上1秒显示的60个画面中会填充重复帧。这样的重复帧在统计显示帧率时并不被计算在内,因此其实际显示的有效画面仍然是30帧,即显示帧率约为30fps。
74.当输出帧率等于显示屏的刷新率时,显示帧率约等于输出帧率。例如,输出帧率是90fps,显示屏的刷新率是90hz。则刚好应用程序每秒输出90个画面,显示屏每秒刷新显示90个画面,显示帧率约为90fps。
75.当输出帧率大于显示屏的刷新率时,显示帧率约等于显示屏的刷新率。例如,输出帧率是120fps,显示屏的刷新率是90hz。此时应用程序每秒输出120个画面,而显示屏每秒只能刷新90个画面,无法将应用程序每秒输出的120个画面全部显示,最多只能显示90个画面。则电子设备会将应用程序每秒输出的120个画面中的部分画面丢弃或将部分画面合并,并最终每秒显示90个画面,即显示帧率约为90fps。
76.需要说明的是,之所以显示帧率是约等于输出帧率或显示屏的刷新率,而不是等于,是因为在实际应用中,有时候显示画面与屏幕刷新的时机并不能保证完全一致。因此无法让每一个输出的帧画面都能刚好在屏幕刷新时被显示,其也有可能会被丢失,从而使得显示帧率会出现少量的波动。例如,即使输出帧率为90fps,显示屏的刷新率为90hz,最终的实际显示帧率也可能是在80fps~90fps之间持续波动。
77.在电子设备中,大部分应用程序的输出帧率是随系统中显示屏的刷新率的变化而相应变化的。例如,当显示屏的刷新率设定为60hz时,这部分应用程序的输出帧率会调整为60fps;当显示屏的刷新率设定为90hz时,这部分应用程序的输出帧率也会调整为90fps。但是,还有部分应用程序的输出帧率是相对独立的,例如游戏应用程序。这些应用程序都有自己独立的计时器和输出帧率,其不受系统中设定的显示屏的刷新率的控制。例如,这部分应用程序中,其中一个应用程序的输出帧率设定是120fps。如果显示屏的刷新率设定为60hz,这个应用程序的输出帧率并不会随系统中显示屏的刷新率的变化而调整为60fps,而是会
继续保持120fps的输出帧率。如果显示屏的刷新率设定为144hz,这个应用程序的输出帧率也同样继续保持120fps。一般情况下,输出帧率越高,其显示帧率越高。但是,如果显示屏的刷新率不够,即使输出帧率较高,最终的显示帧率最多也只能达到显示屏的刷新率的值。例如,如果一个显示屏的刷新率为60hz,即使应用程序的输出帧率是100fps,最终的显示帧率最多也只能到60fps。
78.需要说明的是,电子设备包括显示屏,显示屏是电子设备的重要组成部分。在一些实施例中,显示屏包括衬底基板以及设置在衬底基板上的显示单元,显示单元包括薄膜晶体管(thin film transistor,tft)。在本技术实施例中,电子设备包括的显示屏为ltpo显示屏,ltpo显示屏指的是显示单元中的tft为ltpo tft。需要说明的是,ltpo为低温多晶硅(low temperature poly-silicon,ltps)和铟镓锌氧化物(indium gallium zinc oxide,igzo)的混合产物。换言之,ltpo显示屏是将显示单元中的部分tft替换成igzo tft。igzo tft低漏电可以使ltpo显示屏能够实现更低的刷新率,以降低电子设备显示时的功耗,同时还可以避免ltps漏电造成的低刷新率显示异常的问题。另外,igzo tft具有更好的均一性,能够减少ltpo显示屏在低亮度显示时出现的脏屏、偏色等问题。
79.ltpo显示屏能够支持自适应刷新率,即ltpo显示屏能够支持多种刷新率(例如从120hz到1hz);ltpo显示屏的刷新率能够随着电子设备运行的应用而动态调整。当电子设备运行不同应用时,电子设备的ltpo显示屏的刷新率不同。例如,当电子设备运行应用1时,电子设备的ltpo显示屏的刷新率为刷新率a(如60hz);当电子设备运行应用2时,电子设备的ltpo显示屏的刷新率为刷新率b(如120hz)。
80.以电子设备运行应用1为例,在一些实施例中,电子设备启动应用1后,电子设备使用应用1对应的初始刷新率(60hz)刷新ltpo显示屏,并显示应用1的界面。若该应用1的界面在一定时间内没有发生变化,则ltpo显示屏的刷新率会降低(如降低至10hz或者1hz),以便于减少电子设备显示时的功耗。但是,当该应用1的界面发生动态变化时,若此时电子设备的ltpo显示屏的刷新率仍为低刷新率(如10hz),则电子设备在显示发生动态变化后的应用1的界面时会出现卡顿的现象。
81.其中,应用1的界面发生动态变化指的是应用1的界面有新增图层,或者应用1的界面的图层发生了变化。其中,图层是由多个像素组成的,一个或多个图层叠加形成整个显示图像。示例性的,可以将每一个图层类似于一个“透明玻璃”;如果该“透明玻璃”上什么都没有,该“透明玻璃”就是一个完全透明的空图层(或称透明图层);如果该“透明玻璃”上有图像时,该“透明玻璃”可以称为非透明图层。
82.示例性的,新增图层的场景例如可以为调节电子设备音量的场景、截图的场景、显示通知消息的场景、显示侧边栏(或者下滑通知栏)的场景等。图层发生变化的场景例如可以为电子设备运行通讯应用时显示通讯应用红包(或者显示消息未读提示)的场景,以及电子设备运行视频应用时,视频应用的主界面的滚动页面发生切换的场景。
83.以电子设备为手机,且应用1为通讯应用为例,示例性的,手机启动通讯应用,并显示如图1a中(1)所示的界面10a。其中,显示屏可以以60hz的刷新率显示界面10a。当该界面10a在一定时间(如30s)内没有发生变化,则手机的显示屏显示如图1a中(2)所示的界面10b。其中,显示屏可以以10hz的刷新率显示界面10b。以界面10b出现新增图层(如弹窗)为例进行示意,如图1a中(3)所示的界面10c。该界面10c中包括弹窗,且显示屏仍然以10hz的
刷新率显示界面10c,从而导致界面10c在显示新增图层的过程中出现卡顿。
84.基于此,本技术实施例提供一种显示方法,应用于电子设备中,该电子设备支持不同刷新率;该方法包括电子设备启动应用1后,电子设备以应用1的初始刷新率(如60hz)显示应用1的界面;当该应用1的界面在一定时间(或称预设时长)内未发生变化时,则电子设备会降低显示屏的刷新率(如降低至10hz);当电子设备确定应用1的界面发生动态变化(如应用1的界面有新增图层;或者应用1的界面发生了图层变化)时,电子设备会提高显示屏的刷新率(如提高至60hz),从而能够解决电子设备在显示变化后的应用1的界面的过程中出现卡顿的问题,即电子设备在显示新增图层,或者显示变化后的图层的过程中不会出现卡顿。
85.仍以电子设备为手机,且应用1为通讯应用为例,示例性的,手机启动通讯应用,并显示如图1b中(1)所示的界面20a。其中,显示屏可以以60hz的刷新率显示界面20a。当该界面20a在一定时间(如30s)内没有发生变化,则手机的显示屏显示如图1b中(2)所示的界面20b。其中,显示屏可以以10hz的刷新率显示界面20b。以界面20b出现新增图层(如弹窗)为例进行示意,如图1b中(3)所示的界面20c。该界面20c中包括弹窗,且显示屏以60hz的刷新率显示界面20c,从而解决电子设备在显示界面20c时出现的卡顿问题,即电子设备在界面20c(或称显示弹窗)的过程中不会出现卡顿。
86.在一些实施例中,当电子设备运行应用1时,电子设备控制显示屏以刷新率一(或称第三刷新率)显示界面一(界面一中显示的画面例如可以为第三画面);当界面一在预设时长内未发生变化时,电子设备控制显示屏以刷新率二(或称第一刷新率)显示界面二(界面二中显示的画面例如可以为第一画面);其中,第二画面对应至少一个显示图层。而后,当电子设备确定界面二发生动态变化(或称第一画面的显示图层更新)时,电子设备控制显示屏以刷新率三(或称第二刷新率)显示界面三(界面三中显示的画面例如可以为第二画面)。
87.其中,界面二发生动态变化指的是界面三显示的画面(即第二画面)相对于界面二显示的画面(即第一画面)包括新增图层(即更新后的显示图层);或者界面三显示的画面相对于界面二显示的画面中的图层发生了变化。另外,在该实施例中,刷新率三(即第二刷新率)大于刷新率二(即第一刷新率)。例如刷新率三为60hz,刷新率二为10hz。
88.需要说明的是,在该实施例中,对于刷新率一和刷新率三的大小关系不作限定。其中,刷新率一可以大于刷新率三;或者刷新率一可以小于刷新率三;或者刷新率一等于刷新率三。
89.结合上述实施例可知,当显示屏的刷新率不同时,应用在显示屏上实际显示的帧率也不同(即应用1的显示帧率不同)。并且当应用1运行不同业务场景时,应用1的输出帧率也不同。例如,以刷新率一为60hz为例,当电子设备控制显示屏以刷新率一显示界面一时,此时应用1的输出帧率为60fps,应用1的显示帧率为60fps。又例如,以刷新率二为10hz为例,当电子设备控制显示屏以刷新率二显示界面二时,此时应用1的输出帧率为10fps,应用1的显示帧率为10fps。又例如,以刷新率三为60hz为例,当电子设备控制显示屏以刷新率三显示界面三值,此时应用1的输出帧率为60fps,应用1的显示帧率为60fps。
90.下面以电子设备为手机,应用1为通讯应用为例,结合说明书附图对界面二发生动态变化进行举例说明。
91.示例性的,界面二可以为用户通过通讯应用与其他用户进行聊天时的界面。例如,
如图1c所示,界面二包括多个聊天隐藏窗口;如与用户1的聊天隐藏窗口、与用户2的聊天隐藏窗口、与用户3的聊天隐藏窗口、与用户4的聊天隐藏窗口、与用户5的聊天隐藏窗口、与用户6的聊天隐藏窗口以及与用户n的聊天隐藏窗口等。其中,界面二显示的画面是由多个图层叠加合成的。示例性的,如图1c所示,界面二显示的画面是由图层101、图层102以及图层103叠加合成的(其中,图层101、图层102以及图层103例如可以为显示图层)。需要说明的是,界面二显示的画面还可以包括其他透明图层或者非透明图层进行叠加合成,本技术实施例对此不作限定。在一些实施例中,当手机接收到目标指令(或称第一指令)时,手机确定界面二发生动态变化,并控制显示屏以刷新率三显示界面三。其中,该目标指令可以为用户输入的触控操作,或者为其它应用(如第一应用)的推送消息(或称消息)等,本技术实施例对目标指令不作限定。其中,该触控操作可以为用户对手机按键的操作,或者为用户对手机屏幕(或称显示屏)的操作。该触控操作具有可以为按键操作、触摸操作、语音操作或者手势操作中的一种。其中,触摸操作例如可以为点击操作或者滑动操作等。需要说明的是,上述实施例仅仅是对触控操作的一些举例说明,并不构成对本技术的限定,其他合适的触控操作也应属于本技术实施例的保护范围。
92.需要说明的是,第一应用的消息可以为手机(即本设备)内安装的应用发送的消息;或者,第一应用的消息也可以为其他手机内安装的应用发送的消息。例如第一应用通过服务器向本设备发送消息。
93.示例性的,手机显示如图2中(1)所示的界面201,该界面201是由图层101、图层102以及图层103叠加合成的。在此基础上,手机响应于用户对音量键202的操作,手机显示如图2中(2)所示的界面203。其中,界面203是由图层101、图层102、图层103以及图层204叠加合成的。由图2可以看出,界面203相对于界面201增加了图层204。例如,图层204显示的画面例如可以为音量加减的画面。
94.又示例性的,手机显示如图3中(1)所示的界面201,该界面201是由图层101、图层102以及图层103叠加合成的。在此基础上,手机响应于用户对锁屏键205的操作(例如用户连续按下锁屏键205;或者用户按下锁屏键205和音量键的组合键),手机显示如图3中(2)所示的界面206。其中,界面206是由图层101、图层102、图层103以及图层207叠加合成的。由图3可以看出,界面206相对于界面201增加了图层207。例如,图层207显示的画面例如可以为手机对界面206的截图。
95.又示例性的,手机显示如图4中(1)所示的界面201,该界面201是由图层101、图层102以及图层103叠加合成的。在此基础上,手机接收到其他用户的消息(或者其他应用的推送消息),手机显示如图4中(2)所示的界面208。其中,界面208是由图层101、图层102、图层103以及图层209叠加合成的。由图4可以看出,界面208相对于界面201增加了图层209。例如,图层209显示的画面例如可以为弹窗(如其他用户发送的消息);或者为通知栏(如其他应用的推送消息)。
96.又示例性的,手机显示如图5中(1)所示的界面201,该界面201是由图层101、图层102以及图层103叠加合成的。在此基础上,手机接收到其他用户的消息之后,手机显示如图5中(2)所示的界面210。其中,界面210是由图层101、图层102以及图层103叠加合成的,且界面210相对于界面201图层103发生了图层变化。例如,界面210中的图层103中包括消息未读提示211。
97.又示例性的,手机显示如图6中(1)所示的界面212,该界面212例如可以为用户通过通讯应用与其他用户进行聊天的界面。其中,该界面212例如可以由图层104、图层105以及图层106叠加合成。在此基础上,手机接收到其他用户的消息之后,手机显示如图6中(2)所示的界面213。其中,界面213是由图层104、图层105以及图层106叠加合成,且界面213相对于界面212发生了图层变化。例如,界面213中的图层106中包括其他用户发送的消息214(如应用红包)。
98.需要说明的是,本技术实施例中所述的第一画面例如可以为图2-图6以及图9-图10中界面201、界面212显示的画面;第二画面例如可以为图2-图6以及图9-图10中界面204、界面206、界面208、界面210、界面213、界面218或者界面220显示的画面。另外,至少一个显示图层例如可以为图2-图5以及图9-图10中显示的图层101、图层102以及图层103;或者为图6中显示的图层104、图层105以及图层106;或者,至少一个显示图层例如可以为图8中显示的图层107、图层108以及图层109。
99.在一些实施例中,第一图层用于显示音量调节控件;或者,第一图层用于显示截图;或者,第一图层用于显示弹窗;或者第一图层用于显示消息未读提示;或者,第一图层用于显示应用红包。示例性的,结合图2-图6以及图9-图10所示,第一图层例如可以为图2-图6以及图9-图10中的图层204、图层207、图层209、图层211、图层214、图层219或者图层221。
100.以电子设备为手机为例,应用1为视频应用为例,示例性的,当手机启动视频应用后,手机显示如图7所示的界面215。其中,该界面215可以为视频应用的主界面(或称首页);界面215包括多个视频窗口,如视频窗口a、视频窗口b、视频窗口c以及视频窗口d。例如,手机可以响应于用户对多个视频窗口中的任意一个视频窗口的点击操作,手机显示与点击操作对应的视频窗口的视频内容。在一些实施例中,仍如图7所示,视频窗口a(或称目标窗口)通常以广告条轮播的形式显示在界面215中,即视频窗口a显示的画面会周期性的发生变化。
101.在该实施例中,第一画面例如可以为图8中(1)所示的界面216显示的画面,第二画面例如可以为图8中(2)所示的界面217显示的画面。由图8可以看出,第一画面和第二画面包括目标窗口(如视频窗口a),目标窗口通过轮播的方式循环显示第三图层(如图8中(1)所示的图层2)和第二图层(如图8中(2)所示的图层1)。
102.在一些实施例中,视频窗口a显示的画面由多个图层叠加合成。例如,如图7所示,视频窗口a显示的画面由图层1和图层2叠加合成。其中,当图层2覆盖在图层1上面时,视频窗口a显示的画面为图层2中的画面。相应地,当图层1覆盖在图层2上面时,视频窗口a显示的画面为图层1中的画面。以图层2覆盖在图层1上面为例,之所以视频窗口a显示的画面为图层2中的画面,是由于当图层2覆盖在图层1上面时,图层1隐藏在图层2之下,所以图层1并未显示在视频窗口a中。
103.结合图7所示的界面215,如图8所示,示例性的,手机显示如图8中(1)所示的界面216,该界面216是由图层107、图层108以及图层109叠加合成的;并且图层109显示的画面为图层2的画面。而后,手机检测到图层109显示的图层2的画面的时长达到一定时间,手机显示如图8中(2)所示的界面217。该界面217是由图层107、图层108以及图层109叠加合成的;并且图层109显示的画面为图层1的画面。参考图8可以看出,界面217相对于界面216发生了图层变化。例如,界面217相对于界面216,图层109发生了变化。
104.仍以电子设备为手机,应用1为通讯应用为例,示例性的,手机显示如图9中(1)所示的界面201,该界面201是由图层101、图层102以及图层103叠加合成的。在此基础上,手机响应于用户对显示屏的触摸操作(如向左的滑动操作),手机显示如图9中(2)所示的界面218,该界面218是由图层101、图层102、图层103以及图层219叠加合成的。参考图9可以看出,界面218相对于界面201增加了图层219。例如,界面218中的图层219可以为侧边栏。
105.又示例性的,手机显示如图10中(1)所示的界面201,该界面201是由图层101、图层102以及图层103叠加合成的。在此基础上,手机响应于用户对显示屏的触摸操作(如向下的滑动操作),手机显示如图10中(2)所示的界面220,该界面220是由图层101、图层102、图层103以及图层221叠加合成的。参考图10可看出,界面220相对于界面201增加了图层221。例如,界面220中的图层221可以为下滑通知栏。
106.需要说明的是,上述仅仅以应用1为通讯应用或者视频应用为例进行举例说明,当然应用1还可以为其他应用,如直播应用、短视频应用以及浏览器应用等,本技术实施例对应用1不作具体限定。
107.下面将结合说明书附图为本技术实施例提供的显示方法进行详细描述。
108.示例性的,本技术实施例中的电子设备可以是包括ltpo显示屏的电子设备。例如,该电子设备可以为手机、运动相机(gopro)、数码相机、平板电脑、桌面型、膝上型、手持计算机、笔记本电脑、车载设备、超级移动个人计算机(ultra-mobile personal computer,umpc)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,pda)、增强现实(augmented reality,ar)\虚拟现实(virtual reality,vr)设备等,本技术实施例对该电子设备的具体形态不作特殊限制。
109.如图11所示,为电子设备100的一种结构示意图。其中,电子设备100可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,usb)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,传感器模块180,定位模块181,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,sim)卡接口195等。
110.可以理解的是,本实施例示意的结构并不构成对电子设备100的具体限定。在另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
111.处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,ap),调制解调处理器,图形处理器(graphics processing unit,gpu),图像信号处理器(image signal processor,isp),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,dsp),基带处理器,和/或神经网络处理器(neural-network processing unit,npu)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
112.控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
113.处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器
110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
114.在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,i2c)接口,集成电路内置音频(inter-integrated circuit sound,i2s)接口,脉冲编码调制(pulse code modulation,pcm)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,uart)接口,移动产业处理器接口(mobile industry processor interface,mipi),通用输入输出(general-purpose input/output,gpio)接口,用户标识模块(subscriber identity module,sim)接口,和/或通用串行总线(universal serial bus,usb)接口等。
115.可以理解的是,本实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。在另一些实施例中,电子设备也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
116.充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过usb接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
117.电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
118.电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
119.电子设备100通过gpu,显示屏194,以及应用处理器等实现显示功能。gpu为图像处理的微处理器,连接显示屏194和应用处理器。gpu用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个gpu,其执行程序指令以生成或改变显示信息。
120.显示屏194用于显示图像,视频等。该显示屏194包括显示面板(或称显示基板)。显示面板可以采用有机发光二极管(organic light-emitting diode,oled)。在本技术实施例中,显示屏为ltpo显示屏;ltpo显示屏包括的显示面板中的显示单元(如tft)为ltpo tft。其中,对于ltpo的举例说明可以参考上述实施例,此处不再一一赘述。
121.电子设备100可以通过isp,摄像头193,视频编解码器,gpu,显示屏194以及应用处理器等实现拍摄功能。
122.isp用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给isp处理,转化为肉眼可见的图像。isp还可以对图像的噪点,亮度,肤色进行算法优化。isp还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,isp可以设置在摄像头193中。
123.摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb,yuv等格式的图像信号。在一些实施例中,电子设备可以包括1个或n个摄像头193,n为大于1的正整数。
124.数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
125.视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,mpeg)1,mpeg2,mpeg3,mpeg4等。
126.npu为神经网络(neural-network,nn)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过npu可以实现电子设备的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
127.电子设备100可以通过音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,以及应用处理器等实现音频功能。例如音乐播放,录音等。
128.音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。扬声器170a,也称“喇叭”,用于将音频电信号转换为声音信号。受话器170b,也称“听筒”,用于将音频电信号转换成声音信号。麦克风170c,也称“话筒”,“传声器”,用于将声音信号转换为电信号。
129.耳机接口170d用于连接有线耳机。耳机接口170d可以是usb接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,omtp)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the usa,ctia)标准接口。
130.外部存储器接口120可以用于连接外部存储卡,例如micro sd卡,实现扩展电子设备的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音频,视频等文件保存在外部存储卡中。
131.内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备的各种功能应用以及数据处理。例如,在本技术实施例中,处理器110可以通过执行存储在内部存储器121中的指令,内部存储器121可以包括存储程序区和存储数据区。
132.其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,ufs)等。
133.按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。sim卡接口195用于连接sim卡。sim卡可以通过插入sim卡接口195,或从sim卡接口195拔出,实现和电子设备的接触和分离。电子设备可以支持1个或n个sim卡接口,n为大于1的正整数。sim卡接口195可以支持nano sim卡,micro sim卡,sim卡等。
134.在一些实施例中,电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构或云架构。本技术实施例以分层架构android系统为例,示例性的说明电子设备100的软件结构。
135.图12为本技术实施例提供的电子设备的软件结构图。
136.可以理解的是,分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,android系统可以包括应用程序(application,app)层、应用程序框架层(framework,fwk)、系统库、硬件抽象层(hardware abstraction layer,hal)以及内核层(kernel)。为了便于理解,在本技术实施例中,图12示出的软件结构图还包括一些图11中的电子设备的硬件结构。如ltpo显示屏。
137.上述应用程序层可以包括一系列应用程序包。示例性的,如图12所示,应用程序包可以包括应用1和应用2等。
138.上述应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface,api)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层通过api接口将编程服务提供给应用程序层调用。示例性的,如图7所示,应用程序框架层包括活动管理服务(activity manger service,ams)和窗口管理服务(window manger service,wms)。其中,活动管理服务用于管理各个应用程序的生命周期以及导航回退功能。负责android的主线程创建,各个应用程序的生命周期的维护。窗口管理服务用于管理窗口,具体包括窗口的添加、删除、大小、方向位置、动画以及焦点等。
139.上述系统库可以包括多个功能模块。例如:帧率决策模块、图像合成系统(如surface flinger)、视图系统以及图像渲染系统等。其中,帧率决策模块用于调整ltpo显示屏的刷新率。图像合成系统用于控制图像合成,以及产生垂直同步信号(vetical synchronization,vsync)。在一些实施例中,图像合成系统还包括图像缓存队列。示例性的,应用通过视图系统对图像进行绘制,并通过图像渲染系统对绘制后的图像进行渲染。而后应用将绘制渲染后的图像发送至图像合成系统中的图像缓存队列;图像缓存队列用于缓存应用绘制渲染后的图像。每当vsync信号到来时,图像合成系统从图像缓存队列中按顺序获取待合成的一帧图像,然后通过图像合成系统进行图像合成。
140.上述硬件抽象层是位于内核层与硬件之间的接口层,可以用于将硬件抽象化。示例性的,如图7所述,硬件抽象层包括硬件合成器(如hwcomposer,hwc)。硬件合成器用于将图像合成系统合成的图像合成到硬件中(如ltpo显示屏)。
141.上述内核层为电子设备的各种硬件提供了底层驱动。示例性的,如图12所示,内核层包括显示驱动。
142.下面结合电子设备显示的应用程序的界面中新增图层或者发生图层变化的场景,示例性的说明电子设备软件以及硬件的工作流程。
143.在一些实施例中,当电子设备运行应用1时,电子设备控制显示屏以刷新率一(如60hz)显示界面一;当界面一在预设时长内未发生变化时,电子设备控制显示屏以刷新率二(如10hz)显示界面二;而后,当电子设备确定界面二发生动态变化时,电子设备控制显示屏以刷新率三(如60hz)显示界面三。
144.以界面二发生动态变化为界面二有新增图层为例,示例性的,应用1通知ams创建新增图层的activity;ams启动新增图层的activity。而后,ams通知wms创建目标窗口;wms管理目标窗口的窗口大小,位置以及窗口名称等。wms通知图像合成系统创建新增图层。示例性的,wms调用创建图层接口(如create layer()接口)通知图像合成系统创建新增图层;图像合成系统在create layer()接口中接收新增图层的图层创建信息(例如新增图层的大小、位置以及图层名称等)。而后,图像合成系统通知帧率决策模块需要提高ltpo显示屏的刷新率(如将ltpo显示屏的刷新率由10hz提高至60hz)。帧率决策模块将ltpo显示屏的刷新率调整为刷新率三(如60hz),并向图像合成系统发送刷新率三。图像合成系统可以根据刷新率三进行图层合成,最后显示合成后的新增图层。
145.示例性的,图像合成系统向应用1发送图层创建信息,以触发应用1绘制渲染新增图层。应用1通过视图系统绘制图像数据,并通过图像渲染系统渲染图像数据,然后将绘制渲染后的图像数据发送至图像合成系统。图像合成系统根据绘制渲染后的图像数据进行图层合成,以得到新增图层。而后,图像合成系统将合成后的新增图层发送至硬件合成器(hwc),硬件合成器将合成后的新增图层发送至显示驱动;显示驱动会驱动ltpo显示屏显示新增图层。
146.以界面二发生动态变化为界面二的图层发生变化为例,示例性的,当电子设备确定界面二的显示图像中的图层发生变化(如界面二中部分窗口发生图层变化)时,应用1向图像缓存队列写入图像变化信息。该图像变化信息包括图层位移、图层所在窗口的尺寸、图层颜色或者图层动效(如变大或变小)中的一种或多种。而后,图像缓存队列通知图像合成系统当前界面发生了图层变化,图像合成系统生成处理事务。该处理事务用于判断变化后的图层是否需要显示。图像合成系统通过处理事务,识别到变化后的图层是需要显示的(如显示变化后的图层)。而后,图像合成系统通知帧率决策模块需要提高ltpo显示屏的刷新率(如将ltpo显示屏的刷新率由10hz提高至60hz)。帧率决策模块将ltpo显示屏的刷新率调整为刷新率三(如60hz),并向图像合成系统发送刷新率三。图像合成系统可以根据刷新率三进行图层合成,最后显示变化后的图层。在一些实施例中,图像合成系统通过图层监听接口(surface flinger::set transaction state())确定当前界面的部分窗口发生了图层变化。而后,图像合成系统通知帧率决策模块需要提高ltpo显示屏的刷新率(如将ltpo显示屏的刷新率由10hz提高至60hz)。帧率决策模块将ltpo显示屏的刷新率调整为刷新率三(如60hz),并向图像合成系统发送刷新率三。图像合成系统可以根据刷新率三进行图层合成,并显示。
147.示例性的,图像合成系统向应用1发送变化后的图层信息(如图层位移、图层所在窗口的尺寸、图层颜色以及图层动效等),以触发应用绘制渲染变化后的图层。应用1通过视图系统绘制图像数据,并通过图像渲染系统渲染图像数据,然后将绘制渲染后的图像数据发送至图像合成系统。图像合成系统根据绘制渲染后的图像数据进行图层合成,以得到变化后的图层。而后,图像合成系统将合成后的图层发送至硬件合成器(hwc),硬件合成器将
合成后的图层发送至显示驱动;显示驱动会驱动ltpo显示屏显示变化后的图层。
148.结合上述实施例中,在电子设备显示新增图层或者变化后的图层的情况下,电子设备均需要通过图像合成系统合成新增图层或者变化后的图层(如第二图层),并显示。
149.下面对图像合成系统合成第二图层的具体处理流程进行详细描述。为了便于理解,以下示例性的给出部分与图层合成相关的技术术语的说明,以供参考。
150.1、帧:是指界面显示中最小单位的单幅画面。一帧可以理解为一幅静止的画面,快速连续地显示多个相连的帧可以形成物体运动的假象。帧率是指在1秒钟时间里刷新图片的帧数,也可以理解为电子设备中图像处理器每秒钟刷新画面的次数。高的帧率可以得到更流畅和更逼真的动画。每秒钟帧数越多,所显示的动作就会越流畅。
151.需要说明的是,界面显示帧之前通常需要经过绘制、渲染、合成等过程。
152.2、帧绘制:是指界面显示的图片绘制。显示界面可以由一个或多个视图组成,各个视图可以由视图系统的可视控件绘制,各个视图由子视图组成,一个子视图对应视图中的一个小部件,例如,其中的一个子视图对应图片视图中的一个符号。
153.3、帧渲染:是将绘制后的视图进行着色操作或增加3d效果等。例如:3d效果可以是灯光效果、阴影效果和纹理效果等。
154.4、帧合成:是将多个上述一个或多个渲染后的视图合成为显示界面的过程。
155.需要说明的是,为了提高显示的流畅性,减少出现显示卡顿等现象,电子设备一般基于vsync信号进行显示,以对图像的绘制、渲染、合成和屏幕刷新显示等流程进行同步。本领域技术人员应当理解的是,vsync信号为周期性信号,vsync信号周期可以根据显示屏的刷新率进行设置。例如,当显示屏的刷新率为60hz时,vsync信号周期可以为16.6ms,即电子设备每隔16.6ms生成一个控制信号使vsync信号周期触发。
156.在一些实施例中,如图13所示,为本技术实施例提供的一种图层合成处理流程的示意图。按照时间顺序,电子设备显示的内容依次对应于帧1、帧2和帧3。
157.示例性的,以帧1的显示为例,电子设备的应用通过视图系统对帧1进行绘制,并通过图像渲染系统对帧1进行渲染。帧1绘制渲染完成后,电子设备的应用将绘制渲染好的帧1发送至图像合成系统。图像合成系统对绘制渲染好的帧1进行合成。帧1完成合成后,电子设备可以通过调用内核层显示驱动,在屏幕(如ltpo显示屏)显示帧1对应的内容。需要说明的是,帧2和帧3类似于帧1的过程也进行合成和显示,此处不再赘述。图13中每帧从绘制到显示,滞后2个vsync信号周期,即电子设备的显示具有滞后性。
158.在本技术实施例中,在电子设备启动第一应用之后,电子设备使用预设刷新率(如60hz)刷新ltpo显示屏,并显示第一界面;当第一界面在预设时长内未发生变化时,电子设备使用第一刷新率(如10hz)刷新ltpo显示屏。可以看出,在用户离手不操作第一应用的情况下,第一界面会长时间处于静止状态,此时,电子设备会降低ltpo显示屏的刷新率,以便于降低设备功耗。在此情况下,若第一界面有新增图层需要显示,或者第一界面有图层变化,并且发生变化的图层需要显示,则电子设备在显示新增图层或者显示变化后的图层的过程中,电子设备使用第二刷新率(如60hz)刷新ltpo显示屏。
159.为了便于理解,下面结合图12对本技术实施例中,在显示新增图层或者显示变化后的图层的过程中,使用刷新率三刷新ltpo显示屏的显示方法中涉及的各个模块之间交互的过程进行说明。
160.示例性的,图14和图15为本技术实施例提供的显示方法中各个模块之间交互的过程示意图。如图14和图15所示,系统可以包括:应用1、活动管理服务(ams)、窗口管理服务(wms)、图像合成系统(sf)、图像缓存队列、帧率决策模块、硬件合成器(hwc)、显示驱动以及ltpo显示屏。
161.在本技术实施例中,当电子设备运行应用1时,电子设备使用刷新率一(如60hz)刷新ltpo显示屏,并显示界面一;当界面一在预设时长内未发生变化时,电子设备使用刷新率二(如10hz)刷新ltpo显示屏,并显示界面二。可以看出,在用户离手不操作应用1的情况下,界面一会长时间处于静止状态,此时,电子设备会降低ltpo显示屏的刷新率,以便于降低设备功耗。在此情况下,若界面二发生动态变化,则电子设备使用刷新率三(如60hz)刷新ltpo显示屏,并显示界面三。其中,界面二发生动态变化指的是界面二有新增图层(或称第一图层);或者界面二的图层发生了变化(如由第三图层变化为第二图层)。
162.在一些实施例中,以界面二有新增图层为例,示例性的,结合图12和图14所示,该显示方法可以包括:步骤a1-步骤a14。
163.步骤a1、应用1接收目标指令。
164.其中,该目标指令(或称第一指令)例如可以为用户输入的触控操作,或者为其它应用的推送消息等。本技术实施例对,目标指令不作限定。另外,对于触控操作的举例说明可以参考上述实施例,此处不再一一赘述。
165.示例性的,该目标指令用于触发电子设备显示新增图层。其中,新增图层的例如可以为调节电子设备音量的场景、截图的场景、显示通知消息的场景、显示侧边栏(或者下滑通知栏)的场景等。
166.步骤a2、应用1向ams发送第一消息。
167.其中,该第一消息用于通知ams创建新增图层的activity。该第一消息中携带有新增图层的属性信息。示例性的,属性信息包括activity名称、窗口大小、窗口位置或者窗口名称中的一种或多种。
168.步骤a3、ams启动新增图层的activity。
169.步骤a4、ams向wms发送第二消息。
170.其中,第二消息用于通知wms管理新增图层的窗口。该第二消息中携带有新增图层的属性信息。
171.示例性的,wms管理新增图层的窗口大小、窗口位置以及窗口名称等。
172.步骤a5、wms通知图像合成系统创建新增图层。
173.示例性的,wms调用创建图层接口(如create layer()接口)通知图像合成系统创建新增图层。图像合成系统在create layer()接口中接收图层创建信息。其中,图层创建信息例如可以为新增图层的大小,位置以及图层名称等。
174.步骤a6、图像合成系统确定当前刷新率(如第一刷新率)低于阈值(如第一阈值)。
175.示例性的,该阈值例如可以为10hz。
176.在一些实施例中,当图像合成系统确定当前刷新率高于阈值时,图像合成系统通知帧率决策模块调整刷新率。其中,该实施例中的阈值例如可以为60hz。
177.步骤a7、图像合成系统通知帧率决策模块调整刷新率。
178.步骤a8、帧率决策模块确定当前刷新率低于阈值,帧率决策模块将当前刷新率从
transaction state())向图像缓存队列注册监听,当有图层变化时,图像缓存队列调用该图层监听接口通知图像合成系统当前界面的部分窗口发生了图层变化。
197.步骤s4、图像合成系统确定变化后的图层是否需要显示。
198.示例性的,图像合成系统生成处理事务;该处理事务用于判断变化后的图层是否需要显示。例如,图像合成系统可以在处理事务中对比变化前的图层(如第三图层)和变化后的图层(如第二图层)的属性信息(包括图层大小、图层位置或者图层透明度中的至少一种)是否发生变化,从而确定变化后的图层是否需要显示。
199.步骤s5、当图像合成系统确定变化后的图层需要显示时,图像合成系统确定当前刷新率低于阈值。
200.示例性的,该阈值例如可以为10hz。
201.步骤s6、图像合成系统通知帧率决策模块调整刷新率。
202.在一些实施例中,当图像合成系统确定当前刷新率高于阈值时,图像合成系统通知帧率决策模块调整刷新率。其中,该实施例中的阈值例如可以为60hz。
203.步骤s7、帧率决策模块确定当前刷新率低于阈值,帧率决策模块将当前刷新率从刷新率二调整为刷新率三。
204.示例性的,该阈值例如可以为10hz。刷新率二例如可以为10hz,刷新率三例如可以为60hz。
205.在图像合成系统确定当前刷新率高于阈值(如60hz)的情况下,帧率决策模块确定当前刷新率高于阈值(如60hz),帧率决策模块将当前刷新率从高刷新率(如60hz)调整为低刷新率(如10hz)。
206.步骤s8、帧率决策模块将刷新率三发送至图像合成系统。
207.步骤s9、帧率决策模块将刷新率三发送至显示驱动。
208.步骤s10、图像合成系统根据刷新率三进行图层合成。
209.示例性的,图像合成系统根据刷新率三向应用1发送vsync信号;应用1按照刷新率三的节奏进行图层绘制渲染,然后应用1将绘制渲染后的图像数据发送该图像缓存队列。图像合成系统按照刷新率三的节奏对图像缓存队列中绘制渲染后的图像数据进行图层合成,得到合成的图层(如变化后的图层)。例如,当刷新率三为60hz时,应用1按照刷新率三的节奏进行图层绘制渲染,即应用1的输出帧率为60fps。
210.步骤s11、图像合成系统将合成后的图层发送至硬件合成器。
211.步骤s12、硬件合成器将图层发送至显示驱动。
212.步骤s13、显示驱动驱动ltpo显示屏以刷新率三显示图层。
213.示例性的,显示驱动驱动ltpo显示屏显示界面三;其中,界面三包括合成后的图层(如发生变化的图层)。例如,显示驱动驱动ltpo显示屏显示如图5、图6以及图8所示的界面。其中,图5、图6以及图8所示的界面中包括发生变化的图层(如图层211、图层214以及图层109)。
214.在该实施例中,在电子设备使用较低刷新率(如上述实施例中的刷新率二,即10hz)刷新ltpo显示屏的情况下,若电子设备接收到图像变化信息,则电子设备使用刷新率三(如60hz)刷新ltpo显示屏,并显示界面三;由于图像变化信息用于指示电子设备当前显示的界面中发生了图层变化,并且由于刷新率三大于刷新率二,因此在电子设备显示发生
变化的图层的过程中,电子设备提高了显示屏的刷新率,从而能够解决电子设备在显示新增图层的过程中不会出现卡顿的问题,提高了用户体验。
215.本技术实施例提供了一种电子设备,该电子设备可以包括:显示屏(如触摸屏)、存储器和一个或多个处理器。该显示屏、存储器和处理器耦合。该存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令。当处理器执行计算机指令时,电子设备可执行上述方法实施例中手机执行的各个功能或者步骤。该电子设备的结构可以参考图11所示的电子设备100的结构。
216.本技术实施例还提供一种芯片系统,如图16所示,该芯片系统1800包括至少一个处理器1801和至少一个接口电路1802。其中,处理器1801可以是上述实施例中图11所示的处理器110。接口电路1802例如可以为处理器110和外部存储器120之间的接口电路;或者为处理器110和内部存储器121之间的接口电路。
217.上述处理器1801和接口电路1802可通过线路互联。例如,接口电路1802可用于从其它装置(例如电子设备的存储器)接收信号。又例如,接口电路1802可用于向其它装置(例如处理器1801)发送信号。示例性的,接口电路1802可读取存储器中存储的指令,并将该指令发送给处理器1801。当所述指令被处理器1801执行时,可使得电子设备执行上述实施例中手机180执行的各个步骤。当然,该芯片系统还可以包含其他分立器件,本技术实施例对此不作具体限定。
218.本技术实施例还提供一种计算机可读存储介质,该计算机可读存储介质包括计算机指令,当所述计算机指令在电子设备上运行时,使得该电子设备执行上述方法实施例中手机执行的各个功能或者步骤。
219.本技术实施例还提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行上述方法实施例中手机执行的各个功能或者步骤。
220.通过以上实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
221.在本技术所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
222.所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
223.另外,在本技术各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
224.所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。
225.以上内容,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何在本技术揭露的技术范围内的变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以所述权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1