图像数据传输方法、装置、终端及介质与流程

1.本技术实施例涉及显示技术领域，特别涉及一种图像数据传输方法、装置、终端及介质。


背景技术：

2.随着显示屏技术的不断发展，越来越多能够支持高刷新频率显示的显示屏应运而生，在运行高帧率应用程序或在滑动操作过程中，通过将显示屏设置为高刷新频率模式能够提高画面的流畅度。
3.对于采用应用处理器(application processor，ap)
‑
显示驱动芯片(display driver integrated circuit，ddic)
‑
显示面板(panel)驱动架构的显示屏，图像显示过程中，ddic根据ap的输出帧率(即输出图像数据的速率)自适应调整刷新频率，实现自适应变频。
4.然而，由于ap的输出帧率会在一定范围内波动，因此会导致ddic的刷新频率波动，当刷新频率发生跳变时，比如刷新频率由45hz跳变为72hz时，会出现画面闪烁和抖动的问题，影响图像显示质量。


技术实现要素：

5.本技术实施例提供了一种图像数据传输方法、装置、终端及介质。所述技术方案如下：
6.一方面，本技术实施例提供了一种图像数据传输方法，用于ap，所述方法包括：
7.向ddic传输第m帧图像数据，m为正整数；
8.确定显示第m
‑
n至第m
‑
1帧图像时所述ddic的历史刷新频率，n为小于m且大于等于2的整数；
9.响应于所述历史刷新频率满足送显延迟条件，对第m+1帧图像数据进行送显延迟操作，所述送显延迟操作用于延迟向所述ddic传输所述第m+1帧图像数据；
10.响应于完成所述送显延迟操作，向所述ddic传输所述第m+1帧图像数据。
11.另一方面，本技术实施例提供了一种图像数据传输装置，所述装置包括：
12.传输模块，用于向ddic传输第m帧图像数据，m为正整数；
13.第一确定模块，用于确定显示第m
‑
n至第m
‑
1帧图像时所述ddic的历史刷新频率，n为小于m且大于等于2的整数；
14.延迟模块，用于响应于所述历史刷新频率满足送显延迟条件，对第m+1帧图像数据进行送显延迟操作，所述送显延迟操作用于延迟向所述ddic传输所述第m+1帧图像数据；
15.所述传输模块，还用于响应于完成所述送显延迟操作，向所述ddic传输所述第m+1帧图像数据。
16.另一方面，本技术实施例提供了一种终端，所述终端包括ap、显示屏和ddic，所述ap与所述ddic之间通过移动产业处理器接口(mobile industry processor interface，
mipi)相连，所述ap用于执行存储器中的至少一条指令以实现如上述图像数据传输方法。
17.另一方面，本技术实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如上述图像数据传输方法。
18.另一方面，本技术实施例提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。终端的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该终端执行上述方面提供的图像数据传输方法。
19.本技术实施例中，通过引入送显延迟机制，ap向ddic传输第m帧图像数据后，基于最近n帧图像显示过程中ddic的历史刷新频率，确定是否满足送显延迟条件，并在满足送显延迟条件时，对第m+1帧图像数据进行送显延迟操作后，再向ddic传输第m+1帧图像数据，避免因ap输出帧率波动导致ddic刷新频率跳变，进而导致画面闪烁和抖动的问题，有助于提高图像显示过程中ddic刷新频率的稳定性，达到提升图像显示质量的效果。
附图说明
20.图1是ap
‑
ddci
‑
panel架构下图像显示过程的示意图；
21.图2是本技术实施例提供的图像数据传输方法的原理示意图；
22.图3示出了本技术一个示例性实施例示出的图像数据传输方法的流程图；
23.图4是引入送显延迟和未引入送显延迟机制时刷新频率的对比图；
24.图5是本技术一个示例性实施例示出的历史刷新频率确定过程的流程图；
25.图6是本技术一个示例性实施例示出的历史刷新频率确定过程的实施示意图；
26.图7示出了本技术另一个示例性实施例示出的图像数据传输方法的流程图；
27.图8是图7所示图像数据传输方法实施过程的实施示意图；
28.图9示出了本技术另一个示例性实施例示出的图像数据传输方法的流程图；
29.图10是图9所示图像数据传输方法实施过程的实施示意图；
30.图11示出了本技术一个实施例提供的图像数据传输装置的结构框图；
31.图12示出了本技术一个示例性实施例提供的终端的结构方框图。
具体实施方式
32.为使本技术的目的、技术方案和优点更加清楚，下面将结合附图对本技术实施方式作进一步地详细描述。
33.在本文中提及的“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示：单独存在a，同时存在a和b，单独存在b这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
34.如图1所示，在ap
‑
ddic
‑
panel架构下，ap侧首先通过应用程序(application，app)进行图层绘制渲染，然后通过surfaceflinger(图层合成者)对绘制得到的图层进行图层合成得到图像数据，进而通过mipi将图像数据送显(写入)ddic。ddic将ap送显的图像数据存储在缓存器(buffer)中，并通过扫描(读取)buffer中的图像数据，控制panel进行图像刷新显示(display)。而在实现自适应变频时，ddic会根据ap的输出帧率(即，ap在单位时间内向
ddic输送图像数据的数量，或者，ap向ddic输送图像数据的速度)，自适应地调节刷新频率。比如，当ap的输出帧率降低时，ddic下调刷新频率，而当ap的输出帧率提高时，ddic则上调刷新频率。
35.自适应变频过程中，刷新频率在短时内小范围变化不会对图像显示质量造成影响，而当刷新频率在短时内大范围变化时，则会出现闪烁抖动等问题，影响图像显示质量。
36.比如，在一些场景下，由于ap侧准备图像数据的速度存在波动，使得ap的输出帧率在短时内由60hz变为45hz，再由45hz变为72hz时，ddic的刷新频率随之由60hz变为45hz时并不会造成画面闪烁抖动，而当ddic的刷新频率由45hz变为72hz时，由于刷新频率变化幅度过大，因此会出现画面闪烁抖动。
37.为了解决上述技术问题，本技术实施例中，ap侧引入了送显延迟机制。在该机制下，如图2所示，ap获取最近n帧图像显示过程中ddic的历史刷新频率(即显示最近n帧图像中各帧图像时ddic的刷新频率)，并基于ddic刷新频率稳定算法对该历史刷新频率进行送显延迟条件检测，从而在满足送显延迟条件时，对下一帧图像数据进行送显延迟操作，避免出现刷新频率大幅跳变的问题，达到稳定ddic刷新频率的效果，进而减少因此带来的显示画面闪烁的问题。
38.比如，ap获取最近两帧图像显示过程中ddic的历史刷新频率，当检测到最近两帧图像显示过程，ddic的历史刷新频率分别为60hz(最近第二帧图像的刷新频率)和45hz(最近一帧图像的刷新频率)时，若ap在完成数据准备后直接向ddic传输下一帧图像数据，ddic的刷新频率将会变为72hz；而引入送显延迟机制后，ap检测到ddic的历史刷新频率满足送显延迟条件，从而在经过一定时长延迟后向ddic传输下一帧图像数据，使ddic的刷新频率变为60hz，从而避免ddic的刷新频率直接由45hz大幅跳变到72hz。
39.本技术实施例提供的方法应用于终端，且由终端中的ap执行上述图像数据传输方法。该终端可以包括智能手机、平板电脑、可穿戴式设备(比如智能手表)、便携式个人计算机、智能电视等等，本技术实施例并不对终端的具体类型进行限定。
40.请参考图3，其示出了本技术一个示例性实施例示出的图像数据传输方法的流程图。该方法包括：
41.步骤301，向ddic传输第m帧图像数据，m为正整数。
42.在一种可能的实施方式中，ap与ddic之间通过mipi相连，完成图像数据准备后，ap通过mipi向ddic传输图像数据，由ddic基于图像数据控制显示屏(panel)进行图像显示。
43.步骤302，确定显示第m
‑
n至第m
‑
1帧图像时ddic的历史刷新频率，n为小于m且大于等于2的整数。
44.为了避免ddic的刷新频率发生跳变，在向ddic传输下一帧图像数据(即第m+1帧图像数据)前，ap需要确定最近n帧图像(即第m
‑
n至第m
‑
1帧图像)显示过程中ddic的历史刷新频率，以便后续基于历史刷新频率检测是否满足送显延迟条件。关于确定ddic侧历史刷新频率的具体实施方式，后续实施例将进行详述。
45.在一种可能的实施方式中，图像显示过程中，ap实时监测每帧图像显示过程中ddic的刷新频率，并对离第m帧(当前显示帧)最近的n帧图像各自对应的刷新频率进行存储，即ap存储了最近n帧的历史刷新频率。在传输第m+1帧图像数据时，ap即获取存储的n个历史刷新频率。
46.在一个示意性的例子中，当m＝10，n＝2时，在显示第10帧图像的过程中且在传输第11帧图像数据前，ap确定第8帧图像显示过程中ddic的第一历史刷新频率，以及第9帧图像显示过程中ddic的第二历史刷新频率。
47.步骤303，响应于历史刷新频率满足送显延迟条件，对第m+1帧图像数据进行送显延迟操作，送显延迟操作用于延迟向ddic传输第m+1帧图像数据。
48.在一些实施例中，该送显延迟条件用于过滤ap侧的零散加速请求，避免ddic直接由低刷新频率升至高刷新频率。其中，当ap侧的图像数据准备速度在短时间内突然变化时，ap即产生零散加速请求，且零散加速请求后ap侧准备图像数据的速度下降，无法长时间保持，该零散加速请求通常在ap侧准备图像帧数据出现延迟后出现。
49.在一种可能的实施方式中，ap基于最近n帧图像的历史刷新频率判断最近n帧图像是否存在图像准备延迟的情况，若存在图像准备延迟，则确定满足送显延迟条件，从而对第m+1帧图像数据进行送显延迟操作，避免在第m+1帧图像数据提前准备完成时，因ap立即向ddic传输第m+1帧图像数据导致刷新频率跳变上升(因为前一帧送显延迟会使相邻两帧图像数据之间的下发间隔较短，进而导致刷新频率上升)。
50.本技术实施例中，送显延迟操作的目的是为了降低ddic的刷新频率，从而避免在最近n帧图像存在图像准备延迟的情况下，因ap侧图像准备速度突然提升造成ddic刷新频率跳变上升。
51.可选的，对第m+1帧图像数据进行送显延迟操作的方式可以包括跳过撕裂效应(tearing effect，te)信号(skip te)或阻隔mipi(mipi block)，下述实施例将对上述两种方式进行详述。
52.可选的，当最近n帧的历史刷新频率不满足送显延迟条件时，ap则无需对第m+1帧图像数据进行送显延迟操作，按照常规送显逻辑向ddic传输第m+1帧图像数据。
53.步骤304，响应于完成送显延迟操作，向ddic传输第m+1帧图像数据。
54.在一种可能的实施方式中，完成对第m+1帧图像数据的送显延迟操作后，ap根据ddic输出的te信号向ddic传输第m+1帧图像数据。完成第m+1帧图像数据传输后，在传输第m+2帧图像数据前，ap重新执行上述步骤302至303，本实施例在此不再赘述。
55.可选的，ddic的刷新频率发生变化时，为了避免频率变化对画面显示造成影响，ddic根据帧寄存器(ddic中用于存储刷新频率与显示屏参数间对应关系的寄存器)中刷新频率对应的显示屏参数进行参数调整，其中，调整的显示屏参数可以包括gamma参数和demura参数，本实施例对此不作限定。
56.在一个示意性的例子中，如图4所示，在未引入送显延迟机制的情况下，在显示第5帧和第6帧图像的过程中，ddic的刷新频率由45hz跳变为72hz，在显示第13帧和第14帧图像的过程中，ddic的刷新频率由51hz跳变为72hz。
57.而引入送显延迟机制后，向ddic发送第7帧图像数据前，ap确定第4帧和第5帧图像显示过程中ddic的历史刷新频率分别为60hz和45hz，故确定满足送显延迟条件，从而实行送显延迟操作，延迟向ddic传输第7帧图像数据，使第6帧图像显示过程中ddic的刷新频率降为60hz，即在显示第5帧和第6帧图像的过程中，ddic的刷新频率由45hz上升为60hz，而并未直接跳升至72hz；又如：在引入送显延迟机制后，向ddic发送第15帧图像数据前，ap基于第12帧和第13帧图像显示过程中ddic的历史刷新频率分别为60hz和51hz，故确定满足送显
延迟条件，从而延迟向ddic传输第15帧图像数据，使第14帧图像显示过程中ddic的刷新频率降为60hz，即在显示第13帧和第14帧图像的过程中，ddic的刷新频率由51hz上升为60hz，而并未直接跳升至72hz。
58.综上所述，本技术实施例中，通过引入送显延迟机制，ap向ddic传输第m帧图像数据后，基于最近n帧图像显示过程中ddic的历史刷新频率，确定是否满足送显延迟条件，并在满足送显延迟条件时，对第m+1帧图像数据进行送显延迟操作后，再向ddic传输第m+1帧图像数据，避免因ap的输出帧率波动导致ddic刷新频率大幅跳变，进而导致画面闪烁和抖动的问题，有助于提高图像显示过程中ddic刷新频率的稳定性，达到提升图像显示质量的效果。
59.在一种可能的实施方式中，ddic基于ap传输的图像数据完成图像显示并准备好刷新下一帧图像时，会输出te信号，相应的，ap在完成下一帧图像数据准备且检测到te信号时，向ddic传输下一帧图像数据。本技术实施例中，ddic输出的te信号为multiple
‑
te(多重撕裂效应)信号，即在准备好刷新下一帧图像时，ddic按照预设频率连续输出多个te信号。当ap检测到te信号上升沿时，即向ddic传输图像数据。通过输出multiple
‑
te信号(相当于增加了ap能够检测到te信号上升沿的概率)，使得ap在完成图像数据准备后，可以及时将图像数据传输至ddic，有助于降低图像显示时延。
60.可选的，multiple
‑
te信号的te频率与显示屏的发光(emission，em)频率相同，或者，em频率为te频率的整数倍。比如，当显示屏的em频率为360hz时，multiple
‑
te信号的te频率为360hz，即每隔2.8ms(1000
÷
360)输出一个multiple
‑
te信号，或者，multiple
‑
te信号的te频率180hz，即每隔5.6ms输出一个multiple
‑
te信号。本技术实施例并不对te频率进行限定。相应的，ap侧可以通过检测ddic输出的multiple
‑
te信号的数量，确定ddic的历史刷新频率。在一种可能的实施方式中，如图5所示，确定历史刷新频率的过程可以包括如下步骤。
61.步骤302a，对于第m
‑
n至第m
‑
1帧图像，获取各帧图像显示过程中，ddic输出的multiple
‑
te信号的历史个数。
62.对于最近n帧图像中的各帧图像，ap对各帧图像在显示过程中ddic输出的multiple
‑
te信号的数量进行统计，得到各帧图像对应的历史个数，该历史个数即为ap传输相邻两帧图像数据间检测到的multiple
‑
te信号的数量。
63.一帧图像的显示过程包括ddic进行帧扫描的过程，以及帧扫描完成后ddic等待下一帧图像数据(这个过程中保持当前显示的图像帧)的过程，由于ddic在进行帧扫描的过程中并不会输出multiple
‑
te信号，因此ddic完成相邻两帧图像帧扫描后分别输出的multiple
‑
te信号之间的间隔(即，ddic完成前一图像帧扫描后输出的multiple
‑
te信号与完成后一帧图像帧扫描后输出的multiple
‑
te信号之间的间隔)，明显大于ddic完成同一帧图像帧扫描后输出的两个或多个multiple
‑
te信号之间的间隔。基于上述特性，ap可以基于相邻multiple
‑
te信号之间的时间间隔，并利用计数器对各帧图像显示过程中multiple
‑
te信号的数量进行记录。
64.可选的，本步骤可以包括如下子步骤。
65.一、设置计数器。
66.ap设置计数器，利用该计数器记录各帧图像显示过程中ddic输出的multiple
‑
te
信号的数量。其中，该计数器的初始计数值为0，且该计数器可以通过调用计数线程设置。
67.示意性的，如图6所示，ap完成图像帧a对应图像数据的传输后启动计数器。
68.每次检测到ddic输出的multiple
‑
te信号后，ap即计算该multiple
‑
te信号与前向相邻multiple
‑
te信号(即之前接收到的最近一个multiple
‑
te信号)之间的时间间隔(存在前向相邻multiple
‑
te信号的情况下)，并检测该时间间隔是否小于间隔阈值。若小于，则执行步骤二，若大于，则执行步骤三。
69.可选的，该间隔阈值基于multiple
‑
te信号的te频率确定得到，其中，当te频率为k时，该间隔阈值略大于1/k。比如，当te频率为360hz时，该间隔阈值为3ms。
70.二、响应于检测到multiple
‑
te信号，且multiple
‑
te信号与前向相邻multiple
‑
te信号之间的时间间隔小于间隔阈值，则更新计数器的计数值。
71.可选地，更新计数器的计数值，即，将该计数器当前的计数值+1。
72.当检测到multiple
‑
te信号，且该multiple
‑
te信号与前向相邻multiple
‑
te信号之间的时间间隔小于间隔阈值时，表明当前检测到的multiple
‑
te信号与前向相邻的multiple
‑
te信号均是由ddic完成对同一帧图像的帧扫描后输出的，从而对计数器的计数值进行加一操作。
73.示意性的，如图6所示，te频率＝360hz，间隔阈值为3ms，在图像帧a的显示过程中，首次检测到multiple
‑
te信号时，ap将计数器的计数值更新为1；当再次检测到multiple
‑
te信号时，由于此时检测到multiple
‑
te信号与上一multiple
‑
te信号之间的时间间隔为2.8ms，故该时间间隔2.8ms小于间隔阈值3ms，因此ap将计数器的计数值更新为2。类似的，在图像帧b的显示过程中，计数器的计数值由1更新至4。
74.三、响应于检测到multiple
‑
te信号，且与前向相邻multiple
‑
te信号之间的时间间隔大于间隔阈值，将计数器的计数值确定为历史个数，并将计数器的计数值置为1。
75.当检测到multiple
‑
te信号，且该multiple
‑
te信号与前向相邻multiple
‑
te信号之间的时间间隔大于间隔阈值时，表明当前检测到的multiple
‑
te信号与前向相邻multiple
‑
te信号由ddic完成对相邻帧图像的帧扫描后输出，因此ap将计数器当前的计数值确定为当前帧图像对应的历史个数，并将计数器的计数值置为1，以便对下一帧图像显示过程中multiple
‑
te信号的历史个数进行统计。
76.示意性的，如图6所示，te频率＝360hz，间隔阈值为3ms，在图像帧a的显示过程中，在计数器的计数值为2的情况下，当再次检测到multiple
‑
te信号时，由于与上一multiple
‑
te信号之间的时间间隔大于时间阈值，因此ap将图像帧a对应的历史个数确定为2，并将计数器的计数值设置为1；类似的，在图像帧b的显示过程中，在计数器的计数值为4的情况下，当再次检测到multiple
‑
te信号时，由于与上一multiple
‑
te信号之间的时间间隔大于时间阈值，因此ap将图像帧b对应的历史个数确定为4，并将计数器的计数值设置为1。
77.步骤302b，基于历史个数确定ddic的历史刷新频率。
78.在一种可能的实施方式中，终端中预先设置有te信号个数与ddic的刷新频率之间的对应关系，相应的，确定出历史个数后，ap即基于该对应关系，确定历史个数对应的ddic的历史刷新频率。
79.示意性的，te信号个数与ddic的刷新频率之间的对应关系如表一所示。
80.表一
81.te信号个数ddic的刷新频率172hz260hz351hz445hz
82.结合表一所示的对应关系，如图6所示，ap确定图像帧a显示过程中ddic的历史刷新频率为60hz，确定图像帧b显示过程中ddic的历史刷新频率为45hz。
83.需要说明的是，在其他可能的实施方式中，ap还可以采用其他方式监测ddic的刷新频率，本实施例对此并不构成限定。
84.在一种可能的场景下，当前台应用运行过程中的基准帧率为60fps(frame per second，帧每秒)时，ddic的刷新频率应该以60hz为目标刷新频率进行稳帧设计，即目标刷新频率与前台应用运行过程中的基准帧率相匹配。其中，目标刷新频率与基准帧率相匹配是指目标刷新频率与基准帧率之间的差值小于阈值(比如5fps)，可选的，目标刷新频率等于基准帧率，或，目标刷新频率略大于基准帧率，或，目标刷新频率略小于基准帧率。
85.其中，当ap准时准备好图像数据(即按照60hz的频率)或者延迟准备完毕(即小于60hz)时，ddic可以适当进行等待，保证ddic的刷新频率在大多数场景下保持在不大于目标刷新频率的范围内(比如45hz至60hz)。
86.而当ap提前准备好图像数据时(即存在加速需求时)，为了避免ddic的刷新频率由低刷新频率直接跳变为高刷新频率(即由低于60hz的刷新频率跳变为高于60hz的刷新频率)，在本技术中，ap进行送显延迟操作。
87.由于刷新频率跳变发生在历史刷新频率较低而当前刷新频率较高的情况下，因此在一种可能的实施方式中，ap获取到历史刷新频率后，检测历史刷新频率是否小于目标刷新频率。若存在至少一帧图像对应的历史刷新频率小于目标刷新频率，则确定满足送显延迟条件，进而对第m+1帧图像数据进行送显延迟操作。
88.若各帧图像对应的历史刷新频率均大于等于目标刷新频率，则确定不满足送显延迟条件，从而按照常规送显逻辑向ddic传输第m+1帧图像数据(即检测到multiple
‑
te信号的上升沿时，ap向ddic传输第m+1帧图像数据)。
89.由于不同应用对应的基准帧率不同，因此需要针对不同应用设置不同的目标刷新频率。在一种可能的实施方式中，图像数据传输前，ap确定前台应用的基准帧率，从而基于基准帧率设置送显延迟条件。
90.在一个示意性的例子中，当前台应用为游戏应用，且游戏应用的基准帧率为60fps时，ap设置送显延迟条件为：最近2帧图像对应的历史刷新频率中，存在历史刷新频率小于60hz。即只要存在图像对应的历史刷新频率小于60hz，ap即进行送显延迟操作；若两帧图像对应的历史刷新频率均不小于60hz，ap则无需进行送显延迟操作。
91.关于对图像数据进行送显延迟操作的具体方式，在一种可能的实施方式中，当历史刷新频率满足送显延迟条件，且第m+1帧图像数据准备完毕时，ap采用跳过te信号的方式实现送显延迟。下面采用示例性的实施例进行说明。
92.请参考图7，其示出了本技术另一个示例性实施例示出的图像数据传输方法的流程图。该方法包括：
93.步骤701，向ddic传输第m帧图像数据，m为正整数。
94.步骤702，确定显示第m
‑
n至第m
‑
1帧图像时ddic的历史刷新频率，n为小于m且大于等于2的整数。
95.步骤701至702的实施方式可以参考上述实施例，本实施例在此不再赘述。
96.示意性的，如图8所示，ap向ddic传输图像帧c的图像数据后，确定显示图像帧a时ddic的历史刷新频率为60hz，显示图像帧b时ddic的历史刷新频率为45hz。
97.步骤703，响应于存在至少一帧图像对应的历史刷新频率小于目标刷新频率，在第m+1帧图像数据准备完成时，确定第m帧图像显示过程中multiple
‑
te信号的实时持续个数。
98.当满足延迟送显条件时，ap在向ddic传输第m+1帧图像数据前(第m+1帧图像数据已准备完毕)，检测ddic产生的multiple
‑
te信号的实时持续个数，进而确定是否需要进行送显延迟操作。
99.在一种可能的实施方式中，ap通过获取计数器的实时计数值，确定第m帧图像显示过程中multiple
‑
te信号的实时持续个数，以此确定当前multiple
‑
te信号的输出位置。其中，该实时持续个数基于计数器的实时计数值以及实时计数值对应的图像帧，其中，计数器的计数值的更新方式可以参考上述实施例，本实施例在此不再赘述。
100.可选的，若计数器的实时计数值对应的图像帧为第m帧图像，第m帧图像显示过程中multiple
‑
te信号的实时持续个数即为计数器的实时计数值；若计数器的实时计数值对应的图像帧为第m
‑
1帧图像，第m帧图像显示过程中multiple
‑
te信号的实时持续个数即为0。
101.示意性的，如图8所示，图像帧d的图像数据准备完成时，ddic在对图像帧c进行帧扫描，此时计数器的实时计数值对应的图像帧为图像帧b，而非图像帧c，因此图像帧c显示过程中multiple
‑
te信号的实时持续个数为0，即在ddic输出multiple
‑
te信号前图像帧d的图像数据就已经准备完成。
102.步骤704，响应于实时持续个数小于个数阈值，进行te信号跳过操作，个数阈值基于目标刷新频率设置。
103.为了避免刷新频率跳变至高于目标刷新频率，ap基于目标刷新频率设置个数阈值，并检测实时持续个数是否小于个数阈值。若实时持续个数小于个数阈值，则表明第m+1帧图像提前准备完成，若直接基于下一个multiple
‑
te信号进行图像数据传输，会造成刷新频率大幅度跳变，因此ap跳过至少一个multiple
‑
te信号，以此达到延迟送显的效果。
104.可选的，ddic以目标刷新频率扫描图像时，图像扫描完成后，在扫描下一帧图像之前生成的multiple
‑
te信号的个数即为个数阈值
‑
1，相应的，进行te信号跳过操作时跳过的multiple
‑
te信号的数量为个数阈值与实时持续个数之差，即完成te信号跳过操作后，第m帧图像显示过程中ddic的刷新频率为目标刷新频率。
105.在一种可能的实施方式中，响应于实时持续个数小于个数阈值，ap基于个数阈值与实时持续个数之差，确定multiple
‑
te信号的目标跳过数量；当接收到ddic输出的multiple
‑
te信号，且实时跳过数量未达到目标跳过数量时，ap对multiple
‑
te信号进行跳过处理，即不会根据该multiple
‑
te信号向ddic传输图像数据。进一步的，ap更新实时跳过数量，即对实时跳过数量进行加一操作，以便再次检测到multiple
‑
te信号时，将更新后的实时跳过数量与目标跳过数量进行对比。
106.可选的，若实时持续个数不小于个数阈值，则表明第m+1帧图像未提前准备完成，直接基于下一个multiple
‑
te信号进行图像数据传输，并不会造成刷新频率大幅度跳变。
107.示意性的，如图8所示，当目标刷新频率为60hz时，ap确定个数阈值为1个(可以通过查找刷新频率与个数阈值之间的对应关系确定得到)。由于图像帧c显示过程中multiple
‑
te信号的实时持续个数为0个，因此ap跳过当前multiple
‑
te信号，在检测到下一个multiple
‑
te信号的上升沿时才向ddic传输第m+1帧图像数据(即延迟2.8ms向ddic传输第m+1帧图像数据)。
108.步骤705，响应于完成te信号跳过操作，向ddic传输第m+1帧图像数据。
109.可选的，完成te信号跳过操作后，ap即在检测到下一个multiple
‑
te信号时，向ddic传输第m+1帧图像数据，使第m帧图像显示过程中ddic的刷新频率为目标刷新频率。
110.示意性的，如图8所示，引入送显延迟机制后，ap跳过第一个multiple
‑
te信号后，在检测到第二个multiple
‑
te信号的上升沿时，向ddic传输第m+1图像数据。通过te信号跳过操作，ddic刷新频率的变化情况由60hz
→
45hz
→
72hz(未引入送显延迟机制)变为60hz
→
45hz
→
60hz(引入送显延迟机制)，避免刷新频率的跳变。此外，te信号跳过操作后，由于当前帧与下一帧之间的送显间隔缩短，因此下一帧送显所对应的刷新频率提升，从而减少45hz等低刷新频率的出现频次，进一步提高了刷新频率的稳定性。
111.在另一种可能的实施方式中，由于ap与ddic之间通过mipi进行数据传输，因此当历史刷新频率满足送显延迟条件，且第m+1帧图像数据提供准备完毕时，ap可以通过阻隔mipi实现送显延迟。下面采用示例性的实施例进行说明。
112.请参考图9，其示出了本技术另一个示例性实施例示出的图像数据传输方法的流程图。该方法包括：
113.步骤901，向ddic传输第m帧图像数据，m为正整数。
114.步骤902，启动第一定时器，其中，第一定时器的定时器时长内mipi处于通路状态。
115.在一种可能的实施方式中，向ddic传输图像数据后，ap即启动第一定时器，并保证第一定时器的定时器时长内mipi处于通路状态，使ap能够在帧扫描过程中通过mipi向ddic传输图像数据以外的指令，其中，第一定时器可以由ap通过调用定时线程启动。
116.示意性的，如图10所示，ap向ddic传输图像帧c的图像数据后启动第一定时器。
117.步骤903，确定显示第m
‑
n至第m
‑
1帧图像时ddic的历史刷新频率，n为小于m且大于等于2的整数。
118.示意性的，如图10所示，ap向ddic传输图像帧c的图像数据后，确定显示图像帧a时ddic的历史刷新频率为60hz，显示图像帧b时ddic的历史刷新频率为45hz。
119.步骤904，响应于存在至少一帧图像对应的历史刷新频率小于目标刷新频率，在达到第一定时器的定时器时长时，启动第二定时器，并在第二定时器的定时器时长内将mipi设置为阻隔状态。
120.本实施例中，在第一定时器达到定时器时长时，ap将mipi由通路状态设置为阻隔状态，并启动第二定时器，保证第二定时器的定时器时长内mipi保持阻隔状态。由于mipi处于阻隔状态，故无法在第二定时器期间内检测到te信号，因此ap无法在第二定时器期间向ddic传输第m+1帧图像数据，从而达到了延时送显的效果。
121.其中，第一定时器的定时器时长和第二定时器的定时器时长基于目标刷新频率设
置。在一种可能的实施方式中，当目标刷新频率为i，前台应用运行过程中ddic所需的最高刷新频率为j时，第一定时器的定时器时长小于1/j，且第一定时器和第二定时器的定时器时长之和大于1/j且小于1/i，从而使得mipi在下一个te信号的上升沿之前进入阻隔状态，并使在第m帧图像显示过程中，ddic的刷新频率为目标刷新频率。
122.示意性的，如图10所示，当前台应用运行的目标刷新频率为60hz，前台应用运行过程中ddic所需的最高刷新频率为72hz时，ap设置第一定时器的定时器时长为13ms(小于1000
÷
72＝13.9ms)，并设置第二定时器的定时器时长为2ms(第一定时器的定时器时长与第二定时器的定时器时长之和为15ms，15ms小于1000
÷
60＝16.7ms)。在第二定时器时长内，由于mipi处于阻隔状态，因此ap无法在这期间内向ddic传输图像帧d的图像数据。
123.步骤905，响应于达到第二定时器的定时器时长，将mipi设置为通路状态，并向ddic传输第m+1帧图像数据。
124.可选的，达到第二定时器的定时器时长时，ap将mipi重新设置为通路状态，并在检测到下一个te信号时，向ddic传输第m+1帧图像数据，使第m帧图像显示过程中ddic的刷新频率为目标刷新频率。
125.示意性的，如图10所示，当达到第二定时器的定时器时长后，将mipi恢复通路状态，ap在检测到ddic输出的下一个te信号时，向ddic传输图像帧d的图像数据。
126.需要说明的是，上述实施例仅以跳过te信号和阻隔mipi两种延迟送显方式为例进行说明，在其他可能的实施方式中，ap可以通过其他方式延迟送显时机，本技术实施例并不对具体延迟送显方式构成限定。
127.请参考图11，其示出了本技术一个实施例提供的图像数据传输装置的结构框图。该装置包括：
128.传输模块1101，用于向显示驱动芯片ddic传输第m帧图像数据，m为正整数；
129.第一确定模块1102，用于确定显示第m
‑
n至第m
‑
1帧图像时所述ddic的历史刷新频率，n为小于m且大于等于2的整数；
130.延迟模块1103，用于响应于所述历史刷新频率满足送显延迟条件，对第m+1帧图像数据进行送显延迟操作，所述送显延迟操作用于延迟向所述ddic传输所述第m+1帧图像数据；
131.所述传输模块1101，还用于响应于完成所述送显延迟操作，向所述ddic传输所述第m+1帧图像数据。
132.可选的，所述ap用于基于多重撕裂效应multiple
‑
te信号的上升沿进行图像数据传输，所述multiple
‑
te信号由所述ddic输出；
133.所述第一确定模块1102，包括：
134.获取单元，用于对于所述第m
‑
n至第m
‑
1帧图像，获取各帧图像显示过程中，所述ddic输出的所述multiple
‑
te信号的历史个数；
135.确定单元，用于基于所述历史个数确定所述ddic对第m
‑
n至第m
‑
1帧图像中各帧图像的所述历史刷新频率。
136.可选的，所述获取单元，用于：
137.响应于检测到所述multiple
‑
te信号，且与前向相邻multiple
‑
te信号之间的时间间隔小于间隔阈值，更新计数器的计数值，所述计数器用于记录各帧图像显示过程中ddic
输出的所述multiple
‑
te信号的个数；
138.响应于检测到所述multiple
‑
te信号，且与前向相邻multiple
‑
te信号之间的时间间隔大于所述间隔阈值，将所述计数器的所述计数值确定为所述历史个数，并将所述计数器的所述计数值置为1。
139.可选的，所述确定单元，用于：
140.基于所述历史个数，从te信号个数与刷新频率之间的对应关系中确定所述历史刷新频率。
141.可选的，所述ddic输出multiple
‑
te信号的频率为te频率，所述te频率与显示屏的发光em频率相同，或，所述te频率为所述em频率的整数倍。
142.可选的，所述延迟模块1103，用于：
143.响应于存在至少一帧图像对应的所述历史刷新频率小于目标刷新频率，确定满足所述送显延迟条件，并对所述第m+1帧图像数据进行所述送显延迟操作，所述目标刷新频率与前台应用运行过程中的基准帧率相匹配。
144.可选的，所述ap用于基于multiple
‑
te信号的上升沿进行图像数据传输，所述multiple
‑
te信号由所述ddic输出；
145.所述延迟模块1103，包括：
146.第一延迟单元，用于响应于所述第m+1帧图像数据准备完成，确定第m帧图像显示过程中所述multiple
‑
te信号的实时持续个数；响应于所述实时持续个数小于个数阈值，进行te信号跳过操作，所述个数阈值基于所述目标刷新频率设置。
147.可选的，所述第一延迟单元，用于：
148.响应于所述实时持续个数小于所述个数阈值，基于所述个数阈值与所述实时持续个数之差，确定multiple
‑
te信号的目标跳过数量；
149.响应于接收到所述ddic输出的所述multiple
‑
te信号，且实时跳过数量未达到所述目标跳过数量，对所述multiple
‑
te信号进行跳过处理；
150.更新所述实时跳过数量。
151.可选的，所述ap与所述ddic之间通过移动产业处理器接口mipi进行数据传输；
152.所述装置还包括：
153.定时模块，用于启动第一定时器，其中，所述第一定时器的定时器时长内所述mipi处于通路状态；
154.所述延迟模块1103，包括：
155.第二延迟单元，用于响应于达到所述第一定时器的定时器时长，启动第二定时器，并在所述第二定时器的定时器时长内将所述mipi设置为阻隔状态；
156.其中，所述第一定时器和所述第二定时器的定时器时长基于所述目标刷新频率设置。
157.可选的，所述目标刷新频率为i，所述前台应用运行过程中所述ddic所需的最高刷新频率为j，j大于i；
158.所以第一定时器和所述第二定时器的定时器时长小于1/j；
159.所述第一定时器的定时器时长与所述第二定时器的定时器时长之和大于1/j且小于1/i。
160.可选的，所述装置还包括：
161.第二确定模块，用于确定所述前台应用的所述基准帧率；
162.设置模块，用于基于所述基准帧率设置所述送显延迟条件。
163.综上所述，本技术实施例中，通过引入送显延迟机制，ap向ddic传输第m帧图像数据后，基于最近n帧图像显示过程中ddic的历史刷新频率，确定是否满足送显延迟条件，并在满足送显延迟条件时，对第m+1帧图像数据进行送显延迟操作后，再向ddic传输第m+1帧图像数据，避免因ap输出帧率波动导致ddic刷新频率跳变，进而导致画面闪烁和抖动的问题，有助于提高图像显示过程中ddic刷新频率的稳定性，达到提升图像显示质量的效果。
164.请参考图12，其示出了本技术一个示例性实施例提供的终端1200的结构方框图。该终端1200可以是智能手机、平板电脑、笔记本电脑等。本技术中的终端1200可以包括一个或多个如下部件：处理器1210、存储器1220、显示屏模组1230。
165.处理器1210可以包括一个或者多个处理核心，该处理器1210可以为上述实施例中所述的ap。处理器1210利用各种接口和线路连接整个终端1200内的各个部分，通过运行或执行存储在存储器1220内的指令、程序、代码集或指令集，以及调用存储在存储器1220内的数据，执行终端1200的各种功能和处理数据。可选地，处理器1210可以采用数字信号处理(digital signal processing，dsp)、现场可编程门阵列(field－programmable gate array，fpga)、可编程逻辑阵列(programmable logic array，pla)中的至少一种硬件形式来实现。处理器1210可集成中央处理器(central processing unit，cpu)、图像处理器(graphics processing unit，gpu)、神经网络处理器(neural
‑
network processing unit，npu)和调制解调器等中的一种或几种的组合。其中，cpu主要处理操作系统、用户界面和应用程序等；gpu用于负责触摸显示屏模组1230所需要显示的内容的渲染和绘制；npu用于实现人工智能(artificial intelligence，ai)功能；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器1210中，单独通过一块芯片进行实现。
166.存储器1220可以包括随机存储器(random access memory，ram)，也可以包括只读存储器(read
‑
only memory，rom)。可选地，该存储器1220包括非瞬时性计算机可读介质(non
‑
transitory computer
‑
readable storage medium)。存储器1220可用于存储指令、程序、代码、代码集或指令集。存储器1220可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现本技术各个方法实施例的指令等；存储数据区可存储根据终端1200的使用所创建的数据(比如音频数据、电话本)等。
167.显示屏模组1230是用于进行图像显示的显示组件，通常设置在终端1200的前面板。显示屏模组1230可被设计成为全面屏、曲面屏、异型屏、双面屏或折叠屏。显示屏模组1230还可被设计成为全面屏与曲面屏的结合，异型屏与曲面屏的结合，本实施例对此不加以限定。
168.本技术实施例中，显示屏模组1230包括ddic1231和显示屏1232(面板)。其中，显示屏1232可以为oled显示屏，其可以是低温多晶硅(low temperature poly
‑
silicon，ltps)amoled显示屏或低温多晶氧化物(low temperature polycrystalline oxide，ltpo)amoled显示屏。
169.ddic1231用于驱动显示屏1232进行图像显示。此外，ddic1231与处理器1210之间
通过mipi接口相连，用于接收处理器1210下发的图像数据以及指令。
170.在一种可能的实现方式中，该显示屏模组1230还具有触控功能，通过触控功能，用户可以使用手指、触摸笔等任何适合的物体在显示屏模组1230上进行触控操作。
171.除此之外，本领域技术人员可以理解，上述附图所示出的终端1200的结构并不构成对终端1200的限定，终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。比如，终端1200中还包括麦克风、扬声器、射频电路、输入单元、传感器、音频电路、无线保真(wireless fidelity，wifi)模块、电源、蓝牙模块等部件，在此不再赘述。
172.本技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如上述实施例所述图像数据传输方法。
173.本领域技术人员应该可以意识到，在上述一个或多个示例中，本技术实施例所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时，可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
174.以上所述仅为本技术的可选实施例，并不用以限制本技术，凡在本技术的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本技术的保护范围之内。