图像处理方法、电子设备以及可读存储介质与流程

文档序号:17624249发布日期:2019-05-10 23:28阅读:222来源:国知局
图像处理方法、电子设备以及可读存储介质与流程

本发明涉及图像处理技术领域,更具体的说,是涉及图像处理方法、电子设备以及可读存储介质。



背景技术:

电子设备具有采集图像的功能,例如,采集指纹图像。

目前利用电子设备采集到的图像会出现亮度不一致的现象,例如出现明暗条纹的现象。



技术实现要素:

有鉴于此,本发明提供了一种图像处理方法、电子设备以及可读存储介质,本发明提供如下技术方案:

一种图像处理方法,所述方法包括:

通过图像采集组件采集图像;

基于同步信号暂停所述图像采集组件采集图像;

其中,所述图像采集组件与显示屏层叠设置,所述图像采集组件具有采集区域,所述采集区域在所述显示屏的显示区域对应输入区域,所述同步信号至少与所述显示屏的显示区域上与所述采集区域对应的输入区域的亮度降低的信号同步。

一种电子设备,包括:

图像采集组件,用于采集图像;

驱动电路,用于基于同步信号暂停所述图像采集组件采集图像;

其中,所述图像采集组件与显示屏层叠设置,所述图像采集组件具有采集区域,所述采集区域在所述显示屏的显示区域对应输入区域,所述同步信号至少与所述显示屏的显示区域上与所述采集区域对应的输入区域的亮度降低的信号同步。

一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现以上所述的图像处理方法包含的各个步骤。

经由上述的技术方案可知,与现有技术相比,本申请实施例公开了一种图像处理方法,图像采集组件采集图像的过程中,基于同步信号暂停采集图像,图像采集组件与显示屏层叠设置,图像采集组件具有采集区域,采集区域在显示屏的显示区域对应输入区域,同步信号至少与显示屏的显示区域上与采集区域对应的输入区域的亮度降低的信号同步。综上,在输入区域的亮度发生变化的情况下,暂停采集图像,即在输入区域的亮度一致的情况下才会采集图像,所以采集到的图像的亮度值一致,不会出现亮度不一致的情况,即不会出现明暗条纹的现象。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。

图1为本申请实施例提供的电子设备的一种实现方式的结构图;

图2为本申请实施例提供的显示屏的一种实现方式的结构图;

图3a为本申请实施例提供的驱动电路输出的用于驱动发光层的发光元件发光的驱动信号的一种实现方式的示意图;

图3b为本申请实施例的提供的在驱动信号如图3a所示的情况下,显示屏的亮度变化示意图;

图4a至图4d为本申请实施例提供的四帧输出图像;

图5为本申请实施例提供的采集指纹的光线传输示意图;

图6a为本申请实施例提供的指纹图像;

图6b为图像采集组件采集到的具有明暗相间条纹的指纹图像;

图7为外界环境光线传输路径的大致示意图;

图8a为本申请实施例提供的外界环境的人物图像;

图8b为图像采集组件采集到的具有明暗相间条纹的人物图像;

图9为本申请实施例提供的图像处理方法的一种实现方式的流程图;

图10a至图10d为本申请实施例提供的输入区域与输出图像的黑色区域的位置关系示意图;

图11为本申请实施例提供的电子设备的一种实现方式的结构图;

图12为本申请实施例提供的在第一种应用场景下同步信号、表征图像采集组件11实际暂停和恢复采集图像的信号的关系示意图;

图13为原始同步信号s1、变更后的同步信号s3以及信号s2的关系示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

目前的电子设备具有采集图像的功能,但是目前利用电子设备采集的图像会出现亮度不一致,例如,出现明暗条纹的现象。

下面结合电子设备的结构对电子设备采集的图像会出现亮度不一致的现象进行说明。

如图1所示,为本申请实施例提供的电子设备的一种实现方式的结构图,该电子设备包括:

图像采集组件11以及显示屏12。

其中,所述图像采集组件与显示屏层叠设置,例如,图像采集组件11设置在显示屏12的下方;图像采集组件11具有采集区域13。所述采集区域13在所述显示屏12的显示区域对应输入区域14(图1中用虚线框框出)。

图1中示出了显示屏12的输入区域14在显示区域中的位置,由于图1仅为示例,本申请实施例并不对输入区域14在显示区域中的位置和大小进行限定,输入区域14可以位于显示区域的任意位置。可选的,输入区域14在显示区域的具体位置可以基于图像采集组件11的采集区域13和显示屏12的相对位置确定。

该输入区域14与图像采集组件11的采集区域13相对应,即输入区域对应的光线(如图1所示)可以入射至图像采集组件11的采集区域,使得图像采集组件可以采集到图像。

可选的,图像采集组件11的采集区域可以包括图像采集组件11靠近显示屏12的一侧中的至少局部区域。

本申请实施例提供的电子设备可以为:智能手机或pad或台式机或笔记本电脑或智能电视等具有显示屏的电子设备。

电子设备的显示屏12每隔预设时间刷新一次,本申请实施例提供但不限定于如下显示屏12的刷新方式。

在对显示屏12的刷新方式进行说明之前,先对显示屏12的结构进行说明。如图2所示,为本申请实施例提供的显示屏的一种实现方式的结构图。

图2仅为示例,并不限定显示屏的结构。

显示屏包括:保护盖板21、上玻璃基板22、下玻璃基板23;其中,上玻璃基板22包括:偏光片221以及touch层222;下玻璃基板23包括发光层231以及驱动电路232。

显示屏12和图像采集组件11之间还具有空气层24。

其中,touch层222,用于检测是否有操作体(例如用户手指)触按显示区域的输入区域14。

驱动电路232,用于驱动发光层231包含的发光元件发光。

偏光片221,用于减小发光层发射的光线的损失,使得发光层发射的光线尽量都到达保护盖板。

在一可选实施例中,为了降低显示屏的功耗,显示屏并不是时时刻刻处于点亮状态;由于人眼具有视觉惰性,即光象一旦在视网膜上形成,视觉将会对这个光象的感觉维持一个有限的时间,这种生理现象叫做视觉暂留性,即只要显示屏的刷新率够快,且一个固定位置不总是处于非点亮状态,用户的眼睛会感受到显示屏的显示区域时时刻刻都处于点亮状态。

本申请实施例中,将显示屏不是时时刻刻处于点亮状态称为显示屏的刷新,显示屏的刷新方式包括但不限于以下两种实现方式。

第一种,显示屏12的刷新方式。

显示屏间隔显示至少两帧输出图像,例如,第一输出图像以及第二输出图像;其中,第一输出图像以及第二输出图像中,一帧输出图像均为黑色区域,一帧输出图像均为非黑色区域。

可选的,若显示屏控制显示第一输出图像时对应驱动信号中的高电平信号,那么第一输出图像均为非黑色区域;显示屏控制显示第二输出图像时对应驱动信号中的低电平信号,那么第二输出图像均为黑色区域。

例如,驱动电路232输出的驱动信号每隔预设时间电平降落一次,导致发光元件不能发光或者发出较弱的光线,使得显示屏输出图像亮度从高亮度降低至低亮度。

下面以显示屏的刷新率为60hz为例进行说明,即显示屏的刷新周期为16.67ms。

如图3a所示,为本申请实施例提供的驱动电路输出的用于驱动发光层的发光元件发光的驱动信号的一种实现方式的示意图。

图3a中横坐标为时间t,纵坐标为电压幅值。

从图3a中可以看出,驱动电路输出的驱动信号的周期为16.67ms,在一个周期中,若驱动信号处于t1阶段,驱动电路能够驱动发光层的发光单元发出较强的光线,使得显示屏显示的输出图像具有较高的亮度;若驱动信号处于t2阶段,驱动电路能够驱动发光层的发光单元发出较弱的光线,甚至不能够发出光线,使得显示屏显示的输出图像具有较低的亮度。

如图3b所示,为本申请实施例的提供的在驱动信号如图3a所示的情况下,显示屏的亮度变化示意图。

在一个周期内,若驱动信号为图3a所示的t1阶段,显示屏显示的第一输出图像的亮度如图3b左侧所示的高亮度,第一输出图像不包括黑色区域;若驱动信号为图3a所示的t2阶段,显示屏显示的第二输出图像的亮度如图3b右侧所示的低亮度,第二输出图像都为黑色区域。

图3b中是以电子设备为智能手机为例进行说明的。

结合图3a和图3b,图像采集组件11在采集图像的过程中,显示屏间隔显示第一输出图像以及第二输出图像,使得在采集同一图像的过程中,图像采集组件11既在显示屏的输入区域14位于黑色区域的情况下采集图像,又在,显示屏的输入区域14位于非黑色区域的情况下采集该图像。使得图像采集组件采集到的图像出现明暗相间的条纹。

第二种,显示屏12的刷新方式。

显示屏间隔显示至少两帧输出图像,其中,每一个输出图像包括至少一个非黑色区域以及至少一个黑色区域。

可选的,一个输出图像中的非黑色区域以及黑色区域间隔显示。

可以理解的是,若显示屏的显示区域中某个固定区域总是位于黑色区域,由于视觉暂留性,多个输出图像叠加,用户就会感受到显示屏上该固定区域为黑色区域。为了不要影响显示屏的显示效果,不能让显示屏的固定区域总是处于黑色区域。因此需要调整驱动信号,在一个周期中,驱动信号使得黑色区域随帧切换而滚动。那么用户靠视觉暂留就不会观察到某个固定区域处于黑色区域。

在一可选实施例中,显示屏控制显示的输出图像中的黑色区域对应驱动信号中的低电平信号,也就是,显示屏控制显示的输出图像中的黑色区域对应的发光层的发光元件能够发出弱光或者不能发出光。

在一可选实施例中,显示屏控制显示的输出图像中的非黑色区域对应驱动信号中的高电平信号,也就是,显示屏控制显示的输出图像中的非黑色区域对应的发光层的发光元件能够发出强光。

下面以一个周期内,显示屏间隔显示四帧输出图像为例进行说明。

其中,四帧输出图像中相邻两帧输出图像包含的黑色区域在显示区域中的位置不同。

如图4a所示,为在第一帧输出图像的示意图。如图4b所示,为在第二帧输出图像的示意图。如图4c所示,为在第三帧输出图像的示意图。如图4d所示,为在第四帧输出图像的示意图。

通过4a至图4d所示,从视觉上,相当于将图4a所示的第一帧输出图像向下滚动得到图4b所示的第二帧输出图像;图4b所示第二帧输出图像继续向下滚动,得到图4c所示的第三帧输出图像;图4c所示的第三帧输出图像继续向下滚动,得到图4d所示的第四帧输出图像。

在一可选实施例中,之所以图4a至图4d有视觉上的滚动,是因为驱动信号随帧切换而滚动。

本申请实施例提供的显示屏可以为amoled(active-matrixorganiclight-emittingdiode,有源矩阵有机发光二极体)显示屏。

amoled显示屏通常使用emit调光模式,以此来降低显示屏在一帧内的点亮范围。

具体的,由于amoled显示屏中的tft(薄膜晶体管,thinfilmtransistor)具有迟滞效应,为降低显示屏的功耗,每一帧amoled显示屏显示的输出图像包括黑色区域和非黑色区域,通过驱动信号,例如pwm(脉冲宽度调制,pulsewidthmodulation)信号控制显示区域按照一定的暂空比点亮,可以得到图4a至图4d所示的输出图像。

可选的,若驱动电路向发光层的发光元件输出的驱动信号为低电平信号,空间上,显示屏的显示区域对应的区域是黑色区域。

图像采集组件11在采集图像的过程中,由于显示屏显示的输出图像具有明暗相间条纹,因此,图像采集组件11采集的图像也具有明暗相间的条纹。

本申请实施例提供的图像处理方法可以应用于以下应用场景,本申请实施例提供但不限于以下两种应用场景。

第一种应用场景,利用图像采集组件采集指纹图像。

用户可以将手指放置于显示屏12的输入区域14中,显示屏中的发光元件发射光线,光线投射至用户的手指上,得到的反射光线可以投射至图像采集组件的采集区域13,使得图像采集组件可以采集到指纹图像。

在第一种应用场景中,如图5所示,为本申请实施例提供的采集指纹的光线传输示意图。

可选的,touch层,用于检测是否有操作体(例如用户手指)触按显示区域的输入区域14,若有操作体触按显示区域的输入区域14,那么向处理器发送信号;处理器接收到该信号后,可以生成指示图像采集组件采集图像的指令,并发送至图像采集组件;检测到若无操作体触按显示区域的输入区域14,那么向处理器发送信号;处理器接收到该信号后,可以生成指示图像采集组件停止采集图像的指令,并发送至图像采集组件。

假设,图5中用椭圆表示发光层的发光单元,用实线表示发光单元发射的入射光线,可以理解的是,发光单元发射的入射光线在经过touch层、偏光层、保护盖板的过程会发生折射和/或反射,图5仅为大致光线图,因此并未展现光线的详细传输过程,仅仅示出大致光线传输路径。

发光层的发光单元发出的入射光线投射至用户手指后,会产生反射光线,如图5所示,用点划线表示入射光线的反射光线。可以理解的是,反射光线在经过保护盖板、偏光片、touch层、发光层时光线会产生反射或折射,反射光线在经过空气层时,会发生漫反射。图5仅为大致光线图,因此并未展现光线的详细传输过程。

从图5中可以看出发光层的发光单元之间具有一定的缝隙,反射线可以通过缝隙投射至图像采集组件的采集区域13。

采集区域13就可以采集到指纹图像了。

如图6a所示,为本申请实施例提供的指纹图像;图6b为图像采集组件采集到的具有明暗相间条纹的指纹图像。

基于图6b所示的图像进行指纹识别,增加了指纹图像的snr(信噪比)和frr((falserejectrate,拒真率)。

第二种应用场景,利用图像采集组件采集外界环境图像。

外界环境的光线透过显示屏12的输入区域14投射至图像采集组件11的采集区域13,使得图像采集组件11可以采集到外界环境的图像。

外界环境的光线通过显示区域的输入区域14射入图像采集组件的采集区域,如图7所示,可以理解的是,外界环境的光线通过保护盖板、偏光片、touch层、发光层以及空气层的过程中,会产生折射或反射或漫反射,图7仅为外界环境光线传输路径的大致示意图,所以未示出光线详细的折射、反射、漫反射的传输路径。

从图7可以看出外界环境的光线在投射至图像采集组件的采集区域的过程中,也经过发光层。

如图8a所示,为本申请实施例提供的外界环境的人物图像,图8b为图像采集组件采集到的具有明暗相间条纹的人物图像,导致图像采集组件采集到的图像有噪声,无法得到清晰的外界环境的图像。

本申请实施例提供的图像处理方法,图像采集组件可以在显示屏显示的输出图像均为非黑色区域,或者,显示屏的输入区域14不包括非黑色区域的情况下,采集图像;其他情况下,暂停采集图像;或者,图像采集组件可以在显示屏显示的输出图像均为黑色区域,或者,显示屏的输入区域14不包括非黑色区域的情况下,采集图像;其他情况下,暂停采集图像,从而不会出现具有明暗相间条纹的图像。

在一可选实施例中,本申请实施例提供的图像处理方法应用于显示屏中的驱动电路或电子设备中的处理器。

结合上述图1至图8b,对本申请实施例提供的图像处理方法进行说明,本申请实施例提供的图像处理方法可以应用于显示屏中的驱动电路,或,可以应用于电子设备中的处理器,或,可以应用于电子设备中的图像采集组件。

如图9所示,为本申请实施例提供的图像处理方法的一种实现方式的流程图,该方法包括:

步骤s901:通过图像采集组件采集图像。

步骤s902:基于同步信号暂停所述图像采集组件采集图像。

其中,所述图像采集组件与显示屏层叠设置,所述图像采集组件具有采集区域,所述采集区域在所述显示屏的显示区域对应输入区域,所述同步信号至少与所述显示屏的显示区域上与所述采集区域对应的输入区域的亮度降低的信号同步。

本申请实施例可以应用于第一种应用场景以及第二种应用场景。

下面先对第一种应用场景的情况进行说明。

可选的,在上述任一实施例中,图像处理方法还包括:

调用生物特征识别组件,以使得所述图像采集组件处于工作状态,所述生物特征识别组件包括所述图像采集组件;

在所述输入区域显示一输出图像,所述输出图像用于点亮所述显示屏的所述输入区域对应的部分发光单元,以使得如果用户的手指覆盖到所述输入区域时所述点亮的发光单元所发射的光线经过所述手指反射后入射到所述图像采集组件。

具体可以参见图5,这里不再赘述。

可以理解的是,所述输入区域对应多个发光单元,为了节省资源,基于视觉惰性,可以点亮输入区域对应的多个发光单元中的至少部分发光单元;为了避免影响显示效果,可以在不同时刻控制输入区域对应的多个发光单元中的不同部分发光单元发光。

在第一种应用场景中步骤s902的实现方式有多种,本申请实施例提供但不限于以下几种方式。

第一种,若显示屏的刷新方式为第一种刷新方式。

显示屏显示的输出图像中的至少部分区域为黑色区域,即驱动信号为低电平信号,此时图像采集组件暂停采集图像。

本申请实施例提及的同步信号为所述显示屏控制显示的一帧输出图像对应的低电平信号,以使得处于工作状态的所述图像采集组件在所述显示屏控制显示的一帧输出图像对应的低电平信号的期间暂停采集图像;其中,在所述一帧输出图像的刷新周期内所述显示屏上与所述低电平信号时间所对应的部分显示区域为熄灭状态。

显示屏的部分显示区域为熄灭状态是指显示屏的部分显示区域为黑色区域,可选的,该部分显示区域对应的发光层的发光元件处于未点亮状态,使得部分显示区域为黑色区域。

本申请实施例提及的“低电平信号时间所对应的部分显示区域为熄灭状态”是指,在低电平信号持续的时间内,该部分显示区域一直为熄灭状态。

第二种,若显示屏的刷新方式为第二种刷新方式。显示屏控制显示的输出图像中黑色区域与输入区域14具有交集,图像采集组件暂停采集图像。

所述同步信号为目标低电平信号。其中,所述显示屏显示的一帧输出图像中所述目标低电平信号所对应的部分显示区域与所述图像采集组件对应的输入区域至少部分相交;以使得处于工作状态的所述图像采集组件,在所述显示屏显示的一帧输出图像中所述目标低电平信号对应的部分显示区域与所述输入区域至少部分相交的情况下,暂停采集图像;其中,在所述一帧输出图像的刷新周期中的低电平信号时间内,所述显示屏上与所述目标低电平信号所对应的部分显示区域为熄灭状态;相邻两帧输出图像各自低电平时间所对应的部分显示区域在所述显示屏的位置不同。

在一可选实施例中,通过pwm的频率、占空比、显示屏中明暗条纹的总行数、软件的前廊后廊来算出每帧图像中黑色区块出现的位置。

在一可选实施例中,驱动电路可以存储有输入区域在显示屏中的位置;驱动电路基于每帧图像中黑色区块出现的位置以及输入区域在显示屏中的位置,可以确定出目标低电平信号(即同步信号为目标低电平信号)。

其中,所述显示屏显示的一帧输出图像中所述目标低电平信号所对应的部分显示区域与所述图像采集组件对应的输入区域至少部分相交。

以使得处于工作状态的所述图像采集组件在所述显示屏显示的一帧输出图像中所述目标低电平信号对应的部分显示区域与所述输入区域至少部分相交的情况下,暂停采集图像;其中,在所述一帧输出图像的刷新周期中的低电平信号时间内,所述显示屏上与所述目标低电平信号所对应的部分显示区域为熄灭状态;相邻两帧输出图像各自低电平时间所对应的部分显示区域在所述显示屏的位置不同。

本申请实施例中“显示屏显示的一帧输出图像中所述目标低电平信号对应的部分显示区域与所述输入区域至少部分相交”包括:

该部分显示区域与所述输入区域完全重叠,或者,输入区域为部分显示区域的局部区域,或者,部分显示区域为输入区域的局部区域,或者,输入区域的局部区域以及部分显示区域的局部区域重叠。

如图10a至图10d所示,为本申请实施例提供的输入区域与输出图像的黑色区域的位置关系示意图。

假设输入区域14位于如图10a至图10d所示的虚线框框出的区域。

那么在图10a和图10b所示的情况下,即目标低电平信号对应的部分显示区域与输入区域不相交,图像采集组件继续采集图像。

图10c和图10d所示的情况为输入区域以及目标低电平信号对应的部分显示区域相交,在这种情况下,图像采集组件暂停采集图像。

可选的,本申请实施例中“显示屏显示的一帧输出图像中所述目标低电平信号对应的部分显示区域”是指,该部分显示区域对应的发光层的发光元件处于未点亮状态线,使得该部分显示区域为黑色区域。

可选的,目标低电平信号对应的部分显示区域可以是指图10c和图10d中与输入区域14相交的黑色区域。

在一可选实施例中,通过驱动信号的频率、占空比、显示屏中明暗条纹的总行数、软件的前廊后廊来算出每帧输出图像中黑色区域出现的位置。

在一可选实施例中,驱动电路可以存储有输入区域在显示屏中的位置;驱动电路基于每帧输出图像中黑色区域出现的位置以及输入区域在显示屏中的位置,可以确定出目标低电平信号(即同步信号为目标低电平信号)。

在第一种应用场景的一可选实施例中,图像处理方法在步骤s902后还包括:恢复所述图像采集组件采集图像。

第一种,若显示屏的刷新方式为第一种刷新方式。

显示屏显示的输出图像全部区域为非黑色区域,即驱动信号为高电平信号,此时恢复图像采集组件采集图像。

所述显示屏控制显示的一帧输出图像对应的高电平信号,以使得处于工作状态的所述图像采集组件在所述显示屏控制显示的一帧输出图像对应的高电平信号的期间恢复采集图像;其中,在所述一帧输出图像的刷新周期内所述显示屏上与所述高电平信号时间所对应的部分显示区域为点亮状态。

显示屏的部分显示区域为点亮状态是指显示屏的部分显示区域为非黑色区域,可选的,该部分显示区域对应的发光层的发光元件能够发出较强的光线,使得部分显示区域为非黑色区域。

第二种,若显示屏的刷新方式为第二种刷新方式。若显示屏控制显示的输出图像中非黑色区域包含输入区域14,恢复图像采集组件采集图像。

仍以图10a至图10d所示,图10a至图10b中输出图像的非黑色区域完全包含输入区域14,所以可以恢复图像采集组件采集图像。

在一可选实施例中,本申请实施例提供的图像处理方法应用于显示屏中的驱动电路;驱动电路可以监测自身输出的驱动信号的属性信息,驱动电路可以至少基于属性信息,控制图像采集组件暂停或恢复采集图像。

可选的,在第二种显示屏的刷新方式中,可以基于属性信息以及输入区域14在显示屏中的位置,控制图像采集组件暂停或恢复采集图像。在第一种显示屏的刷新方式中,可以基于属性信息,控制图像采集组件暂停采集图像。

其中,属性信息可以包括:驱动信号的频率、占空比、显示屏中明暗条纹的总行数、软件的前廊后廊。

在一可选实施例中,本申请实施例提供的图像处理方法应用于电子设备中的处理器;驱动电路可以将控制图像采集组件暂停或恢复图像采集的指令发送至处理器,再通过处理器控制图像采集组件继续或暂停图像的采集。

在第一种应用场景中,发光元件可以为采集光线的传感器,例如,cmos传感器。

在上述任一实施例中,图像采集组件在暂停采集图像的过程中,图像采集组件仍然处于工作状态,只是不执行采集图像的操作。

下面再对第二种应用场景的情况进行说明。

图9所示的图像处理方法还包括:

控制所述显示屏的输入区域为透明状态;以使得外界的光线透过所述输入区域入射到所述图像采集组件的采集区域。如图7所示,这里不再赘述。

在一可选实施例中,控制显示屏的输入区域为透明状态,是指输入区域具有一定的透明度,即不完全遮光,以使得外界的光线透过所述输入区域入射到所述多个感应单元。

可以理解的是,若图像采集组件采集外界环境的光线,那么输入区域对应的发光层的发光元件应该处于未点亮状态,否则,难以获得外界环境的光线。

因此为了得到外界环境的光线,图像采集组件在输入区域对应的发光层的发光元件未点亮的情况下,恢复采集图像;图像采集组件在输入区域对应的发光层的发光元件点亮的情况下,暂停采集图像。

在第二种应用场景中步骤s902的实现方式有多种,本申请实施例提供但不限于以下几种方式。

第一种,若显示屏的刷新方式为第一种刷新方式。

显示屏显示的输出图像中的至少部分区域为非黑色区域,即驱动信号为高电平信号,此时图像采集组件暂停采集图像。

本申请实施例提及的同步信号为所述显示屏控制显示的一帧输出图像对应的高电平信号,以使得处于工作状态的所述图像采集组件在所述显示屏控制显示的一帧输出图像对应的高电平信号的期间暂停采集图像;其中,在所述一帧输出图像的刷新周期内所述显示屏上与所述高电平信号时间所对应的部分显示区域为点亮状态。

显示屏的部分显示区域为点亮状态是指显示屏的部分显示区域为非黑色区域,可选的,该部分显示区域对应的发光层的发光元件被点亮,使得部分显示区域为非黑色区域。

本申请实施例提及的“高电平信号时间所对应的部分显示区域为点亮状态”是指,在高电平信号持续的时间内,该部分显示区域一直为点亮状态。

第二种,若显示屏的刷新方式为第二种刷新方式。显示屏控制显示的输出图像中非黑色区域与输入区域14具有交集,图像采集组件暂停采集图像。

所述同步信号为目标高电平信号。其中,所述显示屏显示的一帧输出图像中所述目标高电平信号所对应的部分显示区域与所述图像采集组件对应的输入区域至少部分相交;以使得处于工作状态的所述图像采集组件,在所述显示屏显示的一帧输出图像中所述目标高电平信号对应的部分显示区域与所述输入区域至少部分相交的情况下,暂停采集图像;其中,在所述一帧输出图像的刷新周期中的高电平信号时间内,所述显示屏上与所述目标高电平信号所对应的部分显示区域为点亮状态;相邻两帧输出图像各自高电平时间所对应的部分显示区域在所述显示屏的位置不同。

在一可选实施例中,通过pwm的频率、占空比、显示屏中明暗条纹的总行数、软件的前廊后廊来算出每帧图像中非黑色区块出现的位置。

在一可选实施例中,驱动电路可以存储有输入区域在显示屏中的位置;驱动电路基于每帧图像中非黑色区块出现的位置以及输入区域在显示屏中的位置,可以确定出目标高电平信号(即同步信号为目标高电平信号)。

其中,所述显示屏显示的一帧输出图像中所述目标高电平信号所对应的部分显示区域与所述图像采集组件对应的输入区域至少部分相交。

以使得处于工作状态的所述图像采集组件在所述显示屏显示的一帧输出图像中所述目标高电平信号对应的部分显示区域与所述输入区域至少部分相交的情况下,暂停采集图像;其中,在所述一帧输出图像的刷新周期中的高电平信号时间内,所述显示屏上与所述目标高电平信号所对应的部分显示区域为点亮状态;相邻两帧输出图像各自高电平时间所对应的部分显示区域在所述显示屏的位置不同。

本申请实施例中“显示屏显示的一帧输出图像中所述目标高电平信号对应的部分显示区域与所述输入区域至少部分相交”包括:

目标高电平信号对应的部分显示区域与所述输入区域完全重叠,或者,输入区域为目标高电平信号对应的部分显示区域的局部区域,或者,目标高电平信号对应的部分显示区域为输入区域的局部区域,或者,输入区域的局部区域以及目标高电平信号对应的部分显示区域的局部区域重叠。

如图10a至图10d所示,为本申请实施例提供的输入区域与输出图像的黑色区域的位置关系示意图。

假设输入区域14位于如图10a至图10d所示的虚线框框出的区域。

那么在图10a、图10b以及图10d所示的情况下,即目标高电平信号对应的部分显示区域与输入区域相交,图像采集组件暂停采集图像。

图10c所示的情况为输入区域以及目标高电平信号对应的部分显示区域完全不相交,在这种情况下,恢复图像采集组件采集图像。

可选的,本申请实施例中“显示屏显示的一帧输出图像中所述目标高电平信号对应的部分显示区域”是指,目标高电平信号对应的部分显示区域对应的发光层的发光元件处于点亮状态,使得该部分显示区域为非黑色区域。

在一可选实施例中,通过驱动信号的频率、占空比、显示屏中明暗条纹的总行数、软件的前廊后廊来算出每帧输出图像中非黑色区域出现的位置。

在一可选实施例中,驱动电路可以存储有输入区域在显示屏中的位置;驱动电路基于每帧输出图像中非黑色区域出现的位置以及输入区域在显示屏中的位置,可以确定出目标高电平信号(即同步信号为目标高电平信号)。

在第二种应用场景的一可选实施例中,图像处理方法在步骤s902后还包括:恢复所述图像采集组件采集图像。

第一种,若显示屏的刷新方式为第一种刷新方式。

显示屏显示的输出图像全部区域为黑色区域,即驱动信号为低电平信号,此时恢复图像采集组件采集图像。

所述显示屏控制显示的一帧输出图像对应的低电平信号,以使得处于工作状态的所述图像采集组件在所述显示屏控制显示的一帧输出图像对应的低电平信号的期间恢复采集图像;其中,在所述一帧输出图像的刷新周期内所述显示屏上与所述低电平信号时间所对应的部分显示区域为未点亮状态。

显示屏的部分显示区域为未点亮状态是指显示屏的部分显示区域为黑色区域,可选的,该部分显示区域对应的发光层的发光元件处于非点亮状态,即不能发出光线。

第二种,若显示屏的刷新方式为第二种刷新方式。若显示屏控制显示的输出图像中黑色区域包含输入区域14,恢复图像采集组件采集图像。

仍以图10a至图10d所示,图10c中输出图像的黑色区域完全包含输入区域14,所以可以恢复图像采集组件采集图像。

在一可选实施例中,本申请实施例提供的图像处理方法应用于显示屏中的驱动电路;驱动电路可以监测自身输出的驱动信号的属性信息,驱动电路可以至少基于属性信息,控制图像采集组件暂停采集图像。

可选的,在第二种显示屏的刷新方式中,可以基于属性信息以及输入区域14在显示屏中的位置,控制图像采集组件暂停或恢复采集图像。在第一种显示屏的刷新方式中,可以基于属性信息,控制图像采集组件暂停或恢复采集图像。

其中,属性信息可以包括:驱动信号的频率、占空比、显示屏中明暗条纹的总行数、软件的前廊后廊。

在一可选实施例中,本申请实施例提供的图像处理方法应用于电子设备中的处理器;驱动电路可以将控制图像采集组件暂停或恢复图像采集的指令发送至处理器,再通过处理器控制图像采集组件继续或暂停图像的采集。

在第一种应用场景中,发光元件可以为采集光线的传感器,例如,cmos传感器。

在上述任一实施例中,图像采集组件在暂停采集图像的过程中,图像采集组件仍然处于工作状态,只是不执行采集图像的操作。

上述本发明公开的实施例中详细描述了方法,对于本发明的方法可采用多种形式的装置实现,因此本发明还公开了一种装置,下面给出具体的实施例进行详细说明。

如图11所示,为本申请实施例提供的电子设备的一种实现方式的结构图,该电子设备包括:

图像采集组件11以及驱动电路232(或处理器)。

图像采集组件11,用于采集图像;

驱动电路232或处理器,用于基于同步信号暂停所述图像采集组件采集图像;

其中,所述图像采集组件与显示屏层叠设置,所述图像采集组件具有采集区域,所述采集区域在所述显示屏的显示区域对应输入区域,所述同步信号至少与所述显示屏的显示区域上与所述采集区域对应的输入区域的亮度降低的信号同步。

在一可选实施例中,驱动电路232与图像采集组件11各预留gpio(generalpurposeinputoutput,通用输入/输出)接口,用于传输同步信号。

如图12所示,为本申请实施例提供的在第一种应用场景下同步信号、表征图像采集组件11实际暂停和恢复采集图像的信号的关系示意图。

图12中,同步信号s1处于高电平时,说明显示屏的输入区域位于非黑色区域,同步信号处于低电平时,说明显示屏的输入区域的至少局部区域为黑色区域。

可选的,驱动电路可以包括扫描寄存器,扫描寄存器可以存储表征图像采集组件11实际暂停和恢复采集图像的信号s2。

从图12可以看出,信号s2为具有一定时延的信号s1,这是因为驱动电路将同步信号发送至图像采集组件后,图像采集组件针对该同步信号会响应一定时间,在基于该同步信号暂停或恢复采集图像的时刻相对于同步信号而言会延迟。

例如,若图像采集组件检测到同步信号s1处于低电平,那么暂停采集图像,由于图像采集组件需要响应一定时间,所以会延迟一定时间再暂停采集图像,也就是,在短时间内(即t1时间内)可能会在输入区域的至少局部区域为黑色区域时,还再采集图像。与目前在整个低电平期间都采集图像相比,本申请实施例提供的图像处理方法,采集的图像无明暗相间的条纹或明暗相间的条纹并不明显。

若图像采集组件检测到同步信号s1处于高电平,那么恢复采集图像。由于图像采集组件需要响应一定时间,所以会延迟一定时间再恢复采集图像。

在一可选实施例中,为了避免由于图像采集组件响应一定时间,导致的在短时间内(即t1时间内)可能会在输入区域的至少局部区域为黑色区域时,还再采集图像,可选的,驱动电路可以在考虑到图像采集组件的响应时间的基础上,确定同步信号,如图13所示,图13为原始同步信号s1、变更后的同步信号s3以及信号s2的关系示意图。

驱动电路可以将同步信号s3发送至图像采集组件,图像采集组件响应一定时间后,原始同步信号s1才到达下降沿,从而不会出现在短时间内(即t1时间内)图像采集组件可能会在输入区域的至少局部区域为黑色区域时,还再采集图像。

在第二种应用场景下,同步信号s1、同步信号s2以及信号s3的关系是相反的,这里不再赘述。

在一可选实施例中,所述同步信号为所述显示屏控制显示的一帧输出图像对应的低电平信号,以使得处于工作状态的所述图像采集组件在所述显示屏控制显示的一帧输出图像对应的低电平信号的期间暂停采集图像;其中,在所述一帧输出图像的刷新周期内所述显示屏上与所述低电平信号时间所对应的部分显示区域为熄灭状态。

在一可选实施例中,所述同步信号为目标低电平信号;

其中,所述显示屏显示的一帧输出图像中所述目标低电平信号所对应的部分显示区域与所述图像采集组件对应的输入区域至少部分相交;

以使得处于工作状态的所述图像采集组件在所述显示屏显示的一帧输出图像中所述目标低电平信号对应的部分显示区域与所述输入区域至少部分相交的情况下,暂停采集图像;其中,在所述一帧输出图像的刷新周期中的低电平信号时间内,所述显示屏上与所述目标低电平信号所对应的部分显示区域为熄灭状态;相邻两帧输出图像各自低电平信号时间所对应的部分显示区域在所述显示屏的位置不同。

在一可选实施例中,驱动电路232或处理器还用于:恢复所述图像采集组件采集图像。

在一可选实施例中,驱动电路232或处理器还用于:

调用生物特征识别组件,以使得所述图像采集组件处于工作状态,所述生物特征识别组件包括所述图像采集组件;

在所述输入区域显示一帧输出图像,所述输出图像用于点亮所述显示屏的所述输入区域对应的部分发光单元,以使得如果用户的手指覆盖到所述输入区域时,所述点亮的发光单元所发射的光线经过所述手指反射后入射到所述图像采集组件。

在一可选实施例中,驱动电路232或处理器还用于:控制所述显示屏的输入区域为透明状态;以使得外界的光线透过所述输入区域入射到所述图像采集组件的采集区域;

所述同步信号为所述显示屏控制显示的一帧输出图像对应的高电平信号,以使得处于工作状态的所述图像采集组件在所述显示屏控制显示的一帧输出图像对应的高电平信号的期间暂停采集图像;其中,在所述一帧输出图像的刷新周期内所述显示屏上与所述高电平信号时间所对应的部分显示区域为熄灭状态。

在一可选实施例中,驱动电路232或处理器还用于:

控制所述显示屏的输入区域为透明状态;以使得外界的光线透过所述输入区域入射到所述图像采集组件的采集区域;所述同步信号为目标高电平信号;

其中,所述显示屏显示的一帧输出图像中所述目标高电平信号所对应的部分显示区域与所述图像采集组件对应的输入区域至少部分相交;

以使得处于工作状态的所述图像采集组件在所述显示屏显示的一帧输出图像中所述目标高电平信号对应的部分显示区域与所述输入区域至少部分相交的情况下,暂停采集图像;其中,在所述一帧输出图像的刷新周期中的高电平信号时间内,所述显示屏上与所述目标高电平信号所对应的部分显示区域为点亮状态;相邻两帧输出图像各自高电平信号时间所对应的部分显示区域在所述显示屏的位置不同。

本申请实施例还提供了一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现上述任一所述的图像处理方法包含的各个步骤。

需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置或系统类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。

还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(ram)、内存、只读存储器(rom)、电可编程rom、电可擦除可编程rom、寄存器、硬盘、可移动磁盘、cd-rom、或技术领域内所公知的任意其它形式的可读存储介质中。

对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1