电子装置及其控制方法和控制装置与流程

文档序号:16849031发布日期:2019-02-12 22:34阅读:178来源:国知局
电子装置及其控制方法和控制装置与流程

本申请涉及消费性电子技术领域,特别涉及一种电子装置、电子装置的控制方法和电子装置的控制装置。



背景技术:

同时配置有深度相机和显示屏的移动终端通常会在显示屏上开窗,以使深度相机能够通过显示屏上的窗口来发射和/或接收光信号以测量场景的深度信息。但在显示屏上开窗会降低移动终端的屏占比。为了提高移动终端的屏占比,可以在显示屏不开窗时直接将深度相机设置在显示屏下方,但在这一设置中,显示屏发出的光会对深度相机收发光信号产生影响,进一步地会影响获取的深度图像的精度。



技术实现要素:

本申请的实施例提供了一种电子装置、电子装置的控制方法和电子装置的控制装置。

本申请实施方式的电子装置包括用于显示影像的显示屏及结构光组件。所述显示屏形成有相背的正面及背面,所述显示屏发出的光线沿所述背面指向所述正面的方向向外界发射,所述显示屏包括第一子屏及第二子屏,所述第一子屏和所述第二子屏的类型相同,所述结构光组件包括结构光摄像头,所述结构光摄像头设置在所述显示屏的所述背面所在的一侧,所述结构光摄像头与所述第一子屏对应,所述结构光摄像头用于接收被反射且穿过所述第一子屏的激光;在所述结构光摄像头开启时,所述第一子屏与所述第二子屏以不同的显示状态显示。

本申请实施方式的控制方法用于电子装置。所述电子装置包括用于显示影像的显示屏及结构光组件,所述显示屏形成有相背的正面及背面,所述显示屏发出的光线沿所述背面指向所述正面的方向向外界发射,所述显示屏包括第一子屏及第二子屏,所述第一子屏和所述第二子屏的类型相同,所述结构光组件包括结构光摄像头,所述结构光摄像头设置在所述显示屏的所述背面所在的一侧,所述结构光摄像头与所述第一子屏对应,所述结构光摄像头用于接收被反射且穿过所述第一子屏的激光;所述控制方法包括:判断所述结构光摄像头是否开启;在所述结构光摄像头开启时,控制所述第一子屏与所述第二子屏以不同的显示状态显示。

本申请实施方式的控制装置用于电子装置。所述电子装置包括用于显示影像的显示屏及结构光组件,所述显示屏形成有相背的正面及背面,所述显示屏发出的光线沿所述背面指向所述正面的方向向外界发射,所述显示屏包括第一子屏及第二子屏,所述第一子屏和所述第二子屏的类型相同,所述结构光组件包括结构光摄像头,所述结构光摄像头设置在所述显示屏的所述背面所在的一侧,所述结构光摄像头与所述第一子屏对应,所述结构光摄像头用于接收被反射且穿过所述第一子屏的激光;所述控制装置包括判断模块和控制模块。所述判断模块用于判断所述结构光摄像头是否开启,所述控制模块用于在所述结构光摄像头开启时,控制所述第一子屏与所述第二子屏以不同的显示状态显示。

本申请实施方式的电子装置、电子装置的控制方法和电子装置的控制装置,结构光摄像头开启时,可以控制第一子屏和第二子屏以不同的显示状态显示,用户可以控制第一子屏的显示状态以适应结构光摄像头的使用要求,以提高获取的深度信息的准确度,同时控制第二子屏的显示状态以适应用户的观看要求,以提高用户的使用体验。

本申请的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。

附图说明

本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:

图1是本申请某些实施方式的电子装置的结构示意图。

图2是本申请某些实施方式的电子装置的部分结构示意图。

图3是本申请某些实施方式的电子装置沿图2所示的a-a线的截面示意图。

图4是本申请某些实施方式的电子装置的显示屏的分解示意图

图5是本申请某些实施方式的结构光投射器的结构示意图。

图6是本申请某些实施方式的电子装置沿与图2所示的a-a线对应位置的截面示意图。

图7和图8是本申请某些实施方式的电子装置的部分结构示意图。

图9是本申请某些实施方式的电子装置沿与图2所示的a-a线对应位置的截面示意图。

图10和图11是本申请某些实施方式的电子装置的部分结构示意图。

图12至图16是本申请某些实施方式的电子装置沿与图2所示的a-a线对应位置的截面示意图。

图17是本申请某些实施方式的控制方法的流程示意图。

图18是本申请某些实施方式的控制装置的模块示意图。

图19至图22是本申请某些实施方式的控制获取方法的流程示意图。

图23是本申请某些实施方式的lcd显示屏的结构示意图。

图24是本申请某些实施方式的oled显示屏的结构示意图。

图25和图26是本申请某些实施方式的microled显示屏的结构示意图。

具体实施方式

下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。

在本申请中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。

请参阅图1及图2,本申请实施方式的电子装置1000包括显示屏10及结构光组件20。电子装置1000还可以包括壳体30,壳体30可用于安装显示屏10、结构光组件20等功能器件,功能器件还可以是主板、双摄模组、受话器等。电子装置1000的具体形式可以是手机、平板电脑、智能手表、头显设备等,本申请以电子装置1000为手机进行说明,可以理解,电子装置1000的具体形式不限于手机,在此不作限制。

显示屏10可以安装在壳体30上,具体地,显示屏10可以安装在壳体30的一个面上,或者同时安装在壳体30的相背的两个面上。在如图1所示的例子中,显示屏10安装在壳体30的前面,显示屏10的可以覆盖该前面的面积的85%及以上,例如达到85%、86%、87%、88%、89%、90%、91%、92%、93%、95%甚至是100%。显示屏10可以用于显示影像,影像可以是文字、图像、视频、图标等信息。显示屏10的具体类型可以是液晶显示屏93(liquidcrystaldisplay,lcd)、有机发光二极管(organiclight-emittingdiode,oled)显示屏95、microled显示屏97等。

其中,请结合图23,lcd显示屏93可以包括沿发光方向依次设置的背光模组931、下偏光片932、薄膜晶体管(thin-filmtransistor,tft)基板933、液晶层934、彩色滤光片935和上偏光片936。背光模组931可视作背光源。下偏光片932和上偏光片936用于控制光线的通过与否,具体地,上偏光片936和下偏光片932分别形成栅栏角度,阻隔掉光线中与栅栏垂直的分量,只准许与栅栏平行的分量通过。tft基板933用于提供导电通路以产生电压。彩色滤光片935用于形成彩色影像。液晶层934中包括液晶分子,由于液晶分子结构的异方性,也即是液晶分子的介电系数及折射系数等均具有异方性,所引起的光电效应会因为方向不同而有所差异。lcd显示屏93根据液晶本身的这些特性,通过tft基板933产生电压,以在上偏光片936和下偏光片932之间形成电场,并利用电场控制液晶分子转动,来改变光的行进方向使光线通过或被下偏光片932和上偏光片936阻隔,从而不同的电场能够形成不同灰阶亮度。lcd显示屏93可以通过控制背光模组931发光以显示影像,其中,lcd显示屏93的背光模组931只能进行整体控制,即整体发光或整体不发光。

请结合图24,oled显示屏95包括基板951、阳极952、空穴传输层953、发光层954、电子传输层955和阴极956。其中,基板951用来支撑整个oled显示屏95。当给oled的阳极952和阴极956施加电压时,电子和空穴分别从阴极956和阳极952向夹在两电极之间的有机功能层注入。注入的电子和空穴分别从电子传输层955和空穴传输层953向发光层954迁移。电子和空穴注入到发光层954后,由于库仑力的作用束缚在一起形成空穴对,即激子。激子在电场的作用下迁移,将能量转移给发光层954中的掺杂材料。发光层954的掺杂材料中的电子吸收能量后,从基态跃迁到激发态。由于激发态是不稳定的,电子会从激发态再次跃迁回基态,同时以光子的形式释放能量。根据发光材料激发态能级的不同,电子在跃迁回基态的过程中释放出不同能量的光子,能量决定光的波长,波长不同意味着光的颜色不同。如此,oled显示屏95即可以自发光的形式发出各种不同颜色的光。oled显示屏95发出的光亮度或强度取决于发光材料的性能以及施加电流的大小。对于同一oled显示屏95,电流越大,光的亮度越高。oled显示屏95中的每个像素(由多个可以自发光的次像素组成)可以由独立的薄膜晶体管来控制开/关,从而使得每个像素可以连续且独立地发光。如此,oled显示屏95可以通过独立控制各个像素的发光层954发出不同颜色和亮度的光以显示影像。

请结合图25和图26,microled显示屏97可以包括驱动基板971、封装基板972、支撑物973及多个像素974。驱动基板971与封装基板972相对设置,多个像素974排布在驱动基板971与封装基板972之间。每个像素974内对应设置一个可见光源9741。

驱动基板971内设有显示驱动电路(图未示),驱动基板971能够控制每个像素974内光源的开启、关闭及发光亮度。封装基板972用于将光源封装保护,封装基板972的材料可为聚对苯二甲酸乙二醇酯(pet)、或聚碳酸酯(pc)等有一定硬度的塑料,也可以是玻璃。支撑物973用于使驱动基板971与封装基板972之间保持一定的间距,并防止对像素974造成过度的挤压。

每个像素974还包括下像素电极9742和上像素电极9743,下像素电极9742设置在驱动基板971上,上像素电极9743设置在封装基板972下,可见光源9741夹设在下像素电极9742和上像素电极9743之间。像素电极的材料可以为氧化铟锡或导电金属。

如图25所示,一个例子中,多个可见光源9741包括红色光源、绿色光源及蓝色光源,每个可见光源9741与对应的像素电极组成一个像素974,从而使得含有不同光源的像素974发出不同颜色的光。

请参阅图26,另一个例子中,像素974的结构也可以包括可见光源9741及色彩转换层9744。例如,多个可见光源9741包括红色光源及蓝色光源,每个可见光源9741与对应的像素电极组成的像素974发出相应颜色的光。其中,含有红色光源的像素974发出红光,含有蓝色光源的像素974发出蓝光,含有蓝色光源及色彩转换层9744的像素974发出绿光。像素974还包括间隔层9745,间隔层9745有利于像素974之间的高度一致。

microled显示屏97可以通过独立控制各个可见光源9741发出不同亮度、不同颜色的光以显示影像。

请结合图3,显示屏10形成有相背的正面12及背面13,光线沿背面13指向正面12的方向向外发射,且在光线穿过正面12后由用户接收,即,用户可以从正面12观察显示屏10显示的影像。其中,正面12及背面13均可以是平面或曲面。

请再结合图1,显示屏10包括显示区11,显示区11可用于显示影像。适配不同类型的电子装置1000及不同用户的需求。显示区11的形状可以呈圆形、椭圆形、跑道形、圆角矩形、矩形等形状。显示区11包括第一子显示区111和第二子显示区112,第一子显示区111和第二子显示区112可被独立控制,从而呈现出相同或者不同的显示状态。

在某些实施方式中,显示屏10为一个独立的屏结构,即,显示屏10为一个整体。此时,显示屏10为自发光的显示屏,显示屏10包括多个可以被独立控制的像素。其中,第一子显示区111包括由多个像素组成的第一像素集合,第二子显示区112包括多个像素组成的第二像素集合。使用时,第一像素集合中的多个像素和第二像素集合中的多个像素均可以被独立控制使得第一子显示区111和第二子显示区112以相同或者不同的显示状态显示。例如,通过控制第一像素集合中不同位置的像素发光以控制第一子显示区111的不同区域显示影像,通过控制第二像素集合中不同位置的像素发光以控制第二子显示区112的不同区域显示影像,通过控制第一像素集合中的像素的发光亮度以控制第一子显示区111的显示亮度,通过控制第二像素集合中的像素的发光亮度以控制第二子显示区112的显示亮度,通过控制第一像素集合中的像素的发光频率以控制第一子显示区111的刷新频率,通过控制第二像素集合中的像素的发光频率以控制第二子显示区112的刷新频率。当显示屏10为一个独立的屏结构时,显示屏10可以是oled显示屏95或microled显示屏。

在某些实施方式中,请结合图4,显示屏10由两个独立的子显示屏组成,具体地,显示屏10由第一子屏16和第二子屏17组成,其中,第一子屏16形成第一子显示区111,第二子屏17形成第二子显示区112。第一子屏16与第二子屏17在结合成显示屏10时,人眼难以察觉到第一子屏16和第二子屏17之间的交界线,且在第一子屏16及第二子屏17显示影像时,即使第一子屏16与第二子屏17共同显示一帧影像,人眼也不会察觉到第一子屏16与第二子屏17显示的影像之间的边界线。第一子屏16和第二子屏17可以被独立控制,在使用时,第一子屏16和第二子屏17能够被独立控制从而以相同或不同的显示状态显示,其中,不同的显示状态可以是一个子屏点亮另一个子屏熄灭、或者两个子屏以不同的亮度显示、或者两个子屏以不同的刷新频率显示等等。

第一子屏16与第二子屏17的具体形状可以依据需求进行设定,例如如图1所示,第一子屏(与第一子显示区111对应的部分)大致呈矩形,第二子屏(与第二子显示区112对应的部分)也大致呈矩形,第一子屏16与第二子屏17相接并形成大致呈矩形的显示屏10;例如,如图4所示,第二子屏17的形状可以是带穿孔172的圆角矩形,第一子屏16的形状可以与穿孔172的形状相同,穿孔172的形状可以是跑道形、水滴状等,第一子屏16与第二子屏17的形状互补并可共同形成呈圆角矩形状的显示屏10。当然,显示屏10的最终形状、第一子屏16或第二子屏17的形状还可以是圆形、椭圆形、跑道形等形状,在此不作限制。第一子屏16可以位于显示屏10整体的边缘位置,第二子屏17可以位于显示屏10整体的中间位置。第一子屏16可以用于显示电子装置1000的状态图标,例如用于显示电子装置1000的电池电量、网络连接状态、系统时间等。

在某些实施方式中,第一子屏16可以是自发光的显示屏,第一子屏16包括多个可以被独立控制的像素。可以通过控制像素的发光状态来控制第一子屏16的显示状态,例如通过控制不同位置的像素发光以控制第一子屏16的不同区域显示影像、通过控制像素的发光亮度以控制第一子屏16的显示亮度、通过控制像素的发光频率以控制第一子屏16的刷新频率。具体地,第一子屏16可以是oled显示屏95、microled显示屏97中的一种或多种。

在某些实施方式中,第二子屏17也可以是自发光的显示屏,第二子屏17包括多个可以被独立控制的像素。可以通过控制像素的发光状态来控制第二子屏17的显示状态,例如通过控制不同位置的像素发光以控制第二子屏17的不同区域显示影像、通过控制像素的发光亮度以控制第二子屏17的显示亮度、通过控制像素的发光频率以控制第二子屏17的刷新频率。具体地,第二子屏17可以是oled显示屏95、microled显示屏97中的一种或多种。

在某些实施方式中,第一子屏16还可以是通过背光源发光的显示屏。可以通过控制第一子屏16的背光源的发光状态来控制第一子屏16的显示状态,例如通过控制背光源熄灭以控制第一子屏16熄灭、通过控制背光源的发光亮度以控制第一子屏16的显示亮度、通过控制背光源的发光频率以控制第一子屏16的刷新频率。具体地,第一子屏16可以是液晶显示屏93等通过背光源发光的显示屏。

在某些实施方式中,第二子屏17也可以是通过背光源发光的显示屏。可以通过控制第二子屏17的背光源的发光状态来控制第二子屏17的显示状态,例如通过控制背光源熄灭以控制第二子屏17熄灭、通过控制背光源的发光亮度以控制第二子屏17的显示亮度、通过控制背光源的发光频率以控制第二子屏17的刷新频率。具体地,第二子屏17可以是液晶显示屏93等通过背光源发光的显示屏。

显示屏10由独立控制的第一子屏16与第二子屏17组成时,第一子屏16与第二子屏17的类型可以相同。例如,第一子屏16和第二子屏17均为自发光的显示屏(比如oled显示屏95、microled显示屏等),具体地,例如,第一子屏16和第二子屏17可以均为oled显示屏95;或者,第一子屏16和第二子屏17可以均为microled显示屏97;或者,第一子屏16为oled显示屏95,第二子屏17为microled显示屏97;或者,第一子屏16为microled显示屏97,第二子屏17为oled显示屏95等。或者,第一子屏16和第二子屏17均为通过背光源发光的显示屏(比如液晶显示屏93等)。

显示屏10由独立控制的第一子屏16与第二子屏17组成时,第一子屏16和第二子屏17的类型也可以不同。例如,第一子屏16可以为自发光的显示屏(如oled显示屏95、microled显示屏97等),第二子屏17可以为通过背光源发光的显示屏(比如液晶显示屏93等),具体地,例如,第一子屏16为oled显示屏95,第二子屏17为液晶显示屏93,或者第一子屏16为microled显示屏97,第二子屏17为液晶显示屏93等。或者,第一子屏16可以为通过背光源发光的显示屏(比如液晶显示屏93等),第二子屏17可以为自发光的显示屏(如oled显示屏95、microled显示屏97等),具体地,例如,第一子屏16为液晶显示屏93,第二子屏17为oled显示屏95,或者第一子屏16为液晶显示屏93,第二子屏17为microled显示屏97等。

在某些实施方式中,显示屏10为一个独立的屏结构时,第一子显示区111的像素密度和第二子显示区112的像素密度可以相同或不同。在第一子显示区111的像素密度和第二子显示区112的像素密度不同时,可以使第一子显示区111的像素密度小于第二子显示区112的像素密度,如此第一子显示区111的微观间隙要大于第二子显示区112的微观间隙,第一子显示区111对光线的阻隔作用较小,穿过第一子显示区111的光线的透过率较高。

在某些实施方式中,显示屏10由独立控制的第一子屏16与第二子屏17组成时,第一子屏16的像素密度和第二子屏17的像素密度也可以相同或不同。在第一子屏16的像素密度和第二子屏17的像素密度不同时,可以使第一子屏16的像素密度小于第二子屏17的像素密度,如此第一子屏16的微观间隙要大于第二子屏17的微观间隙,第一子屏16对光线的阻隔作用较小,穿过第一子屏16的光线的透过率较高。举例来说,当第二子屏17为oled显示屏95或microled显示屏97,第一子屏16为lcd显示屏93时,一般地,lcd显示屏93的像素密度相较于oled显示屏95或microled显示屏的像素密度来得低,lcd显示屏93的透光率更高。

在某些实施方式中,显示屏10还可包括非显示区,非显示区可以形成在显示区11的周缘。非显示区可以不用于显示,非显示区可用于与壳体30结合或用于走线,例如可以将非显示区与壳体30通过粘胶结合,而不会影响显示区11的显示功能。显示屏10还可以是集成有触控功能的触控显示屏,用户获取显示屏10显示的影像信息后,可以在显示屏10上进行触控以实现预定的交互操作。

请继续结合图1,结构光组件20可以利用结构光获取目标物体的深度信息,以用于三维建模、生成三维图像、测距等。结构光组件20可以安装在电子装置1000的壳体30内,具体可以安装在支架上后,再将支架及结构光组件20一同安装在壳体30内。结构光组件20可以包括结构光投射器21、结构光摄像头22及泛光灯23。

请参阅图1至3、及图5,结构光投射器21设置在显示屏10的背面13所在的一侧,或者说,结构光投射器21设置在第一子显示区111下方,结构光投射器21用于发射穿过第一子显示区111的激光(在显示屏10为第一子屏16和第二子屏17组成时,结构光投射器21设置在第一子屏16下方,结构光投射器21用于发射穿过第一子屏16的激光)。具体地,结构光投射器21可以包括光源211、准直元件212及衍射光学元件213,光源211发出的激光(例如红外激光)先经过准直元件212准直,再经衍射光学元件213衍射后从结构光投射器21中发出,然后再穿过第一子显示区111以投射到外界。第一子显示区111的微观间隙与衍射光学元件213上的衍射结构对光源211发出的光均具有衍射作用。

穿过第一子显示区111并进入外界的激光中,可能同时包含由衍射光学元件213衍射形成的图案(图案中包括多个由衍射光学元件213衍射的斑点),以及由显示屏10的微观间隙衍射形成的图案(图案中包括多个由衍射光学元件213衍射又被显示屏10衍射的斑点),以使穿过第一子显示区111后的散斑图案具有较高的不相关性,利于后续对获得的散斑图案进行处理。在一个例子中,第一子显示区111的透过率可以达到60%或以上,以使结构光投射器21发出的结构光穿过第一子显示区111时损耗较小。

结构光摄像头22可以是红外摄像头,激光发射到目标物体,由目标物体调制后,可以由结构光摄像头22获取,结构光摄像头22接收被调制的激光后得到散斑图像,散斑图像被处理后得到目标物体的深度数据。结构光摄像头22也可以设置在显示屏10的背面13所在的一侧,即设置在显示屏10下,具体可以与结构光投射器21设置在同一个支架上,或者结构光摄像头22直接安装在壳体30上。此时,结构光摄像头22的入光面可以对准显第一子显示区111,被目标物体调制后的激光穿过第一子显示区111后再由结构光摄像头22接收,具体地,被目标物体调的激光可以由显示屏10的微观间隙衍射后,再由结构光摄像头22接收。

泛光灯23可以用于向外发射补充光线,补充光线可以用于在环境光线较弱时补充环境中的光线强度。在一个例子中,补充光线可以是红外光。补充光线发射到目标物体上被目标物体反射后,可以由结构光摄像头22获取以得到目标物体的二维图像,二维图像信息可用于身份识别。泛光灯23也可以设置在显示屏10的背面13所在的一侧,即设置在显示屏10下,具体可以与结构光投射器21及结构光摄像头22设置在同一个支架上。此时,泛光灯23发出的补充光线穿过第一子显示区111的微观间隙后进入外界环境,被反射后的补充光线可以再次穿过微观间隙以被结构光摄像头22接收。

综上,由于结构光摄像头22设置在显示屏10的背面13所在的一侧,且结构光摄像头22接收的是穿过第一子显示区111后的激光,显示屏10上不需要开设与结构光摄像头22对准的开口,电子装置1000的屏占比较高。另外,本发明实施方式将结构光摄像头22设置在显示屏10下方,相较于可以采集深度信息的飞行时间组件而言,结构光组件20获取的深度图像的分辨率较高,在人脸识别中使用分辨率较高的深度图像可以提高人脸识别的准确率,在三维场景建模中使用分辨率较高的深度图像可以提高建模的三维场景与实际场景之前的匹配度。

结构光摄像头22设置在显示屏10下方时,结构光摄像头22接收到的是穿过第一子显示区111后的激光。

此时,若结构光投射器21设置在显示屏10下方,则结构光摄像头10接收的是被目标物体反射后穿过显示屏10时被显示屏10衍射的激光,此时,结构光摄像头22采集的散斑图像中的斑点同时包括激光仅被衍射光学元件213一次衍射并被目标物体反射形成的斑点、激光经过衍射光学元件213一次衍射再由显示屏10二次衍射并被目标物体反射形成的斑点、以及激光经过衍射光学元件213一次衍射再由显示屏10二次衍射并被目标物体反射后又一次由显示屏10三次衍射形成的斑点。在计算深度图像时,包括以下两种计算方式:

(1)直接根据散斑图像中的所有斑点做深度计算。此时,参考图像中的参考斑点同时包括激光仅被衍射光学元件213一次衍射并被标定物体反射形成的参考斑点、激光经过衍射光学元件213一次衍射再由显示屏10二次衍射并被标定物体反射形成的参考斑点、以及激光经过衍射光学元件213一次衍射再由显示屏10二次衍射并被标定物体反射后又一次由显示屏10三次衍射形成的参考斑点。

(2)仅留下激光仅被射光学元件213一次衍射并被目标物体反射形成的斑点并滤掉其余斑点,以根据剩余的斑点做深度计算。此时,参考图像中的参考斑点仅包括激光仅被射光学元件213一次衍射并被标定物体反射形成的参考斑点。其中,经过不同衍射次数衍射后形成的斑点的亮度不同,因此,各类斑点可以通过亮度来区分,从而可以滤掉无需用到的斑点。

若结构光投射器21设置在显示屏10下方,且显示屏10在与结构光投射器21对应的位置形成有图6所示的通槽14,则结构光摄像头22采集的散斑图像中的斑点同时包括激光仅被衍射光学元件213一次衍射并被目标物体反射形成的斑点、以及激光经过衍射光学元件213一次衍射后被目标物体反射再由显示屏10二次衍射形成的斑点。在计算深度图像时,包括以下两种计算方式:

(1)直接根据散斑图像中的所有斑点做深度计算。此时,参考图像中的参考斑点同时包括激光仅被衍射光学元件213一次衍射并被标定物体反射形成的参考斑点、以及激光经过衍射光学元件213一次衍射后被标定物体反射再由显示屏10二次衍射形成的斑点。

(2)仅留下激光仅被射光学元件213一次衍射并被目标物体反射形成的斑点并滤掉其余斑点,以根据剩余的斑点做深度计算。此时,参考图像中的参考斑点仅包括激光仅被衍射光学元件213一次衍射并被标定物体反射形成的参考斑点。其中,经过不同衍射次数衍射后形成的斑点的亮度不同,因此,各类斑点可以通过亮度来区分,从而可以滤掉无需用到的斑点。

请参阅图6,在某些实施方式中,显示屏10形成有通槽14,通槽14不具有显示功能。通槽14贯穿正面12及背面13。结构光投射器21设置在显示屏10的背面13所在的一侧的同时,结构光投射器21发射穿过通槽14的激光。

此时,结构光投射器21的入光面可以对准通槽14,结构光投射器21发射的激光穿过通槽14后发射到外界,并被目标物体调制后穿过第一子显示区111后再由结构光摄像头22接收。本实施方式中,由于结构光投射器21发出的激光不需要穿过第一子显示区111的微观间隙,不会由微观间隙再次衍射,结构光摄像头22获取的散斑图像包括的是激光仅被衍射光学元件213一次衍射并被目标物体反射形成的斑点、以及激光经过衍射光学元件213一次衍射后被目标物体反射再由显示屏10二次衍射形成的斑点这两类斑点,可以减少后续基于散斑图像计算深度图像的处理难度。

具体地,在如图7所示的例子中,通槽14包括形成在显示屏10的边缘上的缺口141,或者说,通槽14与显示屏10的边缘相交。缺口141具体可以形成在显示屏10的上边缘、下边缘、左边缘、右边缘等任意一个或多个边缘上。缺口141的形状可以是三角形、半圆形、矩形、跑道形等任意形状,在此不作限制。

在如图8所示的例子中,通槽14包括与显示屏10的边缘间隔的通孔142,或者说,通槽14开设在显示屏10的边缘围成的范围内。通孔142具体可以靠近显示屏10的上边缘、下边缘、左边缘、右边缘等任意一个或多个边缘上。通孔142的形状可以是三角形、圆形、矩形、跑道形等任意形状,在此不作限制。

在一些例子中,通槽14也可以同时包括上述的缺口141及通孔142。缺口141及通孔142的数量可以相等或不相等。

请参阅图9,在某些实施方式中,泛光灯23设置在显示屏10的背面13所在的一侧的同时,泛光灯23用于发射穿过通槽14的补充光线。

此时,补充光线穿过通槽14后直接发射到外界,补充光线不会在穿过显示区11的过程中被削弱,保证目标物体接收到较多的补光量。

与结构光投射器21类似,如图10所示,通槽14包括形成在显示屏10的边缘上的缺口141,或者说,通槽14与显示屏10的边缘相交。缺口141具体可以形成在显示屏10的上边缘、下边缘、左边缘、右边缘等任意一个或多个边缘上。缺口141的形状可以是三角形、半圆形、矩形、跑道形等任意形状,在此不作限制。

或者,如图11所示,通槽14包括与显示屏10的边缘间隔的通孔142,或者说,通槽14开设在显示屏10的边缘围成的范围内。通孔142具体可以靠近显示屏10的上边缘、下边缘、左边缘、右边缘等任意一个或多个边缘上。通孔142的形状可以是三角形、圆形、矩形、跑道形等任意形状,在此不作限制。

另外,在图9至图11所示的例子中,泛光灯23与结构光投射器21可以对应同一个通槽14。在图12所示例子中,泛光灯23与结构光投射器21可以对应不同的通槽14。

请参阅图3、图6、图9及图12,在某些实施方式中,电子装置1000还包括盖板40,盖板40设置在显示屏10的正面12所在的一侧。当显示屏10开设有通槽14时,盖板40的与通槽14对应的区域上设置有红外透过层50。

盖板40可以由玻璃或者蓝宝石等透光性能较好的材料制成。红外透过层50可以是红外透过油墨或红外透过膜,红外透过层50对红外光(例如波长为940纳米的光)具有较高的透过率,例如透过率可以达到85%或以上,而对红外光以外的光线的透过率较低或者使得红外光以外的光线完全不能透过。因此,用户难以通过盖板40看到与通槽14对准的结构光投射器21或者泛光灯23,电子装置1000的外观较美观。

请参阅图13,在某些实施方式中,电子装置1000还包括盖板40,盖板40设置在显示屏10的正面12所在的一侧,盖板40的与结构光投射器21对应的区域形成有红外增透膜60。

红外增透膜60可以增加红外光的透过率,当结构光投射器21投射红外激光时,红外增透膜60可以增加红外激光穿过盖板40的透过率,以减少红外激光穿过盖板40时的损耗,进而降低电子装置1000的功耗。具体地,红外增透膜60可以镀在盖板40的上表面、或下表面、或同时镀在上表面及下表面。

当然,盖板40上与结构光摄像头22对应的区域也可以形成有红外增透膜60,以减少外界的红外光到达结构光摄像头22前穿过盖板40的损耗。盖板40上与泛光灯23对应的区域也可以形成有红外增透膜60,以减少泛光灯23发出的补充光线在穿过盖板40时的损耗。此时盖板40上未与结构光投射器21、结构光摄像头22及泛光灯23对应的区域可以形成有可见光增透膜80,以提高显示屏10发出的可见光穿过盖板40时的透过率。

请参阅图14,在某些实施方式中,显示屏10的与结构光摄像头22对应的区域形成有红外增透膜60。

红外增透膜60可以增加红外光的透过率,当结构光摄像头22接收红外激光时,红外增透膜60可以增加红外激光穿过显示屏10的透过率,以减少红外激光穿过显示屏10时的损耗,使得采集的散斑图案更加清晰,有利于提升深度测量的准确度。具体地,红外增透膜60可以形成在显示屏10的正面12、或背面13、或同时形成显示屏10的正面12或背面13。在一个例子中,红外增透膜60还可以形成在显示屏10的内部,例如当显示屏10为液晶显示屏时,红外增透膜60可以形成在显示屏10内的偏光片上、或者形成在显示屏10的电极板上等。当然,当显示屏10与结构光投射器21对应的位置未开设通槽14时,显示屏10与结构光投射器21对应的区域也可以形成红外增透膜60。当显示屏10与泛光灯23对应的位置未开设通槽14时,显示屏10与泛光灯23对应的区域也可以形成红外增透膜60。

请参阅图15,在某些实施方式中,显示屏10的与结构光摄像头22对应的区域形成有红外透过层50。如上所述,红外透过层50对红外光具有较高的透过率,而对红外光以外的光线(如可见光)透过率较低或者使得红外光以外的光线(如可见光)完全不能透过,可以减小穿过显示屏10的红外光以外的光线对结构光摄像头22的影响。

同时,当显示屏10与结构光投射器21对应的位置未开设通槽14时,显示屏10与结构光投射器21对应的区域也可以形成红外透过层50,从而防止出射到外界的激光的能量损耗过大。当显示屏10与泛光灯23对应的位置未开设通槽14时,显示屏10与泛光灯23对应的区域也可以形成红外透过层50。

请参阅图16,在某些实施方式中,显示屏10形成有贯穿正面12及背面13的通槽14。电子装置1000还包括可见光摄像头70,可见光摄像头70与通槽14对准设置。盖板40上与通槽14对应的区域形成有可见光增透膜80、及/或红外截止膜90。

可见光摄像头70可用于接收穿过盖板40和通槽14的可见光以获取影像。在盖板40上与通槽14对应的区域形成可见光增透膜80可以增加可见光穿过盖板40时的透过率,以便于提高可见光摄像头70的成像质量。在盖板40上与通槽14对应的区域形成红外截止膜90可以降低红外光穿过盖板40时的透过率,或者完全阻止红外光进入可见光摄像头70,以减少红外光对可见光摄像头70成像时的影响。

请一并参阅图1和图17,本申请还提供一种控制方法,可以用于上述任意一项实施方式所述的电子装置1000。其中,第一子显示区111和第二子显示区112可以独立控制。结构光摄像头22与第一子显示区111对应。结构光摄像头22可用于接收被反射且穿过第一子显示区的激光。控制方法包括:

01:判断结构光摄像头22是否开启;及

02:在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示。

请参阅图18,本申请还提供一种控制装置400。本申请的控制方法可以由本申请的控制装置400实现。控制装置包括判断模块401和控制模块402。步骤01可以由判断模块401实现。步骤02可以由控制模块402实现。也即是说,判断模块401可用于判断结构光摄像头22是否开启。控制模块402可用于在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示。

请参阅图1,本申请的控制方法还可以由本申请的电子装置1000实现,即在结构光摄像头22开启时,第一子显示区111和第二子显示区112以不同的显示状态显示。在某些实施方式中,电子装置1000还包括处理器200,其中,步骤01和步骤02均可以由处理器200实现。

具体地,在结构光摄像头22开启时,结构光摄像头22接收穿过第一子显示区111的被调制后的激光,此时,第一子显示区111用于显示影像的光线会干扰结构光摄像头22,从而导致结构光摄像头22获得的散斑图像存在较大误差,无法准确地获得目标物体的深度信息。那么,在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示,用户可以控制第一子显示区111的显示状态以适应结构光摄像头22的要求,以提高获取的深度图像的精度,同时控制第二子显示区112的显示状态以适应用户的观看要求,以提高用户的使用体验。

可以理解,在使用中,结构光摄像头22与结构光投射器21可以是同时开启,或者二者开启的时间间隔非常小,所以上述的结构光摄像头22开启的时刻,也即可以看作是结构光投射器21开启的时刻。

请参阅图1,在某些实施方式中,在显示屏10为一个独立的屏结构(显示屏10可以是oled显示屏95或microled显示屏97),或者显示屏10包括两个独立的子显示屏,且第一子屏16和第二子屏17均为自发光的显示屏(第一子屏16和第二子屏17均为oled显示屏95,或第一子屏16和第二子屏17均为microled显示屏97)时,若结构光摄像头22开启,则第一子显示区111关闭,第二子显示区112开启。

此时,请参阅图19,步骤02在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示包括:

021:在结构光摄像头22开启时,控制第一子显示区111关闭,控制第二子显示区112开启。

请再参阅图18,步骤021可以由控制模块402实现。也即是说,控制模块402还可用于在结构光摄像头22开启时,控制第一子显示区111关闭,控制第二子显示区112开启。

请参阅图1,在某些实施方式中,在步骤021还可以由处理器200实现。

结构光摄像头22在接收被反射回的激光时,如果此时第一子显示区111处于开启状态,第一子显示区111发出的光线或者第一子显示区111内部存在的光线可能会对结构光摄像头22产生干扰,影响结构光组件20检测目标物体的深度信息的准确性。本实施方式中,在结构光摄像头22开启时,第一显示区111关闭,即第一子显示区111不显示影像,避免第一子显示区111对结构光摄像头22产生干扰,同时,第二子显示区112开启,用户依然可以依靠第二子显示区112显示的影像来获取信息或进行交互,不影响电子装置1000的其余功能的使用。

请参阅图1,在某些实施方式中,在显示屏10为一个独立的屏结构(显示屏10可以是oled显示屏95或microled显示屏97),或者显示屏10包括两个独立的子显示屏,且第一子屏16和第二子屏17均为自发光的显示屏(第一子屏16和第二子屏17均为oled显示屏95,或第一子屏16和第二子屏17均为microled显示屏97)时,若结构光摄像头22开启,则第一子显示区111以第一亮度显示,第二子显示区112以第二亮度显示。

此时,请参阅图20,步骤02在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示包括:

022:在结构光摄像头22开启时,控制第一子显示区111以第一亮度显示,第二子显示区112以第二亮度显示。

请参阅图18,在某些实施方式中,步骤022可以由控制模块402实现。也即是说,控制模块402还可用于在结构光摄像头22开启时,控制第一子显示区111以第一亮度显示,第二子显示区112以第二亮度显示。

请参阅图1,在某些实施方式中,步骤022还可以由处理器200实现。

结构光摄像头22开启时,第一子显示区111和第二子显示区112均可以处于开启状态,以不影响显示屏10显示的影响的整体性,同时,第一子显示区111的亮度小于第二子显示区112的显示亮度,以减小第一子显示区111发出的光线的强度,进而减小对结构光摄像头22的干扰。

此外,在一些例子中,在结构光摄像头22开启时,第一子显示区111可以被处理器200控制以最低亮度显示,而第二子显示区112的显示亮度不变;或者依据不同的使用场景,在结构光摄像头22开启时,第一子显示区111可以被控制以不同的亮度显示,例如,在支付场景,对深度信息获取的精度要求较高,结构光摄像头22开启时,第一子显示区111以最低亮度显示;而在解锁场景,对深度信息获取的精度要求相对支付场景要低,结构光摄像头22开启时,第一子显示区111以高于最低亮度的亮度进行显示。

请参阅图1,在某些实施方式中,在显示屏10为一个独立的屏结构(显示屏10可以是oled显示屏95或microled显示屏97),或者显示屏10包括两个独立的子显示屏,且第一子屏16和第二子屏17均为自发光的显示屏(第一子屏16和第二子屏17均为oled显示屏95,或第一子屏16和第二子屏17均为microled屏97)时,若结构光摄像头22关闭,则第一子显示区22和第二子显示区22均开启。

此时,请再参阅图17,控制方法还包括:

03:在结构光摄像头22关闭时,控制第一子显示区22和第二子显示区22均开启。

请再参阅图18,在某些实施方式中,步骤03可以由控制模块402实现。也即是说,控制模块402还可用于在结构光摄像头22关闭时,控制第一子显示区22和第二子显示区22均开启。

请参阅图1,在某些实施方式中,步骤03还可以由处理器200实现。

在结构光摄像头22关闭时,也就意味着用户此时并不需要使用结构光摄像头22,即,此时结构光摄像头22并不需要接收被反射并穿过第一子显示区111的激光,因此,控制第一子显示区111和第二子显示区112均开启,使得整个显示屏10均用于显示影像,以提升用户使用电子装置1000时的观感。

请参阅图1,可以理解,在第一子显示区111和第二子显示区112均开启或以不同的亮度显示时,第一子显示区111显示的画面和第二子显示区112显示的画面可以共同形成完整的显示画面,例如,电子装置1000正在播放电影的过程中,显示屏10要显示其中一帧电影画面,该电影画面中有一颗树、一个男人、一个女人,则可以是男人全部位于第二子显示区112内,女人的大部分身子在第二子显示区112内,手臂在第一子显示区111内。或者;第一子显示区111显示的画面和第二子显示区112显示的画面为两个独立的显示画面,例如,电子装置1000当前正在执行播放电影的任务,则电影画面在第二子显示区112显示,而第一子显示区111可以同步显示电子装置1000的电池电量、网络连接状态、系统时间等,或者同步显示即时通讯的消息或各应用程序的消息通知等。

请参阅图1和图4,,在某些实施方式中,在显示屏10由独立控制的第一子屏16和第二子屏17组成时,且第一子屏16和第二子屏17均为通过背光源发光的显示屏,或者第一子屏16和第二子屏17中的一者为自发光的显示屏,另一者为通过背光源发光的显示屏时,若结构光摄像头22开启,则第一子屏16关闭,第二子屏17开启。

此时,请参阅图21,步骤02在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示包括:

023:在结构光摄像头22开启时,控制第一子屏16关闭,控制第二子屏17开启。

请再参阅图18,步骤023可以由控制模块402实现。也即是说,控制模块402还可用于在结构光摄像头22开启时,控制第一子屏16关闭,控制第二子屏17开启。

请参阅图1,在某些实施方式中,在步骤023还可以由处理器200实现。

结构光摄像头22在接收被反射回的激光时,如果此时第一子屏16处于开启状态,第一子屏16发出的光线或者第一子屏16内部存在的光线可能会对结构光摄像头22产生干扰,影响结构光组件20检测目标物体的深度信息的准确性。本实施方式中,在结构光摄像头22开启时,第一子屏16关闭,即第一子屏16不显示影像,避免第一子屏16对结构光摄像头22产生干扰,同时,第二子屏17开启,用户依然可以依靠第二子屏17显示的影像来获取信息或进行交互,不影响电子装置1000的其余功能的使用。

请参阅图1和图4,在某些实施方式中,在显示屏10由独立控制的第一子屏16和第二子屏17组成时,且第一子屏16和第二子屏17均为通过背光源发光的显示屏,或者第一子屏16和第二子屏17中的一者为自发光的显示屏,另一者为通过背光源发光的显示屏时,若结构光摄像头22开启,则第一子屏16以第一亮度显示,第二子屏17以第二亮度显示。

此时,请参阅图22,步骤02在结构光摄像头22开启时,控制第一子显示区111和第二子显示区112以不同的显示状态显示包括:

024:在结构光摄像头22开启时,控制第一子屏16以第一亮度显示,第二子屏17以第二亮度显示。

请再参阅图18,在某些实施方式中,步骤024可以由控制模块402实现。也即是说,控制模块402还可用于在结构光摄像头22开启时,控制第一子屏16以第一亮度显示,第二子屏17以第二亮度显示。

请参阅图1,在某些实施方式中,步骤024还可以由处理器200实现。

结构光摄像头22开启时,第一子屏16和第二子屏17均可以处于开启状态,以不影响显示屏10显示的影响的整体性,同时,第一子屏16的亮度小于第二子屏17的显示亮度,以减小第一子屏16发出的光线的强度,进而减小对结构光摄像头22的干扰。

此外,在一些例子中,在结构光摄像头22开启时,第一子屏16可以被处理器200控制以最低亮度显示,而第二子屏17的显示亮度不变;或者依据不同的使用场景,在结构光摄像头22开启时,第一子屏16可以被控制以不同的亮度显示,例如,在支付场景,对深度信息获取的精度要求较高,结构光摄像头22开启时,第一子屏16以最低亮度显示;而在解锁场景,对深度信息获取的精度要求相对支付场景要低,结构光摄像头22开启时,第一子屏16以高于最低亮度的亮度进行显示。

请参阅图1和图4,在某些实施方式中,在显示屏10由独立控制的第一子屏16和第二子屏17组成时,且第一子屏16和第二子屏17均为通过背光源发光的显示屏,或者第一子屏16和第二子屏17中的一者为自发光的显示屏,另一者为通过背光源发光的显示屏时,若结构光摄像头22关闭,则第一子屏16和第二子屏17均开启。

此时,请参阅图21,控制方法还包括:

04:在结构光摄像头22关闭时,控制第一子屏16和第二子屏17均开启。

请再参阅图18,在某些实施方式中,步骤04可以由控制模块402实现。也即是说,控制模块402还可用于在结构光摄像头22关闭时,控制第一子屏16和第二子屏17均开启。

请参阅图1,在某些实施方式中,步骤04还可以由处理器200实现。

在结构光摄像头22关闭时,也就意味着用户此时并不需要使用结构光摄像头22,即,此时结构光摄像头22并不需要接收被反射并穿过第一子屏16的激光,因此,控制第一子屏16和第二子屏17均开启,使得整个显示屏10均用于显示影像,以提升用户使用电子装置1000时的观感。

请参阅图1和图4,可以理解,在第一子屏16和第二子屏17均开启或以不同的亮度显示时,第一子屏16显示的画面和第二子屏17显示的画面可以共同形成完整的显示画面,例如,电子装置1000正在播放电影的过程中,显示屏10要显示其中一帧电影画面,该电影画面中有一颗树、一个男人、一个女人,则可以是男人全部位于第二子屏17内,女人的大部分身子在第二子屏17内,手臂在第一子屏16内。或者,第一子屏16显示的画面和第二子屏17显示的画面为两个独立的显示画面,例如,电子装置1000当前正在执行播放电影的任务,则电影画面在第二子屏17显示,而第一子屏16可以同步显示电子装置1000的电池电量、网络连接状态、系统时间等,或者同步显示即时通讯的消息或各应用程序的消息通知等。

在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。

尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1