画质调整方法、电子设备及存储介质与流程

文档序号:31660235发布日期:2022-09-27 22:57阅读:147来源:国知局
画质调整方法、电子设备及存储介质与流程

1.本技术实施例涉及通信技术领域,尤其涉及一种画质调整方法、电子设备及存储介质。


背景技术:

2.目前,随着电视行业以及面板技术的不断发展。越来越多的智能电视出现在各家各户。通常,在出厂前,智能电视的画质参数由专业的画质人员进行调整后,内置到智能电视中。然而,在家庭场景中,由于用户所处的家庭环境光与出厂校正的环境光不一致,会导致用户感受到的色彩与最优校正的色彩不一致,进而导致用户的感受度变差。


技术实现要素:

3.本技术实施例提供了一种画质调整方法、电子设备及存储介质,以提供一种通过手机对智能电视的画质进行调整的方式。
4.第一方面,本技术实施例提供了一种画质调整方法,应用于第一设备,包括:
5.响应于用户的预设操作,与第二设备建立通信连接;具体地,该第一设备可以是手机等具有拍摄功能的电子设备。该通信连接可以是本地连接,例如,wifi连接;该通信连接也可以是互联网连接。
6.向第二设备发送显示指令,该显示指令用于指示第二设备显示测试图片;具体地,该显示指令可以包括测试图片的类型,该测试图片的类型可以用于指示第二设备显示什么类型的测试图片。该测试图片的类型可以包括正常类型及特殊类型。正常图片的类型可以用于校正色彩精度及亮度。特殊图片的类型可以用于校正白平衡。
7.响应于接收到的第二设备发送的第一拍摄指令,拍摄第二设备显示的测试图片,得到测试图像;具体地,测试图片与测试图像对应。
8.计算测试图像的画质参数,并将测试图像的画质参数发送给第二设备。具体地,该画质参数可以包括色坐标及亮度。
9.本技术实施例中,通过手机对大屏显示的测试图片进行拍摄,并计算拍摄图片的画质参数,将该画质参数发送给大屏,使得大屏可以基于接收到的画质参数进行判断,由此可以实现对画质的校正,方便用户的操作,提高画质调整的效率,节省画质调整的成本。
10.其中一种可能的实现方式中,向第二设备发送显示指令之前,还包括:
11.检测环境光及测试距离是否符合预设条件,根据检测结果确定是否向第二设备发送显示指令。
12.本技术实施例中,手机在拍摄测试图片之前,经过了环境光及测试距离检测,由此可以进一步提高拍摄质量,进而可以提高测试图片的画质参数的计算准确率。
13.其中一种可能的实现方式中,将测试图像的画质参数发送给第二设备之后,还包括:
14.响应于接收到的第二设备发送的第二拍摄指令,拍摄第二设备显示的验证图片,
得到验证图像;
15.计算验证图像的画质参数,并将验证图像的画质参数发送给第二设备。
16.本技术实施例中,在对测试图片进行判断后,再次显示验证图片,以进一步对调整画质后的图片进行验证,由此可以提高画质调整的准确度。
17.其中一种可能的实现方式中,还包括:
18.接收第二设备发送的画质调整完成通知,画质调整完成通知用于通知第一设备画质调整已完成。
19.其中一种可能的实现方式中,画质参数包括色坐标及亮度。
20.本技术实施例还提供了一种画质调整方法,应用于第二设备,该第二设备与第一设备已建立通信连接,包括:
21.响应于接收到的第一设备发送的显示指令,显示测试图片;向第一设备发送第一拍摄指令;接收第一设备发送的测试图像的画质参数;其中,测试图像与测试图片对应;基于测试图像的画质参数,对测试图片的画质进行调整。具体地,该第二设备可以是大屏等具有显示功能的电子设备。
22.其中一种可能的实现方式中,还包括:
23.显示验证图片;其中,验证图片由测试图片进行画质调整后获得;
24.接收第一设备发送的验证图像的画质参数;其中,验证图像与验证图片对应;
25.基于验证图像的画质参数,对验证图片的画质进行调整。
26.其中一种可能的实现方式中,基于验证图像的画质参数,对验证图片的画质进行调整包括:
27.将验证图像的画质参数与预置画质参数进行比较,根据比较结果判断验证图片的画质是否需要调整;
28.若需要调整,则再次显示测试图片,以完成画质调整;
29.若不需要调整,则向第一设备发送画质调整完成通知。
30.为了提高验证图片的选取的灵活性,以及提高验证效率;其中一种可能的实现方式中,测试图片包括多张图片,验证图片的数量由测试图片的数量确定。
31.其中一种可能的实现方式中,测试图片为单张特殊图片,该单张特殊图片用于校正白平衡,显示测试图片包括:
32.显示单张特殊图片。
33.其中一种可能的实现方式中,测试图片为多张正常图片,该正常图片用于校正色彩精度及色域,显示测试图片包括:
34.依次显示多张正常图片。
35.第二方面,本技术实施例提供一种画质调整装置,应用于第一设备,包括:
36.通信连接模块,用于响应于用户的预设操作,与第二设备建立通信连接;
37.指示模块,用于向第二设备发送显示指令,显示指令用于指示第二设备显示测试图片;
38.第一拍摄模块,用于响应于接收到的第二设备发送的第一拍摄指令,拍摄第二设备显示的测试图片,得到测试图像;
39.第一计算模块,用于计算测试图像的画质参数;
40.第一发送模块,用于将测试图像的画质参数发送给第二设备。
41.其中一种可能的实现方式中,上述装置还包括:
42.检测模块,用于检测环境光及测试距离是否符合预设条件,根据检测结果确定是否向第二设备发送显示指令。
43.其中一种可能的实现方式中,上述装置还包括:
44.第二拍摄模块,用于响应于接收到的第二设备发送的第二拍摄指令,拍摄第二设备显示的验证图片,得到验证图像;
45.第二计算模块,用于计算验证图像的画质参数;
46.第二发送模块,用于将验证图像的画质参数发送给第二设备。
47.其中一种可能的实现方式中,上述装置还包括:
48.接收模块,用于接收第二设备发送的画质调整完成通知,画质调整完成通知用于通知第一设备画质调整已完成。
49.其中一种可能的实现方式中,画质参数包括色坐标及亮度。
50.本技术实施例还提供一种画质调整装置,应用于第二设备,第二设备与第一设备已建立通信连接,包括:
51.显示模块,用于响应于接收到的第一设备发送的显示指令,显示测试图片;
52.指示模块,用于向第一设备发送第一拍摄指令;
53.接收模块,用于接收第一设备发送的测试图像的画质参数;其中,测试图像与测试图片对应;
54.画质调整模块,用于基于测试图像的画质参数,对所述图片的画质进行调整。
55.其中一种可能的实现方式中,上述装置还包括:
56.验证模块,用于显示验证图片;其中,验证图片由测试图片进行画质调整后获得;接收第一设备发送的验证图像的画质参数;其中,验证图像与验证图片对应;基于验证图像的画质参数,对验证图片的画质进行调整。
57.其中一种可能的实现方式中,上述画质调整模块还用于
58.将验证图像的画质参数与预置画质参数进行比较,根据比较结果判断验证图片的画质是否需要调整;
59.若需要调整,则再次显示测试图片,以完成画质调整;
60.若不需要调整,则向第一设备发送画质调整完成通知。
61.其中一种可能的实现方式中,测试图片包括多张图片,验证图片的数量由测试图片的数量确定。
62.其中一种可能的实现方式中,测试图片为单张特殊图片,单张特殊图片用于校正白平衡,上述显示模块还用于显示单张特殊图片。
63.其中一种可能的实现方式中,测试图片为多张正常图片,正常图片用于校正色彩精度及色域,上述显示模块还用于依次显示多张正常图片。
64.第三方面,本技术实施例提供一种第一设备,包括:
65.存储器,上述存储器用于存储计算机程序代码,上述计算机程序代码包括指令,当上述第一设备从上述存储器中读取上述指令,以使得上述第一设备执行以下步骤:
66.响应于用户的预设操作,与第二设备建立通信连接;
67.向第二设备发送显示指令,显示指令用于指示第二设备显示测试图片;
68.响应于接收到的第二设备发送的第一拍摄指令,拍摄第二设备显示的测试图片,得到测试图像;
69.计算测试图像的画质参数,并将测试图像的画质参数发送给第二设备。
70.其中一种可能的实现方式中,上述指令被上述第一设备执行时,使得上述第一设备执行向第二设备发送显示指令的步骤之前,还执行以下步骤:
71.检测环境光及测试距离是否符合预设条件,根据检测结果确定是否向第二设备发送显示指令。
72.其中一种可能的实现方式中,上述指令被上述第一设备执行时,使得上述第一设备执行将测试图像的画质参数发送给第二设备的步骤之后,还执行以下步骤:
73.响应于接收到的第二设备发送的第二拍摄指令,拍摄第二设备显示的验证图片,得到验证图像;
74.计算验证图像的画质参数,并将验证图像的画质参数发送给第二设备。
75.其中一种可能的实现方式中,上述指令被上述第一设备执行时,使得上述第一设备还执行以下步骤:
76.接收第二设备发送的画质调整完成通知,画质调整完成通知用于通知第一设备画质调整已完成。
77.其中一种可能的实现方式中,画质参数包括色坐标及亮度。
78.本技术实施例还提供一种第二设备,包括:
79.存储器,上述存储器用于存储计算机程序代码,上述计算机程序代码包括指令,当上述第二设备从上述存储器中读取上述指令,以使得上述第二设备执行以下步骤:
80.响应于接收到的第一设备发送的显示指令,显示测试图片;
81.向第一设备发送第一拍摄指令;
82.接收第一设备发送的测试图像的画质参数;其中,测试图像与所述测试图片对应;
83.基于测试图像的画质参数,对测试图片的画质进行调整。
84.其中一种可能的实现方式中,上述指令被上述第二设备执行时,使得上述第二设备还执行以下步骤:
85.显示验证图片;其中,验证图片由测试图片进行画质调整后获得;
86.接收第一设备发送的验证图像的画质参数;其中,验证图像与验证图片对应;
87.基于验证图像的画质参数,对验证图片的画质进行调整。
88.其中一种可能的实现方式中,上述指令被上述第二设备执行时,使得上述第二设备执行基于验证图像的画质参数,对验证图片的画质进行调整的步骤包括:
89.将验证图像的画质参数与预置画质参数进行比较,根据比较结果判断验证图片的画质是否需要调整;
90.若需要调整,则再次显示测试图片,以完成画质调整;
91.若不需要调整,则向第一设备发送画质调整完成通知。
92.其中一种可能的实现方式中,测试图片包括多张图片,验证图片的数量由测试图片的数量确定。
93.其中一种可能的实现方式中,测试图片为单张特殊图片,单张特殊图片用于校正
白平衡,上述指令被上述第二设备执行时,使得上述第二设备执行显示测试图片的步骤包括:
94.显示单张特殊图片。
95.其中一种可能的实现方式中,测试图片为多张正常图片,正常图片用于校正色彩精度及色域,上述指令被上述第二设备执行时,使得上述第二设备执行显示测试图片的步骤包括:
96.依次显示多张正常图片。
97.第四方面,本技术实施例提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行如第一方面所述的方法。
98.第五方面,本技术实施例提供一种计算机程序,当上述计算机程序被计算机执行时,用于执行第一方面所述的方法。
99.在一种可能的设计中,第五方面中的程序可以全部或者部分存储在与处理器封装在一起的存储介质上,也可以部分或者全部存储在不与处理器封装在一起的存储器上。
附图说明
100.图1为本技术实施例提供的显示效果示意图;
101.图2为本技术实施例提供的色度计工作原理图;
102.图3为本技术实施例提供的色彩校正系统结构示意图;
103.图4为本技术实施例提供的滤光片配置效果示意图;
104.图5为本技术实施例提供的cie功率响应曲线示意图;
105.图6为本技术实施例提供的应用场景示意图;
106.图7为本技术提供的画质调整方法一个实施例的流程示意图;
107.图8为本技术实施例提供的wifi连接流程示意图;
108.图9为本技术实施例提供的色度映射示意图;
109.图10为本技术实施例提供的摩尔纹效果示意图;
110.图11为本技术实施例提供的cnn模型结构示意图;
111.图12为本技术实施例提供的信号对数分布效果示意图;
112.图13为本技术实施例提供的训练效果示意图;
113.图14为本技术提供的画质调整方法另一个实施例的流程示意图;
114.图15为本技术提供的画质调整装置一个实施例的结构示意图;
115.图16为本技术提供的画质调整装置另一个实施例的结构示意图;
116.图17为本技术实施例提供的电子设备的结构示意图。
具体实施方式
117.下面将结合本技术实施例中的附图,对本技术实施例中的技术方案进行描述。其中,在本技术实施例的描述中,除非另有说明,“/”表示或的意思,例如,a/b可以表示a或b;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,a和/或b,可以表示:单独存在a,同时存在a和b,单独存在b这三种情况。
118.以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性
或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本技术实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
119.目前,智能电视的屏幕通常有两种类型:lcd及oled。其中,lcd屏幕基板是无机玻璃材料,oled基板是有机高分子材料。而oled屏幕会渐渐老化,且oled屏幕的自发光特性也会有如下缺点:
120.a、亮度衰退;
121.b、屏幕偏色;
122.c、图像残留。
123.由于以上各种因素,可能导致用户的观看体验较差,图1为观看效果图。
124.现有技术中,为了解决以上问题,一种方式是使用专业设备(例如,色度计)采集每个像素点的rgb三原色坐标及亮度值的图像,然后通过电脑与智能电视相连接,由专业人员进行手工调整。
125.色度计是模仿人眼感知颜色的方式,图2为色度计的工作原理图。如图2所示,入射光从色度计的光源照射出,射在被测样品的表面,当光线被样品吸收后再反射回去的时候,经过了三色滤色片(例如,rgb红绿蓝滤色片)过滤,滤色片可以提取三刺激(rgb)值,与用户的眼睛所见的颜色相匹配。
126.图3是色彩校正系统。如图3所示,模式选择设备可以发射标准的pattern(纯绿/纯红/纯白等等)给电视,同时电脑可以从pattern端获取标准pattern的rgb值。色度计可以检测出当前屏幕的rgb值。色彩软件一方面获取pattern的rgb值和彩色分析仪的rgb值,另一方面计算rgb的差值,生成包括颜色特征和色域范围等信息的配置文件。接着,电脑可以将配置文件传输给电视,使得电视生成对应的图像质量(picture quality,pq)文件。
127.然而,上述方式中采用的色度计等设备价值不菲,会导致给企业或个人带来巨额的成本,且需要专业的色彩软件以及专业人员配合测试,操作不便。
128.另一种方式是使用成像式光谱色彩亮度计。在光学结构上,手机摄像头为了获得轻薄设计,一般采用拜耳阵列的滤光片,并直接集成到互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)的像素(pixel)点上,通过插值获得完整图像。而成像式光谱色度亮度计作为专业设备,会选择转盘式滤光片,且滤光片符合cie响应曲线,使得有效像素更高,色度还原度及精度更高。图4为滤光片配置效果图。
129.在采集图像的后续处理算法上,手机拍照会让图像看起来更加好看,也就是生成视觉上更精美的图片,但这个过程会引进大量的非线性变换,使得真实的光学信号被严重扭曲,压缩到一个很窄的人眼敏感谱段;而成像式光谱色度亮度计的后处理算法,则会最大程度的还原物体的真实信息,有利于后续的科学分析。
130.成像式光谱色彩亮度计的基本原理是,任何色彩分解后都能得到不能再分解的三种基本颜色,即通常所说的三原色,在摄像及显示领域使用的即为光学三原色,即红(g)、绿(g)、蓝(b)。其中,三原色在光谱上cie功率响应曲线如图5所示。
131.接着,通过如下积分公式可以计算出三原色值:
132.[0133][0134][0135]
通过对色度的测量可以转换为三原色值的测量,从cie功率响应曲线上来看,三原色曲线有混合,所以需要通常通过红光、绿光和蓝光的滤波片将三原色进行分离后分别进行测量。
[0136]
然而,上述方式中采用的成像式光谱色彩亮度计等设备价值不菲,会导致给企业或个人带来巨额的成本,且需要专业的色彩软件以及专业人员配合测试,操作不便。
[0137]
基于上述问题,本技术实施例提出了一种画质调整方法。
[0138]
现结合图6-图14对本技术实施例提供的画质调整方法进行说明,如图6所示为本技术实施例提供的应用场景,参考图6,上述应用场景包括第一设备10及第二设备20。其中,第一设备10可以是具有拍摄功能的移动终端(例如,手机),第二设备20可以是具有大屏的显示设备(例如,智慧屏)。
[0139]
移动终端也可以称为终端设备、用户设备(user equipment,ue)、接入终端、用户单元、用户站、移动站、移动台、远方站、远程终端、移动设备、用户终端、无线通信设备、用户代理或用户装置。移动终端可以是蜂窝电话、无绳电话、个人数字处理(personal digital assistant,pda)设备、具有无线通信功能的手持设备、计算设备或手持式通信设备、手持式计算设备、卫星无线设备、和/或用于在无线系统上进行通信的其它设备以及下一代通信系统,例如,5g网络中的移动终端或者未来演进的公共陆地移动网络(public land mobile network,plmn)网络中的移动终端等。
[0140]
图7为本技术实施例提供的画质调整方法一个实施例的流程示意图,包括:
[0141]
步骤701,第一设备10向第二设备20发送连接请求,以建立第一设备10与第二设备20之间的连接。
[0142]
具体地,用户可以在第一设备10上进行操作,以启动对第二设备20的画质调整。示例性的,用户可以打开第一设备10中的画质调整应用程序(app)。响应于用户的操作,第一设备10可以向第二设备20发送连接请求,该连接请求可以用于建立第一设备10与第二设备20之间的连接。其中,上述连接可以是互联网连接,上述连接也可以是wifi本地连接。可以理解的是,上述连接的方式并不构成对本技术实施例的限定。
[0143]
图8为建立wifi连接的流程图。如图8所示,第一设备10包括通信模块11及互通服务模块12,第二设备20包括通信模块21及互通服务模块22,上述建立wifi连接可以包括如下子步骤:
[0144]
步骤7011,响应于用户的操作,通信模块11向互通服务模块12发送扫描请求。
[0145]
步骤7012,互通服务模块12接收到通信模块11的扫描请求,执行局域网发现。
[0146]
步骤7013,互通服务模块12与互通服务模块22进行握手通信。
[0147]
步骤7014,互通服务模块12获取第二设备20的设备id。
[0148]
步骤7015,互通服务模块12将第二设备20的设备id发送给通信模块11。
[0149]
步骤7016,响应于用户的选取操作,确定待连接的第二设备20。
[0150]
步骤7017,通信模块11向互通服务模块12发送连接请求。
[0151]
步骤7018,互通服务模块12基于连接请求与互通服务模块22建立连接。
[0152]
步骤7019,互通服务模块22向通信模块21发送连接确认消息,以通知通信模块21连接已成功。
[0153]
步骤701a,互通服务模块12向通信模块11发送连接确认消息,以通知通信模块11连接已成功。
[0154]
步骤702,第一设备10向第二设备20发送测试图片播放请求。
[0155]
具体地,当第一设备10与第二设备20建立连接之后,可以向第二设备20发送测试图片播放请求,其中,该测试图片播放请求用于请求第二设备20显示预置的测试图片。该测试图片可以是pq工程师在实验室中拍摄的标准图片。
[0156]
可以理解的是,测试图片可以包括正常图片及特殊图片。其中,特殊图片可以是一张白色图片,该白色图片可以用于校正白平衡。正常图片可以包括除上述白色图片之外的所有图片,该正常图片可以用于校正色彩精度及色域。本技术实施例以用户请求第二设备20显示特殊图片为例进行说明,由此可以实现对白平衡的校正。
[0157]
可选地,在第一设备10向第二设备20发送测试图片播放请求之前,第一设备10还可以检测当前的测试环境。示例性的,第一设备10可以通过原深感(time of flight,tof)镜头计算测试距离,以及通过环境光传感器计算环境光,并可以将计算获得的测试距离及环境光与预置的测试距离阈值就环境光阈值进行比较,若计算获得的测试距离满足测试距离阈值的条件,以及计算获得的环境光满足环境光阈值的条件,则第一设备10可以向第二设备20发送测试图片播放请求。
[0158]
步骤703,第二设备20接收第一设备10发送的测试图片播放请求,显示测试图片p1。
[0159]
步骤704,第二设备20向第一设备10发送拍摄指令。
[0160]
具体地,第二设备20显示测试图片p1之后,可以向第一设备10发送拍摄指令,其中,该拍摄指令用于对第二设备20中显示的测试图片p1进行拍摄。
[0161]
步骤705,第一设备10拍摄第二设备20中显示的测试图片。
[0162]
具体地,第一设备10在接收到第二设备20发送的拍摄指令后,可以通过相机拍摄第二设备20中显示的测试图片p1,由此可以得到第一图像p1’,其中,所述第一图像p1’与第二设备20中显示的测试图片p1对应。
[0163]
步骤706,第一设备10计算第一图像p1’的色坐标及亮度。
[0164]
具体地,第一设备10拍摄到第一图像p1’后,可以将该第一图像p1’输入预置的画质识别模型进行画质识别,由此可以得到第一图像p1’的色坐标及亮度。
[0165]
其中,上述预置画质识别模型可以通过训练获得。通常,第一设备10中的相机可以包括感光器(sensor)及滤色器(color filter array,cfa),通过上述感光器及滤色器可以将入射光转换为电信号(例如,cfa三原色信号),再经过一系列后期处理(例如,cfa去马赛克、白平衡、gamma校正及图像增强等步骤)形成用户实际看到的照片。其中,cfa三原色信号取决于入射光。理想上,cfa中一个单位的三原色信号和照射在该单位上的光谱存在映射关系。而光谱决定了人眼对色彩的感受。因此,可以根据上述映射关系建模,并可以通过建立的模型进行色度测量,也就是说,可以通过cfa三原色信号,预测对应的人眼感受到的色度。
[0166]
在信号领域中,人眼对色彩的感受普遍采用ciexyz控件进行建模。其中,每一种人
眼感受到的颜色唯一对应一个(x,y,z)坐标。因此,色度测量问题可以等价于cfa三原色信号对xyz的映射。
[0167]
图9为色度映射示意图。在本技术实施例中,由于第二设备20在显示图像时,处理过程相当于把第一设备10中的相机的数据处理过程反过来,例如,把输入电信号转换为光信号。其中,同样需要复杂的信号处理和校准过程。由于内部因素(元件误差)和外部因素(用户所处的光照环境)的存在,第二设备20收到的颜色信号与用户感受到的颜色往往有差异,影响视觉体验。因此,对第二设备20进行色度测量的意义在于量化这种差异。
[0168]
在具体实现时,可以在一个暗室中配置第二设备20,将该第二设备20作为唯一光源。接着,可以让该第二设备20显示srgb色域下的一系列颜色(例如,可以是单一颜色的图片)。然后,可以使用第一设备10对第二设备20显示的图片进行拍摄,由此可以生成对应的raw数据(例如,cfa三原色信号)。通过对不同种颜色的拍摄,可以采集若干数据集,其中,每一种颜色的srgb坐标和ciexyz坐标之间的关系已知,由此可以得到成对的cfa-ciexyz数据,并可以以此来训练模型。
[0169]
然而,由于第一设备10与环境的种种限制,第一设备10输出的raw数据并不是单一颜色。而单一颜色的图片会存在以下局限性:
[0170]
a、广角畸变,图片仅在中央部分色彩较为均匀,而周边亮度变暗。
[0171]
b、摩尔(moire)纹,图片存在周期性的光强变化,形成大致横向的条纹。该条纹周期较大。图10为摩尔纹的效果示意图。
[0172]
c、led排列,放大观察raw数据可见清晰的纵向条纹状纹理,由于第二设备20的显示元件由三原色的led光源合成,在高分辨率下,各光源之间的距离可被清晰观察到。
[0173]
考虑到上述raw数据存在的上述问题,可以截取整个raw数据图正中心的256*256个cfa单元,作为对整个图片做色度标定的依据。其中,每个单元包括4个传感器(为说明方便,下文将“4个传感器”简称为“4个通道”),分别为byyr颜色。
[0174]
接着,可以构造训练集及验证集。示例性的,可以对每种颜色三张raw数据(例如,a、b及c),各截取中心的256*256*4区域,并可以将上述区域分割成8*8=64个互不重叠的分块,也就是说,每个分块的维度为32*32*4。然后,可以将a和b的各分块放入训练集,将c的分块放入验证集,由此可以得到133*64个验证数据的验证集及133*64*2个训练数据的训练集。
[0175]
当构造完训练集及验证集之后,可以构造画质识别模型。其中,该画质识别模型可以采用cnn模型。示例性的,该cnn模型可以包括3*3的卷积层、归一化(batchnorm)层、激励(relu)层及池化层,其中,池化层可以包括最大池化(maxpool)层及平均池化(averagepool)层。图11为cnn模型结构图。如图11所示,最大池化层的采样率和步长为2,平均池化层的采样率及步长为4。上述cnn模型的输入可以是32*32*4的cfa信号,该述cnn模型的输出可以是cielab色坐标l、a及b。
[0176]
进一步地,由于各个通道中raw信号取值的分布中,信号对数的分布更接近对称。因此,在将cfa信号输入cnn前,还可以对cfa信号进行归一化处理。示例性的,可以对cfa信号进行取对数,然后对取对数后的cfa信号进行归一化。图12为信号对数分布效果图。
[0177]
由于cielab具有如下特性:
[0178]
1、视觉平均性,空间内两颜色的欧式距离与人眼感受到的色差呈近似线性,因此,
可以将预测结果和ground truth的欧氏距离作为网络的损失函数。
[0179]
2、取值对称性,lab坐标的三个参数l取值在[0,100],a和b的取值在[128,128],可以很好地进行归一化,且a和b取0时正好代表灰色。
[0180]
因此,在训练时,可以直接使用cielab坐标来更新参数,在预测时,可以将cnn输出的cielab坐标用公式转换为ciexyz。
[0181]
进一步地,在实际预测时,可以截取中央256*256*4的区域后,分割为64个分块,并可以对该64个分块分别预测xyz坐标后再取平均,以增强鲁棒性。
[0182]
图13为训练效果图。如图13所示,经过500周期训练后,验证集平均l2-loss《4e-4,也就是说,输出cielab坐标的误差(距离ground truth的欧氏距离)平均小于2。通常,若cielab控件下平均可注意到的误差为2.3左右,则说明结果在这个数据集上较为理想。
[0183]
步骤707,第一设备10将第一图像p1’的色坐标及亮度发送给第二设备20。
[0184]
步骤708,第二设备20接收并存储第一图像p1’的色坐标及亮度。
[0185]
步骤709,基于第一图像p1’的色坐标及亮度进行画质调整。
[0186]
具体地,上述画质可以包括色坐标及亮度。第二设备20接收到第一设备10发送的第一图像p1’的色坐标及亮度后,可以与预置的色坐标及亮度进行匹配,以对画质进行调整。也就是说,可以对上述测试图片p1的色坐标及亮度进行调整,由此可以得到画质调整后的测试图片t1。其中,上述预置的标准色坐标可以由上述测试图片p1的标准色坐标获得,上述预置的标准亮度可以由上述测试图片p1的标准亮度获得。在具体实现时,该预置的色坐标及亮度可以是在实验室中获取到的基准值,此外,还可以通过实验室获取偏差值。其中,该基准值可以是在实验室获取到的色坐标基准数值及亮度基准数值。该偏差值用于表征色坐标原始值及实际显示值之间的偏差,以及亮度原始值及实际显示值之间的偏差。示例性的,以色坐标为例,假设要显示原始值为128的色坐标,由于周边环境等因素,第二设备20实际显示值要达到131才能达到第二设备20显示数值为128的效果,也就是说,第二设备20实际显示数值为131的色坐标,用户感受到的色坐标为128。而上述偏差值可以是131-128=3。
[0187]
当获取到上述偏差值后,第二设备20可以基于上述偏差值计算上述第一图像p1’的色坐标的第一校正色坐标,以及基于上述偏差值计算上述第一图像p1’的亮度的第一校正亮度。接着,第二设备20可以将上述第一校正色坐标与基准色坐标进行比较,以及将上述第一校正亮度与基准亮度进行比较,由此确定是否当前画质是否需要调整。若上述第一校正色坐标与基准色坐标不匹配,或第一校正亮度与基准亮度不匹配,则确定当前画质需要调整。若上述第一校正色坐标与基准色坐标匹配,且第一校正亮度与基准亮度匹配,则无需进行画质调整。
[0188]
若画质需要调整,则可以基于色坐标比较结果调整测试图片p1的色坐标;以及可以基于亮度比较结果调整测试图片p1的亮度。示例性的,若第一校正色坐标小于基准色坐标,则可以基于预设步长增加测试图片的色坐标的值,若第一校正色坐标大于基准色坐标,则可以基于预设步长减小测试图片的色坐标的值;同样地,若第一校正亮度小于基准亮度,则可以基于预设步长增加测试图片的亮度的值,若第一校正亮度大于基准亮度,则可以基于预设步长减小测试图片的亮度的值。当对测试图片p1进行色坐标及亮度调整后,可以得到验证图片t1,并显示该验证图片t1。
[0189]
步骤710,第二设备20将调整后的测试图片t1作为验证图片t1。
[0190]
步骤711,第二设备20显示该验证图片t1。
[0191]
步骤712,第二设备20向第一设备10发送拍摄指令。
[0192]
步骤713,第一设备10拍摄第二设备20中显示的验证图片t1。
[0193]
具体地,第一设备10拍摄第二设备20中显示的验证图片t1,由此可以得到第二图像t1’。
[0194]
步骤714,第一设备10计算第二图像t1’的色坐标及亮度。
[0195]
步骤715,第一设备10将第二图像t1’的色坐标及亮度发送给第二设备20。
[0196]
步骤716,第二设备20接收并存储第二图像t1’的色坐标及亮度。
[0197]
步骤717,基于第二图像t1’的色坐标及亮度进行画质调整。
[0198]
具体地,第二设备20可以基于上述第二图像t1’的色坐标及亮度进行画质调整。也就是说,第二设备20可以基于上述第二图像t1’的色坐标及亮度确定是否需要对验证图片t1进行画质调整。需要说明的是,本步骤中的对验证图片t1进行画质调整的具体过程可以参考步骤709,在此不再赘述。
[0199]
步骤718,第二设备20确定上述验证图片t1的画质调整结果。
[0200]
具体地,第二设备20完成上述验证图片t1的画质调整后。可以得到上述验证图片t1的画质调整结果。其中,该画质调整结果可以包括需要调整及无需调整。接着,第二设备20可以根据上述验证图片t1的画质调整结果进行判断:
[0201]
若上述验证图片t1的画质调整结果为无需调整,则可以进一步执行步骤719。
[0202]
若上述验证图片t1的画质调整结果为需要调整,则可以重复执行步骤703-步骤717,直到任一次的画质调整结果为无需调整为止,或者达到上述重复执行步骤703-步骤717的预置最大次数时停止画质调整的过程。
[0203]
步骤719,第二设备20向第一设备10发送画质调整完成通知。
[0204]
本技术实施例中,用户通过手机拍摄大屏显示的图片,计算画质参数,并将画质参数发送给大屏,使得大屏基于画质参数进行画质调整,由此可以方便用户的操作,实现对白平衡的校正,节省画质调整的成本。
[0205]
图14为本技术提供的画质调整方法另一个实施例的流程示意图,包括:
[0206]
步骤1401,第一设备10向第二设备20发送连接请求,以建立第一设备10与第二设备20之间的连接。
[0207]
步骤1402,第一设备10向第二设备20发送测试图片播放请求。
[0208]
具体地,该测试图片可以是正常图片。也就是说,本技术实施例以用户请求第二设备20显示正常图片为例进行说明,由此可以实现对色彩精度和色域的校正。
[0209]
步骤1403,第二设备20显示测试图片。
[0210]
具体地,第二设备20接收到第一设备10发送的测试图片播放请求以后,可以获取预置的多张测试图片。优选地,可以是128张正常图片。
[0211]
接着,第二设备20可以在上述多张(例如,128张)测试图片中任意选取一张。
[0212]
步骤1404,第二设备20向第一设备10发送拍摄指令。
[0213]
具体地,该拍摄指令用于拍摄第二设备20中显示的测试图片。示例性的,该测试图片可以是第一测试图片p1。
[0214]
步骤1405,第一设备10拍摄第二设备20中显示的第一测试图片p1。
[0215]
具体地,第一设备10拍摄第二设备20中显示的第一测试图片p1之后,可以得到第一图像p1’。
[0216]
步骤1406,第一设备10计算第一图像p1’的色坐标及亮度。
[0217]
步骤1407,第一设备10将第一图像p1’的色坐标及亮度发送给第二设备20。
[0218]
步骤1408,第二设备20接收、存储第一图像p1’的色坐标及亮度,并依次显示剩余的测试图片,以完成对所有测试图片的色坐标及亮度的存储。
[0219]
具体地,在第二设备20接收到上述第一图像p1’的色坐标及亮度后,可以存储第一图像p1’的色坐标及亮度。接着,可以依次显示剩余的测试图片(例如,剩余的127张测试图片),第一设备10可以基于上述依次显示的测试图片进行拍摄,依次计算上述剩余显示的测试图片的色坐标及亮度,并依次发送给第二设备20,由此可以使得第二设备20存储上述所有测试图片的色坐标及亮度。在具体实现时,可以重复执行步骤1403-步骤1407,由此可以使得第二设备20获取到上述所有测试图片的色坐标及亮度。
[0220]
步骤1409,基于所有测试图片的色坐标及亮度进行画质调整。
[0221]
具体地,第二设备20可以基于上述所有测试图片的色坐标及亮度进行画质调整。示例性的,第二设备20可以将上述所有已存储的测试图片的色坐标及亮度组成色坐标序列及亮度序列,并可以将上述色坐标序列及亮度序列与预置的标准色坐标序列及标准亮度序列进行比较,以判断当前的画质,并可以根据判断的结果调整所有测试图片的画质。其中,上述预置的标准色坐标序列可以由上述测试图片的标准色坐标获得,上述预置的标准亮度序列可以由上述测试图片的标准亮度获得。
[0222]
步骤1410,第二设备20在调整后的多张测试图片中选取多张验证图片。
[0223]
具体地,当第二设备20对上述所有测试图片的画质调整完成后,可以得到调整后的多张测试图片,并可以在调整后的多张测试图片中选取一部分图片作为验证图片。示例性的,可以从上述128张调整后的测试图片中选取32张测试图片作为验证图片。可以理解的是,上述示例仅示例性的示出了选取32张验证图片的场景,并不构成对本技术实施例的限定,在一些实施例中,也可以选取其它数目的验证图片。
[0224]
步骤1411,第二设备20显示验证图片。
[0225]
具体地,第二设备20可以显示上述32张验证图片中的任意一张。示例性的,该验证图片可以是第一验证图片q1。
[0226]
步骤1412,第二设备20向第一设备10发送拍摄指令。
[0227]
步骤1413,第一设备10拍摄第二设备20中显示的第一验证图片q1。
[0228]
具体地,第一设备10拍摄第二设备20中显示的第一验证图片q1,由此可以得到第二图像q1’。
[0229]
步骤1414,第一设备10计算第二图像q1’的色坐标及亮度。
[0230]
步骤1415,第一设备10将第二图像q1’的色坐标及亮度发送给第二设备20。
[0231]
步骤1416,第二设备20接收、存储第二图像q1’的色坐标及亮度,并依次显示剩余的验证图片,以完成对所有验证图片的色坐标及亮度的存储。
[0232]
具体地,在第二设备20接收到上述第二图像q1’的色坐标及亮度后,可以存储第二图像q1’的色坐标及亮度。接着,可以依次显示剩余的验证图片(例如,剩余的31张验证试图片),第一设备10可以基于上述依次显示的验证图片进行拍摄,依次计算上述剩余显示的验
证图片的色坐标及亮度,并依次发送给第二设备20,由此可以使得第二设备20存储上述所有验证图片的色坐标及亮度。在具体实现时,可以重复执行步骤1411-步骤1415,由此可以使得第二设备20获取到上述所有验证图片的色坐标及亮度。
[0233]
步骤1417,基于所有验证图片的色坐标及亮度进行画质调整。
[0234]
具体地,第二设备20可以基于上述所有验证图片的色坐标及亮度进行画质调整。示例性的,第二设备20可以将上述所有已存储的验证图片的色坐标及亮度组成色坐标序列及亮度序列,并可以将上述色坐标序列及亮度序列与预置的标准色坐标序列及标准亮度序列进行比较,以判断当前的画质,并可以根据判断的结果调整所有验证图片的画质。
[0235]
步骤1418,第二设备20确定上述验证图片的画质调整结果。
[0236]
具体地,第二设备20完成上述所有验证图片(例如,32张验证图片)的画质调整后。可以得到上述所有验证图片的画质调整结果。其中,该画质调整结果可以包括需要调整及无需调整。接着,第二设备20可以综合上述32张验证图片的画质调整结果进行判断:
[0237]
若所有验证图片的画质调整结果为无需调整,则可以进一步执行步骤1419。
[0238]
若至少一张验证图片的画质调整结果为需要调整,则可以重复执行步骤1403-步骤1417,直到所有验证图片的画质调整结果为无需调整为止,或者达到上述重复执行步骤1403-步骤1417的最大预置次数时停止画质调整过程。
[0239]
步骤1419,第二设备20向第一设备10发送画质调整完成通知。
[0240]
本技术实施例中,手机依次拍摄多张大屏显示的图片,计算画质参数,并将画质参数发送给大屏,使得大屏基于画质参数进行画质调整;接着,大屏在调整后的图片中选取验证图片,并再次通过手机拍摄,获取验证图片的画质参数,以对大屏的画质进行调整,由此可以方便用户的操作,实现对色彩精度和色域的校正,节省画质调整的成本。
[0241]
图15为本技术画质调整装置一个实施例的结构示意图,如图15所示,上述画质调整装置1500可以包括:通信连接模块1510、指示模块1520、第一拍摄模块1530、第一计算模块1540及第一发送模块1550;其中,
[0242]
通信连接模块1510,用于响应于用户的预设操作,与第二设备建立通信连接;
[0243]
指示模块1520,用于向第二设备发送显示指令,显示指令用于指示第二设备显示测试图片;
[0244]
第一拍摄模块1530,用于响应于接收到的第二设备发送的第一拍摄指令,拍摄第二设备显示的测试图片,得到测试图像;
[0245]
第一计算模块1540,用于计算测试图像的画质参数;
[0246]
第一发送模块1550,用于将测试图像的画质参数发送给第二设备。
[0247]
其中一种可能的实现方式中,上述装置1500还包括:检测模块1560;其中,
[0248]
检测模块1560,用于检测环境光及测试距离是否符合预设条件,根据检测结果确定是否向第二设备发送显示指令。
[0249]
其中一种可能的实现方式中,上述装置1500还包括:第二拍摄模块1570、第二计算模块1580及第二发送模块1590;其中,
[0250]
第二拍摄模块1570,用于响应于接收到的第二设备发送的第二拍摄指令,拍摄第二设备显示的验证图片,得到验证图像;
[0251]
第二计算模块1580,用于计算验证图像的画质参数;
[0252]
第二发送模块1590,用于将验证图像的画质参数发送给第二设备。
[0253]
其中一种可能的实现方式中,上述装置1500还包括:接收模块15a0;其中,
[0254]
接收模块15a0,用于接收第二设备发送的画质调整完成通知,画质调整完成通知用于通知第一设备画质调整已完成。
[0255]
其中一种可能的实现方式中,画质参数包括色坐标及亮度。
[0256]
图15所示实施例提供的画质调整装置可用于执行本技术图6-图14所示方法实施例的技术方案,其实现原理和技术效果可以进一步参考方法实施例中的相关描述。
[0257]
图16为本技术画质调整装置另一个实施例的结构示意图,如图16所示,上述画质调整装置1600可以包括:显示模块1610、指示模块1620、接收模块1630及画质调整模块1640;其中,
[0258]
显示模块1610,用于响应于接收到的第一设备发送的显示指令,显示测试图片;
[0259]
指示模块1620,用于向第一设备发送第一拍摄指令;
[0260]
接收模块1630,用于接收第一设备发送的测试图像的画质参数;其中,测试图像与测试图片对应;
[0261]
画质调整模块1640,用于基于测试图像的画质参数,对所述图片的画质进行调整。
[0262]
其中一种可能的实现方式中,上述装置1600还包括:验证模块1650;其中,
[0263]
验证模块1650,用于显示验证图片;其中,验证图片由测试图片进行画质调整后获得;接收第一设备发送的验证图像的画质参数;其中,验证图像与验证图片对应;基于验证图像的画质参数,对验证图片的画质进行调整。
[0264]
其中一种可能的实现方式中,上述画质调整模块1640还用于
[0265]
将验证图像的画质参数与预置画质参数进行比较,根据比较结果判断验证图片的画质是否需要调整;
[0266]
若需要调整,则再次显示测试图片,以完成画质调整;
[0267]
若不需要调整,则向第一设备发送画质调整完成通知。
[0268]
其中一种可能的实现方式中,测试图片包括多张图片,验证图片的数量由测试图片的数量确定。
[0269]
其中一种可能的实现方式中,测试图片为单张特殊图片,单张特殊图片用于校正白平衡,上述显示模块1610还用于显示单张特殊图片。
[0270]
其中一种可能的实现方式中,测试图片为多张正常图片,正常图片用于校正色彩精度及色域,上述显示模块1610还用于依次显示多张正常图片。
[0271]
图16所示实施例提供的画质调整装置可用于执行本技术图6-图14所示方法实施例的技术方案,其实现原理和技术效果可以进一步参考方法实施例中的相关描述。
[0272]
应理解以上图15和图16所示的画质调整装置的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分模块以软件通过处理元件调用的形式实现,部分模块通过硬件的形式实现。例如,检测模块可以为单独设立的处理元件,也可以集成在电子设备的某一个芯片中实现。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起,也可以独立实现。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路
或者软件形式的指令完成。
[0273]
例如,以上这些模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个特定集成电路(application specific integrated circuit;以下简称:asic),或,一个或多个微处理器(digital signal processor;以下简称:dsp),或,一个或者多个现场可编程门阵列(field programmable gate array;以下简称:fpga)等。再如,这些模块可以集成在一起,以片上系统(system-on-a-chip;以下简称:soc)的形式实现。
[0274]
图17示例性的示出了电子设备100的结构示意图,电子设备100可以是图6中所示的第一设备10或第二设备20。
[0275]
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,usb)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,sim)卡接口195等。其中传感器模块180可以包括压力传感器180a,陀螺仪传感器180b,气压传感器180c,磁传感器180d,加速度传感器180e,距离传感器180f,接近光传感器180g,指纹传感器180h,温度传感器180j,触摸传感器180k,环境光传感器180l,骨传导传感器180m等。
[0276]
可以理解的是,本技术实施例示意的结构并不构成对电子设备100的具体限定。在本技术另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
[0277]
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,ap),调制解调处理器,图形处理器(graphics processing unit,gpu),图像信号处理器(image signal processor,isp),控制器,视频编解码器,数字信号处理器(digital signal processor,dsp),基带处理器,和/或神经网络处理器(neural-network processing unit,npu)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。其中,控制器可以是电子设备200的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
[0278]
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
[0279]
本技术实施例提供的应用共享方法的执行可以由处理器110来控制或调用其他部件来完成,比如调用内部存储器121中存储的本技术实施例的处理程序,或者通过外部存储器接口120调用第三方设备中存储的本技术实施例的处理程序,来控制无线通信模块160向其他电子设备进行数据通信,以实现多个电子设备间的应用共享,提升用户的体验。
[0280]
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,i2c)接口,集成电路内置音频(inter-integrated circuit sound,i2s)接口,脉冲编码调制(pulse code modulation,pcm)接口,通用异步收发传输器
(universal asynchronous receiver/transmitter,uart)接口,移动产业处理器接口(mobile industry processor interface,mipi),通用输入输出(general-purpose input/output,gpio)接口,用户标识模块(subscriber identity module,sim)接口,和/或通用串行总线(universal serial bus,usb)接口等。
[0281]
i2c接口是一种双向同步串行总线,包括一根串行数据线(serial data line,sda)和一根串行时钟线(derail clock line,scl)。在一些实施例中,处理器110可以包含多组i2c总线。处理器110可以通过不同的i2c总线接口分别耦合触摸传感器180k,充电器,闪光灯,摄像头193等。例如:处理器110可以通过i2c接口耦合触摸传感器180k,使处理器110与触摸传感器180k通过i2c总线接口通信,实现电子设备100的触摸功能。
[0282]
i2s接口可以用于音频通信。在一些实施例中,处理器110可以包含多组i2s总线。处理器110可以通过i2s总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过i2s接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
[0283]
pcm接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过pcm总线接口耦合。在一些实施例中,音频模块170也可以通过pcm接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述i2s接口和所述pcm接口都可以用于音频通信。
[0284]
uart接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,uart接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过uart接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过uart接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
[0285]
mipi接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。mipi接口包括摄像头串行接口(camera serial interface,csi),显示屏串行接口(display serial interface,dsi)等。在一些实施例中,处理器110和摄像头193通过csi接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过dsi接口通信,实现电子设备100的显示功能。
[0286]
gpio接口可以通过软件配置。gpio接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,gpio接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。gpio接口还可以被配置为i2c接口,i2s接口,uart接口,mipi接口等。
[0287]
usb接口130是符合usb标准规范的接口,具体可以是mini usb接口,micro usb接口,usb type c接口等。usb接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其它电子设备,例如ar设备等。
[0288]
可以理解的是,本技术实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本技术另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
[0289]
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信
模块160,调制解调处理器以及基带处理器等实现。
[0290]
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
[0291]
移动通信模块150可以提供应用在电子设备100上的包括2g/3g/4g/5g等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,lna)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
[0292]
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170a,受话器170b等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其它功能模块设置在同一个器件中。
[0293]
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wireless local area networks,wlan)(如无线保真(wireless fidelity,wi-fi)网络),蓝牙(bluetooth,bt),全球导航卫星系统(global navigation satellite system,gnss),调频(frequency modulation,fm),近距离无线通信技术(near field communication,nfc),红外技术(infrared,ir)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
[0294]
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其它设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,gsm),通用分组无线服务(general packet radio service,gprs),码分多址接入(code division multiple access,cdma),宽带码分多址(wideband code division multiple access,wcdma),时分码分多址(time-division code division multiple access,td-scdma),长期演进(long term evolution,lte),bt,gnss,wlan,nfc,fm,和/或ir技术等。所述gnss可以包括全球卫星定位系统(global positioning system,gps),全球导航卫星系统(global navigation satellite system,glonass),北斗卫星导航系统(beidou navigation satellite system,bds),准天顶卫星系统(quasi-zenith satellite system,qzss)和/或星基增强系统(satellite based augmentation systems,sbas)。
[0295]
电子设备100通过gpu,显示屏194,以及应用处理器等实现显示功能。gpu为图像处理的微处理器,连接显示屏194和应用处理器。gpu用于执行数学和几何计算,用于图形渲
染。处理器110可包括一个或多个gpu,其执行程序指令以生成或改变显示信息。
[0296]
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,lcd),有机发光二极管(organic light-emitting diode,oled),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,amoled),柔性发光二极管(flex light-emitting diode,fled),miniled,microled,micro-oled,量子点发光二极管(quantum dot light emitting diodes,qled)等。在一些实施例中,电子设备100可以包括1个或n个显示屏194,n为大于1的正整数。
[0297]
本技术实施例中,电子设备100可以通过显示屏194显示用户界面。
[0298]
电子设备100可以通过isp,摄像头193,视频编解码器,gpu,显示屏194以及应用处理器等实现拍摄功能。
[0299]
isp用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给isp处理,转化为肉眼可见的图像。isp还可以对图像的噪点,亮度,肤色进行算法优化。isp还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,isp可以设置在摄像头193中。
[0300]
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb,yuv等格式的图像信号。在一些实施例中,电子设备100可以包括1个或n个摄像头193,n为大于1的正整数。
[0301]
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其它数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
[0302]
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,mpeg)1,mpeg2,mpeg3,mpeg4等。
[0303]
npu为神经网络(neural-network,nn)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过npu可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
[0304]
外部存储器接口120可以用于连接外部存储卡,例如micro sd卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
[0305]
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储
器件,闪存器件,通用闪存存储器(universal flash storage,ufs)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备100的各种功能应用以及数据处理。
[0306]
电子设备100可以通过音频模块170,扬声器170a,受话器170b,麦克风170c,耳机接口170d,以及应用处理器等实现音频功能。例如音乐播放,录音等。
[0307]
触摸传感器180k,也称“触控面板”。触摸传感器180k可以设置于显示屏194,由触摸传感器180k与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180k用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180k也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
[0308]
本技术实施例中,电子设备100可以通过触摸传感器180k接收用户的操作,例如,单击、双击或滑动等操作。
[0309]
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
[0310]
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
[0311]
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
[0312]
sim卡接口195用于连接sim卡。sim卡可以通过插入sim卡接口195,或从sim卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或n个sim卡接口,n为大于1的正整数。sim卡接口195可以支持nano sim卡,micro sim卡,sim卡等。同一个sim卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。sim卡接口195也可以兼容不同类型的sim卡。sim卡接口195也可以兼容外部存储卡。电子设备100通过sim卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用esim,即:嵌入式sim卡。esim卡可以嵌在电子设备100中,不能和电子设备100分离。
[0313]
本技术实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,当其在计算机上运行时,使得计算机执行本技术实施例提供的方法。
[0314]
本技术实施例还提供一种计算机程序产品,该计算机程序产品包括计算机程序,当其在计算机上运行时,使得计算机执行本技术实施例提供的方法。
[0315]
本技术实施例提供的电子设备、计算机存储介质或计算机程序产品均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
[0316]
可以理解的是,本技术实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本技术另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
[0317]
可以理解的是,上述电子设备100为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本技术实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本技术实施例的范围。
[0318]
本技术实施例可以根据上述方法示例对上述电子设备100进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。需要说明的是,本技术实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
[0319]
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
[0320]
在本技术实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
[0321]
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
[0322]
以上所述,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何在本技术揭露的技术范围内的变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以所述权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1