图像处理方法及相关装置与流程

文档序号:30091338发布日期:2022-05-18 09:06阅读:93来源:国知局
图像处理方法及相关装置与流程

1.本技术涉及图像处理技术领域,尤其涉及一种用于图像处理方法及相关装置。


背景技术:

2.生活中,为了工作方便,对文件进行存储时,用户有时候会有大量的将文档、名片、海报等进行扫描,且将扫描后的文件存入到电子设备(如手机、平板电脑等)中。
3.通常情况下,扫描对文档、名片、海报等扫描时,由于这些物件通常具有四边形,但拍摄画面当中可能会受到对象本身或者背景的线条纹理的干扰,因此,会发生误检测,检测到错误的四边形,因此,如何快速识别到用户需要的四边形的问题亟待解决。


技术实现要素:

4.本技术实施例提供一种图像处理方法及相关装置,能够快速识别到用户需要的四边形。
5.第一方面,本技术实施例提供一种图像处理方法,所述方法包括:
6.获取目标图像,所述目标图像中包括至少一个外围轮廓为四边形的目标对象;
7.对所述目标图像进行线段检测,得到多条线段;
8.根据所述多条线段确定至少一个候选四边形;
9.获取针对所述目标图像的第一触控参数;
10.根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度;
11.根据所述至少一个信赖度对所述至少一个候选四边形进行排序;
12.根据排序结果对所述至少一个候选四边形所在区域的图像进行展示。
13.第二方面,本技术实施例提供一种图像处理装置,所述装置包括:第一获取单元、检测单元、确定单元、第二获取单元、计算单元、排序单元和展示单元,其中,
14.所述第一获取单元,用于获取目标图像,所述目标图像中包括至少一个外围轮廓为四边形的目标对象;
15.所述检测单元,用于对所述目标图像进行线段检测,得到多条线段;
16.所述确定单元,用于根据所述多条线段确定至少一个候选四边形;
17.所述第二获取单元,用于获取针对所述目标图像的第一触控参数;
18.所述计算单元,用于根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度;
19.所述排序单元,用于根据所述至少一个信赖度对所述至少一个候选四边形进行排序;
20.所述展示单元,用于根据排序结果对所述至少一个候选四边形所在区域的图像进
行展示。
21.第三方面,本技术实施例提供一种电子设备,所述电子设备包括处理器、存储器,所述存储器用于存储一个或多个程序,并且被配置由处理器执行,所述程序包括用于执行如第一方所描述的部分或者全部步骤。
22.第四方面,本技术实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本技术实施例第一方面中所描述的部分或全部步骤。
23.第五方面,本技术实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本技术实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
24.实施本技术实施例,具备如下有益效果:
25.可以看出,本技术实施例中所描述的图像处理方法及相关装置,获取目标图像,该目标图像中包括至少一个外围轮廓为四边形的目标对象,对目标图像进行线段检测,得到多条线段,根据多条线段确定至少一个候选四边形,获取针对目标图像的第一触控参数,根据第一触控参数对至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,,每一信赖度用于表示对应的候选四边形被选择的意愿强度,根据至少一个信赖度对至少一个候选四边形进行排序,根据排序结果对至少一个候选四边形所在区域的图像进行展示,如此,可以通过线段检测,快速确定候选四边形,再确定触控参数与候选四边形之间的信赖度,通过该信赖度反映用户的选择意图,基于信赖度大小加以排序,以快速识别到用户真正需要的四边形,以及对该四边形所在区域的图像加以展示。
附图说明
26.为了更清楚地说明本技术实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本技术的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
27.图1是本技术实施例提供的一种电子设备的结构示意图;
28.图2是本技术实施例提供的一种电子设备的软件结构示意图;
29.图3a是本技术实施例提供的一种图像处理方法的流程示意图;
30.图3b是本技术实施例提供的一种用户触控操作的演示示意图;
31.图3c是本技术实施例提供的一种触控点的演示示意图;
32.图3d是本技术实施例提供的一种触控轨迹的演示示意图;
33.图3e是本技术实施例提供的一种触控区域的演示示意图;
34.图3f是本技术实施例提供的一种触控参数与四边形之间关系的演示示意图;
35.图3g是本技术实施例提供的另一种触控参数与四边形之间关系的演示示意图;
36.图3h是本技术实施例提供的另一种触控参数与四边形之间关系的演示示意图;
37.图3i是本技术实施例提供的一种信赖度计算的演示示意图;
38.图3j是本技术实施例提供的另一种图像处理方法的流程示意图;
39.图3k是本技术实施例提供的另一种图像处理方法的流程示意图;
40.图3l是本技术实施例提供的另一种图像处理方法的流程示意图;
41.图4是本技术实施例提供的另一种电子设备的结构示意图;
42.图5是本技术实施例提供的一种图像处理装置的功能单元组成框图。
具体实施方式
43.下面将结合附图,对本技术实施例中的技术方案进行描述。
44.为了更好地理解本技术实施例的方案,下面先对本技术实施例可能涉及的相关术语和概念进行介绍。
45.本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
46.具体实现中,本技术实施例中,电子设备可以包括各种具有计算机功能的设备,例如,手持设备(智能手机、平板电脑等)、车载设备(导航仪、辅助倒车系统、行车记录仪、车载冰箱等等)、可穿戴设备(智能手环、无线耳机、智能手表、智能眼镜等等)、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(user equipment,ue),移动台(mobile station,ms),虚拟现实/增强现实设备,终端设备(terminal device)等等,电子设备还可以为基站或者服务器。
47.电子设备还可以包括智能家居设备,智能家居设备可以为以下至少一种:智能音箱、智能摄像头、智能电饭煲、智能轮椅、智能按摩椅、智能家具、智能洗碗机、智能电视机、智能冰箱、智能电风扇、智能取暖器、智能晾衣架、智能灯、智能路由器、智能交换机、智能开关面板、智能加湿器、智能空调、智能门、智能窗、智能灶台、智能消毒柜、智能马桶、扫地机器人等等,在此不做限定。
48.第一部分,本技术所公开的技术方案的软硬件运行环境介绍如下。
49.如图所示,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110、外部存储器接口120、内部存储器121、通用串行总线(universal serial bus,usb)接口130、充电管理模块140、电源管理模块141、电池142、天线1、天线2、移动通信模块150、无线通信模块160、音频模块170、扬声器170a、受话器170b、麦克风170c、耳机接口170d、传感器模块180、指南针190、马达191、指示器192、摄像头193、显示屏194以及用户标识模块(subscriber identification module,sim)卡接口195等。
50.可以理解的是,本技术实施例示意的结构并不构成对电子设备100的具体限定。在本技术另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
51.处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器ap,调制解调处理器,图形处理器gpu,图像信号处理器(image signal processor,isp),控制器,视频编解码器,数字信号处理器(digital signal processor,dsp),基带处理器,和/
或神经网络处理器npu等。其中,不同的处理单元可以是独立的部件,也可以集成在一个或多个处理器中。在一些实施例中,电子设备101也可以包括一个或多个处理器110。其中,控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。在其他一些实施例中,处理器110中还可以设置存储器,用于存储指令和数据。示例性地,处理器110中的存储器可以为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从存储器中直接调用。这样就避免了重复存取,减少了处理器110的等待时间,因而提高了电子设备101处理数据或执行指令的效率。处理器还可以包括图像处理器,图像处理器可以为图像预处理器(preprocess image signal processor,pre-isp),其可以理解为一个简化的isp,其也可以进行一些图像处理操作,例如,可以获取图像统计信息。
52.在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路间(inter-integrated circuit,i2c)接口、集成电路间音频(inter-integrated circuit sound,i2s)接口、脉冲编码调制(pulse code modulation,pcm)接口、通用异步收发传输器(universal asynchronous receiver/transmitter,uart)接口、移动产业处理器接口(mobile industry processor interface,mipi)、用输入输出(general-purpose input/output,gpio)接口、sim卡接口和/或usb接口等。其中,usb接口130是符合usb标准规范的接口,具体可以是mini usb接口、micro usb接口、usb type c接口等。usb接口130可以用于连接充电器为电子设备101充电,也可以用于电子设备101与外围设备之间传输数据。该usb接口130也可以用于连接耳机,通过耳机播放音频。
53.可以理解的是,本技术实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本技术另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
54.充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过usb接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
55.电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、外部存储器、显示屏194、摄像头193和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量、电池循环次数、电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
56.电子设备100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等实现。
57.天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
58.移动通信模块150可以提供应用在电子设备100上的包括2g/3g/4g/5g/6g等无线
通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,lna)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
59.无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wireless local area networks,wlan)(如无线保真(wireless fidelity,wi-fi)网络)、蓝牙(blue tooth,bt),全球导航卫星系统(global navigation satellite system,gnss)、调频(frequency modulation,fm)、近距离无线通信技术(near field communication,nfc)、红外技术(infrared,ir)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
60.电子设备100通过gpu,显示屏194,以及应用处理器等实现显示功能。gpu为图像处理的微处理器,连接显示屏194和应用处理器。gpu用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个gpu,其执行程序指令以生成或改变显示信息。
61.显示屏194用于显示图像、视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,lcd)、有机发光二极管(organic light-emitting diode,oled)、有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrix organic light emitting diode的,amoled)、柔性发光二极管(flex light-emitting diode,fled)、迷你发光二极管(mini light-emitting diode,miniled)、microled、micro-oled、量子点发光二极管(quantum dot light emitting diodes,qled)等。在一些实施例中,电子设备100可以包括1个或多个显示屏194。
62.电子设备100可以通过isp、摄像头193、视频编解码器、gpu、显示屏194以及应用处理器等实现拍摄功能。
63.isp用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将电信号传递给isp处理,转化为肉眼可见的图像。isp还可以对图像的噪点、亮度、肤色进行算法优化。isp还可以对拍摄场景的曝光、色温等参数优化。在一些实施例中,isp可以设置在摄像头193中。
64.摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,ccd)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,cmos)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给isp转换成数字图像信号。isp将数字图像信号输出到dsp加工处理。dsp将数字图像信号转换成标准的rgb,yuv等格式的图像信号。在一些实施例中,电子设备100可以包括1个或多个摄像头193。
65.数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅
里叶变换等。
66.视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,mpeg)1、mpeg2、mpeg3、mpeg4等。
67.npu为神经网络(neural-network,nn)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过npu可以实现电子设备100的智能认知等应用,例如:图像识别、人脸识别、语音识别、文本理解等。
68.外部存储器接口120可以用于连接外部存储卡,例如micro sd卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
69.内部存储器121可以用于存储一个或多个计算机程序,该一个或多个计算机程序包括指令。处理器110可以通过运行存储在内部存储器121的上述指令,从而使得电子设备101执行本技术一些实施例中所提供的显示页面元素的方法,以及各种应用以及数据处理等。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统;该存储程序区还可以存储一个或多个应用(比如图库、联系人等)等。存储数据区可存储电子设备101使用过程中所创建的数据(比如照片,联系人等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储部件,闪存部件,通用闪存存储器(universal flash storage,ufs)等。在一些实施例中,处理器110可以通过运行存储在内部存储器121的指令,和/或存储在设置于处理器110中的存储器的指令,来使得电子设备101执行本技术实施例中所提供的显示页面元素的方法,以及其他应用及数据处理。电子设备100可以通过音频模块170、扬声器170a、受话器170b、麦克风170c、耳机接口170d、以及应用处理器等实现音频功能。例如音乐播放、录音等。
70.传感器模块180可以包括压力传感器180a、陀螺仪传感器180b、气压传感器180c、磁传感器180d、加速度传感器180e、距离传感器180f、接近光传感器180g、指纹传感器180h、温度传感器180j、触摸传感器180k、环境光传感器180l、骨传导传感器180m等。
71.其中,压力传感器180a用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180a可以设置于显示屏194。压力传感器180a的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180a,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180a检测触摸操作强度。电子设备100也可以根据压力传感器180a的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
72.陀螺仪传感器180b可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180b确定电子设备100围绕三个轴(即x、y和z轴)的角速度。陀螺仪传感器180b可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180b检测电子设备100抖
动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180b还可以用于导航,体感游戏场景。
73.加速度传感器180e可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
74.环境光传感器180l用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180l也可用于拍照时自动调节白平衡。环境光传感器180l还可以与接近光传感器180g配合,检测电子设备100是否在口袋里,以防误触。
75.指纹传感器180h用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
76.温度传感器180j用于检测温度。在一些实施例中,电子设备100利用温度传感器180j检测的温度,执行温度处理策略。例如,当温度传感器180j上报的温度超过阈值,电子设备100执行降低位于温度传感器180j附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
77.触摸传感器180k,也称“触控面板”。触摸传感器180k可以设置于显示屏194,由触摸传感器180k与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180k用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180k也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
78.示例性的,图2示出了电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(android runtime)和系统库,以及内核层。应用程序层可以包括一系列应用程序包。
79.如图2所示,应用程序层可以包括相机,图库,日历,通话,地图,导航,wlan,蓝牙,音乐,视频,短信息等应用程序。
80.应用程序框架层为应用程序层的应用程序提供应用编程接口(application programming interface,api)和编程框架。应用程序框架层包括一些预先定义的函数。
81.如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
82.窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
83.内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
84.视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
85.电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,
挂断等)。
86.资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
87.通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
88.android runtime包括核心库和虚拟机。android runtime负责安卓系统的调度和管理。
89.核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
90.应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
91.系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:opengl es),2d图形引擎(例如:sgl)等。
92.表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2d和3d图层的融合。
93.媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:mpeg4,h.264,mp3,aac,amr,jpg,png等。
94.三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
95.2d图形引擎是2d绘图的绘图引擎。
96.内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
97.第二部分,本技术实施例所公开的图像处理方法及相关装置介绍如下。
98.请参阅图3a,图3a是本技术实施例提供的一种图像处理方法的流程示意图,如图所示,本图像处理方法包括:
99.301、获取目标图像,所述目标图像中包括至少一个外围轮廓为四边形的目标对象。
100.其中,本技术实施例中,目标对象可以为外围轮廓为四边形或者近似四边形的物体,例如,目标对象可以包括以下至少一种:名片、海报、书本、包装盒、证件(例如,身份证、驾照、社保卡等等)、钱包、公交卡、银行卡、贺卡、玩具卡片、扑克、魔术道具卡片、纪念卡片、护身符卡片、涂鸦、手绘画、照片、盒子、面包等等,在此不做限定。具体实现中,目标图像可以为扫描图像、预先存储的图像或者当前拍摄的图像。当然,目标图像中的目标对象的四边形外围轮廓可以为完整的四边形,或者,也可以为部分残缺的四边形,例如,被剪掉一个角的身份证。目标对象的数量可以为一个或者多个,每一目标对象的外围轮廓均为四边形。
101.具体实现中,可以对目标对象进行拍摄,进而,可以得到目标图像,由于目标图像中可能存在其他背景,因此,其可能存在不止一个四边形的目标对象,当然,有可能壁纸上
有个四边形图案,则也可以被作为目标对象。如图3b所示,目标图像中,用户通过手势实现触控功能,以实现对用户需要的四边形进行选择,如用户选择的四边形则可以为目标四边形,不是用户选择的四边形则可以为非目标四边形。
102.其中,目标图像可以为一帧或者多帧图像,在目标图像为多帧时,则可以实现对物件批量扫描,以及存储功能。
103.302、对所述目标图像进行线段检测,得到多条线段。
104.具体实现中,可以采用线段检测算法对目标图像进行线段检测,得到多条线段,线段检测算法可以包括以下至少一种:霍夫(hough)变换、快速线条检测算法(fast line detection)等等,在此不做限定。
105.具体实现中,可以采用线段检测算法对目标图像进行线段检测,再对检测到的线段进行预处理,预处理可以筛选掉一些质量较差的线段。例如,通过预处理可以实现如下功能,如可以筛选掉一些宽度低于预设宽度的线段,或者,也可以筛选掉一些长度小于预设长度的线段,或者,也可以对检测到的线段进行噪音线段去除,或者,也可以对检测到的线段进行重叠线段融合处理,进而,在预处理之后,可以得到多条线段。预设宽度和预设长度均可以预先设置或者系统默认。
106.303、根据所述多条线段确定至少一个候选四边形。
107.具体实现中,可以根据多条线段进行排列组合,进行可以得到至少一个候选四边形,例如,四条线段可以形成一个闭合区域,该闭合区域如果是四边形,则可以将其视为一个候选四边形。
108.具体的,可以根据实际应用采用不同的方式,例如,可以包括检测到的线段,进行四条线段的排列组合以得到所有可能的候选四边形。
109.当然,如果在排列组合过程中,有些线段无法形成一个闭合的四边形,则也可以对该未闭合的四边形的边(线段)进行延长处理,以得到闭合的四边形。具体实现中,延长前线段的长度与延长后线段的长度之间的长度比值处于设定范围区间,该设定范围区间可以预先设置或者系统默认。
110.304、获取针对所述目标图像的第一触控参数。
111.具体实现中,第一触控参数可以包括以下至少一种:触摸触控显示屏的触控位置、触摸触控显示屏的触控区域面积、触摸触控显示屏的触控点数量、触摸触控显示屏的触控力度、触摸触控显示屏的触控时长、触摸触控显示屏的触控次数、触摸触控显示屏的触摸轨迹、触摸触控显示屏的触控图案等等,在此不做限定。本技术实施例中,触控操作可以在步骤304或者步骤304之前完成,第一触控参数可以为预设时间范围内的触控参数,预设时间范围可以预先设置或者系统默认,例如,预设时间范围可以最近1秒内的触控参数。如图3c所示,用户在触控之后,则可以产生至少一个触控点,每一触控点可以对应一个坐标点。如图3d所示,用户在目标图像中触控之后,则可以产生对应的触控轨迹,触控轨迹可以为一个或者多个,例如,多个手指触控,一个手指可以对应一个触控轨迹。如图3e所示,在目标图像中,通过用户的触控操作,可以形成一个触控区域,该触控区域可以为一个闭合区域。
112.具体实现中,电子设备的触控显示屏上可以显示目标图像,用户可以对触控显示屏中目标图像的区域进行触控操作,进而,可以第一触控参数。
113.305、根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进
行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度。
114.具体实现中,候选四边形很大程度上可能是目标对象的轮廓,而第一触控参数在一定程度上反映了用户选择目标对象的意愿,进而,可以通过第一触控参数确定至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,例如,触控参数可以包括触控位置,该触控位置可以对应一个坐标,则可以确定该坐标与至少一个候选四边形中的每一候选四边形的四个顶点之间的平均距离,按照预设的距离与信赖度之间的映射关系,可以确定每一平均距离对应的信赖度,即确定了每一候选四边形对应的信赖度。信赖度则反映了用户选择候选四边形的意愿强度,例如,意愿越强,则信赖度越大。
115.举例说明下,如图3f所示,在目标图像中,触控操作产生的触控点可能落入到不同的候选四边形,则可以根据每个候选四边形中触控点的多少来确定相应的信赖度,例如,触控点越多,则信赖度越大。如图3g所示,在目标图像中,触控操作产生的触控轨迹可以落入不同的候选四边形,则可以统计每一候选四边形中轨迹长度的总长度,例如,总长度越长,则信赖度越大。如图3h所示,在目标图像中,触控操作产生的触控区域也可以落入不同的候选四边形,则可以统计每一候选四边形中触控区域的面积大小,例如,面积越大,则信赖度越大。当然,还可以对四边形的四个角与直角之间的偏离度,来检测该四变形是否为用户需要的四边形,通常情况下,用户选择的实物为矩形,其四个角为90度,如果候选四边形中的角度与90度之间的偏差越大,则说明其并非是用户所选择的四边形,则其信赖度越低。另外,还可以确定触控中心以及候选四边形的中心(中间位置)之间的距离来确定信赖度,例如,距离越小,则信赖度越大。
116.具体的,针对信赖度的计算,该计算可以综合各个维度信息,计算出四边形的综合信赖度。综合的策略可以是把各个评价函数进行相加,也可以是把各个函数设置权重进行加权相机,也可以是对各个函数设置归一化处理后再进行相加。如图3i所示,每一维度可以对应一个评价参数,面积比例可以理解为,触控区域落入四边形中的面积与总的触控面积之间的比例,垂直角度则可以理解为四边形的角度与垂直角度(90度)之间的关联性,中心位置则可以理解为触控中心与四边形中心之间的位置关系,进而,基于各个评价函数可以对输入的坐标信息与四边形信息相结合,计算出用户所给出的手势信息(触控参数)对于四边形信赖度评价的影响。通常情况下,如果用户手势信息在四边形的范围内出现的越多,评价函数所给出的信赖度越大,从而使得该四边形的整体信赖度增加。
117.进一步的,评价函数的计算,如:可以计算四边形内用户触控点出现的次数,或者,也可以计算用户触控轨迹处于四边形内部分的总体长度,或者,也可以计算用户手势区域处于四边形内部分的总体面积,或者,也可以计算用户手势区域处于四边形内部分的总体面积占四边形面积的比例,进而,可以将这些维度的评价函数进行加权运算,最终,得到综合后的评价函数,由于多个维度充分表现了用户意愿,进而,可以精准把握用户意图,提升用户体验。
118.可选的,上述步骤305,根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,可以包括如下步骤:
119.51、根据所述第一触控参数确定至少一个维度的触控参数;
120.52、获取所述至少一个维度的触控参数中每一维度的触控参数对应的权值;
121.53、根据所述至少一个维度的触控参数以及每一维度的触控参数对应的权值确定所述至少一个候选四边形中的每一候选四边形对应的信赖度,得到所述至少一个信赖度。
122.具体实现中,可以根据第一触控参数确定至少一个维度的触控参数,该至少一个可以包括一个或者多个,一个维度的触控参数可以包括以下任一种:触摸触控显示屏的触控位置、触摸触控显示屏的触控区域面积、触摸触控显示屏的触控点数量、触摸触控显示屏的触控力度、触摸触控显示屏的触控时长、触摸触控显示屏的触控次数、触摸触控显示屏的触摸轨迹、触摸触控显示屏的触控图案等等,在此不做限定。
123.进一步的,可以获取至少一个维度的触控参数中每一维度的触控参数对应的权值,得到至少一个权值,该权值可以预先设置或者系统默认,不同的维度可以对应不同的权值,该至少一个权值之间的总和可以小于或等于1,进而,可以根据至少一个维度的触控参数、至少一个权值确定至少一个候选四边形中的每一候选四边形对应的信赖度,得到至少一个信赖度,其中,对于任一候选四边形,每一个维度则可以对应一个参考信赖度,再将所有维度的参考信赖度进行加权运算,便可以得到该候选四边形最终的信赖度,由于通过多个维度来反映用户的选择意图,进而,可以精准把握用户的选择,提升用户体验。
124.进一步的,可选的,上述步骤53,根据所述至少一个维度的触控参数以及每一维度的触控参数对应的权值确定所述至少一个候选四边形中的每一候选四边形对应的信赖度,得到所述至少一个信赖度,包括:
125.531、确定所述至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度,所述候选四边形i为所述至少一个候选四边形中的任一四边形;
126.532、根据所述至少一个参考信赖度与所述至少一个权值进行加权运算,得到所述候选四边形i对应的信赖度。
127.其中,对于任一候选四边形而言,其均可以对应一个信赖度,以候选四边形i为例,该候选四边形i为至少一个候选四边形中的任一四边形。可以确定至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度,进而,可以根据至少一个参考信赖度与至少一个权值进行加权运算,即将每一参考信赖度与对应的权值进行乘积运算,再将所有乘积运算的结果进行求和,便可以得到候选四边形i对应的信赖度,如此,由于通过多个维度来反映用户的选择意图,进而,可以精准把握用户的选择,提升用户体验。
128.可选的,上述步骤531,确定所述至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度,可以按照如下方式实施:
129.在所述触控参数为触控点时,确定落入所述候选四边形i中的触控点的触控点数量,根据所述触控点数量确定所述参考信赖度;
130.或者,
131.在所述触控参数为触控轨迹时,确定落入所述候选四边形i中的触控轨迹的轨迹长度,根据所述轨迹长度确定所述参考信赖度;
132.或者,
133.在所述触控参数为触控区域时,确定落入所述候选四边形i中的触控区域的触控面积,根据所述触控面积确定所述参考信赖度。
134.具体实现中,在触控参数为触控点时,可以确定落入候选四边形i中的触控点的触控点数量,可以预先设置触控点个数与信赖度之间的映射关系,再基于该映射关系确定触控点数量对应的参考信赖度。又例如,在触控参数为触控轨迹时,可以确定落入候选四边形i中的触控轨迹的轨迹长度,按照预设的长度与信赖度之间映射关系,确定轨迹长度对应的参考信赖度。又例如,在触控参数为触控区域时,则可以确定落入候选四边形i中的触控区域的触控面积,按照预设的面积与信赖度之间的映射关系,确定触控面积对应的参考信赖度。
135.306、根据所述至少一个信赖度对所述至少一个候选四边形进行排序。
136.具体实现中,信赖度反映了用户选择意图,进而,不同的信赖度反映用户不同的意图,如此,可以根据至少一个信赖度对至少一个候选四边形进行排序,例如,可以根据信赖度由大到小的顺序对至少一个候选四边形进行排序。
137.307、根据排序结果对所述至少一个候选四边形所在区域的图像进行展示。
138.具体实现中,本技术实施例中,可以根据排序结果,将信赖度最大值对应的候选四边形进行展示,当然,还可以将该候选四边形对应的区域图像进行透视变换,再展示透视变换后的区域图像,由于透视变换可以将四边形变换为矩形,更加符合目标对象的实物形态,有助于提升用户体验。
139.具体实现中,如图3j所示,针对目标图像进行线段检测,基于检测结果寻找候选四边形,再可以基于第一触控参数对所有候选四边形进行信赖度计算,并对所有候选四边形按照信赖度的大小进行排序,再对排序后的四边形当中选取信赖度最大的一个四边形信息进行输出。即用户界面可以显示相机当前拍摄的预览画面,显示当前画面当中所检测到的最佳四边形,响应用户的交互并更新显示触点或触点轨迹,进而,可以对最佳四边形对应的区域图像进行处理,输出处理后的图像。
140.本技术实施例中,可以通过在文档扫描的预览用户界面当中提供用户输入的多维触控参数,例如,多点触控坐标,触控轨迹,触控区域等,基于该多维触控参数来指示用户所预期的四边形的位置或范围,在寻找最佳四边形计算时将输入的触点或轨迹的坐标等信息纳入四边形的总和信赖度计算当中,可以将用户的意图更精确的反应在四边形检测的结果当中,从而辅助四边形自动检测得到更好的效果,避免具有歧义或较复杂场景下的误检测。
141.可选的,上述步骤307,根据排序结果对所述至少一个候选四边形所在区域的图像进行展示,可以包括如下步骤:
142.71、根据排序结果选取所述至少一个候选四边形中预设数量的候选四边形,得到至少一个参考候选四边形;
143.72、对所述至少一个参考候选四边形进行筛选,得到目标四边形;
144.73、对所述目标四边形所在区域的图像进行透视变换,得到目标区域图像;
145.74、展示所述目标区域图像。
146.具体实现中,预设数量可以预先设置或者系统默认,例如,预设数量可以为固定值,或者,可以为至少一个候选四边形的总数量的指定百分比,指定百分比可以预先设置或者系统默认。
147.具体的,可以根据排序结果选取至少一个候选四边形中排序靠前的预设数量的候选四边形,得到至少一个参考候选四边形,再可以对至少一个参考候选四边形进行筛选,得
到目标四边形,在于筛选出用户最想要的四边形,再对目标四边形所在区域的图像进行透视变换,得到目标区域图像,即将原本四边形的区域图像转化为矩形区域图像,最后,可以展示目标区域图像,当然,也可以对目标区域图像的边缘进行特效化处理,例如,边缘处理为波形型,如此,可以得到用户想要的展示效果,有助于提升用户体验。
148.可选的,上述步骤72,对所述至少一个参考候选四边形进行筛选,得到目标四边形,可以包括如下步骤:
149.a721、获取第二触控参数;
150.a722、根据所述第二触控参数从所述至少一个参考候选四边形中选取所述目标四边形。
151.其中,第二触控参数可以与第一触控参数相同,或者,也可以与第一触控参数不同。第二触控参数可以包括以下至少一种:触摸触控显示屏的触控位置、触摸触控显示屏的触控区域面积、触摸触控显示屏的触控点数量、触摸触控显示屏的触控力度、触摸触控显示屏的触控时长、触摸触控显示屏的触控次数、触摸触控显示屏的触摸轨迹、触摸触控显示屏的触控图案等等,在此不做限定。在执行步骤72过程中,可以基于上述信赖度计算原理,选取信赖度最大的一个候选四边形作为目标四边形。如图3k所示,用户触控操作可以产生第二触控参数,利用第二触控参数实现四边形筛选。
152.当然,也可以通过如下操作确定目标四边形,例如,可以在显示屏上展示至少一个参考候选四边形中的所有候选四边形,用户通过触控操作,则可以选取需要保留的候选四边形,例如,用户触控哪一个候选四边形,则可以保留该候选四边形。
153.可选的,上述步骤72,对所述至少一个参考候选四边形进行筛选,得到目标四边形,可以包括如下步骤:
154.b721、获取用户眼球注视参数;
155.b722、根据所述用户眼球注视参数从所述至少一个参考候选四边形中选取所述目标四边形。
156.其中,用户眼球注视参数可以包括以下至少一种:注视位置、注视时长等等,在此不做限定,注视位置可以对应一个坐标,该坐标与参考候选四边形越近,则说明用户对该参考候选四边形的选择意愿越强。本技术实施例中,如图3l所示,也可以基于眼球位置、注视位置以及各个参考候选四边形的中心构建视线热度图,即,可以构建立体坐标系,将这些点映射到该立体坐标系,并确定眼球位置与注视位置之间的第一距离,以及确定眼球位置与各个参考候选四边形的中心之间的第二距离,则可以确定第一距离与各个第二距离之间的差值的绝对值,则选取绝对值的最小值对应的参考候选四边形作为目标四边形,进而,可以基于眼球跟踪技术,识别用户选择意图,以实现快速识别用户需要的四边形。
157.可以看出,本技术实施例中所描述的图像处理方法,获取目标图像,该目标图像中包括至少一个外围轮廓为四边形的目标对象,对目标图像进行线段检测,得到多条线段,根据多条线段确定至少一个候选四边形,获取针对目标图像的第一触控参数,根据第一触控参数对至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度,根据至少一个信赖度对至少一个候选四边形进行排序,根据排序结果对至少一个候选四边形所在区域的图像进行展示,如此,可以通过线段检测,快速确定候选四边形,再确定触控参数与候选四边形之间的信赖
度,通过该信赖度反映用户的选择意图,基于信赖度大小加以排序,以快速识别到用户真正需要的四边形,以及对该四边形所在区域的图像加以展示。
158.与上述实施例一致地,请参阅图4,图4是本技术实施例提供的一种电子设备的结构示意图,如图所示,该电子设备包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由处理器执行,本技术实施例中,上述程序包括用于执行以下步骤的指令:
159.获取目标图像,所述目标图像中包括至少一个外围轮廓为四边形的目标对象;
160.对所述目标图像进行线段检测,得到多条线段;
161.根据所述多条线段确定至少一个候选四边形;
162.获取针对所述目标图像的第一触控参数;
163.根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度;
164.根据所述至少一个信赖度对所述至少一个候选四边形进行排序;
165.根据排序结果对所述至少一个候选四边形所在区域的图像进行展示。
166.可选的,在所述根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度方面,上述程序包括用于执行以下步骤的指令:
167.根据所述第一触控参数确定至少一个维度的触控参数;
168.获取所述至少一个维度的触控参数中每一维度的触控参数对应的权值;
169.根据所述至少一个维度的触控参数以及每一维度的触控参数对应的权值确定所述至少一个候选四边形中的每一候选四边形对应的信赖度,得到所述至少一个信赖度。
170.可选的,在所述根据所述至少一个维度的触控参数以及每一维度的触控参数对应的权值确定所述至少一个候选四边形中的每一候选四边形对应的信赖度,得到所述至少一个信赖度方面,上述程序包括用于执行以下步骤的指令:
171.确定所述至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度,所述候选四边形i为所述至少一个候选四边形中的任一四边形;
172.根据所述至少一个参考信赖度与所述至少一个权值进行加权运算,得到所述候选四边形i对应的信赖度。
173.可选的,在所述确定所述至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度方面,上述程序包括用于执行以下步骤的指令:
174.在所述触控参数为触控点时,确定落入所述候选四边形i中的触控点的触控点数量,根据所述触控点数量确定所述参考信赖度;
175.或者,
176.在所述触控参数为触控轨迹时,确定落入所述候选四边形i中的触控轨迹的轨迹长度,根据所述轨迹长度确定所述参考信赖度;
177.或者,
178.在所述触控参数为触控区域时,确定落入所述候选四边形i中的触控区域的触控面积,根据所述触控面积确定所述参考信赖度。
179.可选的,在所述根据排序结果对所述至少一个候选四边形所在区域的图像进行展示方面,上述程序包括用于执行以下步骤的指令:
180.根据排序结果选取所述至少一个候选四边形中预设数量的候选四边形,得到至少一个参考候选四边形;
181.对所述至少一个参考候选四边形进行筛选,得到目标四边形;
182.对所述目标四边形所在区域的图像进行透视变换,得到目标区域图像;
183.展示所述目标区域图像。
184.可选的,在所述对所述至少一个参考候选四边形进行筛选,得到目标四边形方面,上述程序包括用于执行以下步骤的指令:
185.获取第二触控参数;
186.根据所述第二触控参数从所述至少一个参考候选四边形中选取所述目标四边形。
187.可选的,在所述对所述至少一个参考候选四边形进行筛选,得到目标四边形方面,上述程序包括用于执行以下步骤的指令:
188.获取用户眼球注视参数;
189.根据所述用户眼球注视参数从所述至少一个参考候选四边形中选取所述目标四边形。
190.可以看出,本技术实施例中所描述的电子设备,获取目标图像,该目标图像中包括至少一个外围轮廓为四边形的目标对象,对目标图像进行线段检测,得到多条线段,根据多条线段确定至少一个候选四边形,获取针对目标图像的第一触控参数,根据第一触控参数对至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度,根据至少一个信赖度对至少一个候选四边形进行排序,根据排序结果对至少一个候选四边形所在区域的图像进行展示,如此,可以通过线段检测,快速确定候选四边形,再确定触控参数与候选四边形之间的信赖度,通过该信赖度反映用户的选择意图,基于信赖度大小加以排序,以快速识别到用户真正需要的四边形,以及对该四边形所在区域的图像加以展示。
191.上述主要从方法侧执行过程的角度对本技术实施例的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本技术能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本技术的范围。
192.本技术实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本技术实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
193.图5是本技术实施例中所涉及的图像处理装置500的功能单元组成框图。该图像处理装置500应用于电子设备,所述装置500包括:第一获取单元501、检测单元502、确定单元503、第二获取单元504、计算单元505、排序单元506和展示单元507,其中,
194.所述第一获取单元501,用于获取目标图像,所述目标图像中包括至少一个外围轮廓为四边形的目标对象;
195.所述检测单元502,用于对所述目标图像进行线段检测,得到多条线段;
196.所述确定单元503,用于根据所述多条线段确定至少一个候选四边形;
197.所述第二获取单元504,用于获取针对所述目标图像的第一触控参数;
198.所述计算单元505,用于根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度;
199.所述排序单元506,用于根据所述至少一个信赖度对所述至少一个候选四边形进行排序;
200.所述展示单元507,用于根据排序结果对所述至少一个候选四边形所在区域的图像进行展示。
201.可选的,在所述根据所述第一触控参数对所述至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度方面,所述计算单元505具体用于:
202.根据所述第一触控参数确定至少一个维度的触控参数;
203.获取所述至少一个维度的触控参数中每一维度的触控参数对应的权值;
204.根据所述至少一个维度的触控参数以及每一维度的触控参数对应的权值确定所述至少一个候选四边形中的每一候选四边形对应的信赖度,得到所述至少一个信赖度。
205.可选的,在所述根据所述至少一个维度的触控参数以及每一维度的触控参数对应的权值确定所述至少一个候选四边形中的每一候选四边形对应的信赖度,得到所述至少一个信赖度方面,所述计算单元505具体用于:
206.确定所述至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度,所述候选四边形i为所述至少一个候选四边形中的任一四边形;
207.根据所述至少一个参考信赖度与所述至少一个权值进行加权运算,得到所述候选四边形i对应的信赖度。
208.可选的,在所述确定所述至少一个维度的触控参数中的每一触控参数与候选四边形i之间的参考信赖度,得到至少一个参考信赖度方面,所述计算单元505具体用于:
209.在所述触控参数为触控点时,确定落入所述候选四边形i中的触控点的触控点数量,根据所述触控点数量确定所述参考信赖度;
210.或者,
211.在所述触控参数为触控轨迹时,确定落入所述候选四边形i中的触控轨迹的轨迹长度,根据所述轨迹长度确定所述参考信赖度;
212.或者,
213.在所述触控参数为触控区域时,确定落入所述候选四边形i中的触控区域的触控面积,根据所述触控面积确定所述参考信赖度。
214.可选的,在所述根据排序结果对所述至少一个候选四边形所在区域的图像进行展示方面,所述展示单元507具体用于:
215.根据排序结果选取所述至少一个候选四边形中预设数量的候选四边形,得到至少一个参考候选四边形;
216.对所述至少一个参考候选四边形进行筛选,得到目标四边形;
217.对所述目标四边形所在区域的图像进行透视变换,得到目标区域图像;
218.展示所述目标区域图像。
219.可选的,在所述对所述至少一个参考候选四边形进行筛选,得到目标四边形方面,所述展示单元507具体用于:
220.获取第二触控参数;
221.根据所述第二触控参数从所述至少一个参考候选四边形中选取所述目标四边形。
222.可选的,在所述对所述至少一个参考候选四边形进行筛选,得到目标四边形方面,所述展示单元507具体用于:
223.获取用户眼球注视参数;
224.根据所述用户眼球注视参数从所述至少一个参考候选四边形中选取所述目标四边形。
225.可以看出,本技术实施例中所描述的图像处理装置,获取目标图像,该目标图像中包括至少一个外围轮廓为四边形的目标对象,对目标图像进行线段检测,得到多条线段,根据多条线段确定至少一个候选四边形,获取针对目标图像的第一触控参数,根据第一触控参数对至少一个候选四边形中的每一候选四边形进行信赖度计算,得到至少一个信赖度,每一信赖度用于表示对应的候选四边形被选择的意愿强度,根据至少一个信赖度对至少一个候选四边形进行排序,根据排序结果对至少一个候选四边形所在区域的图像进行展示,如此,可以通过线段检测,快速确定候选四边形,再确定触控参数与候选四边形之间的信赖度,通过该信赖度反映用户的选择意图,基于信赖度大小加以排序,以快速识别到用户真正需要的四边形,以及对该四边形所在区域的图像加以展示。
226.需要注意的是,本技术实施例所描述的电子设备是以功能单元的形式呈现。这里所使用的术语“单元”应当理解为尽可能最宽的含义,用于实现各个“单元”所描述功能的对象例如可以是集成电路asic,单个电路,用于执行一个或多个软件或固件程序的处理器(共享的、专用的或芯片组)和存储器,组合逻辑电路,和/或提供实现上述功能的其他合适的组件。
227.其中,第一获取单元501、检测单元502、确定单元503、第二获取单元504、计算单元505、排序单元506和展示单元507可以是处理器,该处理器可以为人工智能芯片、npu、cpu、gpu等等,在此不做限定,第二获取单元504、展示单元507可以包括触控显示屏。基于上述单元模块能够实现上述任一方法的功能或者步骤。
228.本实施例还提供了一种计算机可读存储介质,其中,该计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本技术实施例,以用于实现上述实施例中的任一方法。
229.本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的任一方法。
230.另外,本技术的实施例还提供一种图像处理装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的任一方法。
231.其中,本实施例提供的电子设备、计算机存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
232.通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
233.在本技术所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
234.作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
235.另外,在本技术各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
236.集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本技术实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本技术各个实施例方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(read only memory,rom)、随机存取存储器(random access memory,ram)、磁碟或者光盘等各种可以存储程序代码的介质。
237.以上内容,仅为本技术的具体实施方式,但本技术的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本技术揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本技术的保护范围之内。因此,本技术的保护范围应以权利要求的保护范围为准。
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1