数据库建立方法与流程

文档序号:11276840阅读:439来源:国知局
数据库建立方法与流程

本发明涉及图像处理技术领域,具体而言,涉及一种数据库建立方法。



背景技术:

在近几十年的中,图像的美感品质的分析与研究越来越受到人们的关注。目前尚未提出专门用于图像美感品质细致研究的数据库。



技术实现要素:

有鉴于此,本发明的目的在于提供一种数据库建立方法,以解决上述问题。

为实现上述目的,本发明提供如下技术方案:

一种数据库建立方法,所述数据库用于图像美感品质评价,所述方法包括:

获得多类别、不同品质的多幅图像,以作为图像样本;

计算所述图像样本的美感因素的机器评分,其中,所述美感因素包括构图美感因素、亮度美感因素、颜色美感因素和景深美感因素;

对标注者进行问卷调查,根据各标注者输入的问题答案,计算该标注者的评分权重;

根据各标注者对所述图像样本的美感因素的定性评断,计算各标注者对所述图像样本的美感因素的人工评分;

根据所述图像样本的美感因素的机器评分、各标注者的评分权重以及各标注者对所述图像样本的美感因素的人工评分,计算所述图像样本的美感因素的总评分,其中包括图像样本的构图美感因素的总评分、亮度美感因素的总评分、颜色美感因素的总评分以及景深美感因素的总评分;

根据多个标注者输入的判断结果,计算所述图像样本的整体美感品质的评分;

根据所述图像样本的构图美感因素的总评分将图像标注为高/低构图美感品质图像,根据所述图像样本的亮度美感因素的总评分将图像标注为高/低亮度美感品质图像,根据所述图像样本的颜色美感因素的总评分将图像标注为高/低颜色美感品质图像,根据所述图像样本的景深美感因素的总评分将图像标注为高/低景深美感品质图像及根据所述图像样本的整体美感品质的评分将图像标注为高/低景深美感品质图像,以建立数据库。

可选地,计算所述图像样本的美感因素的机器评分的步骤包括:

计算所述图像样本的美感因素的特征的机器评分;

计算所述图像样本的美感因素的特征的机器评分的平均值;

当所述图像样本的美感因素的特征的机器评分的平均值小于0.1时,所述图像样本的美感因素的机器评分等于1;

当所述图像样本的美感因素的特征的机器评分的平均值大于或等于0.1时,所述图像样本的美感因素的机器评分等于10倍所述平均值。

可选地,所述计算所述图像样本的美感因素的特征的机器评分的步骤包括:

计算所述图像样本的美感因素的特征的特征值;

根据多个高美感品质图像的特征的特征值,计算所述特征的高美感品质取值范围及最优值;

根据所述图像样本的特征的特征值及所述特征的高美感品质取值范围及最优值计算所述图像样本的特征的机器评分。

可选地,根据多个高美感品质图像的特征的特征值,计算所述特征的高美感品质取值范围及最优值的步骤包括:

根据多个高美感品质图像的各特征的特征值,分别绘制各特征直方图,其中,所述各特征直方图的直方柱的宽度采用scott推导公式,所述各特征直方图的纵坐标表示该直方柱所对应的高美感品质图像的图片数量,横坐标表示该直方柱所对应的特征的特征值;

计算各特征直方图的纵坐标的极差,获取所述各特征直方图中纵坐标大于或等于0.5倍所述极差的直方柱的横坐标范围,作为各特征的高美感品质取值范围,记为[vai,vbi];

获取所述各特征直方图中纵坐标大于或等于0.9倍最大值的直方柱的横坐标区间的中值作为各特征的最优值,记为vopti。

可选地,所述根据所述图像样本的特征的特征值及所述特征的高美感品质取值范围及最优值计算所述图像样本的特征的机器评分的步骤包括:

判断所述图像样本的特征的特征值是否在[vai,vbi]区间外;

当所述图像样本的特征的特征值在[vai,vbi]区间外,则所述图像样本的特征的机器评分等于1;

当所述图像样本的特征的特征值在[vai,vbi]区间内,则所述图像样本的特征的机器评分的计算公式为其中,vi表示所述图像样本的特征i的机器评分;fi表示所述图像样本的特征i的特征值。

可选地,所述构图美感因素的特征包括:显著区域与整张图像大小的比例以及显著区域中心点到四个黄金分割点的距离之和;

所述亮度美感因素的特征包括:图像在hsv空间中各像素点v通道亮度值之和的归一化值、图像原图面积上经过标准化处理后的平均暗通道值、显著区域与背景区域亮度值的比值的归一化特征值、显著区域与背景区域亮度值的差值的归一化特征值、显著区域与整张图像亮度值的比值的归一化特征值、显著区域与整张图像亮度值的差值的归一化特征值、显著区域的平均亮度值、背景区域和显著区域的亮度差值与显著区域面积的比值;

所述颜色美感因素的特征包括:图像的全局平均色调值、图像的全局平均饱和度值、基于色调直方图的条数、基于色调直方图的最高频直条内像素点个数、基于色调直方图的最大色调差值、基于饱和度直方图的条数、基于饱和度直方图的最高频直条内像素点个数、基于饱和度直方图的最大饱和度差值、显著区域平均色调值、显著区域平均饱和度值、背景区域与显著区域的色调差值与显著区域面积的比值及背景区域与显著区域的饱和度差值与显著区域面积的比值;

所述景深美感因素包括的特征包括:h通道的景深、s通道的景深、v通道的景深及显著区域的小波变化和背景区域的小波变化的比值。

可选地,所述根据各标注者对所述图像样本的美感因素的定性评断,计算各标注者对所述图像样本的美感因素的人工评分的步骤包括:

分别获取标注者对美感因素的定性评断,所述美感因素包括构图美感因素、亮度美感因素、颜色美感因素和景深美感因素,所述定性评断包括好、中及差;

其中,定性评断为好时,该美感因素的人工评分为1,定性评断为中时,该美感因素的人工评分为5,定性评断为差时,该美感因素的人工评分为10。

可选地,据所述图像样本的美感因素的机器评分、各标注者的评分权重以及各标注者对所述图像样本的美感因素的人工评分,计算所述图像样本的美感因素的总评分的步骤包括:

所述图像样本的美感因素的总评分其中,其中,sj表示所述图像样本的美感因素j的总评分,gj表示所述图像样本的美感因素j的机器评分,n表示有n名进行人工评分的标注者,βl表示第l名进行人工评分的标注者的评分权重,rlj表示第l名进行人工评分的标注者对所述图像样本的美感因素j的人工评分。

可选地,根据多个标注者输入的判断结果,计算所述图像样本的整体美感品质的评分的步骤包括:

获得多个标注者输入的对图像是否喜好、是否清晰、是否主题鲜明的三个问题的判断结果;

将每个问题的超过半数的相同判断结果作为该问题的最终判断结果,获得三个问题的最终判断结果;

将所述三个问题的最终判断结果的总得分作为所述图像样本的整体美感品质的评分,其中,最终判断结果为是时,得分为1,最终判断结果为否时,得分为10。

可选地,根据所述图像样本的构图美感因素的总评分将图像标注为高/低构图美感品质图像,根据所述图像样本的亮度美感因素的总评分将图像标注为高/低亮度美感品质图像,根据所述图像样本的颜色美感因素的总评分将图像标注为高/低颜色美感品质图像,根据所述图像样本的景深美感因素的总评分将图像标注为高/低景深美感品质图像及根据所述图像样本的整体美感品质的评分将图像标注为高/低景深美感品质图像的步骤包括:

获取多个图像样本的构图美感因素的总评分的中位数,若该中位数大于或等于5,则第一阈值等于5,若该中位数小于5,则将该中位数作为第一阈值;

将构图美感因素的总评分大于所述第一阈值的图像样本标注为低构图美感品质图像,将构图美感因素的总评分小于或等于所述第一阈值的图像样本标注为高构图美感品质图像;

获取多个图像样本的亮度美感因素的总评分的中位数,若该中位数大于或等于5,则第二阈值等于5,若该中位数小于5,则将该中位数作为第二阈值;

将亮度美感因素的总评分大于所述第二阈值的图像样本标注为低亮度美感品质图像,将亮度美感因素的总评分小于或等于所述第二阈值的图像样本标注为高亮度美感品质图像;

获取多个图像样本的颜色美感因素的总评分的中位数,若该中位数大于或等于5,则第三阈值等于5,若该中位数小于5,则将该中位数作为第三阈值;

将颜色美感因素的总评分大于所述第三阈值的图像样本标注为低颜色美感品质图像,将颜色美感因素的总评分小于或等于所述第三阈值的图像样本标注为高颜色美感品质图像;

获取多个图像样本的景深美感因素的总评分的中位数,若该中位数大于或等于5,则第四阈值等于5,若该中位数小于5,则将该中位数作为第四阈值;

将景深美感因素的总评分大于所述第四阈值的图像样本标注为低景深美感品质图像,将景深美感因素的总评分小于或等于所述第四阈值的图像样本标注为高景深美感品质图像;

获取多个图像样本的整体美感品质的评分的中位数,若该中位数大于或等于5,则第五阈值等于5,若该中位数小于5,则将该中位数作为第五阈值;

将整体美感品质的评分大于所述第五阈值的图像样本标注为低整体美感品质图像,将整体美感品质的评分小于或等于所述第五阈值的图像样本标注为高整体美感品质图像。

本发明提供的数据库建立方法,根据美感因素的机器评分、各标注者的评分权重以及各标注者对美感因素的人工评分,计算所述图像样本的美感因素的总评分,根据多个标注者输入的判断结果,计算所述图像样本的整体美感品质的评分,并根据第一阈值、第二阈值、第三阈值、第四阈值和第五阈值将图像样本标注为高/低构图美感品质图像、高/低亮度美感品质图像、高/低颜色美感品质图像、高/低景深美感品质图像和高/低整体美感品质图像,实现数据库的建立。采用本发明提供的数据库建立方法建立的数据库可以用于图像美感品质的细致研究。

附图说明

为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍。应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。

图1为本发明较佳实施例提供的一种数据库建立方法建立的数据库的应用场景示意图。

图2为本发明较佳实施例提供的一种数据库建立方法的流程图。

图3为一实施方式中图2所示步骤s120包括的子步骤的示意图。

图4为另一实施方式中图2所示步骤s120包括的子步骤的示意图。

图5为一实施方式中图3和图4所示子步骤s121包括的子步骤的示意图。

图6为一实施方式中图2所示步骤s160包括的子步骤的示意图。

图7为一实施方式中图2所示步骤s170包括的子步骤的示意图。

图标:100-电子设备;110-存储器;120-处理器;130-网络模块。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。

应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。在本发明的描述中,术语“第一”、“第二”、“第三”、“第四”等仅用于区分描述,而不能理解为只是或暗示相对重要性。

请参阅图1,是本发明较佳实施例提供的数据库建立方法建立的数据库的应用场景示意图。本发明实施例中的数据库可应用于评价图像美感品质的电子设备100中。所述电子设备100可以为服务器、计算机等具备数据处理能力的设备。如图1所示,电子设备100包括:存储器110、处理器120及网络模块130。

所述存储器110、处理器120以及网络模块130相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。存储器110包括至少一个可以软件或固件(firmware)的形式存储于所述存储器110中的软件功能模块,所述处理器120通过运行存储在存储器110内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实施本发明实施例中的数据库建立方法。

其中,所述存储器110可以是,但不限于,随机存取存储器(randomaccessmemory,ram),只读存储器(readonlymemory,rom),可编程只读存储器(programmableread-onlymemory,prom),可擦除只读存储器(erasableprogrammableread-onlymemory,eprom),电可擦除只读存储器(electricerasableprogrammableread-onlymemory,eeprom)等。其中,存储器110用于存储程序,所述处理器120在接收到执行指令后,执行所述程序。

所述处理器120可能是一种集成电路芯片,具有信号的处理能力。上述的处理器120可以是通用处理器,包括中央处理器(centralprocessingunit,cpu)、网络处理器(networkprocessor,np)等。还可以是数字信号处理器(dsp))、专用集成电路(asic)、现场可编程门阵列(fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器120也可以是任何常规处理器等。

网络模块130用于通过网络建立电子设备100与外部通信终端之间的通信连接,实现网络信号及数据的收发操作。上述网络信号可包括无线信号或者有线信号。

可以理解,图1所示的结构仅为示意,电子设备100还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。

请参阅图2,是本发明较佳实施例提供的一种数据库建立方法的流程图。该数据库建立方法建立的数据库可以用于评价图像美感品质。所述方法有关的流程所定义的方法步骤可以由所述处理器120实现。下面将对图2所示的具体流程进行详细阐述。

步骤s110,获得多类别、不同品质的多幅图像,以作为图像样本。

可以通过网络搜集多类别、不同品质的多幅图像,作为图像样本。

步骤s120,计算所述图像样本的美感因素的机器评分。

其中,所述美感因素包括构图美感因素、亮度美感因素、颜色美感因素和景深美感因素。

请参阅图3,可选地,步骤s120包括子步骤s121、子步骤s123和子步骤s125。或者,请参阅图4,步骤s120包括子步骤s121、子步骤s123和子步骤s127。

子步骤s121,计算所述图像样本的美感因素的特征的机器评分。

可选地,所述构图美感因素的特征包括:显著区域与整张图像大小的比例以及显著区域中心点到四个黄金分割点的距离之和。

为了方便描述,将显著区域与整张图像大小的比例记为特征f1,将显著区域中心点到四个黄金分割点的距离之和记为特征f2。

那么,所述构图美感因素的特征包括:特征f1和特征f2。

可选地,所述亮度美感因素的特征包括:图像在hsv空间中各像素点v通道亮度值之和的归一化值、图像原图面积上经过标准化处理后的平均暗通道值、显著区域与背景区域亮度值的比值的归一化特征值、显著区域与背景区域亮度值的差值的归一化特征值、显著区域与整张图像亮度值的比值的归一化特征值、显著区域与整张图像亮度值的差值的归一化特征值、显著区域的平均亮度值、背景区域和显著区域的亮度差值与显著区域面积的比值。

将图像在hsv空间中各像素点v通道亮度值之和的归一化值记为特征f3,将图像原图面积上经过标准化处理后的平均暗通道值记为特征f4,将显著区域与背景区域亮度值的比值的归一化特征值记为特征f5,将显著区域与背景区域亮度值的差值的归一化特征值记为特征f6,将显著区域与整张图像亮度值的比值的归一化特征值记为特征f7,将显著区域与整张图像亮度值的差值的归一化特征值记为特征f8,将显著区域的平均亮度值记为特征f9,将背景区域和显著区域的亮度差值与显著区域面积的比值记为特征f10。

那么,所述亮度美感因素的特征包括:特征f3、特征f4、特征f5、特征f6、特征f7、特征f8、特征f9和特征f10。

所述颜色美感因素的特征包括:图像的全局平均色调值、图像的全局平均饱和度值、基于色调直方图的条数、基于色调直方图的最高频直条内像素点个数、基于色调直方图的最大色调差值、基于饱和度直方图的条数、基于饱和度直方图的最高频直条内像素点个数、基于饱和度直方图的最大饱和度差值、显著区域平均色调值、显著区域平均饱和度值、背景区域与显著区域的色调差值与显著区域面积的比值及背景区域与显著区域的饱和度差值与显著区域面积的比值。

将图像的全局平均色调值记为特征f11,将图像的全局平均饱和度值记为特征f12,将基于色调直方图的条数记为特征f13,将基于色调直方图的最高频直条内像素点个数记为特征f14,将基于色调直方图的最大色调差值记为特征f15,将基于饱和度直方图的条数记为特征f16,将基于饱和度直方图的最高频直条内像素点个数记为特征f17,将基于饱和度直方图的最大饱和度差值记为特征f18,将显著区域平均色调值记为特征f19,将显著区域平均饱和度值记为特征f20,将背景区域与显著区域的色调差值与显著区域面积的比值记为特征f21以及将背景区域与显著区域的饱和度差值与显著区域面积的比值记为特征f22。

那么,所述颜色美感因素的特征包括:特征f11、特征f12、特征f13、特征f14、特征f15、特征f16、特征f17、特征f18、特征f19、特征f20、特征f21和特征f22。

所述景深美感因素包括的特征包括:h通道的景深、s通道的景深、v通道的景深及显著区域的小波变化和背景区域的小波变化的比值。

将h通道的景深记为特征f23,将s通道的景深记为特征f24,将v通道的景深记为特征f25及将显著区域的小波变化和背景区域的小波变化的比值记为特征f26。

那么,所述颜色美感因素的特征包括:特征f23、特征f24、特征f25和特征f26。

请参阅图5,可选地,子步骤s121包括子步骤s1211、子步骤s1213和子步骤s1215。

子步骤s1211,计算所述图像样本的美感因素的特征的特征值。

所述图像样本的美感因素的特征可以包括特征f1至特征f26。则计算所述图像样本的美感因素的特征的特征值,为计算特征f1至特征f26的值。

在计算特征f1至特征f26的值时,需要提取图像的显著区域。可选地,在本实施例中,图像的显著区域采用基于gbvs的显著区域提取方法进行提取。该方法是一种全新的自底向上的视觉显著性系统,其核心部分为以下两点:第一,对图像的中心特征通道构建相对应的动态映射;第二,使用高度显著性和映射混合的方法来对第一步中得到的动态映射进行标准化。

特征f1的计算公式为:

式中,sa表示图像的显著区域的面积;w表示整张图像的宽;h表示整张图像的高。

特征f2的计算公式为:

式中,(xsc,ysc)表示显著区域中心点的坐标;(xi,yi)表示图像的四个黄金分割点中的一个点的坐标。

特征f3的计算公式为:

式中,vi表示图像i的总亮度值,即图像i在hsv空间中各像素点v通道亮度值之和。

特征f4的计算公式为:

式中,idark(i)表示图像i的暗通道;ω(i)表示以像素i为中心的一个窗口;ic(i)表示图像i的每个通道。

特征f5的计算公式为:

式中,vis表示图像i的显著区域的总亮度值;vib表示图像i的背景区域的总亮度值,其中,背景区域为整张图像中的非显著区域。

特征f6的计算公式为:

特征f7的计算公式为:

特征f8的计算公式为:

特征f9的计算公式为:

特征f10的计算公式为:

特征f11的计算公式为:

式中,ih(x,y)表示图像i中各像素点的色调值。

特征f12的计算公式为:

式中,ih(x,y)表示图像i中各像素点的饱和度值。

特征f13的计算公式为:

式中,表示组距20的色调直方图;q表示色调直方图的最大值;c为默认参数,其值为0.1。

在进行计算特征f13时,首先依据条件is>0.2和0.95>il>0.15对图像像素进行筛选,从而避免饱和度过低,以及亮度过高和过低的像素对颜色特征统计的影响,然后对经过筛选后像素的色调值进行间隔为20的直方图统计,得到色调直方图。

特征f14的计算公式为:

式中,表示色调直方图的最大值,即图像中色调出现频率最高的像素个数。

特征f15的计算公式为:

式中,表示色调直方图中的最大色调差。

同理,基于饱和度直方图所提的颜色特征亦可由上述方法得出与特征f13、特征f14和特征f15类似的特征f16、特征f17和特征f18的计算公式。

特征f16的计算公式为:

式中,表示组距20的饱和度直方图;q′表示饱和度直方图的最大值;c′为默认参数,其值为0.1。

特征f17的计算公式为:

式中,表示饱和度直方图的最大值,即图像中饱和度出现频率最高的像素个数。

特征f18的计算公式为:

式中,表示色调直方图中的最大饱和度差。

特征f19的计算公式为:

式中,his表示图像i的显著区域的总色调值。

特征f20的计算公式为:

式中,sis表示图像i的显著区域的总饱和度值。

特征f21的计算公式为:

式中,hib表示图像i的背景区域的总色调值。

特征f22的计算公式为:

式中,sib表示图像i的背景区域的总饱和度值。

特征f23的计算公式为:

式中,ω3h(x,y)表示显著区域在h通道上高频的三级小波系数之和;分别表示显著区域在h通道上高频的三级小波系数,小波变换过程如图3所示;salientarea表示显著区域;allarea表示整张图像。

同理,可在s、v通道上计算得到s、v的景深特征,推出特征f24和特征f25的计算公式。

特征f24的计算公式为:

式中,ω3s(x,y)表示显著区域在s通道上高频的三级小波系数之和;分别表示显著区域在s通道上高频的三级小波系数;salientarea表示显著区域;allarea表示整张图像。

特征f25的计算公式为:

式中,ω3v(x,y)表示显著区域在v通道上高频的三级小波系数之和;分别表示显著区域在v通道上高频的三级小波系数;salientarea表示显著区域;allarea表示整张图像。

特征f26的计算公式为:

式中,分子表示显著区域的三级小波变换在h、s、v三个通道的和;分母表示背景区域的三级小波变换在h、s、v三个通道的和。

采用上述公式就可以计算出特征f1至特征f26的特征值。

子步骤s1213,根据多个高美感品质图像的特征的特征值,计算所述特征的高美感品质取值范围及最优值。

可选地,子步骤s1213包括子步骤s12131、子步骤s12133和子步骤s12135。

子步骤s12131,根据多个高美感品质图像的各特征的特征值,分别绘制各特征直方图,其中,所述各特征直方图的直方柱的宽度采用scott推导公式,所述各特征直方图的纵坐标表示该直方柱所对应的高美感品质图像的图片数量,横坐标表示该直方柱所对应的特征的特征值。

可以通过网络搜集大量的多类别、高美感品质的图像,作为高美感品质图像样本。根据上述的公式,计算多个高美感品质图像的特征f1至特征f26的特征值,绘制特征f1至特征f26直方图,得到26个特征直方图。每个特征直方图的直方柱的宽度采用scott推导公式,该特征直方图的纵坐标表示该直方柱所对应的高美感品质图像的图片数量,横坐标表示该直方柱所对应的特征的特征值。

例如,所述高美感品质图像有n个,所述n个高美感品质图像的特征f1的特征值的均值为μ。绘制特征f1直方图,令该特征f1直方图的宽度hn,则hn的计算公式为:

利用上述公式求得直方图的宽度hn后,以特征f1的特征值作为横坐标,以对应横坐标的高美感品质图像的图片数量作为纵坐标,绘制特征f1直方图。

子步骤s12133,计算各特征直方图的纵坐标的极差,获取所述各特征直方图中纵坐标大于或等于0.5倍所述极差的直方柱的横坐标范围,作为各特征的高美感品质取值范围,记为[vai,vbi]。

其中,i可以等于1,2,3,…,26。特征f1的高美感品质取值范围为[va1,vb1],特征f2的高美感品质取值范围为[va2,vb2]。同理,获得特征f3至特征f26的高美感品质取值范围。

以特征f1直方图为例,该特征f1直方图的纵坐标最大值为ymax,纵坐标最小值为ymin,则该特征f1直方图的纵坐标的极差为(ymax-ymin)。选取特征f1直方图中纵坐标大于或等于0.5(ymax-ymin)的直方柱所在的横坐标范围,作为特征f1的高美感品质取值范围,记为[va1,vb1]。

子步骤s12135,获取所述各特征直方图中纵坐标大于或等于0.9倍最大值的直方柱的横坐标区间的中值作为各特征的最优值,记为vopti。

同理,特征f1的最优值为vopt1,特征f2的最优值为vopt2,…特征f26最优值为vopt26。

以特征f1直方图为例,该特征f1直方图的纵坐标大于或等于0.9ymax的直方柱的横坐标区间,将该横坐标区间的中值作为该特征f1的最优值,记为vopt1。

子步骤s1215,根据所述图像样本的特征的特征值及所述特征的高美感品质取值范围及最优值计算所述图像样本的特征的机器评分。

可选地,子步骤s1215包括子步骤s12151和子步骤s12153。或者,子步骤s1215包括子步骤s12151和子步骤s12155。

子步骤s12151,判断所述图像样本的特征的特征值是否在[vai,vbi]区间外。

所述图像样本的特征包括特征f1至特征f26。依次判断特征f1的特征值是否在[va1,vb1]区间外,特征f2的特征值是否在[va2,vb2]区间外,…,特征f26的特征值是否在[va26,vb26]区间外。

当所述图像样本的特征的特征值fi在[vai,vbi]区间外,执行子步骤s12153。当所述图像样本的特征的特征值在[vai,vbi]区间内,执行子步骤s12155。

子步骤s12153,所述图像样本的特征的机器评分等于1。

例如,当特征f1的特征值在[va1,vb1]区间外时,该图像样本的特征f1的机器评分等于1。当特征f2的特征值在[va2,vb2]区间外时,该图像样本的特征f2的机器评分等于1。

子步骤s12155,所述图像样本的特征的机器评分的计算公式为其中,vi表示所述图像样本的特征i的机器评分;fi表示所述图像样本的特征i的特征值。

例如,特征f1的特征值在[va1,vb1]区间内时,则该图像样本的特征f1的机器评分特征f2的特征值在[va2,vb2]区间内时,则该图像样本的特征f2的机器评分

同理,可以计算图像样本的特征f3至特征f26的机器评分。

子步骤s123,计算所述图像样本的美感因素的特征的机器评分的平均值。

由于,美感因素包括:构图美感因素、亮度美感因素、颜色美感因素和景深美感因素。那么,子步骤s123为分别计算构图美感因素的特征的机器评分的平均值,亮度美感因素的特征的机器评分的平均值,颜色美感因素的特征的机器评分的平均值,景深美感因素的特征的机器评分的平均值

由于,构图美感因素的特征包括特征f1和特征f2,亮度美感因素的特征包括特征f3至特征f10,颜色美感因素的特征包括特征f11至特征f22,景深美感因素的特征包括特征f22至特征f26。那么,构图美感因素的特征的机器评分的平均值为特征f1和特征f2这2个特征的机器评分的平均值。亮度美感因素的特征的机器评分的平均值为特征f3至特征f10这8个特征的机器评分的平均值。颜色美感因素的特征的机器评分的平均值为特征f11至特征f22这12个特征的机器评分的平均值。景深美感因素的特征的机器评分的平均值为特征f23至特征f26这4个特征的机器评分的平均值。

当所述图像样本的美感因素的特征的机器评分的平均值小于0.1时,执行子步骤s125,当所述图像样本的美感因素的特征的机器评分的平均值大于或等于0.1时,执行子步骤s127。

子步骤s125,所述图像样本的美感因素的机器评分等于1。

例如,当特征f1和特征f2这2个特征的机器评分的平均值小于0.1时,所述图像样本的构图美感因素的机器评分等于1。当特征f3至特征f10这8个特征的机器评分的平均值小于0.1时,所述图像样本的亮度美感因素的机器评分等于1。

子步骤s127,所述图像样本的美感因素的机器评分等于10倍所述平均值。

例如,当特征f1和特征f2这2个特征的机器评分的平均值大于或等于0.1时,所述图像样本的构图美感因素的机器评分等于10倍所述特征f1和特征f2这2个特征的机器评分的平均值。当特征f3至特征f10这8个特征的机器评分的平均值大于或等于0.1时,所述图像样本的亮度美感因素的机器评分等于10倍所述特征f3至特征f10这8个特征的机器评分的平均值。

同理,采用子步骤s125或子步骤s127可以计算出所述图像样本的颜色美感因素和景深美感因素的机器评分。

步骤s130,对标注者进行问卷调查,根据各标注者输入的问题答案,计算该标注者的评分权重。

为确定人工评分在总评分中所占比重,需要对参与评分的标注者的美术、摄影功底及审美能力进行问卷调查。调查问题可以有10个,每个问题的分值为0.1分,根据各标注者输入的问题答案,计算该标注者的评分权重的公式可以是:

其中,shl表示第l名进行人工评分的标注者回答调查问题的问卷得分,βl表示第l名进行人工评分的标注者的评分权重。

所述调查问题可以包括:①是否学习过影视拍摄?②是否学习过美术绘画?③是否学习过艺术鉴赏?④从以下六幅图中选出构图最好的两张图像?⑤从以下六幅图中选出亮度最好的两张图像?⑥从以下六幅图中选出颜色最好的两张图像?⑦从以下六幅图中选出景深最好的两张图像?⑧以下六幅图中你更倾向于哪两张图像?⑨以下六幅图中哪两张图像清晰度更好?⑩以下六幅图中哪两张图像是主题鲜明的动物图像?

步骤s140,根据各标注者对所述图像样本的美感因素的定性评断,计算各标注者对所述图像样本的美感因素的人工评分。

对所述图像样本的美感因素的人工评分包括对构图美感因素、亮度美感因素、颜色美感因素和景深美感因素的人工评分。在进行人工评分时,本发明实施例中考虑到标注者不可能对图像做出非常细致的评分,因此仅需标注者对图像的构图、亮度、颜色和景深进行“好”、“中”、“差”的定性评判。其中“好”对应的美感因素的人工评分可以为1,“中”对应的美感因素的人工评分可以为5,“差”对应的美感因素的人工评分可以为10。

人工评分时经常出现意见不统一的情况,即对同一图像样本的同一美感因素进行评分时,有的标注者将其评判为“好”,而其他标注者评判为“差”。本发明实施例中,将数量偏少的一方的评定结果认定为极端事件。为了保证每个标注者给出的评分都能够被利用,同时避免极端事件带来的影响,本发明实施例中,将极端事件转变为中间过渡值“中”。采用此种设计,既可以对标注者的评判进行充分利用又能消除极端事件带来的影响,同时保持事件的一般性。

例如,有10名标注者参与人工评分,7名标注者评判该图像样本的某一美感因素为“好”,2名标注者评判该图像样本的某一美感因素为“中”,1名标注者评判该图像样本的某一美感因素为“差”,则将这个“差”认定为极端事件,将该“差”转变为“中”。

步骤s150,根据所述图像样本的美感因素的机器评分、各标注者的评分权重以及各标注者对所述图像样本的美感因素的人工评分,计算所述图像样本的美感因素的总评分。

计算所述图像样本的美感因素的总评分包括计算图像样本的构图美感因素的总评分、亮度美感因素的总评分、颜色美感因素的总评分以及景深美感因素的总评分。。

所述图像样本的美感因素的总评分

其中,sj表示所述图像样本的美感因素j的总评分,gj表示所述图像样本的美感因素j的机器评分。当j=1时,s1表示所述图像样本的构图美感因素的总评分,g1表示所述图像样本的构图美感因素的机器评分。当j=2时,s2表示所述图像样本的亮度美感因素的总评分,g2表示所述图像样本的亮度美感因素的机器评分。当j=3时,s3表示所述图像样本的颜色美感因素的总评分,g3表示所述图像样本的颜色美感因素的机器评分。当j=4时,s4表示所述图像样本的景深美感因素的总评分,g4表示所述图像样本的景深美感因素的机器评分。

n表示有n名进行人工评分的标注者,βl表示第l名进行人工评分的标注者的评分权重。rlj表示第l名进行人工评分的标注者对所述图像样本的美感因素j的人工评分。当j=1时,rli表示第l名进行人工评分的标注者对所述图像样本的构图美感因素的人工评分。当j=2时,rl2表示第l名进行人工评分的标注者对所述图像样本的亮度美感因素的人工评分。当j=3时,rl3表示第l名进行人工评分的标注者对所述图像样本的颜色美感因素的人工评分。当j=4时,rl4表示第l名进行人工评分的标注者对所述图像样本的景深美感因素的人工评分。

步骤s160,根据多个标注者输入的判断结果,计算所述图像样本的整体美感品质的评分。

请参阅图6,可选地,步骤s160包括子步骤s161、子步骤s163和子步骤s165。

子步骤s161,获得多个标注者输入的对图像是否喜好、是否清晰、是否主题鲜明的三个问题的判断结果。

子步骤s163,将每个问题的超过半数的相同判断结果作为该问题的最终判断结果,获得三个问题的最终判断结果。

针对同一图像样本的同一问题,若过半数标注者得到相同判断结果,则将该相同判断结果作为最终判断结果。例如,共五名标注者参与评分,他们对于上述三个问题回答分别是“是是否”、“是是否”、“是否否”、“是是是”、“是是是”,则按照少数服从多数的原则,最终判断结果为“是是否”。

子步骤s165,将所述三个问题的最终判断结果的总得分作为所述图像样本的整体美感品质的评分,其中,最终判断结果为是时,得分为1,最终判断结果为否时,得分为10。

例如,最终判断结果为“是是是”,认定该图像样本的整体美感品质的评分为1+1+1=3分。最终判断结果为“是是否”,认定该图像样本的整体美感品质的评分为1+1+10=12分。最终判断结果为“是否否”,认定该图像样本的整体美感品质的评分为1+10+10=21分。最终判断结果为“否否否”,认定该图像样本的整体美感品质的评分为10+10+10=30分。通过上述三个问题将图像的整体美感品质分为3分、12分、21分和30分四个等级。分数越低,当前图像样本的整体美感品质越高。

步骤s170,根据所述图像样本的构图美感因素的总评分将图像标注为高/低构图美感品质图像,根据所述图像样本的亮度美感因素的总评分将图像标注为高/低亮度美感品质图像,根据所述图像样本的颜色美感因素的总评分将图像标注为高/低颜色美感品质图像,根据所述图像样本的景深美感因素的总评分将图像标注为高/低景深美感品质图像及根据所述图像样本的整体美感品质的评分将图像标注为高/低景深美感品质图像,以建立数据库。

请参阅图7,可选地,步骤s170包括子步骤s171、子步骤s172、子步骤s173、子步骤s174、子步骤s175、子步骤s176、子步骤s177、子步骤s178、子步骤s179和子步骤s180。

子步骤s171,获取多个图像样本的构图美感因素的总评分的中位数,若该中位数大于或等于5,则第一阈值等于5,若该中位数小于5,则将该中位数作为第一阈值。

子步骤s172,将构图美感因素的总评分大于所述第一阈值的图像样本标注为低构图美感品质图像,将构图美感因素的总评分小于或等于所述第一阈值的图像样本标注为高构图美感品质图像。

子步骤s173,获取多个图像样本的亮度美感因素的总评分的中位数,若该中位数大于或等于5,则第二阈值等于5,若该中位数小于5,则将该中位数作为第二阈值。

子步骤s174,将亮度美感因素的总评分大于所述第二阈值的图像样本标注为低亮度美感品质图像,将亮度美感因素的总评分小于或等于所述第二阈值的图像样本标注为高亮度美感品质图像。

子步骤s175,获取多个图像样本的颜色美感因素的总评分的中位数,若该中位数大于或等于5,则第三阈值等于5,若该中位数小于5,则将该中位数作为第三阈值。

子步骤s176,将颜色美感因素的总评分大于所述第三阈值的图像样本标注为低颜色美感品质图像,将颜色美感因素的总评分小于或等于所述第三阈值的图像样本标注为高颜色美感品质图像。

子步骤s177,获取多个图像样本的景深美感因素的总评分的中位数,若该中位数大于或等于5,则第四阈值等于5,若该中位数小于5,则将该中位数作为第四阈值。

子步骤s178,将景深美感因素的总评分大于所述第四阈值的图像样本标注为低景深美感品质图像,将景深美感因素的总评分小于或等于所述第四阈值的图像样本标注为高景深美感品质图像。

子步骤s179,获取多个图像样本的整体美感品质的评分的中位数,若该中位数大于或等于5,则第五阈值等于5,若该中位数小于5,则将该中位数作为第五阈值。

子步骤s180,将整体美感品质的评分大于所述第五阈值的图像样本标注为低整体美感品质图像,将整体美感品质的评分小于或等于所述第五阈值的图像样本标注为高整体美感品质图像。

本发明实施例提供的数据库建立方法,提出四个美感因素和所述四个美感因素包括的26个特征用于细致研究图像美感品质,具体地通过美感因素的各特征的特征值计算该美感因素的机器评分,并根据各特征的机器评分计算与该特征对应的美感因素的机器评分,以及计算标注者对各美感因素的人工评分及评分权重,最后根据美感因素的机器评分、各标注者的评分权重以及各标注者对美感因素的人工评分,计算所述图像样本的美感因素的总评分,根据多个标注者输入的判断结果,计算所述图像样本的整体美感品质的评分,并根据第一阈值、第二阈值、第三阈值、第四阈值和第五阈值将图像样本标注为高/低构图美感品质图像、高/低亮度美感品质图像、高/低颜色美感品质图像、高/低景深美感品质图像,和高/低整体美感品质图像,实现数据库的建立。采用本发明提供的数据库建立方法建立的数据库可以用于图像美感品质的细致研究。

在本发明实施例所提供的几个实施例中,应该理解到,所揭露的方法,也可以通过其它的方式实现。以上所描述的方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,各种电子设备,或者网络设备等)执行本发明各实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(rom,read-onlymemory)、随机存取存储器(ram,randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1