一种基于摄影构图规则的留念照人像站位推荐方法
【专利摘要】本发明公开了一种基于摄影构图规则的留念照人像站位推荐方法。此方法由三个有效步骤组成：1）利用图片样本中人与景物相对位置关系，学习正规则，分析人应该站在场景中的哪个位置；2）基于经验性构图规则，定义反规则，决定场景中不适合站人的区域；3）结合步骤1）得到的正规则得分和步骤2）得到的反规则得分，得到每个人站位总得分，对场景进行最优位置搜索。最终在景物图上画出人形图标把人像站位推荐给用户。
【专利说明】一种基于摄影构图规则的留念照人像站位推荐方法
【技术领域】
[0001]本发明属于计算摄影学及图像处理领域，涉及摄影构图规则的留念照人像站位推荐方法。
【背景技术】
[0002]在旅行时，人们经常会在景点拍照留念，这些留念照通常包含两部分:人物和背景。然而，业余摄影师在拍摄留念照时经常会忽略人像的站位对留念照构图的影响，所以可以考虑用现有的图像处理相关方法来引导用户站位，拍摄出构图理想的留念照。
[0003]在摄影学中，存在一些经验性构图规则可以引导用户拍摄，但是这些规则不足以应对各种复杂的背景、场景。构造一个构图理想的图片数据集，然后从中学习不同场景下人与景物的相对位置关系，再结合摄影学中的经验性构图规则，可以为用户提供一个较理想的站位推荐。
【发明内容】
[0004]本发明的主要目的是基于摄影构图规则，为正在摄影的用户实时推荐人像的站位，使用户拍出构图理想的留念照。
[0005]本发明提供了一种基于摄影构图规则的留念照人像站位推荐方法，包括以下步骤:
[0006]I)构建一个构图理想的人像数据集，利用数据集图片样本中人与景物相对位置关系，学习正规则，分析人应该站在场景中的哪个位置；
[0007]2)基于经验性构图规则，定义反规则，决定场景中不适合站人的区域；
[0008]3)结合步骤I)得到的正规则和步骤2)得到的反规则计算合理的人像站位，并推荐站位推荐给拍照的用户。
[0009]所述的基于摄影构图规则的留念照人像站位推荐方法目标是在用户拍照时给出站位推荐，而非照片的后期处理。
[0010]所述的构图理想的人像数据集只考虑站立姿势的人像，不考虑坐着、躺着、半蹲等其他姿势。
[0011]所述的构图理想的人像数据集，选取3000张人像数据集图片，每张图片满足包含且仅包含一个主角，包含清晰、明显的景物，并且是自然图像三个原则，邀请25个人为3000张图片打分，选出得分从高到低的前500张图片并进行左右对称翻转，得到1000张作为最终构图理想的人像数据集。
[0012]所述对图片中的人物进行参数化表达，忽略不同人的身材差异，用一个固定长宽比的矩阵描述人。利用3维向量Η(χ，α)描述人的站位，其中2维向量X表示人物位置(人脸中心点)坐标，标量α反应人物大小(人脸面积与图片面积比)。
[0013]所述对图片中的景物进行参数化表达，定义一个90维的特征S:前85维元素是对提取到的景物的二值掩码进行金字塔采样(pyramid sampling)的结果，S(O), S(1: 4),S(5: 20)和S(21: 84)分别表示第I层到第4层金字塔采样，每个单元中被标记为景物的像素的比例被赋给S中对应的维度，同时引入5维元素S(85: 89)描述景物在图像中的分布，按5种不同的方式将景物的二值掩码分为两个部分(左右、上下、内外、左上右下和右上左下)，然后计算两个部分被标记为景物的像素比例的差，赋给对应的维度，S(O)反应景物大小，S(1: 84)描述景物的形状及位置；S(85: 89)反应景物更多地分布在哪一部分。
[0014]所述的不同种类的场景拥有不同的构图规则，不能用统一模型来建模人与景物的位置关系，所以将数据集中的所有图像按照景物的特征分为多类，再对每一类单独地分析适用于这一类的构图特征，本发明将所有图像按照景物的特征分为15类，利用K-means算法对其求解。
[0015]所述的对于给定的一类景物，通过浏览属于这类景物的留念照发现，有不止一个理想的人的站位，本发明使用混合高斯模型(Gaussian Mixture Model)对每一类场景合适的人的位置坐标进行统计分析，利用单一的高斯模型估算合适的人物大小。
[0016]所述的通过学习得到的人的位置坐标和大小分布可以用来指导图像中哪些部分适合站人，本发明称之为正规则。
[0017]所述的反规则来自于三条常用的经验性构图规则:人尽量不要挡住景物中的显著区域；人不能挡住景物中的消失点；明显的直线不能贯穿人的头部，每一条准则都会为任一的人的站位H提供一个量化分数，反规则的总得分就是三个量化分数的乘积:
[0018]Score-(H) =Score-(H |S).Score- (H | V).Score_(H| L)
[0019]其中，S，V和L 分别表示景物图的显著区域、消失点和直线。
[0020]所述的反规则之人尽量不要挡住景物中的显著区域，显著区域是用户想要合照的景物本身或者景物中重要的部分，所以对人的站位H的评估取决于该站位挡住多少显著区域:
[0021]
【权利要求】
1.一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于该方法包括如下步骤: 步骤I)构建一个构图理想的人像数据集，利用数据集图片样本中人与景物相对位置关系，学习正规则，分析人应该站在场景中的哪个位置；所述的构图理想的人像数据集只考虑站立姿势的人像，不考虑坐着、躺着、半蹲姿势； 步骤2)基于经验性构图规则，定义反规则，决定场景中不适合站人的区域； 步骤3)结合步骤I)得到的正规则和步骤2)得到的反规则计算合理的人像站位，并推荐站位推荐给拍照的用户。
2.根据权利要求1所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:构建一个构图理想的人像数据集具体是:选取3000张人像数据集图片，每张图片满足包含且仅包含一个主角，包含清晰、明显的景物，并且是自然图像三个原则，邀请25个人为3000张图片打分，选出得分从高到低的前500张图片并进行左右对称翻转，得到1000张作为最终构图理想的人像数据集。
3.根据权利要求1所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:将搜集到的图片中的人和景物提取出来，对它们进行参数化表达； 所述对图片中的人物进行参数化表达，忽略不同人的身材差异，用一个固定长宽比的矩阵描述人；利用3维向量Η(χ，α)描述人的站位，其中2维向量X表示人物位置坐标，标量α反应人物大小； 对图片中的景物进行参数化表达，定义一个90维的特征S:前85维元素是对提取到的景物的二值掩码进行金字塔采样的结果，S(O)，S(1: 4)，S(5: 20)和S(21: 84)分别表示第I层到第4层金字塔采样，每个单元中被标记为景物的像素的比例被赋给S中对应的维度，同时引入5维元素S(85: 89)描述景物在图像中的分布，按左右、上下、内外、左上右下和右上左下这5种不同的方式将景物的二值掩码分为两个部分，然后计算两个部分被标记为景物的像素比例的差，赋给对应的维度，S(O)反应景物大小，S(1: 84)描述景物的形状及位置；S(85: 89)反应景物更多地分布在哪一部分。
4.根据权利要求1所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:不同种类的场景拥有不同的构图规则，不能用统一模型来建模人与景物的位置关系，将数据集中的所有图像按照景物的特征分为15类，再对每一类单独地分析适用于这一类的构图特征。
5.根据权利要求4所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:对于给定的一类景物，通过浏览属于这类景物的留念照发现，有不止一个理想的人的站位，使用混合高斯模型对每一类场景合适的人的位置坐标进行统计分析，利用单一的高斯模型估算合适的人物大小。
6.根据权利要求3所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:通过学习得到的人的位置坐标和大小分布可以用来指导图像中哪些部分适合站人，称之为正规则。
7.根据权利要求1所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:反规则来自于三条常用的经验性构图规则:人尽量不要挡住景物中的显著区域?’人不能挡住景物中的消失点；明显的直线不能贯穿人的头部，每一条准则都会为任一的人的站位H提供一个量化分数，反规则的总得分就是三个量化分数的乘积:
Score-(H) = Score_(H|S).Score-(N|V).Score-(N|L) 其中，S，V和L分别表示景物图的显著区域、消失点和直线； 所述显著区域是用户想要合照的景物本身或者景物中重要的部分，所以对人的站位H的评估取决于该站位挡住多少显著区域:
S是通过区域对比度的方法得到的显著区域的二值掩码；Recth表示的是当人站在h处占据图像中的矩形区域；符号“&”表示“和”操作，可以计算出显著区域中被人遮挡的区域；Il.Il统计二值掩码中非零像素的个数；参数入3用来调整Sc0re_(H|S)的范围，可以起到权衡反规则得到各项之间的权重的作用； 所述消失点反映了场景中深度的渐变过程，可以为图像增加纵深感，所以在最终的人像照片中，场景中的消失点不应该被人遮挡，通过检查人的站位是否与消息点的位置重合来计算站位H的得分:
Score- (H | V) = 1- λ vX I (Recta (V) = I) V表示消失点的2维坐标，λ ν表示权重； 应用Hough变换来检测景物图中比较显著的长直线，直线的二值掩码表达为L，人的站位确定后，可以估计到人头部的位置，将其记为HeadH，所以要求人的头部和直线的掩码的交集为空:
Score- (H | L) = 1-λ LX I (Headh&L)。
8.根据权利要求1所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:每个人的站位总得分通过正、反规则的得分相乘得到，预先为每个景物类别生成多张正规则得分图，每张得分图表示的是对于给定的人的大小每个位置坐标的得分，然后，对于测试的场景计算正规则得分，只需确认该场景属于哪个类别，然后加载该类别的正规则得分图；对于反规则，利用图像滤波器加速反规则得分的计算。
9.根据权利要求8所述的一种基于摄影构图规则的留念照人像站位推荐方法，其特征在于:人的站位总得分计算方法确定后，利用遍历搜索来寻找最佳站位，站位的横坐标搜索范围是O到1，人物大小的范围是0.04到0.07，站位的纵坐标搜索范围是0.9-t到1，t表示平均人形中人脸部中心点到人脚部的距离，以0.005的步长遍历3维搜索空间，寻找得分最高的人的站位，然后在景物图中相应位置画出人形，推荐给用户。
【文档编号】G06T7/00GK104182970SQ201410389510
【公开日】2014年12月3日 申请日期:2014年8月8日 优先权日:2014年8月8日
【发明者】陈纯, 王银廷, 宋明黎, 周星辰, 阮莹, 卜佳俊 申请人:浙江大学