本公开实施例涉及计算机,尤其涉及一种图像处理及标注方法、装置、电子设备及存储介质。
背景技术:
1、随着特效视频的发展,越来越多的用户通过短视频来记录生成,在拍摄和创作短视频时,对视频内容丰富性的需求也逐渐提高。
2、在短视频拍摄和创作过程中,常常会对用户的面部图像进行处理,例如,识别面部轮廓上的关键点。然而,现有的轮廓关键点识别不准确,即无法有效进行轮廓识别,从而引起进行后续处理或者后续处理不准确,导致用户使用体验感较差。
技术实现思路
1、本公开实施例提供一种图像处理及标注方法、装置、电子设备及存储介质,以实现高效、有效且准确的对面部轮廓进行标注的技术效果。
2、第一方面,本公开实施例提供了一种图像处理方法,该方法包括:
3、获取包括目标对象的待处理图像;
4、基于目标面部轮廓标注模型对所述待处理图像中目标对象的面部边缘轮廓进行标注,得到与所述待处理图像相对应的目标图像;
5、其中,所述目标面部轮廓标注模型是基于至少一个训练样本训练得到的,所述训练样本中包括原始图像和相应的标注图像,所述标注图像中待标注对象的面部边缘轮廓已被至少三个标注点标注,所述至少三个标注点中包括基础标注点,以及相邻两个基础标注点之间的至少一个均分标注点,所述均分标注点是根据相邻两个基础标注点的至少一个标注直线确定的,所述标注直线与相邻两个基础标注点的连线垂直。
6、第二方面,本公开实施例还提供了一种图像标注方法,该方法包括:
7、获取包括待标注对象的原始图像;
8、确定原始图像中待标注对象面部轮廓的基础标注点以及相邻基础标注点的均分点;
9、基于所述基础标注点、所述相邻基础标注点的均分点以及所述待标注对象的面部轮廓,确定均分标注点,其中,所述均分标注点是基于与该相邻基础标注点相关联的标注直线确定的,所述标注直线与该相邻两个基础标注点的连线垂直;
10、基于原始图像的均分标注点和基础标注点,确定原始图像的标注图像。
11、第三方面,本公开实施例还提供了一种图像处理装置,该装置包括:
12、待处理图像获取模块,用于响应于检测到触发指示,获取包括目标对象的待处理图像;
13、目标图像获取模块,用于基于目标模型对所述待处理图像中目标对象的面部边缘轮廓进行标注,得到与所述待处理图像相对应的目标图像;
14、其中,所述目标模型是基于训练样本训练得到的,所述训练样本包括原始图像和相应的标注图像,所述标注图像中待标注对象的面部边缘轮廓被标注点标注,所述标注点包括基础标注点和位于相邻基础标注点之间的均分标注点,所述均分标注点是基于与该相邻基础标注点相关联的标注直线确定的,所述标注直线与该相邻两个基础标注点的连线垂直。
15、第四方面,本公开实施例还提供了一种图像标注装置,该装置包括:
16、图像获取模块,用于获取包括待标注对象的原始图像;
17、均分点确定模块,用于确定原始图像中待标注对象面部轮廓的基础标注点以及相邻基础标注点的均分点;
18、均分标注点确定模块,用于基于所述基础标注点、所述相邻基础标注点的均分点以及所述待标注对象的面部轮廓,确定均分标注点,其中,所述均分标注点是基于与该相邻基础标注点相关联的标注直线确定的,所述标注直线与该相邻两个基础标注点的连线垂直;
19、标注图像确定模块,用于基于原始图像的均分标注点和基础标注点,确定原始图像的标注图像。
20、第五方面,本公开实施例还提供了一种电子设备,所述设备包括:
21、一个或多个处理器;
22、存储装置,用于存储一个或多个程序,
23、当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开实施例任一所述的图像处理方法或实现如本公开实施例任一所述的图像标注方法。
24、第六方面,本公开实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本公开实施例任一所述的图像处理方法或实现如本公开实施例任一所述的图像标注方法。
25、本公开实施例的技术方案,通过获取包括目标对象的待处理图像,并且基于目标面部轮廓标注模型对待处理图像中目标对象的面部边缘轮廓进行标注,得到与待处理图像相对应的目标图像,解决了现有技术中轮廓关键点识别不准确,导致无法进行后续处理,引起用户体验较差的问题,实现了在模型训练阶段,引入更多的关键点,以训练得到准确度较高的轮廓标注模型,后续可以基于该轮廓标注模型对图像进行处理,不仅提高了轮廓标注的准确性和高效性,还提高了后续图像处理的效果,从而达到了提高用户使用体验的效果。此外,通过获取包括待标注对象的原始图像,确定原始图像中待标注对象面部轮廓的基础标注点以及相邻基础标注点的均分点,并基于基础标注点、相邻基础标注点的均分点以及待标注对象的面部轮廓,确定均分标注点,提高了标注效率。
1.一种图像处理方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述触发指示包括下述至少一种:
3.根据权利要求1或2所述的方法,其特征在于,所述训练样本是通过以下步骤获得的:
4.根据权利要求3所述的方法,其特征在于,所述确定原始图像中待标注对象面部轮廓的相邻基础标注点的均分点,包括:
5.根据权利要求3所述的方法,其特征在于,所述基于所述基础标注点、所述相邻基础标注点的均分点以及所述待标注对象的面部轮廓,确定均分标注点,包括:
6.根据权利要求5所述的方法,其特征在于,所述根据所述标注直线和所述待标注对象的边缘轮廓,确定均分标注点,包括:
7.根据权利要求1-6中任一所述的方法,其特征在于,所述基础标注点包括额头顶点、额角点、聂角点、太阳穴点、颧骨点、下颌骨点、下巴尖点中的至少两个。
8.一种图像标注方法,其特征在于,包括:
9.根据权利要求8所述的方法,其特征在于,所述确定原始图像中待标注对象面部轮廓的相邻基础标注点的均分点,包括:
10.根据权利要求8所述的方法,其特征在于,所述基于所述基础标注点、所述相邻基础标注点的均分点以及所述待标注对象的面部轮廓,确定均分标注点,包括:
11.根据权利要求10所述的方法,其特征在于,所述根据所述标注直线和所述待标注对象的边缘轮廓,确定均分标注点,包括:
12.根据权利要求8-11中任一所述的方法,其特征在于,所述基础标注点包括额头顶点、额角点、聂角点、太阳穴点、颧骨点、下颌骨点、下巴尖点中的至少两个。
13.一种图像处理装置,其特征在于,包括:
14.一种图像标注装置,其特征在于,包括:
15.一种电子设备,其特征在于,所述设备包括:
16.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7或权利要求8-12中任一所述的图像处理或图像标注方法。