一种图像处理、直播方法及相关装置与流程

文档序号:23552323发布日期:2021-01-05 21:11阅读:来源:国知局

技术特征:

1.一种图像处理方法,其特征在于,包括:

获取原始图像数据,所述原始图像数据中具有人物形象;

从所述原始图像数据中提取原始属性特征,所述原始属性特征为表征所述人物形象的人脸属性的特征;

调整所述原始属性特征,得到目标属性特征;

使用所述目标属性特征进行图像重构处理,得到具有调整后的所述人脸属性的目标图像数据。

2.根据权利要求1所述的方法,其特征在于,所述方法基于人脸生成器和人脸编码器,所述人脸生成器包括:解码网络;

所述从所述原始图像数据中提取原始属性特征,包括:

将所述原始图像数据输入所述人脸编码器进行编码处理,输出原始人脸编码;

将所述原始人脸编码输入所述解码网络进行解码处理,输出包括至少一种人脸属性的原始属性特征。

3.根据权利要求2所述的方法,其特征在于,所述人脸生成器还包括与解码网络连接的图像重构网络,所述图像重构网络用于输入多组用于表征人脸属性的特征,以重构图像数据;

所述调整所述原始属性特征,得到目标属性特征,包括:

接收第一用户操作;

确定所述第一用户操作所选择的包括人脸图像的参考图像数据;

从所述参考图像数据中提取表征人脸属性的特征,作为参考属性特征;

将预设组数的所述原始属性特征,作为输入所述图像重构网络的目标属性特征;

在所述目标属性特征中,将与所述参考属性特征归属于同一组的原始属性特征,替换为所述参考属性特征。

4.根据权利要求2所述的方法,其特征在于,所述调整所述原始属性特征,得到目标属性特征,包括:

接收第二用户操作;

确定所述第二用户操作所选择的、关于目标人脸属性的调整幅度,所述目标人脸属性为所述原始图像数据中所具有的、待调整的人脸属性;

确定与所述目标人脸属性关联的调整方向;

将所述原始属性特征沿所述调整方向移动所述调整幅度,得到调整后的人脸属性的目标属性特征。

5.根据权利要求4所述的方法,其特征在于,所述确定与所述目标人脸属性关联的调整方向,包括:

获取样本图像数据,所述样本图像数据标记有关于所述目标人脸属性的第一属性向量和第二属性向量;

从所述样本图像数据中提取关于所述目标人脸属性的样本属性特征;

在所述属性特征所构成的特征空间中,确定超平面,所述超平面将所述特征空间分为第一特征空间和第二特征空间,其中,所述第一特征空间中包括标记为第一属性向量的图像数据的属性特征,所述第二特征空间中包括标记为第二属性向量的图像数据的属性特征;

将所述超平面的法向量作为与所述目标人脸属性关联的调整方向。

6.根据权利要求5所述的方法,其特征在于,所述获取样本图像数据,包括:

随机生成至少一个人脸编码;

将所述人脸编码分别输入所述人脸生成器进行图像重构处理,得到至少一个样本图像数据;

确定预置的、用于识别所述目标人脸属性的分类模型,所述目标人脸属性使用第一属性向量或第二属性向量进行表征;

将所述样本图像数据输入所述分类模型进行识别处理,确定所述样本图像数据归属于第一属性向量或第二属性向量的概率;

筛选出所述概率的前n个的样本图像数据。

7.根据权利要求4所述的方法,其特征在于,所述确定与所述目标人脸属性关联的调整方向,包括:

获取第一基准图像数据和第二基准图像数据,所述第二基准图像数据为更改所述第一基准图像数据的目标人脸属性所得到的图像数据;

从所述第一基准图像数据中提取第一基准属性特征;

从所述第二基准图像数据中提取第二基准属性特征;

将所述第二基准属性特征与所述第一基准属性特征的差值,作为调整方向。

8.根据权利要求3-7任一所述的方法,其特征在于,所述图像重构网络包括多层依次相连的特征重构层;

所述使用所述目标属性特征进行图像重构处理,得到具有调整后的所述人脸属性的目标图像数据,包括:

针对本层的特征重构层,接收上一层特征重构层输出的候选图像;

接收待输入本层特征重构层的目标属性特征;

在本层的特征重构层中,使用所述目标属性特征对所述候选图像进行重构,获得的特征图像;

若本层的特征重构层为最后一层,则输出所述特征图像为目标图像数据;

若本层的特征重构层非最后一层,则输出所述特征图像为新的候选图像。

9.一种直播方法,其特征在于,包括:

采集原始视频数据,所述原始视频数据中包括原始图像数据,所述原始图像数据中具有主播用户;

从每帧所述原始图像数据中提取原始属性特征,所述原始属性特征为表征所述主播用户的人脸属性的特征;

调整所述原始属性特征,得到目标属性特征;

使用每帧所述目标属性特征进行图像重构处理,得到具有调整后的所述人脸属性的目标图像数据;

播放由具有所述目标图像数据的目标视频数据。

10.根据权利要求9所述的方法,其特征在于,所述播放由具有所述目标图像数据的目标视频数据,包括:

对相邻两帧的所述目标图像数据进行处理,得新的所述目标图像数据;

播放具有新的所述目标图像数据的目标视频数据。

11.一种图像处理装置,其特征在于,包括:

原始图像数据获取模块,用于获取原始图像数据,所述原始图像数据中具有人物形象;

原始属性特征提取模块,用于从所述原始图像数据中提取原始属性特征,所述原始属性特征为表征所述人物形象的人脸属性的特征;

调整模块,用于调整所述原始属性特征,得到目标属性特征;

重构模块,用于使用所述目标属性特征进行图像重构处理,得到具有调整后的所述人脸属性的目标图像数据。

12.一种直播装置,其特征在于,包括:

采集模块,用于采集原始视频数据,所述原始视频数据中包括原始图像数据,所述原始图像数据中具有主播用户;

特征提取模块,用于从每帧所述原始图像数据中提取原始属性特征,所述原始属性特征为表征所述主播用户的人脸属性的特征;

属性调整模块,用于调整所述原始属性特征,得到目标属性特征;

图像重构模块,用于使用每帧所述目标属性特征进行图像重构处理,得到具有调整后的所述人脸属性的目标图像数据;

播放模块,用于播放由具有所述目标图像数据的目标视频数据。

13.一种图像处理设备,其特征在于,包括:存储器以及一个或多个处理器;

所述存储器,用于存储一个或多个程序;

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-8中任一所述的图像处理方法。

14.一种直播设备,其特征在于,包括:存储器以及一个或多个处理器;

所述存储器,用于存储一个或多个程序;

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求9-10中任一所述的直播方法。

15.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-8中任一所述的图像处理方法。

16.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求9-10中任一所述的直播方法。


技术总结
本发明实施例公开了一种图像处理、直播方法及相关装置。该图像处理方法通过获取原始图像数据,所述原始图像数据中具有人物形象;从所述原始图像数据中提取原始属性特征,所述原始属性特征为表征所述人物形象的人脸属性的特征;调整所述原始属性特征,得到目标属性特征;使用所述目标属性特征进行图像重构处理,得到具有调整后的所述人脸属性的目标图像数据,解决在使用不同图像处理方式对人脸属性进行调整时,调整次序不同所带来的效果互相影响的问题,实现同时更改原始图像数据的人脸属性,以对原始图像数据中的人物形象进行调整,进而减少开发人员的开发难度和开发时间。

技术研发人员:王文斓;刘炉;任高生
受保护的技术使用者:广州虎牙科技有限公司
技术研发日:2019.07.03
技术公布日:2021.01.05
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1