数据处理方法、装置及设备与流程

本文件涉及数据处理，尤其涉及一种数据处理方法、装置及设备。

背景技术：

1、随着视频合成技术的发展与成熟，给身份识别等安全场景带来了很大的安全隐患，而由于用于训练生物检测模型的负样本数据(即合成视频)的样本量较小，且负样本数据的质量较差，这就导致训练得到的生物检测模型的检测准确性差，因此，需要一种能够提高用于对生物检测模型进行训练的样本数据的样本质量的解决方案。

技术实现思路

1、本说明书实施例的目的是提供一种数据处理方法、装置及设备，以提供一种能够提高用于对生物检测模型进行训练的样本数据的样本质量的解决方案。

2、为了实现上述技术方案，本说明书实施例是这样实现的：

3、第一方面，本说明书实施例提供了一种数据处理方法，包括：获取用于生成合成视频的目标图像以及第一视频，所述第一视频为非合成视频；获取所述第一视频中第一图像帧之前的预设数量的连续图像帧，并基于预设关键点在所述连续图像帧中的位置变化信息，确定所述预设关键点的第一预测变化信息；通过预先训练的图像生成模型，基于所述目标图像、所述预设关键点在所述第一图像帧中的第一位姿信息，以及所述预设关键点的第一预测变化信息，生成与所述目标图像对应的第一预测图像；基于所述目标图像以及所述第一预测图像，生成与所述目标图像对应的合成视频，所述合成视频用于训练生物检测模型。

4、第二方面，本说明书实施例提供了一种数据处理装置，所述装置包括：数据获取模块，用于获取用于生成合成视频的目标图像以及第一视频，所述第一视频为非合成视频；信息预测模块，用于获取所述第一视频中第一图像帧之前的预设数量的连续图像帧，并基于预设关键点在所述连续图像帧中的位置变化信息，确定所述预设关键点的第一预测变化信息；图像生成模块，用于通过预先训练的图像生成模型，基于所述目标图像、所述预设关键点在所述第一图像帧中的第一位姿信息，以及所述预设关键点的第一预测变化信息，生成与所述目标图像对应的第一预测图像；视频生成模块，用于基于所述目标图像以及所述第一预测图像，生成与所述目标图像对应的合成视频，所述合成视频用于训练生物检测模型。

5、第三方面，本说明书实施例提供了一种数据处理设备，所述数据处理设备包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器：获取用于生成合成视频的目标图像以及第一视频，所述第一视频为非合成视频；获取所述第一视频中第一图像帧之前的预设数量的连续图像帧，并基于预设关键点在所述连续图像帧中的位置变化信息，确定所述预设关键点的第一预测变化信息；通过预先训练的图像生成模型，基于所述目标图像、所述预设关键点在所述第一图像帧中的第一位姿信息，以及所述预设关键点的第一预测变化信息，生成与所述目标图像对应的第一预测图像；基于所述目标图像以及所述第一预测图像，生成与所述目标图像对应的合成视频，所述合成视频用于训练生物检测模型。

6、第四方面，本说明书实施例提供一种存储介质，所述存储介质用于存储计算机可执行指令，所述可执行指令在被执行时实现以下流程：获取用于生成合成视频的目标图像以及第一视频，所述第一视频为非合成视频；获取所述第一视频中第一图像帧之前的预设数量的连续图像帧，并基于预设关键点在所述连续图像帧中的位置变化信息，确定所述预设关键点的第一预测变化信息；通过预先训练的图像生成模型，基于所述目标图像、所述预设关键点在所述第一图像帧中的第一位姿信息，以及所述预设关键点的第一预测变化信息，生成与所述目标图像对应的第一预测图像；基于所述目标图像以及所述第一预测图像，生成与所述目标图像对应的合成视频，所述合成视频用于训练生物检测模型。

技术特征：

1.一种数据处理方法，包括：

2.根据权利要求1所述的方法，所述基于所述目标图像以及所述第一预测图像，生成与所述目标图像对应的合成视频，包括：

3.根据权利要求2所述的方法，所述通过预先训练的图像生成模型，基于所述目标图像、所述预设关键点在所述第一图像帧中的第一位姿信息，以及所述预设关键点的第一预测变化信息，生成与所述目标图像对应的第一预测图像，包括：

4.根据权利要求3所述的方法，所述第一预测变化信息包括所述预设关键点在图像帧中的位置信息、变化速度信息以及变化加速度信息。

5.根据权利要求4所述的方法，所述通过所述预先训练的图像生成模型，基于所述预设关键点在所述第一图像帧中的第一位姿信息，对所述预设关键点在所述目标图像中的位姿信息进行更新处理，得到更新后的目标图像，包括：

6.根据权利要求5所述的方法，所述基于预设关键点在所述连续图像帧中的位置变化信息，确定所述预设关键点的第一预测变化信息，包括：

7.根据权利要求1所述的方法，所述方法，还包括：

8.根据权利要求7所述的方法，所述基于所述合成视频对所述生物检测模型进行训练，得到训练后的生物检测模型，包括：

9.一种数据处理装置，包括：

10.一种数据处理设备，所述数据处理设备包括：

技术总结
本说明书实施例提供了一种数据处理方法、装置及设备，其中，该方法包括：获取用于生成合成视频的目标图像以及第一视频，第一视频为非合成视频，获取第一视频中第一图像帧之前的预设数量的连续图像帧，并基于预设关键点在连续图像帧中的位置变化信息，确定预设关键点的第一预测变化信息，通过预先训练的图像生成模型，基于目标图像、预设关键点在第一图像帧中的第一位姿信息，以及预设关键点的第一预测变化信息，生成与目标图像对应的第一预测图像，基于目标图像以及第一预测图像，生成与目标图像对应的合成视频，生成的合成视频用于训练生物检测模型。

技术研发人员：罗曼
受保护的技术使用者：支付宝（杭州）信息技术有限公司
技术研发日：
技术公布日：2024/1/15