一种逐像素含时序拟物一致性处理的方法及装置与流程

本发明涉及影视制作领域，具体地涉及一种逐像素含时序拟物一致性处理的方法及装置。

背景技术：

1、传统的图像分割通常采用两个图层叠加的方式，例如将前景和后景分割，再将该前景与所需要的后景拼接起来。该方法主要通过吸取画面中的某一种颜色作为透明色，将它从画面中抠去，使背景透出来，最终叠加合成具有两个图层的画面。该方法合成的图像生硬，不能准确的处理图像。

技术实现思路

1、本发明实施例的目的是提供一种逐像素含时序拟物一致性处理的方法及装置，该方法能够快速的合成准确的图像。

2、为了实现上述目的，本发明实施例提供一种逐像素含时序拟物一致性处理的方法，该方法包括：获取原始视频图像中的特征数据；根据所述特征数据获取所述原始视频图像中目标物体的前景部分的蒙版画面，得到第一特征图；根据所述特征数据获取所述原始视频图像中目标物体的后景部分的蒙版画面，得到第二特征图；将所述第一特征图、第二特征图和需替换的后景图像在三维渲染引擎中进行合成，得到第三特征图；对所述第三特征图进行时序拟物分析得到所述第三特征图的像素特征分布图，所述时序拟物分析为根据所述第三特征图中像素的变化轨迹得到所述第三特征图像素的空间分布信息；对所述第三特征图进行三维空间光照变化的重建；根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像。

3、可选的，所述特征数据为时间编码、源格式、像素中的至少一种。

4、可选的，所述对所述第三特征图进行三维空间光照变化的重建，包括：获取所述第三特征图的图像信息、空间结构信息；根据所述图像信息、空间结构信息对所述第三特征图进行三维空间光照变化的重建，使得三维空间光照下物体的背光面有明暗变化。

5、可选的，所述根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像，包括：通过ai渲染管道对所述像素特征分布图进行ai渲染和色彩修正，根据所述第三特征图像素的空间分布信息对所述第三特征图进行逐像素替换。

6、所述色彩修正为修正图像的亮度水平、对比度、饱和股、锐度、明度、色相中的至少一种。

7、另一方面，本发明提供一种逐像素含时序拟物一致性处理的装置，该装置包括：第一获取模块，用于获取原始视频图像中的特征数据；第二获取模块，用于根据所述特征数据获取所述原始视频图像中目标物体的前景部分的蒙版画面，得到第一特征图；第三获取模块，用于根据所述特征数据获取所述原始视频图像中目标物体的后景部分的蒙版画面，得到第二特征图；第一处理模块，用于将所述第一特征图、第二特征图和需替换的后景图像在三维渲染引擎中进行合成，得到第三特征图；第二处理模块，用于对所述第三特征图进行时序拟物分析得到所述第三特征图的像素特征分布图，所述时序拟物分析为根据所述第三特征图中像素的变化轨迹得到所述第三特征图像素的空间分布信息；第三处理模块，用于对所述第三特征图进行三维空间光照变化的重建；第四处理模块，用于根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像。

8、可选的，所述特征数据为时间编码、源格式、像素中的至少一种。

9、可选的，所述对所述第三特征图进行三维空间光照变化的重建，包括：获取所述第三特征图的图像信息、空间结构信息；根据所述图像信息、空间结构信息对所述第三特征图进行三维空间光照变化的重建，使得三维空间光照下物体的背光面有明暗变化。

10、可选的，所述根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像，包括：通过ai渲染管道对所述像素特征分布图进行ai渲染和色彩修正，根据所述第三特征图像素的空间分布数据信息对所述第三特征图进行逐像素替换。

11、可选的，所述色彩修正为修正图像的亮度水平、对比度、饱和股、锐度、明度、色相中的至少一种。

12、本发明的一种逐像素含时序拟物一致性处理的方法包括：获取原始视频图像中的特征数据；根据所述特征数据获取所述原始视频图像中目标物体的前景部分的蒙版画面，得到第一特征图；根据所述特征数据获取所述原始视频图像中目标物体的后景部分的蒙版画面，得到第二特征图；将所述第一特征图、第二特征图和需替换的后景图像在三维渲染引擎中进行合成，得到第三特征图；对所述第三特征图进行时序拟物分析得到所述第三特征图的像素特征分布图，所述时序拟物分析为根据所述第三特征图中像素的变化轨迹得到所述第三特征图像素的空间分布信息；对所述第三特征图进行三维空间光照变化的重建；根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像。本发明通过对三个特征图层进行时序拟物分析及光照重建，快速准确的获取最终合成图像。

13、本发明实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。

技术特征：

1.一种逐像素含时序拟物一致性处理的方法，其特征在于，该方法包括：

2.根据权利要求1所述的方法，其特征在于，

3.根据权利要求1所述的方法，其特征在于，所述对所述第三特征图进行三维空间光照变化的重建，包括：

4.根据权利要求1所述的方法，其特征在于，所述根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像，包括：

5.根据权利要求4所述的方法，其特征在于，

6.一种逐像素含时序拟物一致性处理的装置，其特征在于，该装置包括：

7.根据权利要求6所述的装置，其特征在于，

8.根据权利要求6所述的装置，其特征在于，所述对所述第三特征图进行三维空间光照变化的重建，包括：

9.根据权利要求6所述的装置，其特征在于，所述根据所述像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像，包括：

10.根据权利要求9所述的装置，其特征在于，

技术总结
本发明实施例提供一种逐像素含时序拟物一致性处理的方法及装置，该方法包括：获取原始视频图像中的特征数据；根据特征数据获取所述原始视频图像中目标物体的前景部分的蒙版画面，得到第一特征图；根据特征数据获取原始视频图像中目标物体的后景部分的蒙版画面，得到第二特征图；将第一特征图、第二特征图和需替换的后景图像在三维渲染引擎中进行合成，得到第三特征图；对第三特征图进行时序拟物分析得到所述第三特征图的像素特征分布图；对第三特征图进行三维空间光照变化的重建；根据像素特征分布图对所述重建后的第三特征图进行渲染得到最终效果图像。该方法能够快速的合成准确的图像。

技术研发人员：任志忠
受保护的技术使用者：北京天图万境科技有限公司
技术研发日：
技术公布日：2024/1/13