一种图像生成方法和装置与流程

文档序号:31526433发布日期:2022-09-14 14:31阅读:来源:国知局

技术特征:
1.一种图像生成方法,其特征在于,所述方法包括:获取目标场景中各架设相机对应的待处理图像;其中,一个架设相机对应的待处理图像为基于该架设相机采集的所述目标场景的图像得到的;所述各架设相机满足预设的约束条件,所述约束条件为:在任一时刻,针对所述目标场景中的每一前景对象,各架设相机采集到的图像中至少存在一个图像包含完整的该前景对象;基于对各待处理图像进行图像分割,分别确定各待处理图像中前景对象所占的图像区域,作为所述前景对象对应的前景图像区域;从各前景图像区域中,确定包含的所述前景对象的完整度最大的图像区域,作为指定的前景图像区域;针对所述前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像;获取指定的前景图像区域对应的架设相机采集的包含目标场景中的背景的图像,作为背景图像;依次将所述背景图像在所述指定监测视角下的图像和所述待投影图像,投影至所述目标场景的三维场景模型,得到所述目标场景在所述指定监测视角下的目标图像。2.根据权利要求1所述的方法,其特征在于,在所述获取目标场景中各架设相机对应的待处理图像之前,所述方法还包括:获取所述各架设相机当前的架设参数;判断基于当前的架设参数,所述各架设相机是否满足预设的约束条件;若基于当前的架设参数,各架设相机不满足所述约束条件,则向控制设备发送控制指令,以使所述控制设备根据所述控制指令调整各架设相机的架设参数,使得基于调整后的架设参数所述各架设相机满足所述约束条件。3.根据权利要求1所述的方法,其特征在于,所述针对所述前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像,包括:针对所述前景对象在指定监测视角下的每一像素坐标,基于指定的前景图像区域中的图像坐标与所述指定监测视角成像的图像坐标之间的第一转换关系,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像。4.根据权利要求1所述的方法,其特征在于,在所述针对所述前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像之前,所述方法还包括:基于各前景图像区域,以及各待处理图像的图像坐标与所述目标场景的空间坐标之间的各第二转换关系,确定所述前景对象在所述目标场景中的三维位姿平面;所述针对所述前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像,包括:
针对所述前景对象在指定监测视角下的每一像素坐标,基于指定的前景图像区域中的图像坐标与所述三维位姿平面中的三维坐标之间的第三转换关系,以及所述指定监测视角下成像的图像坐标与所述三维位姿平面中的三维坐标之间的第四转换关系,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像。5.根据权利要求4所述的方法,其特征在于,所述基于各前景图像区域,以及各待处理图像的图像坐标与所述目标场景的空间坐标之间的各第二转换关系,确定所述前景对象在所述目标场景中的三维位姿平面,包括:确定对应的待处理图像包含所述前景对象的两个架设相机,作为指定架设相机;针对每一指定架设相机,确定该指定架设相机对应的待处理图像中包含所述前景对象的检测框;基于该指定架设相机对应的图像坐标与所述空间坐标之间的第二转换关系,确定所述检测框中的指定点在所述目标场景中对应的三维点;确定包含该指定架设相机的光心和对应的三维点的平面,作为该指定架设相机对应的参考平面;确定经过各参考平面的交线,且与水平面呈指定角度的平面,作为所述前景对象在所述目标场景中的三维位姿平面。6.根据权利要求5所述的方法,其特征在于,所述确定经过各参考平面的交线,且与水平面呈指定角度的平面,作为所述前景对象在所述目标场景中的三维位姿平面,包括:以各参考平面的交线为旋转轴,按照所述指定角度,对经过所述旋转轴,且与水平面平行的初始物平面进行旋转,得到所述前景对象在所述目标场景中的三维位姿平面。7.根据权利要求1所述的方法,其特征在于,在所述针对所述前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像之前,所述方法还包括:确定所述前景对象在指定的前景图像区域所属的待处理图像中的边缘像素点;针对每一边缘像素点,确定该边缘像素点在所述指定监测视角下的对应的像素坐标,作为边缘像素坐标;确定以所述边缘像素坐标为边缘的区域包含的像素坐标,作为所述前景对象在所述指定监测视角下的像素坐标。8.根据权利要求1所述的方法,其特征在于,所述基于对各待处理图像进行图像分割,分别确定各待处理图像中前景对象所占的图像区域,作为所述前景对象对应的前景图像区域,包括:基于对各待处理图像进行图像分割,得到各待处理图像中各前景对象所占的图像区域,作为待处理图像区域;基于各待处理图区域之间的图像相似度,确定属于同一前景对象的待处理图像区域,作为该前景对象对应的前景图像区域。9.根据权利要求1所述的方法,其特征在于,所述获取目标场景中各架设相机对应的待处理图像,包括:
获取各架设相机采集的所述目标场景的图像,作为初始图像;按照指定色差校正参数分别对各初始图像进行色差校正,和/或,按照各架设相机的畸变类型分别对各初始图像进行畸变校正,得到各待处理图像。10.根据权利要求1所述的方法,其特征在于,所述获取指定的前景图像区域对应的架设相机采集的包含目标场景中的背景的图像,作为背景图像,包括:获取待填充图像;其中,所述待填充图像为:将所述指定的前景图像区域从所属的待处理图像中删除得到的;将预设图像中与所述指定的前景图像区域对应的部分,填充至所述待填充图像中所述指定的前景图像区域对应的位置,得到指定的前景图像区域对应的架设相机采集的包含目标场景中的背景的图像;其中,所述预设图像为预先采集的包含所述目标场景中的背景的图像。11.一种图像生成装置,其特征在于,所述装置包括:待处理图像获取模块,用于获取目标场景中各架设相机对应的待处理图像;其中,一个架设相机对应的待处理图像为基于该架设相机采集的所述目标场景的图像得到的;所述各架设相机满足预设的约束条件,所述约束条件为:在任一时刻,针对所述目标场景中的每一前景对象,各架设相机采集到的图像中至少存在一个图像包含完整的该前景对象;前景图像区域确定模块,用于基于对各待处理图像进行图像分割,分别确定各待处理图像中前景对象所占的图像区域,作为所述前景对象对应的前景图像区域;前景图像区域选择模块,用于从各前景图像区域中,确定包含的所述前景对象的完整度最大的图像区域,作为指定的前景图像区域;待投影图像生成模块,用于针对所述前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到所述前景对象在所述指定监测视角下的待投影图像;背景图像获取模块,用于获取指定的前景图像区域对应的架设相机采集的包含目标场景中的背景的图像,作为背景图像;目标图像生成模块,用于依次将所述背景图像在所述指定监测视角下的图像和所述待投影图像,投影至所述目标场景的三维场景模型,得到所述目标场景在所述指定监测视角下的目标图像。

技术总结
本申请实施例提供了一种图像生成方法和装置,获取待处理图像;基于对各待处理图像进行图像分割,分别确定各待处理图像中前景对象所占的前景图像区域;从各前景图像区域中,确定包含的前景对象的完整度最大的指定的前景图像区域;针对前景对象在指定监测视角下的每一像素坐标,确定该像素坐标在指定的前景图像区域中对应的像素点的像素值,作为该像素坐标的像素值,得到前景对象在指定监测视角下的待投影图像;依次将包含目标场景中的背景的背景图像在指定监测视角下的图像和待投影图像,投影至目标场景的三维场景模型,得到目标场景在指定监测视角下的目标图像,可以提高生成的图像的质量。像的质量。像的质量。


技术研发人员:王川川 许娅彤 李杰 毛慧
受保护的技术使用者:杭州海康威视数字技术股份有限公司
技术研发日:2022.06.13
技术公布日:2022/9/13
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1