一种基于深度学习的多目标场景偏振三维成像方法

文档序号:30507316发布日期:2022-06-25 00:44阅读:来源:国知局

技术特征:
1.一种基于深度学习的多目标场景偏振三维成像方法,其特征在于,包括:s1:利用偏振三维成像系统获取多目标场景不同偏振角度的场景图像;s2:构建神经网络,所述神经网络包括清晰化网络模块和模糊距离估计网络模块,其中,所述清晰化网络模块用于对输入的阈值分割后的偏振图像中不同物距处目标进行清晰化重建,获得清晰图像,所述模糊距离估计网络模块用于将所述模糊图像与清晰图像之间的映射关系作为多目标场景中的先验信息进行目标距离估计,获得不同目标与相机之间距离的估计值;s3:对所述神经网络中的清晰化网络模块和模糊距离估计网络模块分别进行训练,获得经训练的神经网络模型;s4:利用所述经训练的神经网络模型获得多目标场景不同偏振角度的场景图像中不同的目标的深度估计结果和清晰目标图像,识别不同目标物体;s5:获取所述不同目标物体表面的偏振度,以及不同目标物体表面入射光的方位角和入射角;s6:对多目标偏振三维成像场景中偏振求解得到的法向量进行校正,获得校正后的方位角信息;s7:利用不同目标的方位角和入射角信息,实现多目标场景下物体表面三维轮廓的重建。2.根据权利要求1所述的基于深度学习的多目标场景偏振三维成像方法,其特征在于,所述s1包括:s11:利用所述偏振三维成像系统获得所述多目标复杂场景中目标物体表面的反射光,分别获取0
°
,45
°
,90
°
和135
°
四个角度下物体场景的原始偏振图像i
′0、i

45
、i

90
、i

135
;s12:利用阈值分割算法对所述原始偏振图像i
′0、i

45
、i

90
、i

135
中的物体和背景进行分割,获得阈值分割后的偏振图像i0、i
45
、i
90
、i
135
。3.根据权利要求1所述的基于深度学习的多目标场景偏振三维成像方法,其特征在于,所述清晰化网络模块包括相互连接的编码单元和解码单元,用于通过引入模糊边缘注意力机制对输入的模糊图像进行编码-解码过程,实现对所述模糊图像中的模糊目标区域进行清晰化重建。4.根据权利要求3所述的基于深度学习的多目标场景偏振三维成像方法,其特征在于,所述神经网络模型的损失函数包括所述清晰化网络模块的损失函数和所述模糊距离估计网络模块的损失函数,其中,所述清晰化网络模块的损失函数为:其中,n表示输入的真实模糊图像的数目,α表示调整l1损失的权重值,ssim(m
f
,m)表示输入的真实模糊图像m与清晰化网络模块最终输出的清晰图像m
f
的结构相似度结果;所述模糊距离估计网络模块的损失函数为:其中,表示所述清晰化网络模块中提供的先验信息在第k级条件下的输出结果,
β为系数,表示经过所述模糊距离估计网络模块的最终融合图像,表示经过所述模糊距离估计网络模块的最终融合图像,表示图像i经过所述清晰化网络模块第k级的输出结果,φ
rd
(i)表示图像i经过所述模糊距离估计网络模块的输出结果,
║ꢀ║2表示求二范数。5.根据权利要求3所述的基于深度学习的多目标场景偏振三维成像方法,其特征在于,所述s3包括:s31:获取第一训练数据集,所述第一训练数据集用于对所述清晰化网络模块进行训练,所述第一训练数据集中包括具有不同模糊程度的多张目标图像;s32:利用所述第一训练数据集对所述清晰化网络模块进行训练;s33:获得第二训练数据集,所述第二训练数据集用于对所述模糊距离估计网络模块进行训练,其中,所述第二训练数据集包括具有不同物距的多张目标图像;s34:利用所述第二训练数据集对所述模糊距离估计网络模块进行训练,进而获得经训练的神经网络模型。6.根据权利要求3所述的基于深度学习的多目标场景偏振三维成像方法,其特征在于,所述s5包括:s51:利用场景不同目标物体的四幅偏振子图像中的强度信息计算每个目标物体表面的偏振度;s52:利用场景不同目标物体的强度变化信息和所述偏振度获得不同目标物体表面入射光的方位角和入射角。7.根据权利要求3所述的基于深度学习的多目标场景偏振三维成像方法,其特征在于,所述s6包括:利用目标反射光强度梯度场与轮廓之间的变化关系,将目标物体表面的法向量信息转化为梯度场信息,则将多目标偏振三维成像场景中的法向量多值性问题的校正过程表示为:其中,表示利用目标表面强度信息求解得到的梯度场变化参考信息,g
polar
表示利用目标反射光偏振信息求解得到的梯度场参量;若则利用目标反射光偏振特性直接求解得到的微面元法向量信息准确,若则将方位角数值进行180
°
翻转。8.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,所述计算机程序用于执行权利要求1至7中任一项所述基于深度学习的多目标场景偏振三维成像方法的步骤。9.一种电子设备,其特征在于,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器调用所述存储器中的计算机程序时实现如权利要求1至7任一项所述基于深度学习的多目标场景偏振三维成像方法的步骤。

技术总结
本发明公开了一种基于深度学习的多目标场景偏振三维成像方法,包括:利用偏振三维成像系统获取多目标场景不同偏振角度的场景图像;构建神经网络;对神经网络中的清晰化网络模块和模糊距离估计网络模块分别进行训练;利用经训练的神经网络模型获得多目标场景不同偏振角度的场景图像中不同的目标的深度估计结果和清晰目标图像;获取不同目标物体表面的偏振度,以及不同目标物体表面入射光的方位角和入射角;对多目标偏振三维成像场景中的偏振求解得到的法向量进行校正;利用不同目标的方位角和入射角信息,实现多目标场景下物体表面三维轮廓的重建。本发明将深度学习与偏振三维成像相结合,实现了多目标场景的高精度偏振三维成像。维成像。维成像。


技术研发人员:李轩 宋家伟 邵晓鹏 刘飞 杨奎 蔡玉栋 张仕超 闫明宇 冯怡
受保护的技术使用者:西安电子科技大学
技术研发日:2022.02.14
技术公布日:2022/6/24
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1