使用全局最小化和深度内插的立体深度估计的系统和方法与流程

文档序号:11161169阅读:来源:国知局

技术特征:

1.一种生成包含物体的深度信息的高分辨率图像的方法,所述方法包括:

将第一参考图像和第二参考图像从第一分辨率下采样到第二分辨率,其中所述第一分辨率高于所述第二分辨率,并且其中所述第一参考图像和所述第二参考图像是立体图像对;

使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图;

将所述深度图从所述第二分辨率上采样到所述第一分辨率;以及

使用导向滤波器将上采样后的所述深度图的轮廓与所述第一参考图像的轮廓对准。

2.根据权利要求1所述的方法,其中对所述深度图进行上采样包括:使用双线性内插来将所述深度图的分辨率从所述第二分辨率增加到所述第一分辨率。

3.根据权利要求1所述的方法,其中所述第二分辨率包含至多与所述第一分辨率的四分之一一样多的像素。

4.根据权利要求3所述的方法,其中所述第二分辨率包含与所述第一分辨率的四分之一或十六分之一一样多的像素。

5.根据权利要求1所述的方法,其中使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图包括:使用对逐渐更大图像的迭代过程以使用全局最小化来生成深度图,由此生成深度图。

6.根据权利要求1所述的方法,其中基于全局最小化技术以所述第二分辨率生成深度图包括:基于全局最小化技术通过使能量函数最小化来生成深度图。

7.根据权利要求1所述的方法,其中所述第一参考图像和所述第二参考图像由彼此相距已知距离的相机同时捕获。

8.一种用于生成包含物体的深度信息的高分辨率图像的装置,包括:

处理器,经配置以:

将第一参考图像和第二参考图像从第一分辨率下采样到第二分辨率,其中所述第一分辨率高于所述第二分辨率,并且其中所述第一参考图像和所述第二参考图像包括立体图像对;

使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图;

将所述深度图从所述第二分辨率上采样到所述第一分辨率;以及

使用导向滤波器将上采样后的所述深度图的轮廓与所述第一参考图像的轮廓对准。

9.根据权利要求8所述的装置,其中对所述深度图进行上采样包括:使用双线性内插来将所述深度图的分辨率从所述第二分辨率增加到所述第一分辨率。

10.根据权利要求8所述的装置,其中所述第二分辨率包含至多与所述第一分辨率的四分之一一样多的像素。

11.根据权利要求10所述的装置,其中所述第二分辨率包含与所述第一分辨率的四分之一或十六分之一一样多的像素。

12.根据权利要求8所述的装置,其中使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图包括:使用对逐渐更大图像的迭代过程以使用全局最小化来生成深度图,由此生成深度图。

13.根据权利要求8所述的装置,其中基于全局最小化技术以所述第二分辨率产生深度图包括:基于全局最小化技术通过使能量函数最小化来生成深度图。

14.根据权利要求8所述的装置,还包括被放置在彼此相距已知距离的第一相机和第二相机,所述第一相机和所述第二相机经配置以同时分别捕获第一参考图像和第二参考图像。

15.根据权利要求8所述的装置,其中所述第一相机和所述第二相机各自具有彼此相同的原生分辨率。

16.一种用于生成包含物体的深度信息的高分辨率图像的装置,包括:

用于将第一参考图像和第二参考图像从第一分辨率下采样到第二分辨率的装置,其中所述第一分辨率高于所述第二分辨率,并且其中所述第一参考图像和所述第二参考图像包括立体图像对;

用于使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率产生深度图的装置;

用于将所述深度图从所述第二分辨率上采样到所述第一分辨率的装置;以及

用于使用导向滤波器将上采样后的所述深度图的轮廓与所述第一参考图像的轮廓对准的装置。

17.根据权利要求16所述的装置,其中用于对所述深度图进行上采样的装置包括用于使用双线性内插来将所述深度图的分辨率从所述第二分辨率增加到所述第一分辨率的装置。

18.根据权利要求16所述的装置,其中所述第二分辨率包含至多与所述第一分辨率的四分之一一样多的像素。

19.根据权利要求18所述的装置,其中所述第二分辨率包含与所述第一分辨率的四分之一或十六分之一一样多的像素。

20.根据权利要求16所述的装置,其中用于使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图的装置包括:用于生成深度图的装置,其使用对逐渐更大的图像的迭代过程以使用全局最小化来生成深度图。

21.根据权利要求16所述的装置,其中用于基于全局最小化技术以所述第二分辨率生成深度图的装置包括:用于基于全局最小化技术通过使能量函数最小化来生成深度图的装置。

22.根据权利要求16所述的装置,还包括彼此相距已知距离的用于捕获图像的第一装置和用于捕获图像的第二装置,所述第一装置和所述第二装置经配置以同时分别捕获第一参考图像和第二参考图像。

23.根据权利要求16所述的装置,其中所述用于捕获图像的第一装置和所述用于捕获图像的第二装置各自具有彼此相同的原生分辨率。

24.一种非暂时性计算机可读媒体,其包括代码,所述代码在被执行时使得设备:

将第一参考图像和第二参考图像从第一分辨率下采样到第二分辨率,其中所述第一分辨率高于所述第二分辨率,并且其中所述第一参考图像和所述第二参考图像包括立体图像对;

使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图;

将所述深度图从所述第二分辨率上采样到所述第一分辨率;以及

使用导向滤波器将上采样后的所述深度图的轮廓与所述第一参考图像的轮廓对准。

25.根据权利要求24所述的非暂时性计算机可读媒体,其中对所述深度图进行上采样包括:使用双线性内插来将所述深度图的分辨率从所述第二分辨率增加到所述第一分辨率。

26.根据权利要求24所述的非暂时性计算机可读媒体,其中所述第二分辨率包含至多与所述第一分辨率的四分之一一样多的像素。

27.根据权利要求26所述的非暂时性计算机可读媒体,其中所述第二分辨率包含与所述第一分辨率的四分之一或十六分之一一样多的像素。

28.根据权利要求24所述的非暂时性计算机可读媒体,其中使用下采样后的所述立体图像对,基于全局最小化技术以所述第二分辨率生成深度图包括:使用对逐渐更大图像的迭代过程以使用全局最小化来生成深度图,由此生成深度图。

29.根据权利要求24所述的非暂时性计算机可读媒体,其中基于全局最小化技术以所述第二分辨率生成深度图包括:基于全局最小化技术通过使能量函数最小化来生成深度图。

30.根据权利要求24所述的非暂时性计算机可读媒体,其中由彼此相距已知距离的相机同时捕获所述第一参考图像和所述第二参考图像。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1