一种用于夜视环境的视觉图像处理设备、系统和智能机器的制作方法

文档序号:11844701阅读:来源:国知局

技术特征:

1.一种用于夜视环境的视觉图像处理设备,其特征在于,包括:红外发光器件、多维图像采集装置和前端图像处理装置;

所述红外发光器件,用于向所述多维图像采集装置的视觉监控空间发射红外光;

所述多维图像采集装置,用于实时采集其视觉监控空间内的物体反射的红外光,对所述红外光进行聚焦成像处理,得到动态连续的视频图像,将所述视频图像发送至前端图像处理装置;

所述前端图像处理装置与所述多维图像采集装置相连接,用于根据所述视频图像进行三维建模,得到所述多维图像采集装置的视觉监控空间对应的三维模型,并根据所述三维模型得到物体的监控信息;所述监控信息至少物体的以下信息包括:种类信息、尺寸信息和空间位置信息。

2.根据权利要求1所述的用于夜视环境的视觉图像处理设备,其特征在于,还包括高精度辅助图像采集装置;

所述高精度辅助图像采集装置,用于采集其视觉监控空间内的物体反射的红外光,对所述红外光进行聚焦成像处理,得到动态连续的高精度视频图像,将所述高精度视频图像发送至前端图像处理装置;

所述前端图像处理装置还用于,根据所述高精度视频图像对所述三维模型进行校准处理,得到校准后的三维模型,并从所述校准后的三维模型中获取所述物体的监控信息。

3.根据权利要求2所述的用于夜视环境的视觉图像处理设备,其特征在于,所述多维图像采集装置包括:单目镜头或者双目镜头;所述双目镜头包括:第一组采集镜头和第二组采集镜头;

所述单目镜头,用于实时采集其视觉监控空间内的物体反射的红外光,对所述红外光进行聚焦成像处理,得到动态连续的视频图像,将所述视频图像以第一预设频率发送至前端图像处理装置;

所述第一组采集镜头和所述第二组采集镜头,分别用于采集对应视觉监控空间内的动态连续的图像数据,将所有的图像数据均以所述第一预设频率发送至前端图像处理装置。

4.根据权利要求3所述的用于夜视环境的视觉图像处理设备,其特征在于,所述前端图像处理装置包括:控制装置、专用视觉处理装置和存储器;

所述控制装置,用于控制所述专用视觉处理装置处理过程中的算法和与所述算法对应的处理结果;以及,控制所述存储器存储的数据流和对应的数据流通路;

所述专用视觉处理装置,用于在所述控制装置的控制下,对所述连续图像数据进行三维建模处理,得到三维模型,并从所述三维模型中获取所述图像数据对应的物体的监控信息,并根据所述监控信息得到对应的障碍物综合信息;

所述存储器,用于在所述控制装置的控制下,存储所述多维图像采集装置发送的动态连续的图像数据,高精度辅助图像采集装置发送的高精度视频图像、三维模型,和/或,校准后的三维模型,以及,所述监控信息和所述障碍物综合信息。

5.根据权利要求4所述的用于夜视环境的视觉图像处理设备,其特征在于,所述专用视觉处理装置包括:

接收模块,用于接收所述双目镜头发送的两组视频图像,分别提取两组所述视频图像中的图像特征数据;

识别模块,用于运用深度学习的方法训练所述图像特征数据,得到所述视频图像中的物体的种类信息;

立体匹配模块,用于将不同视点下两组图像特征数据进行立体进行匹配,并对匹配到同一位置的两组图像特征数据进行校正处理,得到在同一位置中两组图像特征数据的视差;

距离尺寸计算模块,用于根据所述视差和所述双目镜头的姿态信息,计算当前位置与所述双目镜头的视觉监控空间内物体的距离;

三维建模模块,用于根据当前位置与所述双目镜头的视觉监控空间内物体的距离,构建三维模型,并根据所述三维模型得到所述视频图像中的物体的空间位置信息。

6.根据权利要求5所述的用于夜视环境的视觉图像处理设备,其特征在于,所述前端图像处理装置还包括:语音识别合成装置;

所述语音识别合成装置,用于接收用户发送的语音信息,对所述语音信息进行识别处理,得到对应的目的地址;以及,根据所述目的地址和所述障碍物综合信息,合成与所述目的地址对应的提示语音,输出所述提示语音以进行提示。

7.根据权利要求6所述的用于夜视环境的视觉图像处理设备,其特征在于,所述前端图像处理装置还包括:路径规划子系统;

所述路径规划子系统,用于根据所述障碍物综合信息对原有导航路径进行调整或者重新生成导航路径。

8.根据权利要求3所述的用于夜视环境的视觉图像处理设备,其特征在于,所述第一组采集镜头和所述第二组采集镜头均包括一个单目镜头或多个单目镜头。

9.一种智能机器,其特征在于,包括智能机器本体和权利要求1~8任一项所述的用于夜视环境的视觉图像处理设备;所述视觉图像处理设备嵌入所述智能机器本体中;

所述智能机器,用于实时监控其视觉监控空间中物体的三维监控信息,并将所述三维监控信息进行存储,以便后续进行安防识别;和/或,接收用户发送的语音信息,对所述语音信息进行识别处理,得到对应的目的地址;以及,检测前方视觉监控空间中的障碍物综合信息,根据所述障碍物综合信息,规划所述目的地址的行走路径,并控制按照规划后的行走路径行走,以实施避障。

10.一种用于夜视环境的视觉图像处理系统,其特征在于,包括:上述权利要求9所述的智能机器;还包括远程控制端;

所述远程控制端,用于接收所述智能机器发送的三维监控信息并进行存储;和/或,根据所述智能机器对应的三维模型中的物体的空间位置信息,计算所述智能机器相对于所述物体的距离,并根据计算的结果规划所述智能机器的行走路线,并控制所述智能机器按照规划后的行走路线行驶,以实施避障;和/或,根据规划后的行走路线对所述智能机器的行走路线进行监控。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1