三维目标检测方法、装置及电子设备与流程

文档序号:20785689发布日期:2020-05-19 21:40阅读:来源:国知局

技术特征:

1.一种三维目标检测方法,其特征在于,包括:

获取激光雷达采集的原始点云,以及获取摄像头采集的原始图像;

确定所述原始点云对应的第一质量评估指标,以及确定所述原始图像对应的第二质量评估指标;

根据所述第一质量评估指标和所述第二质量评估指标,确定所述原始点云和所述原始图像中,质量评估通过的第一目标数据;

根据所述第一目标数据,以相应的目标检测策略,获得三维目标检测结果。

2.根据权利要求1所述的方法,其特征在于,所述根据所述第一目标数据,以相应的目标检测策略,获得三维目标检测结果,包括:

在所述第一目标数据中包括所述原始图像的情况下,根据所述原始图像,获得二维实例分割结果;

根据所述二维实例分割结果,获得三维目标检测结果。

3.根据权利要求2所述的方法,其特征在于,所述根据所述二维实例分割结果,获得三维目标检测结果,包括:

确定所述第一目标数据中是否包括所述原始点云,以获得确定结果;

根据所述确定结果,获得目标点云;

根据所述二维实例分割结果和所述目标点云,获得三维目标检测结果。

4.根据权利要求3所述的方法,其特征在于,所述根据所述确定结果,获得目标点云,包括:

在所述确定结果表征所述第一目标数据中包括所述原始点云的情况下,将所述原始点云作为目标点云;

在所述确定结果表征所述第一目标数据中不包括所述原始点云的情况下,根据所述原始图像和所述摄像头的标定参数,生成伪点云,并将所述伪点云作为目标点云。

5.根据权利要求3所述的方法,其特征在于,所述根据所述二维实例分割结果和所述目标点云,获得三维目标检测结果,包括:

根据所述目标点云,生成第一目标视图;其中,所述第一目标视图包括第一鸟瞰视图和第一前视图中的至少一者;

根据所述第一目标视图,进行特征提取,以获得第一提取结果;

根据所述二维实例分割结果,进行特征提取,以获得第二提取结果;

将所述第一提取结果和所述第二提取结果输入三维区域提议网络,以获得所述三维区域提议网络输出的提议结果;

将所获得的提议结果输入三维目标检测器,以获得所述三维目标检测器输出的三维目标检测结果。

6.根据权利要求2所述的方法,其特征在于,

所述摄像头的数量为一个,所述根据所述原始图像,获得二维实例分割结果,包括:

对所述第一目标数据中的所述原始图像进行实例分割,以获得二维实例分割结果;

或者,

所述摄像头的数量为两个,所述根据所述原始图像,获得二维实例分割结果,包括:

在所述第一目标数据中包括两个所述摄像头分别采集的所述原始图像的情况下,从所述第一目标数据中,选择两个所述摄像头中的一者采集的所述原始图像;

对所选择的所述原始图像进行实例分割,以获得二维实例分割结果。

7.根据权利要求1所述的方法,其特征在于,所述根据所述第一目标数据,以相应的目标检测策略,获得三维目标检测结果,包括:

在所述第一目标数据中包括所述原始点云,且所述第一目标数据中不包括所述原始图像的情况下,根据所述原始点云,生成第二目标视图;其中,所述第二目标视图包括第二鸟瞰视图和第二前视图中的至少一者;

根据所述第二目标视图,进行特征提取,以获得第三提取结果;

将所述第三提取结果输入三维区域提议网络,以获得所述三维区域提议网络输出的提议结果;

将所获得的提议结果输入三维目标检测器,以获得所述三维目标检测器输出的三维目标检测结果。

8.一种三维目标检测装置,其特征在于,包括:

第一获取模块,用于获取激光雷达采集的原始点云,以及获取摄像头采集的原始图像;

第一确定模块,用于确定所述原始点云对应的第一质量评估指标,以及确定所述原始图像对应的第二质量评估指标;

第二确定模块,用于根据所述第一质量评估指标和所述第二质量评估指标,确定所述原始点云和所述原始图像中,质量评估通过的第一目标数据;

第二获取模块,用于根据所述第一目标数据,以相应的目标检测策略,获得三维目标检测结果。

9.一种电子设备,其特征在于,包括:

处理器;

用于存储所述处理器可执行指令的存储器;

所述处理器,用于从所述存储器中读取所述可执行指令,并执行所述指令以实现上述权利要求1至7中任一所述的三维目标检测方法。

10.一种计算机可读存储介质,所述存储介质存储有计算机程序,其特征在于,所述计算机程序用于执行上述权利要求1至7中任一项所述的三维目标检测方法。


技术总结
本公开的实施例公开了一种三维目标检测方法、装置及电子设备。该方法包括:获取激光雷达采集的原始点云,以及获取摄像头采集的原始图像;确定原始点云对应的第一质量评估指标,以及确定原始图像对应的第二质量评估指标;根据第一质量评估指标和第二质量评估指标,确定原始点云和原始图像中,质量评估通过的第一目标数据;根据第一目标数据,以相应的目标检测策略,获得三维目标检测结果。与现有技术中直接依据摄像头采集的图像进行三维目标检测的情况相比,本公开的实施例能够有效保证检测结果的可靠性。

技术研发人员:黄浴
受保护的技术使用者:智车优行科技(上海)有限公司
技术研发日:2019.12.31
技术公布日:2020.05.19
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1