识别交通参与者的方法与流程

文档序号:31995953发布日期:2022-11-02 06:04阅读:168来源:国知局

1.本发明涉及一种识别交通参与者、尤其是识别道路交通中人员的方法。


背景技术:

2.现有技术中已知借助诸如摄像机传感器、雷达传感器或激光雷达传感器等高级驾驶员辅助系统(adas)传感器对交通参与者进行识别,并将识别到的交通参与者大致分为人、车辆或动物。此外,还已知的是例如为预测运动对这些交通参与者进行跟踪。
3.例如,de102014207802b3展示了一种用于主动识别交通参与者行动的方法和系统。为此,借助摄像机像素式检测交通参与者的结构图像,并生成相应的图像数据。
4.然而,这样做的缺点是,目前并不总能充分地对人员进行检测和分类,因为道路交通中的人员可能有各种各样的行为方式和运动方式。


技术实现要素:

5.因此,本发明的任务是提供一种能对人员进行更精确和更稳定检测和分类的方法。
6.该任务通过独立权利要求1和6的主题解决。其他有益的设计方案是从属权利要求的主题。
7.一般来说,交通参与者的互动和通信可能性是极为复杂的。原则上可对分类方法进行扩展,从而不仅能够识别例如人或车辆等粗略的分类结果,而且还能够识别例如描述人的更详细特征等更具体的分类结果。
8.然而,该方法在实践中很难实现,因为它在需处理的数据量和与数据采集、标记等相关方面需要很大的投入,因为分类通常应用的是例如摄像机图像等原始数据。
9.对于实现可靠的轨迹规划而言,特别重要的是知道人员是否被归类为行人,或该人员是否正在例如用运动工具运动。
10.因此,根据本发明所述提出了一种识别交通参与者、尤其是道路交通中人员的方法,所述方法具有下列步骤:
[0011]-借助车辆的光学传感器拍摄至少一周围环境图像或拍摄周围环境图像序列,
[0012]-在周围环境图像中检测人员,
[0013]-确定所检测到的人员的姿势;
[0014]-确定是否存在人员的运动工具;
[0015]-基于人员的所确定的运动工具,为人员分配运动特性。
[0016]
在此,光学传感器优选是单目摄像机或立体摄像机系统。也可想象使用全景环视摄像机系统或上述替代选择的组合。使用这类摄像机中的至少一种来拍摄周围环境图像或周围环境图像序列。然后针对该周围环境图像或周围环境图像序列应用识别图像中的目标物体和人员的算法。为此适用例如所谓的卷积神经网络(cnn)或神经网络。这类卷积神经网络(cnn)还可被训练用于人员识别,以便能根据周围环境图像中的特定特征推断出人员。
[0017]
为确定人员的姿势,可为人员生成类似骨架的表征。该类似骨架的表征是借助对关键点的检测生成的,方法是将识别到的关键点彼此相连。因此,类似骨架的表征说明了行人各身体部分的相对位置和方向。从这些信息可确定人员的姿势。为此,例如可在检测到的姿势和查找表之间进行比较,以便能更迅速地对相关人员的方向或姿势进行分类。
[0018]
为确定是否存在运动工具,考虑根据其接近程度配属于人员的目标物体。在此也可对神经网络进行相应训练,以便将特定的目标物体识别为运动工具,并将其与所携带的行李件加以区分。
[0019]
如果运动工具被确认无疑,就可在此基础上分配可能的、预限定的运动特性。在此,也同样可针对例如自行车、滑板或直排轮滑鞋等特定运动工具存储结合到运动特性选择中的框架参数。
[0020]
在一优选的实施方式中,通过观察姿势状态的时间序列或观察单个图像确定是否存在运动工具。观察姿势状态的时间序列是有益的,因为在使用特定运动工具时,要么会采用持续的姿势,要么至少重复特定运动模式,并由此重复不同姿势。例如,骑自行车者保持特定姿势。就滑板运动者而言,当用脚驱动时,会重复特定运动模式,并由此在特定时间段内会多次重复特定姿势。
[0021]
然而,基于单个图像也可确定是否存在运动工具。这尤其可在传感器数据融合、例如雷达传感器与摄像机传感器之间的数据融合的情况下加以确定。例如,通过雷达传感器,可基于可供使用的多普勒速度确定特定肢体的速度。再结合摄像机的图像,能够以此方式识别运动工具,因为使用运动工具时,例如有特定的腿部运动模式。
[0022]
在另一优选的设计方案中,运动工具通过相应的分类器被分类。为此,可对分类器进行相应的训练,以便基于姿势、尤其是基于典型的腿部动作,对例如直排轮滑运动者、滑板运动者、普通行人或骑自行车者等进行区分。
[0023]
进一步优选的是,基于所确定的运动工具确定人员的危急性/临界情况。该危急性描述的是,例如相关人员穿越行车道的概率。根据不同的运动工具,可较快地改变方向。与高于正常行人的速度相关地,使用相应运动工具的人员具有更高的风险,并必须进行相应的分析评估或分类,以便必要时能相应调整行驶功能或干预阈值。在此例如可以在确定所识别到的人员具有较高的危急性的情况下降低车辆行驶速度或降低紧急制动辅助(eba)系统的干预阈值。此外,可更频繁地对包含有所识别的人员的区域进行扫描,或扩大感兴趣区域(roi),以确保在一定时间段内识别该人员,或直接针对该人员进行识别。
[0024]
在一特别优选的实施方式中,预测的运动特性包括最大速度、人员的自由度和/或运动方向。这些不同参数可针对每一单个的、潜在可识别到的运动工具被储存在例如查找表中。根据本发明,自由度是指与方向有关的各种方向改变可能性、与当前运动方向有关的角度和方向改变的速度。根据运动工具的不同,能够有更多或更快的方向变化。例如,直排轮滑运动者相比于例如骑自行车者能够以更大角度更快地改变方向。通过运动特性,尤其是鉴于结合运动工具最大可达到的速度,也可优化基于模型的跟踪。此外,车辆可更快地针对相关人员运动方向的变化进行调整适配,因为能够更精准预测相关人员在下一时间步长中的位置。
[0025]
此外根据本发明提出了一种用于识别交通参与者、尤其是识别道路交通中人员的系统,所述系统包括至少一个用于拍摄周围环境图像或用于拍摄周围环境图像序列的光学
传感器以及数据处理装置,该数据处理装置被配置用于:
[0026]-对所拍摄周围环境图像进行分析并实施人员识别,
[0027]-实施人员姿势识别,
[0028]-在图像中确定是否存在运动工具,以及
[0029]-基于运动工具为人员分配运动特性。
[0030]
在此,数据处理装置使用例如卷积神经网络(cnn)。数据处理装置可借助经训练的分类器实施人员和姿势识别。此外,可对分类器进行训练,借助所述分类器可基于特定特征推断出特定的运动工具。然后,可为每一种运动工具分配一运动特性。
附图说明
[0031]
从附图中可得出其他有益的设计方案和实施方式。其中:
[0032]
图1这是本发明实施方式的流程示意图;
[0033]
图2这是本发明实施方式的示意图。
具体实施方式
[0034]
图1展示的是本发明一实施方式的流程示意图。在步骤s1中,借助至少一光学传感器2拍摄周围环境图像或拍摄图像序列。在步骤s2,在周围环境图像中进行人员识别。在另一步骤s3中,确定所检测到的人员的姿势。此外,在步骤s4中,确定是否存在运动工具。在下一步骤s5中,基于所确定的运动工具为人员分配运动特性。
[0035]
图2展示的是本发明一实施方式示意图。在此,以示意图方式展示用于识别交通参与者、尤其是道路交通中人员的系统1。在此,系统1包括光学传感器2和数据处理装置3。在此,光学传感器2和数据处理装置3通过数据连接d相连接,借助该数据连接,图像数据可从光学传感器2传输到数据处理装置。可以想象,数据处理装置与一个或多个执行装置相连接,执行装置基于数据处理装置的结果对车辆进行相应控制。在此,数据连接d优选设置成有线连接。然而,也可想象诸如无线局域网(wlan)、蓝牙等无线连接。
[0036]
附图标记列表
[0037]1ꢀꢀꢀꢀꢀ
系统
[0038]2ꢀꢀꢀꢀꢀ
光学传感器
[0039]3ꢀꢀꢀꢀꢀ
数据处理装置
[0040]dꢀꢀꢀꢀꢀ
数据连接
[0041]
s1-s5 方法步骤
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1