无失真显示车辆周边环境的方法和装置与流程

本发明涉及一种无失真显示车辆周边环境的方法和装置，尤其针对配备全景环视摄像系统的公路车辆。

背景技术：

配备了驾驶员辅助系统的车辆日益增加，这类系统为驾驶员实现行驶机动性提供支持。其中部分驾驶员辅助系统配有全景环视摄像系统，可为汽车驾驶员显示汽车周边环境。这类全景环视摄像系统包含一个或多个车载摄像机，用以拍摄并提供摄像机图象，并由全景环视摄像系统的一个数据处理单元将其合成为车辆周边的环境图象。在此，车辆周边的图象显示在一个显示单元上。传统的基于摄像机的驾驶员辅助系统将摄像系统的纹理信息投影到一个静态的投影平面上，例如一个静态的二维平面或一个静态三维立体碗形面上。

但是，这类系统有一个严重的缺点，即因为纹理二次投影平面是静态的，所以其所显示的车辆周边目标严重失真，因而无法相应地再现出摄像机系统真实的或近似真实的环境图象。反而会显示出由干扰伪影形成的严重失真的目标图象。

技术实现要素：

因此，本发明的任务是提供一种无失真显示车辆周边环境的装置和方法，从而避免各类失真的伪影显示，以便能尽好地观察到车辆周围的障碍并使这些障碍能被无失真地反映出来。

本发明通过具备专利权利要求1中所述特征的全景环视摄像系统来完成该任务。

据此并从第一方面而言，本发明提供了一种用于车辆的全景环视摄像系统，该系统至少配备一部车载摄像机，用以拍摄并提供摄像机图象，随后由数据处理单元进行处理以便生成全景环视图象或周边环境图象，该图象在显示单元上显示，其中数据处理单元将车载摄像机抓取到的纹理再投影到自适应的、近似于汽车周边环境的、基于汽车传感器提供的传感器数据计算得出的再投影平面上，其中，所述数据处理单元根据一虚拟摄像机的位置和/或方向调整匹配所述再投影平面。

在根据本发明所提供全景环视摄像系统一个可能的实施方式中，由汽车传感器提供的传感器数据准确反映车辆的周边环境。

在根据本发明所提供全景环视摄像系统另一个可能的实施方式中，传感器数据包含泊车间隔距离数据、雷达数据、激光雷达数据、摄像机数据、激光扫描数据和/或运动数据。

在根据本发明所提供全景环视摄像系统另一个可能的实施方式中，自适应的再投影平面具备能够动态改变的栅格。

在根据本发明所提供全景环视摄像系统另一个可能的实施方式中，再投影平面的栅格可根据所提供的传感器数据动态改变。

在根据本发明所提供全景环视摄像系统另一个可能的实施方式中，再投影平面的栅格为三维立体栅格。

在根据本发明所提供全景环视摄像系统的一种实施例中，显示单元是触控式屏幕，虚拟摄像机的位置和/或方向能够由用户通过所述触控式屏幕调整设置。

此外，本发明还提供了一种具有专利权利要求7中所述特征的驾驶员辅助系统。

据此并从第二方面讲，本发明提供了一种内置集成了全景环视摄像系统的驾驶员辅助系统，其中该全景环视摄像系统至少配备一部车载摄像机，用以拍摄并提供摄像机图象，摄像机图象随后由数据处理单元进行处理以用于生成全景环视图象，该图象在显示单元上显示，其中数据处理单元将车辆的车载摄像机抓取到的纹理再投影到自适应的、近似于车辆周边环境的、基于汽车传感器提供的传感器数据计算得出的再投影平面上。

此外，本发明还提供一种具有专利权利要求8中所述特征的、用于无失真显示车辆周边环境的方法。

本发明据此提供了一种无失真显示车辆周边环境的方法，该方法包括如下步骤：

由车辆的车载摄像机拍摄生成车辆周边环境的摄像机图象，

处理所生成摄像机图象并生成车辆周边环境的环境图象，

将车载摄像机抓取到的纹理再投影到自适应的、近似于车辆周边环境的、基于由车载传感器提供的传感器数据计算得出的再投影平面上，和根据提供车辆鸟瞰摄影图的虚拟摄像机的位置和/或方向进行再投影平面的调整匹配。

本发明所涉及方法的另外可能的实施方式在从属权利要求中给出。

附图说明

下面结合附图对本发明所涉及的、用于无失真显示车辆周边环境的装置和方法的可行的实施方式做进一步的说明。

其中：

图1一方框电路图，用以描绘本发明所涉及的一种全景环视摄像系统的一个实施例；

图2一流程图，用以描绘本发明所涉及的、无失真显示车辆周边环境方法的一个实施例；

图3一示意图，用以解释根据本发明所提供方法以及根据本发明所提供全景环视摄像系统的工作原理。

具体实施方式

如图1中所示，在所示案例中，全景环视摄像系统1配备了多个部件。在所示实施案例中，全景环视摄像系统1至少配备一部车载摄像机2，用以拍摄和提供摄像机图象，该摄像机图象由全景环视摄像系统1的数据处理单元3处理并生成车辆全景环视图象或周边环境图象。由数据处理单元3生成的全景环视图象或车辆周边环境图象显示在显示单元4上。数据处理单元3基于汽车的车载传感器5所提供的传感器数据，计算得出自适应的再投影平面。由全景环视摄像系统1的车载摄像机2抓取的纹理被再投影到该计算得出的、自适应的、近似于车辆周边环境的再投影平面上，并由此减少或消除失真或失真伪影。

例如，图1中所示的传感器5为泊车间隔距离控制或调节传感器。此外，它还可是车辆传感器中的雷达传感器和激光雷达传感器。另一种可能的实施方式是，由其他车载摄像机2，尤其是由立体摄像机或单声道摄像机提供用于计算自适应二次投影平面的传感器数据。又一种可能的实施方式是，由车辆激光扫描系统提供传感器数据。还有一种可能的实施方式是，由数据处理单元3提供运动数据或结构数据，用以计算二次投影平面。由车载传感器5提供的传感器数据高精度地再现了车辆周边环境或车辆周边环境中的目标。这些目标可能是例如其他直接位于本车周边环境中的，例如在距本车最大五米范围内的车辆。另外还可能是最大五米范围内紧邻本车辆的过路行人。目标也可能是例如界定停车场的栏杆等其他障碍。

由数据处理单元3基于传感器数据计算得出的再投影平面优选具备一个能够动态改变的栅格或网格。在一种可能的实施方式中，根据所提供的传感器数据动态改变该再投影平面的栅格。再投影平面的栅格优选为三维立体栅格。由数据处理单元3计算得出的再投影平面不是静态而是动态的，且可根据车载传感器5传送的传感器数据自适应调整。一种可能的实施方式是，该车载传感器5可包括单声道前置摄像机或立体摄像机。此外，传感器单元5还可配备提供数据的激光雷达系统，或配备将周边环境雷达数据传输到数据处理单元3的雷达系统。数据处理单元3可包含一个或多个微处理器，用以处理传感器数据并从中即时计算出再投影平面。由车载摄像机2抓取的纹理被投影或再投影到该计算得出的、近似于车辆周边环境的再投影平面上。车载摄像机2的显示具有不同的变化形式。一种可能的实施方式是，在车辆四个不同侧面上配备四个车载摄像机2。所指车辆优选为公路车辆，尤其是载重货车或轿车。为减少或消除前文所述的伪影，可通过本发明所涉及的全景环视摄像系统1，将摄像机系统中摄像机2所抓取的周边环境的纹理通过自适应的再投影平面再投影。通过本发明所涉及的全景环视摄像系统1可大幅提高所示车辆周边环境的图象质量。相对于使用静态再投影表面的系统，本系统对车辆周边环境中的目标，例如停在附近的其他车辆或处于附近的人员，显示时的失真度较低。

数据处理单元3控制一台如图3中所示的虚拟摄像机6。从图3中可发现，由数据处理单元3控制的虚拟摄像机6从鸟瞰角度提供车辆f上方的摄影图象。在一基本设置中，虚拟摄像机6竖直地以呈90度角、超过车辆f车身h的高度虚拟设置。虚拟摄像机6的摄影及图象可从规定配置在车辆f上的全景环视摄像机的摄影及图象中通过数据处理单元3计算获得。虚拟摄像机6拥有相对车辆f的摄像机相对方向以及相对车辆f的相对位置。全景环视摄像系统1的数据处理单元3根据虚拟摄像机6的位置和方向调整匹配再投影平面。优选虚拟摄像机6的位置和方向可被调整。如图3所示，虚拟摄像机6例如可从其在车身上方呈90度角的竖直位置出发倾斜，其中虚拟摄像机的倾斜角度α例如可选为45度。车载摄像机6的相对于车辆f的距离或高度如图3举例所示保持恒定。除了相对位置外，车载摄像机6的方向也可附加进行调整匹配。在一可能的实施形式中，数据处理单元3从虚拟摄像机6的参数储存器中读取虚拟摄像机6相对于车辆f的当前位置和方向。随后，根据所读取的虚拟摄像机6的参数，由数据处理单元3对自适应的再投影平面进行设置或调整匹配，使得在显示单元4上无失真地显示尽可能多的纹理和摄像机信息，同时使车辆f的驾驶员能方便地识别紧邻车辆f的周边环境中所存在的障碍。在一可能的实施方式中，显示单元4中涉及的是一种触控式屏幕。在一可能的实施方式中，车辆f的驾驶员或用户可接触触控式屏幕，同时调整或校准虚拟摄像机6的位置和/或方向，以尽可能清晰地识别在紧邻车辆的周围环境中的障碍，例如用于标记限定停车面的栏杆等。在另一可能的实施方式中，用户可对虚拟摄像机6在所观察的车辆f上的间距和高度加以调整，以便尽可能清晰、详尽地识别车辆周围所存在的障碍。这里所说的障碍可以是在车道表面上阻止车辆f四处行驶的任意目标物体，例如一堆雪或限定停车面的栏杆等。

图2所示流程图描绘了本发明所涉及的、用于无失真显示车辆周边环境的方法一种实施例。

在第一步骤s1中，由车辆f的车载摄像机2拍摄生成车辆周边环境的摄像机图象。例如，由安装在车辆不同侧面的多台车载摄像机2拍摄生成摄像机图象。

随后，在步骤s2中处理这些所生成的摄像机图象，以生成车辆周边环境的环境图象。一种可能的实施方式是，如图1所示，由数据处理单元3完成对所生成的摄像机图象的处理工作。摄像机图象优选被即时处理，以生成相应的环境图象。

在进一步的步骤s3中，首先基于所提供的传感器数据计算出再投影平面，然后将车载摄像机抓取到的纹理再投影到该自适应的、计算得出的再投影平面上。该自适应的再投影平面具有能够动态改变的栅格，该栅格根据所提供的传感器数据被动态改变。该栅格优选为三维立体栅格。

在一步骤s4中，通过数据处理单元3，根据车辆f鸟瞰摄影图从上方提供的虚拟摄像机6的位置和/或方向调整匹配所述再投影平面。

在一种可能的实施方式中，图2中所示的方法可由计算机程序来执行，该计算机程序含有可由微处理器执行的计算机指令。一种可能的实施方式是，该程序存储在数据载体上或程序存储器中。