一种车路协同系统和车路协同方法与流程
本发明涉及信息与通信技术领域，尤其涉及一种车路协同系统和车路协同方法。
背景技术：
在相关的自动驾驶/辅助驾驶技术中，基于车路协同(ehicle-to-everything，v2x)服务平台来实现所有交通参与元素的互联互通、协同计算以及监控管理等功能。
现有的v2x服务平台主要实现方式是：在边缘云(multi-accessedgecomputing，mec)层远程连接路侧基础设施和车载设备，以获取路侧基础设施采集到的原始交通数据，然后基于该原始交通数据进行车路协同计算，在得出计算结果之后，再将计算结果信息回传至路侧本地，以通过路侧本地的路侧单元将计算结果推送给相关的交通参与元素。
由上可知，现有的车路协同系统中，边缘云先接收路侧基础设施采集到的原始交通数据，再对原始交通数据进行分析计算，最后通过路侧单元将计算结果回传给车辆的方案，使得路侧基础设施、边缘云、车辆之间需要进行多次数据交互，这会导致网络传输时延较长问题。
技术实现要素：
本发明提供一种车路协同系统和车路协同方法，能够解决相关技术中的车路协同系统存在的时延较长的问题。
为解决上述技术问题，本发明是这样实现的：
第一方面，本发明提供了一种车路协同系统，包括：边缘云、路侧计算节点以及与所述路侧计算节点对应设置的路侧微基站；
所述路侧计算节点与路侧基础设施连接，所述路侧计算节点用于获取所述路侧基础设施采集的原始交通数据，并基于所述原始交通数据确定交通信息；
所述路侧微基站包括：近距离广播通讯模组和移动网络通讯模组，且所述近距离广播通讯模组和所述移动网络通讯模组分别与对应的路侧计算节点连接，以获取所述对应的路侧计算节点的交通信息；
所述近距离广播通讯模组用于将获取的所述交通信息发送至第一覆盖范围内的交通参与元素，所述移动网络通讯模组用于将获取的所述交通信息发送至所述边缘云，所述第一覆盖范围为所述路侧微基站的覆盖范围。
第二方面，本发明提供了一种车路协同方法，应用于如第一方面所述的车路协同系统，所述车路协同方法，包括：
获取路侧基础设施采集的交通原始数据；
在路侧本地基于所述交通原始数据确定交通信息；
对所述交通信息进行广播，并将所述交通信息发送至边缘云。
本发明提供的车路协同系统，通过设置在道路本地的路侧计算节点，实施的获取路侧基础设施采集的交通原始数据，并根据该交通原始数据计算出交通信息，然后通过与该路侧计算节点对应的路侧微基站广播至附近的交通参与元素，可以在道路本地实现计算和广播功能，从而减少了交通参与元素接收到交通信息的时延。
附图说明
图1是本发明实施例提供的一种车路协同系统的结构图；
图2a是第i帧点云数据的中间运动轨迹的示意图；
图2b是第i帧图像帧数据中的第一运动轨迹的示意图；
图2c是第一识别目标和第二识别目标分别在第i帧时的相对位置示意图；
图2d是第一识别目标和第二识别目标分别在第i－1帧时的相对位置示意图；
图3是时间发生点与路口的位置关系示意图；
图4是本发明实施例提供的一种车路协同系统分别与路侧基础设施和交通参与元素的连接关系示意图；
图5是本发明实施例提供的一种车路协同方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
当前自动驾驶/辅助驾驶的技术路线目前分为两派：单车智能和网联智能。其中，单车智能目前在研发推广的过程中存在感知范围有限、复杂场景判断失误、车辆改造成本高昂等问题；因此，基于5g网络的大带宽、低时延、高稳定、广距感知的网联智能驾驶技术受到更多的关注，目前将网联智能驾驶技术作为自动驾驶/辅助驾驶的主要技术发展路线。而车路协同（vehicletoeverything，v2x）服务平台是网联自动驾驶/辅助驾驶的基础和刚性需求，v2x服务平台通过连接海量路侧基础设施、海量车载设备以及其它交通参与者，实现所有交通参与元素的互联互通、协同计算以及监控管理，并将协同计算的结果(自动驾驶/辅助驾驶所必需依赖的决策支撑信息)进行及时、稳定、精准的推送；同时进一步将所搜集的数据进行汇总分析，进而为优化改善交通治理提供必需的决策支撑信息。
现有的v2x服务平台主要实现方式是：在边缘云(multi-accessedgecomputing，mec)层远程连接路侧基础设施和车载设备，然后进行车路协同计算，再将计算结果信息回传至路侧本地的路侧单元，以通过路侧单元将该计算结果信息推送给相关交通参与元素。其中，由于边缘云的部署位置位于网络的接入层或更上层的数据中心，在典型的车路协同场景中，路侧基础设施(典型的包括高清摄像机、毫米波雷达、激光雷达等)将原始采集数据传输到边缘云数据中心中进行融合分析等处理，待处理完成后再将结果数据回传到路侧本地的路侧单元，以通过路侧单元将该结果数据推送给道路上的交通参与元素(典型如自动驾驶车辆的车载单元（onboardunit，obu）)以供其行为决策。这样导致往返的网络传输时延通常在50毫秒左右甚至更高，这样，使得现有技术中的车路协同服务平台在处理一些超低时延的自动驾驶场景（例如：协同近距离交通参与元素、中高速自动驾驶等场景）时，存在因时延过长而无法满足特定场景对于车路协同计算的性能需求。
从另一方面来说，现有的v2x服务中，边缘云需要基于5g网络将计算结果数据发送至路侧单元，才能够使路侧单元将该计算结果数据广播推送至附近的车辆等交通参与元素，当网络发生故障时，将直接导致v2x服务中断，网联自动驾驶车辆会因失去对道路状况的实时感知能力，而失去行为决策能力，车辆被迫由驾驶员介入接管，此过程中可能导致发生交通事故的风险。
而本发明提供的车路协同系统中，在路侧部署路侧计算节点，以在路侧本地根据交通基础设备采集的原始交通数据进行融合分析等计算，以得到计算结果，并通过路侧微基站将该计算结果推送至附近的交通参与元素，且该路侧微基站还能够将该计算结果以及原始交通数据远程发送至边缘云中，以使边缘云能够基于接收的数据对低时延业务所需的数据进行分析处理。这样，无需边缘云返回计算结果，便可以通过路侧计算节点对原始交通数据进行计算，并通过路侧微基站直接将计算结果推送给附近的交通参与元素，从而省却了数据往返的网络时延，以及时的对道路上的交通参与元素提供车路协同计算服务，从而利用本发明实施例提供的车路协同系统能够降低车路协同服务中的数据处理时延，以提升处理效率；另外，鉴于本发明是将计算节点部署在路侧本地直接提供计算服务，所以即使网络发生故障，也仍然可对道路上距离路侧计算节点距离较近交通参与元素(典型如自动驾驶车辆)持续提供服务，而不会直接中断服务（即降级服务（只提供路侧计算节点的计算结果，而不提供边缘云提供的计算结果）而不中断服务），自动驾驶车辆仍可感知到近距离内的道路实时状况并做出相应行驶决策，降低交通事故发生的可能性；也就是说，利用本发明实施例提供的车路协同系统可以提升车路协同服务在网络故障等情况下的可用性。
下面将结合附图，对本发明实施例提供的车路协同系统和车路协同方法进行举例说明。
请参阅图1，是本发明实施例提供的一种车路协同系统的结构图，如图1所示，该车路协同系统包括：边缘云101、路侧计算节点102以及与路侧计算节点102对应设置的路侧微基站103。
路侧计算节点102与路侧基础设施连接，所述路侧计算节点102用于获取所述路侧基础设施采集的原始交通数据，并基于所述原始交通数据确定交通信息；
路侧微基站103包括：近距离广播通讯模组1031和移动网络通讯模组1032，且近距离广播通讯模组1031和移动网络通讯模组1032分别与对应的路侧计算节点102连接，以获取所述对应的路侧计算节点102的交通信息；
近距离广播通讯模组1031用于将获取的所述交通信息发送至第一覆盖范围内的交通参与元素20，移动网络通讯模组1032用于将获取的所述交通信息发送至边缘云101，所述第一覆盖范围为路侧微基站103的覆盖范围。
在具体实施中，上述路侧基础设施可以包括摄像头、激光雷达、毫米波雷达等设备，该路侧基础设施可以采集2维图像数据和3维点云数据，也就是说上述原始交通数据可以包括2维图像数据和3维点云数据中的至少一项，当然，在具体实施中，上述路侧基础设施还可以包括超声波测速仪等，相应的，上述原始交通数据还可以包括行驶速度等数据，在此并不穷举。
另外，上述路侧计算节点102基于所述原始交通数据确定交通信息，可以是路侧计算节点102基于所述原始交通数据进行车路协同计算，例如：数据融合分析计算等，以对超低时延的车路协同服务所需的数据进行计算，并计算出的交通信息（例如：路段上的车流量、障碍物等信息）通过对应的路侧微基站进行广播或者上报至云端。
在具体实施中，如图4所示，路侧计算节点102包括工控机1021，该工控机1021以有线方式直接连接路侧基础设施（例如：高清摄像机41、激光雷达42，信号灯43等），获取路侧基础设施采集到的原始数据（例如：视频流、激光雷达点云数据、信号灯数据等）。运行于工控机1021上的ai计算模块通过将所获取的摄像机视频数据、激光雷达点云数据进行融合，以使工控机1021基于该融合后的数据确定交通信息。
在具体实施中，上述路侧微基站103和路侧计算节点102均设置于路侧本地，且路侧计算节点102可以通过有线光纤与路侧基础设施连接，以获取路侧基础设施采集到的原始交通数据，而路侧微基站103和路侧计算节点102对应设置可以是，路侧微基站103和路侧计算节点101一一对应设置；当然，在具体实时中，也可以将相互靠近且位于同一路侧微基站103的近距离通信覆盖范围内的至少两个路侧计算节点102与该同一个路侧微基站103对应。其中，对应的路侧微基站103和路侧计算节点102相互连接，以使路侧微基站103能够获取对应的路侧计算节点102计算出的交通数据。
在具体实施中，上述近距离广播通讯模组1031可以是无线pc5通讯模组，且移动网络通讯模组1032可以是蜂窝网络通讯模组。也就是说，上述路侧微基站可以是设置在路侧本地的5g微基站，且通过在传统的5g微基站设备的通讯模组的基础上，进一步集成pc5通讯模组，以使该5g微基站中的双模模组能够同时为5g蜂窝网络和v2x网络提供服务，从而使用一部微基站设备实现双网组网的融合。其相较于现有技术中采用蜂窝网络和v2x网络各自独立组网建设/运营的部署方案，可以避免路侧单元（roadsideunit，rsu）设备的部署，从而降低车路协同网络基础设施的建设成本和后续的运营成本。
需要说明的是，随着通信网络技术的发展，上述路侧微基站除了可以是集成pc5通讯模组的5g微基站之外，还可以是4g微基站或者今后可能出现的6g微基站等，在此不作具体限定。
在近距离广播通讯模组1031是pc5通讯模组的基础上，近距离广播通讯模组1031将获取的所述交通信息发送至第一覆盖范围内的交通参与元素20，可以理解为：pc5通讯模组通过近距离广播的方式向第一覆盖范围内的交通参与元素20广播获取的所述交通信息。
本发明提供的车路协同系统，通过设置在道路本地的路侧计算节点，实施的获取路侧基础设施采集的交通原始数据，并根据该交通原始数据计算出交通信息，然后通过与该路侧计算节点对应的路侧微基站广播至附近的交通参与元素，可以在道路本地实现计算和广播功能，从而减少了交通参与元素接收到交通信息的时延；另外，路侧微基站具有近距离广播通讯模组和移动网络通讯模组，因此使用一个路侧微基站便可以实现双网组网的融合，从而避免了在道路本地设置单独的路侧单元，从而降低了车路协同系统基础设施的建设成本和运营成本。
作为一种可选的实施方式，边缘云101与目标区域内的全部路侧微基站103关联；
所述边缘云101用于接收所述目标区域内的全部交通信息，基于所述目标区域内的全部交通信息进行区域性分析处理，并将所述区域性分析处理的结果发送至目标路侧微基站103，以通过所述目标路侧微基站103对所述交通信息进行广播，其中，所述车路协同系统包括所述目标路侧微基站103和所述目标区域内的全部路侧微基站103。
在具体实施中，上述边缘云101与目标区域内的全部路侧微基站103关联，可以理解为：边缘云101与目标区域内的全部路侧微基站103通信连接，且每一个边缘云101用于管理其对应的目标区域内的全部路侧微基站103所在的路段的交通信息，从而使该边缘云101与其对应的目标区域内的全部路侧微基站103通信连接（例如：通过5g蜂窝网络连接），以接收目标区域内的全部路侧微基站103通过移动网络通讯模组上报的交通信息，或者，路侧计算节点102还将其获取到的交通原始数据传输至对应的路侧微基站103，且该路侧微基站103在上报交通信息的同时，还将交通原始数据也上报至对应的边缘云101，也就是说，边缘云101还接收目标区域内的全部路侧微基站103通过移动网络通讯模组1032上报的交通原始数据。
另外，边缘云101的部署位置可以位于网络接入层或网络接入层之上的边缘数据中心，该边缘云101主要针对于交通参与元素之间距离较远、低时延的驾驶场景，负责统筹管理边缘云覆盖范围内（即与边缘云关联的路侧微基站所对应的路侧计算节点）的路侧计算节点102，并搜集各个路侧计算节点102同步上传的路侧基础设施的原始交通数据和路侧计算节点102得出的交通数据，以及对原始交通数据进行数据存储，并基于路侧计算节点102得出的交通数据进行区域性分析处理。
在实际应用中，边缘云101的支撑和覆盖范围（目标区域）可以根据实际情况和需要而确定，例如：可以是示范区/园区所在的区域，也可以是城市所在的区域。
上述边缘云101基于所述目标区域内的全部交通信息进行区域性分析处理，可以理解为：对于v2x服务中，需要进行区域性分析的数据进行区域性车路协同计算。且上述目标路侧微基站103可以是目标区域内与上述区域性分析处理的结果相关的路侧微基站103。
例如：当某一路段发生交通事故时，确定该交通事故造成的交通拥堵是否会对其他路段上的交通造成影响，在确定该交通事故造成的交通拥堵会对其他路段上的交通造成影响时，可以将该交通事故信息下发至其他受影响的路段上的路侧微基站，以使路侧微基站对接收到的交通事故信息进行广播，从而使受影响的其他路段上的自动驾驶车辆/辅助驾驶车辆能够提前调整行车策略。
本实施方式中，可以利用边缘云101为目标区域内的交通参与元素提供跨路侧计算节点的中远距离车路协同信息推送服务和区域交通管理服务。
作为一种可选的实施方式，如图4所示，所述车路协同系统还包括：中心云104；
中心云104与所述车路协同系统中的全部边缘云101连接；
其中，中心云104用于接收全部边缘云101分别发送的目标信息，以使所述中心云104基于所述全部边缘云101的目标信息进行全局分析处理，其中，所述目标信息包括以下至少一项：原始交通数据、交通信息和所述区域性分析处理的处理结果。
在具体实施中，上述中心云104的部署位置位于网络核心层之上的云计算数据中心，上述中心云104基于所述全部边缘云101的目标信息进行全局分析处理，可以理解为：针对时延不敏感业务或者离线计算业务，中心云104负责搜集边缘云101同步上传的数据，依据该数据与进行全网数据汇总管理、全局业务运营管理、全局设备管理、全局交通大数据分析、交通决策优化等，以从全局层面更好的支撑智慧交通的改善与治理。
在实际应用中，可以根据实际业务的紧急程度来确定该业务使属于超低时延业务、低时延业务还是时延不敏感业务。其中，超低时延业务所需的数据由路侧计算节点102进行计算，并通过路侧微基站103将计算结果广播至附近的交通参与元素；对于低时延业务，则通过路侧微基站103将交通信息上报至边缘云101，以在边缘云101中计算得到该低时延业务所需的数据，并将该低时延业务所需的数据下发至路侧微基站103，以通过路侧微基站103广播至附近的交通参与元素；另外，对于时延不敏感业务或者离线计算业务，可以通过边缘云101将目标信息上报至中心云104，并在中心云104中计算得到该时延不敏感业务或者离线计算业务所需的数据后，依次通过边缘云101和路侧微基站103下发计算结果，以通过路侧微基站103广播至附近的交通参与元素。
本实施方式中，使用基于路侧计算节点102-边缘云101-中心云104三层分级分布式协同计算的车路协同系统架构，充分整合利用本地计算、边缘计算以及云计算这三层计算资源的计算优势，构建计算资源的分级和分布式架构，以分别针对道路本地超低时延驾驶场景、区域范围低时延需求驾驶场景、全局范围时延不敏感业务场景或离线计算业务，实现计算的“因地制宜”和“物尽其用”。
作为一种可选的实施方式，边缘云101还用于基于以下筛选策略中的至少一项确定所述目标路侧微基站：
将距离道路异常事件的发生点第一预设距离内，且位于所述道路异常事件的发生点上游方向的路侧计算节点对应的路侧微基站确定为所述目标路侧微基站；
将位于第一路口与所述道路异常事件的发生点之间的路侧计算节点对应的路侧微基站确定为所述目标路侧微基站，其中，所述第一路口位于所述道路异常事件的发生点的上游，且与所述道路异常事件的发生点的距离最近的路口；
在所述第一路口包括与所述道路异常事件的发生点相关的分流路口的情况下，将位于所述分流路口的上游第三预设距离内的路侧计算节点对应的路侧微基站确定为所述目标路侧微基站；
在所述第一路口包括与所述道路异常事件的发生点相关的合流路口的情况下，将位于所述合流路口的上游第四预设距离内的路侧计算节点对应的路侧微基站确定为所述目标路侧微基站。
在具体实施中，道路异常事件的发生点所在路段上的路侧基础设施检测到道路异常事件相关的交通原始数据，该路段上的路侧计算节点基于该数据计算得到该道路异常事件相关的交通信息，然后通过对应的微基站将该交通信息广播给该路段上的交通参与元素，并将该交通信息上报给边缘云，边缘云同步获取目标区域内的全部微基站上报的数据，并确定该道路异常事件相关联的其他路段，从而将该交通信息下发给其他路段上的目标路侧微基站，以通过目标路侧微基站广播至其他路段上的交通参与元素。
在具体实施中，上述第一预设距离可以根据实际需求进行设置，例如：1000米、2000米等，在此不作具体限定。
在一种可选的实施方式中，在道路异常事件的发生点上游的第一路口与该道路异常事件的发生点的距离小于第一预设距离的情况下，可以仅对第一路口和该道路异常事件的发生点之间的路侧微基站确定为目标路侧微基站。
也就是说，假设第一预设距离等于1000米，且事件发生点距上游路口距离为n米，若n>=1000米，则选择上游方向1000米范围内的路侧微基站为目标路侧微基站；若n<1000米，则选择该道路异常事件的发生点的上游方向的n米范围内的路侧微基站为目标路侧微基站。例如：如图3所示，a表示道路异常事件发生点，则当a的上游方向上的路口（即图中路口4）与a之间的距离小于1000米时，将a和路口4之间的路侧微基站确定为目标路侧微基站；当a和路口4之间的距离大于等于1000米时，仅将a上游方向1000米内的路侧微基站确定为目标路侧微基站。
这样，可以在道路异常事件的发生点上游的第一路口与该道路异常事件的发生点的距离小于第一预设距离的情况下，缩小广播范围，以减少不必要的交通信息广播。
在另一种可选的实施方式中，上述第一路口包括与所述道路异常事件的发生点相关的分流路口的情况，可以理解为：查找道路异常事件发生点所在路段的上游方向路口，并判断该上游方向路口对于该道路异常事件是否存在分流作用（例如：如图3所示，a表示道路异常事件发生点，则路口2、路口6和路口8为a的分流路口）。如果判断结果为“是”，则选取对于该道路异常事件是否存在分流作用的上游方向路口周围第三预设距离内的路侧微基站为目标路侧微基站。
其中，上述第三预设距离可以等于第一预设距离。
本实施方式中，可以对道路异常事件上游的分流路口附近的交通参与元素广播路异常事件发生点的交通信息，以使收听到该交通信息的交通参与元素根据该交通信息提前转入分流路段，从而减轻道路异常事件发生点所在路段的道路拥堵等情况。
在另一种可选的实施方式中，上述第一路口包括与所述道路异常事件的发生点相关的合流路口的情况，可以理解为：查找道路异常事件发生点所在路段的上游方向路口，并判断该上游方向路口对于该道路异常事件是否存在合流作用（例如：如图3所示，a表示道路异常事件发生点，则路口1、路口3、路口4和路口7为a的合流路口）。如果判断结果为“是”，则选取对于该道路异常事件是否存在合流作用的上游方向路口周围第四预设距离内的路侧微基站为目标路侧微基站。
其中，上述第四预设距离也可以等于第一预设距离。
本实施方式中，可以对道路异常事件上游的合流路口附近的交通参与元素广播路异常事件发生点的交通信息，以使收听到该交通信息的交通参与元素根据该交通信息提前变换交通路线或提前减速，从而避免因道路异常事件干扰而额外的交通事故。
综上，通过边缘云101确定与交通信息相关的目标路侧微基站的方式，能够扩大了交通信息的广播范围，且同时提升了交通信息广播的针对性，从而提高了整个平台的处理效率。
作为一种可选的实施方式，如图4所示，所述路侧基础设施包括：摄像机41和雷达42；所述原始交通数据包括：摄像机41拍摄到的图像帧数据和雷达42采集到的3d点云数据；
路侧计算节点102用于对所述图像帧数据和所述3d点云数据进行融合分析处理，以得到所述交通信息。
在实施中，上述对所述图像帧数据和所述3d点云数据进行融合分析处理，可以理解为：将图像帧数据和3d点云数据中相同的目标物的信息进行结合，以实现在二维图像上显示的目标物同时具备可视化的2维信息和移动速度、尺寸等3维信息。
在具体实施中，上述对所述图像帧数据和所述3d点云数据进行融合分析处理，以得到所述交通信息的具体过程如下：
对所述图像帧数据中的第一识别目标进行跟踪，以得到所述图像帧数据中的每个第一识别目标在二维图像坐标内的第一运动轨迹；
对所述3d点云数据中的第二识别目标进行跟踪，以得到所述3d点云数据中的每个第二识别目标的第二运动轨迹；
将所述第二运动轨迹映射至所述二维图像坐标内，以得到中间运动轨迹；
将目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配，且在匹配成功的情况下，将所述目标中间运动轨迹对应的第二识别目标与所述匹配成功的第一运动轨迹对应的第一识别目标进行融合，以得到融合识别目标，其中，所述中间运动轨迹包括所述目标中间运动轨迹。
在实际应用中，摄像头41和雷达42分别可以采集多个按照时间顺序排列的图像帧和点云数据帧，对该多个图像帧和多个点云数据帧中的目标物（例如：车辆、行人、路障等）分别进行识别和跟踪，便可以分别得到第一识别目标在二维图像中的第一运动轨迹，和第二识别目标在三维空间内的第二运动轨迹。
在应用中，第一识别目标与第二识别目标是相互重复的，即对于每一个第一识别目标，分别存在与该第一识别目标指示相同交通参与元素的一个第二识别目标。通过上述对所述图像帧数据和所述3d点云数据进行融合分析处理的过程，可以确定每一个第一识别目标对应的第二识别目标，并将两者进行合并，以使合并口的识别目标同时具备颜色、位置等2维信息和尺寸、距离等3维信息。
在实施中，可以基于第一识别目标与第二识别目标在同一时刻的相对位置关系（例如：两者的位置是否接近或重叠）来对第一识别目标和第二识别目标进行匹配融合。
可选的，所述将目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配的步骤，包括：
基于目标中间运动轨迹中的第二识别目标在目标时刻的第一坐标位置，确定目标区域，其中，所述目标区域以所述第一坐标位置为中心；
基于所述每个第一识别目标的第一运动轨迹，分别确定每个第一识别目标在所述目标时刻的第二坐标位置；
基于所述第二坐标位置与所述目标区域之间的相对位置关系，对所述目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配。
例如：如图2a至图2d所示，具体融合步骤包括：
步骤1、对3d点云数据中的第二识别目标，使用基于卡尔曼滤波的多目标跟踪器进行跟踪，得到每个第二识别目标的第二运动轨迹：
步骤2、对图像帧数据中的第一识别目标使用基于卡尔曼的多目标跟踪器进行跟踪，得到每个第一识别目标的第一运动轨迹：
步骤3、针对3d点云数据中的每个第二识别目标，通过摄像头标定的参数，将其轨迹投影到二维图像坐标上，得到每个第二识别目标在图像帧序列上的投影轨迹
步骤4、在图像上，以投影轨迹中的坐标
具体的，可以依次对
在实际应用中，可能存在2个或2个以上投票数并列第1的情况，此时，选取
最后，将相互匹配的第一识别目标与第二识别目标的信息进行融合，以使融合后的识别目标具备位置、速度、图像识别结果（例如：是人物、车辆还是障碍物等）信息，从而能够基于该融合后的识别目标的信息发现道路上是否存在异常事件、以及异常事件的发生点等交通信息。
本实施方式中，路侧计算节点通过将所获取的摄像机视频数据、激光雷达点云数据，采用基于目标运动轨迹匹配的投票机制算法进行融合，充分利用目标在数据帧序列中的运动轨迹信息，与传统的仅使用一帧数据来进行点云目标（即第二识别目标）和图像目标（即第一识别目标）匹配的方法相比，该方法能改善误匹配的情况，有效提高融合的精度，并且保持了传统融合方法的处理速度。
可选的，如图4所示，所述路侧基础设施还包括：信号灯43；
所述路侧计算节点102还用于对所述信号灯43的信号灯数据进行数据解析处理；
所述近距离广播通讯模组1031还用于将所述数据解析处理后的信号灯数据发送至覆盖范围内的交通参与元素。
在具体实施中，上述路侧计算节点102对所述信号灯43的信号灯数据进行数据解析处理，可以理解为：路侧计算节点102根据信号灯43的红绿灯周期等信号灯数据确定未来具体时刻该信号灯是红灯还是绿灯，或者直接将信号灯43当前的状态（是红灯还是绿灯）解析成交通参与元素能够识别的数据后，广播给交通参与元素。
本实施方式中，路侧计算节点102和路侧微基站103还能够告知交通参与元素路灯数据，以使交通参与元素根据自身情况自行进行判断和采纳该路灯数据，从而据此进行下一步的实时行动决策(典型如自动驾驶的实时行驶决策)。
请参阅图5是本发明实施例提供的一种车路协同方法的流程图，本发明实施例提供的车路协同方法可以应用于如图1或图4所示车路协同系统，且所述车路协同方法可以包括以下步骤：
步骤501、获取路侧基础设施采集的交通原始数据。
步骤502、在路侧本地基于所述交通原始数据确定交通信息。
步骤503、对所述交通信息进行广播，并将所述交通信息发送至边缘云。
需要说明的是，上述步骤501与路侧计算节点获取路侧基础设施采集的交通原始数据的过程对应；上述步骤502与路侧计算节点基于所述原始交通数据确定交通信息的过程对应；且上述步骤503与：近距离广播通讯模组将获取的所述交通信息发送至第一覆盖范围内的交通参与元素，移动网络通讯模组将获取的所述交通信息发送至所述边缘云的过程对应，且本发明实施例提供的车路协同方法与且本发明实施例提供的车路协同系统具有相同的有益效果，在此不作赘述。
可选地，所述原始交通数据包括：所述摄像机拍摄到的图像帧数据和所述雷达采集到的3d点云数据，基于所述交通原始数据确定交通信息，包括：
对所述图像帧数据和所述3d点云数据进行融合分析处理，以得到所述交通信息。
进一步地，所述对所述图像帧数据和所述3d点云数据进行融合分析处理，以得到所述交通信息的步骤，包括：
对所述图像帧数据中的第一识别目标进行跟踪，以得到所述图像帧数据中的每个第一识别目标在二维图像坐标内的第一运动轨迹；
对所述3d点云数据中的第二识别目标进行跟踪，以得到所述3d点云数据中的每个第二识别目标的第二运动轨迹；
将所述第二运动轨迹映射至所述二维图像坐标内，以得到中间运动轨迹；
将目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配，且在匹配成功的情况下，将所述目标中间运动轨迹对应的第二识别目标与所述匹配成功的第一运动轨迹对应的第一识别目标进行融合，以得到融合识别目标，其中，所述中间运动轨迹包括所述目标中间运动轨迹。
更进一步地，所述将目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配的步骤，包括：
基于目标中间运动轨迹中的第二识别目标在目标时刻的第一坐标位置，确定目标区域，其中，所述目标区域以所述第一坐标位置为中心；
基于所述每个第一识别目标的第一运动轨迹，分别确定每个第一识别目标在所述目标时刻的第二坐标位置；
基于所述第二坐标位置与所述目标区域之间的相对位置关系，对所述目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配。
需要说明的是，上述对所述图像帧数据和所述3d点云数据进行融合分析处理的具体过程和说明，可以参照本发明实施例提供的车路协同系统中路侧计算节点对所述图像帧数据和所述3d点云数据进行融合分析处理的具体过程和说明，在此不再赘述。
另外，上述基于所述第二坐标位置与所述目标区域之间的相对位置关系，对所述目标中间运动轨迹与每个第一识别目标的第一运动轨迹进行匹配的实施方式，与如图2a至图2d所示融合匹配过程相对应，且具有相同的有益效果，在此不再赘述。
本发明实施例提供的车路协同方法与如图1或图4所示车路协同系统中边缘云、路侧计算节点以及路侧微基站执行的各个过程相对应，且具有相同的有益效果，在此不再赘述。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质（如rom/ram、磁碟、光盘）中，包括若干指令用以使得一台终端（可以是手机，计算机，服务器，空调器，或者网络设备等）执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。
- 还没有人留言评论。精彩留言会获得点赞！