模拟驾驶控制方法、系统、驾驶模拟器及存储介质与流程

文档序号:33195444发布日期:2023-02-04 11:27阅读:来源:国知局

技术特征:
1.一种模拟驾驶控制方法,其特征在于,包括:响应驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作,控制车辆模型在虚拟驾驶场景中的驾驶状态以进行模拟驾驶,所述虚拟驾驶场景中包括需要驾驶人员观察的至少一个目标视景,每个目标视景关联有观察位置参数、观察时间参数和观察触发条件;在模拟驾驶过程中,采集驾驶人员的眼动数据,所述眼动数据包括驾驶人员在目标屏幕上的注视位置和注视时间,所述目标屏幕是呈现所述虚拟驾驶场景的屏幕;根据每个目标视景关联的观察位置参数、观察时间参数和观察触发条件,结合所述车辆模型的驾驶状态,生成每个目标视景对应的观察位置范围和观察时间范围;根据所述驾驶人员的眼动数据和每个目标视景对应的观察位置范围和观察时间范围,获取所述驾驶人员对每个目标视景的观察结果信息;根据所述驾驶人员对每个目标视景的观察结果信息生成并输出驾驶反馈信息,以引导驾驶人员进行模拟驾驶。2.根据权利要求1所述的方法,其特征在于,根据每个目标视景关联的观察位置参数、观察时间参数和观察触发条件,结合所述车辆模型的驾驶状态,生成每个目标视景对应的观察位置范围和观察时间范围,包括:针对每个目标视景,在所述车辆模型出现满足所述观察触发条件的第一目标驾驶状态时,根据所述第一目标驾驶状态出现的时刻和位置,结合所述观察位置参数和观察时间参数,生成所述目标视景对应的观察位置范围和观察时间范围。3.根据权利要求2所述的方法,其特征在于,针对每个目标视景,在所述车辆模型出现满足所述观察触发条件的第一目标驾驶状态时,根据所述第一目标驾驶状态出现的时刻和位置,结合所述观察位置参数和观察时间参数,生成所述目标视景对应的观察位置范围和观察时间范围,包括:针对每个目标视景,监测所述车辆模型是否出现满足所述目标视景对应的观察触发条件的第一目标驾驶状态;在出现所述第一目标驾驶状态时,将所述第一目标驾驶状态出现的时间作为观察时间范围的起始时间,并根据所述起始时间与所述观察时间参数生成观察时间范围的结束时间;将所述第一目标驾驶状态出现的位置作为观察位置范围的起始位置,并根据所述起始位置与所述观察位置参数生成观察位置范围的结束位置。4.根据权利要求3所述的方法,其特征在于,针对每个目标视景,监测所述车辆模型是否出现满足所述目标视景对应的观察触发条件的第一目标驾驶状态,包括:在模拟驾驶过程中,根据所述车辆模型的当前位置和当前视角,动态加载所述虚拟驾驶场景中的场景画面;在所加载的场景画面包含所述目标视景的情况下,按照目标视景之间的观察顺序,确定当前待观察的目标视景;针对当前待观察的目标视景,监测所述车辆模型是否出现满足所述当前待观察的目标视景对应的观察触发条件的第一目标驾驶状态。5.根据权利要求4所述的方法,其特征在于,根据所述驾驶人员的眼动数据和每个目标视景对应的观察位置范围和观察时间范围,获取所述驾驶人员对每个目标视景的观察结果
信息,包括:针对每个目标视景,将所述目标视景对应的观察位置范围从虚拟驾驶场景映射至所述目标屏幕上,得到所述目标视景在所述目标屏幕上对应的屏幕位置范围;将所述目标视景对应的屏幕位置范围和观察时间范围,分别与所述驾驶人员的眼动数据中的注视位置和注视时间进行匹配,得到所述驾驶人员对所述目标视景的观察结果信息。6.根据权利要求5所述的方法,其特征在于,将所述目标视景对应的屏幕位置范围和观察时间范围,分别与所述驾驶人员的眼动数据中的注视位置和注视时间进行匹配,得到所述驾驶人员对所述目标视景的观察结果信息,包括:将所述目标视景对应的屏幕位置范围和观察时间范围,分别与所述驾驶人员的眼动数据中的注视位置和注视时间进行匹配;若所述眼动数据中包含位于所述屏幕位置范围内的第一注视位置,且所述第一注视位置的注视时间位于所述观察时间范围内,生成所述驾驶人员在合适时间内观察过所述目标视景的第一观察结果信息;若所述眼动数据中包含位于所述屏幕位置范围内的第一注视位置,但所述第一注视位置的注视时间未位于所述观察时间范围内,生成所述驾驶人员未在合适时间内观察过所述目标视景的第二观察结果信息;若所述眼动数据中不包含位于所述屏幕位置范围内的第一注视位置,生成所述驾驶人员未观察过所述目标视景的第三观察结果信息。7.根据权利要求1所述的方法,其特征在于,响应驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作,控制车辆模型在虚拟驾驶场景中的驾驶状态以进行模拟驾驶,包括:响应驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作,获取所述模拟驾驶操作对应的驾驶部件对应的电控信号;结合所述驾驶部件的类型,将所述电控信号转换为针对所述车辆模型的驾驶状态控制信号;根据所述驾驶状态控制信号,控制所述车辆模型在所述虚拟驾驶场景中的驾驶状态,以进行模拟驾驶。8.根据权利要求1所述的方法,其特征在于,在模拟驾驶过程中,采集驾驶人员的眼动数据,包括:在模拟驾驶过程中,利用驾驶模拟器上外接的眼动仪,采集驾驶人员的眼动数据,所述目标屏幕为所述驾驶模拟器的显示屏幕;或者在模拟驾驶过程中,利用驾驶人员佩戴的vr眼镜上的眼动采集器,采集驾驶人员的眼动数据,所述目标屏幕为所述vr眼镜的显示屏幕。9.根据权利要求1-8任一项所述的方法,其特征在于,每个目标视景还关联有标准操作类型、操作时间参数和操作触发条件,所述方法还包括:在模拟驾驶过程中,获取驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作的类型和时间;
针对每个目标视景,在所述车辆模型出现满足所述目标视景对应的操作触发条件的第二目标驾驶状态时,根据所述第二目标驾驶状态出现的时刻和操作时间参数,确定标准操作时间范围;根据所述每个目标视景对应的标准操作类型和标准操作时间范围,以及所述模拟驾驶操作的类型和时间,获取针对驾驶人员在模拟驾驶过程中的模拟驾驶操作的质量分析信息。10.根据权利要求9所述的方法,其特征在于,根据所述驾驶人员对每个目标视景的观察结果信息生成并输出驾驶反馈信息,以引导驾驶人员进行模拟驾驶,包括:根据所述驾驶人员对每个目标视景的观察结果信息,融合所述模拟驾驶操作的质量分析信息和/或驾驶结果信息,生成并输出驾驶反馈信息,以引导驾驶人员进行模拟驾驶。11.根据权利要求10所述的方法,其特征在于,根据所述驾驶人员对每个目标视景的观察结果信息,融合所述模拟驾驶操作的质量分析信息和/或驾驶结果信息,生成并输出驾驶反馈信息,以引导驾驶人员进行模拟驾驶,包括:在模拟驾驶过程中,每当监测到所述车辆模型出现指定驾驶状态时,确定与所述指定驾驶状态关联的第一目标视景,根据所述驾驶人员对所述第一目标视景的观察结果信息,融合所述第一目标视景对应的第一模拟驾驶操作的质量分析信息和/或驾驶结果信息,生成第一驾驶反馈信息并输出,以引导驾驶人员进行模拟驾驶;或者在本次模拟驾驶结束后,响应驾驶人员的查看请求,根据所述驾驶人员在本次模拟驾驶中对每个目标视景的观察结果信息,融合所述本次模拟驾驶中模拟驾驶操作的质量分析信息和/或驾驶结果信息,生成第二驾驶反馈信息并输出,以引导驾驶人员进行模拟驾驶;或者在设定的反馈周期到达时,根据驾驶人员在所述反馈周期内各次模拟驾驶过程中对每个目标视景的观察结果信息,融合各次模拟驾驶过程中模拟驾驶操作的质量分析信息和/或驾驶结果信息,生成第三驾驶反馈信息并输出,以引导驾驶人员进行模拟驾驶。12.根据权利要求11所述的方法,其特征在于,在模拟驾驶过程中,每当监测到所述车辆模型出现指定驾驶状态时,确定与所述指定驾驶状态关联的第一目标视景,包括:在模拟驾驶过程中,若监测到所述车辆模型出现指定驾驶状态,将所述车辆模型最近出现的第一目标驾驶状态所满足的所述观察触发条件对应的目标视景,作为第一目标视景。13.根据权利要求1-8任一项所述的方法,其特征在于,还包括:根据所述驾驶人员的眼动数据,分析所述驾驶人员在目标屏幕上的感兴趣区域;确定目标信息中的关键信息,所述目标信息是模拟驾驶过程中需要输出给所述驾驶人员的信息;将所述目标信息中的关键信息显示在所述感兴趣区域内;所述目标信息包括教学文案信息、模拟驾驶操作的说明信息、驾驶状态信息以及驾驶反馈信息中的至少一种,所述关键信息是所述目标信息中的部分信息。14.根据权利要求1-8任一项所述的方法,其特征在于,还包括:根据所述驾驶人员对每个目标视景的观察结果信息以及所述模拟驾驶操作的驾驶结
果信息,对所述每个目标视景关联的观察位置参数、观察时间参数和观察触发条件进行修正。15.根据权利要求14所述的方法,其特征在于,在响应驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作之前,还包括:响应模拟驾驶触发操作,根据所述模拟驾驶触发操作中的科目标识,确定本次模拟驾驶对应的目标科目,加载并展示所述目标科目对应的虚拟驾驶场景;其中,不同科目对应的虚拟驾驶场景不同,不同虚拟驾驶场景中的目标视景不同。16.根据权利要求15所述的方法,其特征在于,在响应模拟驾驶触发操作之前,还包括:根据所述驾驶人员的属性信息,从对应不同人员属性的多种参数集合中选择目标参数集合,其中,不同参数集合中的参数不完全相同;根据所述目标参数集合中包含的每个目标视景关联的各种参数,预先配置所述虚拟驾驶场景中每个目标视景关联的各种参数。17.一种模拟驾驶控制系统,其特征在于,包括:视景模块,用于展示虚拟驾驶场景,所述虚拟驾驶场景中包括需要驾驶人员观察的至少一个目标视景,每个目标视景关联有观察位置参数、观察时间参数和观察触发条件;驾驶控制模块,用于响应驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作,控制车辆模型在虚拟驾驶场景中的驾驶状态以进行模拟驾驶;采集模块,用于在模拟驾驶过程中,采集驾驶人员的眼动数据,所述眼动数据包括驾驶人员在目标屏幕上的注视位置和注视时间,所述目标屏幕是呈现所述虚拟驾驶场景的屏幕;计算模块,用于根据每个目标视景关联的观察位置参数、观察时间参数和观察触发条件,结合所述车辆模型的驾驶状态,生成每个目标视景对应的观察位置范围和观察时间范围;以及根据所述驾驶人员的眼动数据和每个目标视景对应的观察位置范围和观察时间范围,获取所述驾驶人员对每个目标视景的观察结果信息;反馈模块,用于根据所述驾驶人员对每个目标视景的观察结果信息生成并输出驾驶反馈信息,以引导驾驶人员进行模拟驾驶。18.一种模拟驾驶控制系统,其特征在于,包括:驾驶模拟器和服务端设备;所述驾驶模拟器至少包括模拟器本体,所述模拟器本体上设置有各种驾驶部件;所述驾驶模拟器,用于响应驾驶人员操作驾驶模拟器上的驾驶部件产生的模拟驾驶操作,控制车辆模型在虚拟驾驶场景中的驾驶状态以进行模拟驾驶,将所述车辆模型在虚拟驾驶场景中的驾驶状态上报给所述服务端设备,所述虚拟驾驶场景中包括需要驾驶人员观察的至少一个目标视景,每个目标视景关联有观察位置参数、观察时间参数和观察触发条件;以及在模拟驾驶过程中,采集驾驶人员的眼动数据,并将所述眼动数据上传给所述服务端设备;所述眼动数据包括驾驶人员在目标屏幕上的注视位置和注视时间,所述目标屏幕是呈现虚拟驾驶场景的屏幕;所述服务端设备,用于根据每个目标视景关联的观察位置参数、观察时间参数和观察触发条件,结合所述车辆模型的驾驶状态,生成每个目标视景对应的观察位置范围和观察时间范围;根据所述驾驶人员的眼动数据和每个目标视景对应的观察位置范围和观察时间范围,获取所述驾驶人员对每个目标视景的观察结果信息,根据所述驾驶人员对每个目标
视景的观察结果信息生成驾驶反馈信息,将所述驾驶反馈信息发送给所述驾驶模拟器;所述驾驶模拟器还用于:输出所述驾驶反馈引导信息,以引导驾驶人员进行模拟驾驶。19.一种驾驶模拟器,其特征在于,包括:模拟器本体,以及与所述模拟器本体通信连接的电脑主机;其中,所述模拟器本体上设置有各种驾驶部件;所述电脑主机包括存储器和处理器,所述存储器用于存储计算机程序,所述处理器,用于执行所述计算机程序,以用于执行权利要求1-16中任一项所述方法中的步骤。20.根据权利要求19所述的驾驶模拟器,其特征在于,所述模拟器本体上还包括显示屏幕,且所述模拟器本体外接眼动仪,所述眼动仪用于在模拟驾驶过程中,采集驾驶人员的眼动数据。21.一种存储有计算机程序的计算机可读存储介质,其特征在于,当所述计算机程序被处理器执行时,致使所述处理器实现权利要求1-16任一项所述方法中的步骤。

技术总结
本申请实施例提供一种模拟驾驶控制方法、系统、驾驶模拟器及存储介质。在本申请实施例中,在虚拟驾驶场景中设置至少一个目标视景,每个目标视景关联有观察位置参数、观察时间参数和观察触发条件,结合虚拟驾驶场景中车辆模型的驾驶状态可以确定每个目标视景的观察位置范围和观察时间范围,在模拟驾驶过程中,采集驾驶人员的眼动数据,根据眼动数据的注视位置和注视时间,比对每个目标视景的观察位置范围和观察时间范围,得到驾驶人员对每个目标视景的观察结果信息,从根源上分析和发现驾驶人员错误操作的原因,针对性的给出反馈信息并输出,有效提高练车效率和效果。有效提高练车效率和效果。有效提高练车效率和效果。


技术研发人员:刘连美 张小磊 史利民 张谦
受保护的技术使用者:天津五八驾考信息技术有限公司
技术研发日:2022.11.18
技术公布日:2023/2/3
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1