车辆高速行驶时儿童危险行为检测方法及系统与流程

1.本发明涉及车辆技术领域，特别涉及一种车辆高速行驶时儿童危险行为检测方法及系统。


背景技术：

2.本部分的陈述仅仅是提供了与本发明相关的背景技术，并不必然构成现有技术。
3.车辆已经成为家庭生活重要的组成部分，驾车出行已经成为人们出行的主要方式，而全家自驾出行已经成为大部分家长的首选，在汽车行驶过程车速很高时，车内儿童受到车外风景吸引，如果将身体部位伸出车外，或者互相打闹等，一旦发生一些意外将会导致非常严重的后果。
4.发明人发现，现有的识别模型，往往只对儿童在车内的位置进行识别，例如专利号cn114475507a公开了一种车内儿童安全警示方法、装置、电子设备及存储介质，其通过图像处理的方式识别儿童所在的区域，根据儿童所在位置与预设安全位置的对比来判定儿童是否安全，然而儿童在车内的危险动作较多，仅通过位置识别往往无法进行准确的进行危险行为识别；而且，现有的方式大多直接对车内儿童危险行为进行识别，并未与行车速度相匹配，使得在车辆静止时也容易出现频繁告警，用户的体验感较差。


技术实现要素：

5.为了解决现有技术的不足，本发明提供了一种车辆高速行驶时儿童危险行为检测方法及系统，当车辆高速行驶时，自动检测车内儿童进行的危险行为，发现儿童危险行为时自动进行语音告警和告警信息推送，提高了用户体验。
6.为了实现上述目的，本发明采用如下技术方案：
7.本发明第一方面提供了一种车辆高速行驶时儿童危险行为检测方法。
8.一种车辆高速行驶时儿童危险行为检测方法，包括以下过程：
9.当车辆行驶速度大于设定速度阈值时，获取车内儿童监测数据；
10.根据获取的车内儿童监测数据，得到儿童危险行为识别结果；
11.当儿童危险行为识别结果为危险动作时，且同样的危险动作被连续识别到且超过第一设定时间阈值或者超过第一设定次数阈值时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
12.作为本发明第一方面可选的一些实现方式，危险动作，至少包括：儿童身体伸出车外、儿童车内打闹行以及儿童车内使用刀具中的一种或多种。
13.作为本发明第一方面可选的一些实现方式，儿童监测数据包括车内影像数据，根据车内影像数据以及预设的危险行为识别模型，得到儿童危险行为识别结果。
14.作为本发明第一方面进一步的限定，根据车内影像数据，生成车内儿童的人脸识别结果，将儿童危险行为识别结果与人脸识别结果进行匹配后发送给外置终端或者存储在车端的存储器中，根据多次驾驶时得到的匹配结果，得到儿童危险行为习惯识别结果。
15.作为本发明第一方面进一步的限定，当识别到多个儿童，且各个儿童依次执行危险动作时，将各个儿童的危险动作时长相加，当相加后的时长大于第二设定时间阈值时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
16.作为本发明第一方面进一步的限定，当识别到多个儿童，且各个儿童依次执行危险动作时，将各个儿童的危险动作次数相加，当相加后的次数大于第二设定次数阈值时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
17.本发明第二方面提供了一种车辆高速行驶时儿童危险行为检测系统。
18.一种车辆高速行驶时儿童危险行为检测系统，包括：
19.数据获取模块，被配置为：当车辆行驶速度大于设定速度阈值时，获取车内儿童监测数据；
20.危险行为识别模块，被配置为：根据获取的车内儿童监测数据，得到儿童危险行为识别结果；
21.告警模块，被配置为：当儿童危险行为识别结果为危险动作时，且同样的危险动作被连续识别到且超过第一设定时间阈值或者超过第一设定次数阈值时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
22.本发明第三方面提供了一种车辆高速行驶时儿童危险行为检测系统。
23.一种车辆高速行驶时儿童危险行为检测系统，包括：
24.车内影像拍摄单元、危险行为识别单元、语音告警单元、车载通讯单元和车联网后台；
25.车内影像拍摄单元、语音告警单元分别与危险行为识别单元通信，危险行为识别单元通过车载通讯单元与车联网后台通信，车联网后台用于与外置终端通信；
26.其中，危险行为识别单元用于执行如本发明第一方面所述的车辆高速行驶时儿童危险行为检测方法。
27.本发明第四方面提供了一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现如本发明第一方面所述的车辆高速行驶时儿童危险行为检测方法中的步骤。
28.本发明第五方面提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的程序，所述处理器执行所述程序时实现如本发明第一方面所述的车辆高速行驶时儿童危险行为检测方法中的步骤。
29.与现有技术相比，本发明的有益效果是：
30.1、本发明创新性的提出了车辆高速行驶时儿童危险行为检测方法及系统，当车辆高速行驶时，自动检测车内儿童进行的危险行为，发现儿童危险行为时自动进行语音告警和告警信息推送，提高了用户体验。
31.2、本发明创新性的提出了车辆高速行驶时儿童危险行为检测方法及系统，结合车内影像采集单元、危险行为识别单元、语音告警单元、车载通讯单元和车联网后台，避免了因车内儿童的危险行为导致一些行车事故。
32.3、本发明创新性的提出了车辆高速行驶时儿童危险行为检测方法及系统，对多个儿童的情况进行危险行为时长叠加或者危险动作次数叠加，进一步的提高了高速行驶时儿童危险行为的识别和告警精度，提高了用户体验。
附图说明
33.构成本发明的一部分的说明书附图用来提供对本发明的进一步理解，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。
34.图1为本发明实施例1提供的车辆高速行驶时儿童危险行为检测方法的流程示意图；
35.图2为本发明实施例2提供的车辆高速行驶时儿童危险行为检测系统的结构示意图；
36.图3为本发明实施例3提供的车辆高速行驶时儿童危险行为检测系统的原理示意图一；
37.图4为本发明实施例3提供的车辆高速行驶时儿童危险行为检测系统的原理示意图二；
38.图5为本发明实施例3提供的车辆高速行驶时儿童危险行为检测系统的原理示意图三。
具体实施方式
39.下面结合附图与实施例对本发明作进一步说明。
40.应该指出，以下详细说明都是例示性的，旨在对本发明提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本发明所属技术领域的普通技术人员通常理解的相同含义。
41.需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本发明的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
42.在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
43.实施例1：
44.如图1所示，本发明实施例1提供了一种车辆高速行驶时儿童危险行为检测方法，提高了车辆的智能性，汽车高速行驶时(车速》60km/h，这里的车速可以自由设定，可以由车辆制造商固化设定，也可提供驾乘人员自定义设定)，实时检测车内儿童行为，并通过危险行为检测系统检测儿童危险行为(儿童身体伸出车外、儿童车内打闹行、儿童车内使用刀具等)；提升了客户的体验感，当检测到车内儿童持续进行危险行为(儿童身体伸出车外，儿童车内打闹行，儿童车内使用刀具等)，可语音提醒“检测到车内儿童有危险行为(儿童身体伸出车外，儿童车内打闹行，儿童车内使用刀具等)，请注意安全！”；提高了汽车制造的科技感，自动检车内危险行为并提醒，同时可以语音播报提醒儿童；提高了行车安全，通过语音提醒，制止车内儿童的危险行为，可以避免因为车辆高速行驶下因为儿童自身的一些危险行为导致的不要的行车事故。
45.具体的，包括以下过程：
46.当车辆行驶速度大于设定速度阈值时，获取车内儿童监测数据；
47.根据获取的车内儿童监测数据，得到儿童危险行为识别结果；
48.当儿童危险行为识别结果为危险动作时，且同样的危险动作被连续识别到且超过
第一设定时间阈值(这里可以设定为1分钟，本领域技术人员可以根据具体工况进行选择，例如还可以是30秒、10秒等等，这里不再赘述)或者超过第一设定次数阈值(例如4次)时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
49.本实施例中，可选的，危险动作，至少包括：儿童身体伸出车外、儿童车内打闹行以及儿童车内使用刀具中的一种或多种；可以理解的，在其他一些实施方式中，危险动作还包括站立在座椅上、挥拳击打车窗、在车内跳跃等等，本领域技术人员可以根据具体工况进行选择，这里不再赘述。
50.本实施例中，儿童监测数据包括车内影像数据，根据车内影像数据以及预设的危险行为识别模型，得到儿童危险行为识别结果；可以理解的，这里的危险行为识别模型均采用现有的行为识别模型，通过各种预设的危险动作进行识别模型的训练；
51.可以理解的，这里的儿童识别，可以采用人脸识别的方式，即通过人脸识别判断当前人员是否是儿童；或者通过座椅设定的压力传感器自动识别乘坐人员的体重，根据人员的体重识别结果判断是否为儿童，或者采用以上两种方式的结合进行判断和识别，本领域技术人员可以根据具体工况进行选择，这里不再赘述。
52.例如，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀动作时长为70秒钟，大于1分钟的第一设定时间阈值，此时生成告警信息；或者，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀次数为5次时，大于4次的第一设定次数阈值，此时生成告警信息。
53.本实施例中，根据车内影像数据，生成车内儿童的人脸识别结果，将儿童危险行为识别结果与人脸识别结果进行匹配后发送给外置终端或者存储在车端的存储器中；根据多次驾驶时得到的匹配结果，得到儿童危险行为习惯识别结果。
54.本实施例中，当识别到多个儿童，且各个儿童依次执行危险动作时，将各个儿童的危险动作时长相加，当相加后的时长大于第二设定时间阈值(这里可以设定为90秒钟)时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
55.例如，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀动作时长为60秒钟，同时再次识别到儿童b正在执行持刀动作，再次进行连续识别，判断儿童b的持刀动作时长为40秒钟，儿童a和儿童b的持刀总时长为100秒钟，其大于第二设定时间阈值(90秒钟)，这时生成告警信息；
56.再或者，例如，当识别到儿童a正在执行打闹的挥拳动作时，进行连续识别，判断儿童a的挥拳动作时长为10秒钟，同时再次识别到儿童b正在执行挥拳动作，再次进行连续识别，判断儿童b的挥拳动作时长为10秒钟，继续连续的识别，直至儿童a和儿童b均识别不到挥拳动作时，得到儿童a和儿童b的挥拳总时长为120秒钟，其大于第二设定时间阈值(90秒钟)，这时生成告警信息；
57.再或者，例如，当识别到儿童a正在执行头伸出窗外的动作时，进行连续识别，判断儿童a的头伸出窗外时长为70秒钟，同时再次识别到儿童b正在执行头伸出窗外动作，再次进行连续识别，判断儿童b的头伸出窗外时长为80秒钟，继续连续的识别，直至儿童a和儿童b均识别不到头伸出窗外动作时，得到儿童a和儿童b的头伸出窗外总时长为150秒钟，其大于第二设定时间阈值(90秒钟)，这时生成告警信息。
58.可选的，当识别到多个儿童，且各个儿童依次执行危险动作时，将各个儿童的危险
动作次数相加，当相加后的次数大于第二设定次数阈值(这里可选的采用4次)时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端
59.例如，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀动作次数为3次，同时再次识别到儿童b正在执行持刀动作，再次进行连续识别，判断儿童b的持刀动作次数为2次，儿童a和儿童b的持刀总动作次数为5次，其大于第二设定次数阈值(4次)，这时生成告警信息；
60.再或者，例如，当识别到儿童a正在执行打闹的挥拳动作时，进行连续识别，判断儿童a的挥拳动作次数为3次，同时再次识别到儿童b正在执行挥拳动作，再次进行连续识别，判断儿童b的挥拳动作次数为3次，继续连续的识别，直至儿童a和儿童b均识别不到挥拳动作时，得到儿童a和儿童b的挥拳总动作次数为6次，其大于第二设定次数阈值(90秒钟)，这时生成告警信息；
61.再或者，例如，当识别到儿童a正在执行头伸出窗外的动作时，进行连续识别，判断儿童a的头伸出窗外动作次数为3次，同时再次识别到儿童b正在执行头伸出窗外动作，再次进行连续识别，判断儿童b的头伸出窗外动作次数为3次，继续连续的识别，直至儿童a和儿童b均识别不到头伸出窗外动作时，得到儿童a和儿童b的伸出窗外动作次数为3次，其大于第二设定次数阈值(90秒钟)，这时生成告警信息。
62.实施例2：
63.如图2所示，本发明实施例2提供了一种车辆高速行驶时儿童危险行为检测系统，包括：
64.数据获取模块，被配置为：当车辆行驶速度大于设定速度阈值时，获取车内儿童监测数据；
65.危险行为识别模块，被配置为：根据获取的车内儿童监测数据，得到儿童危险行为识别结果；
66.告警模块，被配置为：当儿童危险行为识别结果为危险动作时，且同样的危险动作被连续识别到且超过第一设定时间阈值或者超过第一设定次数阈值时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
67.告警模块，具体的，包括：
68.当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀动作时长为70秒钟，大于1分钟的第一设定时间阈值，此时生成告警信息；或者，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀次数为5次时，大于4次的第一设定次数阈值，此时生成告警信息。
69.本实施例中，根据车内影像数据，生成车内儿童的人脸识别结果，将儿童危险行为识别结果与人脸识别结果进行匹配后发送给外置终端或者存储在车端的存储器中；根据多次驾驶时得到的匹配结果，得到儿童危险行为习惯识别结果。
70.本实施例中，当识别到多个儿童，且各个儿童依次执行危险动作时，将各个儿童的危险动作时长相加，当相加后的时长大于第二设定时间阈值(这里可以设定为90秒钟)时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端。
71.例如，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀动作时长为60秒钟，同时再次识别到儿童b正在执行持刀动作，再次进行连续识别，判断儿童b的
持刀动作时长为40秒钟，儿童a和儿童b的持刀总时长为100秒钟，其大于第二设定时间阈值(90秒钟)，这时生成告警信息；
72.再或者，例如，当识别到儿童a正在执行打闹的挥拳动作时，进行连续识别，判断儿童a的挥拳动作时长为10秒钟，同时再次识别到儿童b正在执行挥拳动作，再次进行连续识别，判断儿童b的挥拳动作时长为10秒钟，继续连续的识别，直至儿童a和儿童b均识别不到挥拳动作时，得到儿童a和儿童b的挥拳总时长为120秒钟，其大于第二设定时间阈值(90秒钟)，这时生成告警信息；
73.再或者，例如，当识别到儿童a正在执行头伸出窗外的动作时，进行连续识别，判断儿童a的头伸出窗外时长为70秒钟，同时再次识别到儿童b正在执行头伸出窗外动作，再次进行连续识别，判断儿童b的头伸出窗外时长为80秒钟，继续连续的识别，直至儿童a和儿童b均识别不到头伸出窗外动作时，得到儿童a和儿童b的头伸出窗外总时长为150秒钟，其大于第二设定时间阈值(90秒钟)，这时生成告警信息。
74.可选的，当识别到多个儿童，且各个儿童依次执行危险动作时，将各个儿童的危险动作次数相加，当相加后的次数大于第二设定次数阈值(这里可选的采用4次)时，生成告警信息以进行车内语音告警，将告警信息同步发送给外置终端
75.例如，当识别到儿童a正在执行持刀动作时，进行连续识别，判断儿童a的持刀动作次数为3次，同时再次识别到儿童b正在执行持刀动作，再次进行连续识别，判断儿童b的持刀动作次数为2次，儿童a和儿童b的持刀总动作次数为5次，其大于第二设定次数阈值(4次)，这时生成告警信息；
76.再或者，例如，当识别到儿童a正在执行打闹的挥拳动作时，进行连续识别，判断儿童a的挥拳动作次数为3次，同时再次识别到儿童b正在执行挥拳动作，再次进行连续识别，判断儿童b的挥拳动作次数为3次，继续连续的识别，直至儿童a和儿童b均识别不到挥拳动作时，得到儿童a和儿童b的挥拳总动作次数为6次，其大于第二设定次数阈值(90秒钟)，这时生成告警信息；
77.再或者，例如，当识别到儿童a正在执行头伸出窗外的动作时，进行连续识别，判断儿童a的头伸出窗外动作次数为3次，同时再次识别到儿童b正在执行头伸出窗外动作，再次进行连续识别，判断儿童b的头伸出窗外动作次数为3次，继续连续的识别，直至儿童a和儿童b均识别不到头伸出窗外动作时，得到儿童a和儿童b的伸出窗外动作次数为3次，其大于第二设定次数阈值(90秒钟)，这时生成告警信息。
78.实施例3：
79.如图3、图4和图5所示，本发明实施例3提供了一种车辆高速行驶时儿童危险行为检测系统，包括：
80.智能移动终端设备(app)或音响主机1、车联网后台2、车载通讯模块3(即车载通讯单元)、can总线4、车内影像及儿童行为检测系统5(即车内影像拍摄单元)、危险行为检测系统6(即危险行为识别单元)和语音提醒警报系统7(即语音告警单元)；
81.车内影像及儿童行为检测系统5、语音提醒警报系统7分别与车内影像及儿童行为检测系统5通信，车内影像及儿童行为检测系统5通过车载通讯模块3与车联网后台2通信，车联网后台用于与智能移动终端设备(app)或音响主机1(即外置终端)通信；
82.其中，车内影像及儿童行为检测系统5用于执行如本发明实施例1所述的车辆高速
行驶时儿童危险行为检测方法。
83.可选的，提供一种工作方法示例，包括：
84.s1：用户在智能终端下载并安装车企开发的app应用，在app应用或音响主机1软件中设置需要接收信息提醒的联系人账号，设置完成后通过网络或通过远程通讯模块上传到车联网后台2，车联网后台2存储需要提醒的人员信息；
85.s2：当车辆进入高速行驶状态后(车速》60km/h)，车内影像及儿童行为检测系统5开始检测车内人员行为模式；
86.s3：车内影像及儿童行为检测系统会将收集到的数据传输到危险行为检测系统6内，危险行为检测系统6会对接收到的数据进行实时分析、检测和判断车内乘员是否存在有危险行为(儿童身体伸出车外、儿童车内打闹行、儿童车内使用刀具等)；
87.s4：若发现车内儿童存在危险行为后，该系统会持续检测，当车内儿童进行的危险行为一直持续超过一分钟，车载检测模块就会将危险行为信号发给语音提醒警报系统7，同时将警报信息传输到车载通讯模块；
88.s5：语音提醒警报系统7收到指令后会激活提醒警报语音，车载语音会进行播报“检测到车内儿童有危险行为(儿童身体伸出车外，儿童车内打闹行，儿童车内使用刀具等)，请注意安全！”并重复3遍。
89.s6：车载通讯模块3接收到车内儿童在高速行驶的情况下长时间存在危险行为后。车载通讯模块3可实时上报检测到的儿童危险行为信息到车联网后台2，同时更新app应用1中相关信息；
90.s7：接收到车载通讯单元3发来的信息后，车联网后台2实时记录信息，记录到车内乘员有危险行为后，车联网后台2立即发送报警信息给设置好的联系人；通过一系列的报警提醒行为从而实现提醒车内儿童注意安全的目的，减少意外事故的发生。
91.可选的，本发明所述的车辆，可以是新能源车、轿车、suv、mpv、商用车等等，车辆需要里面装配一种含有通讯模块的产品；
92.车载通讯模块3为带有2g/3g/4g的通讯模块，此产品具备网络通讯和车辆内部网络交换的能力；智能移动终端设备(app)或音响主机1为承载所需app应用的以及具体无线通讯能力的设备；危险行为检测系统6能够在车辆高速行驶的时候实时检测车内儿童持续危险行为；语音提醒警报系统7具有语音播报提醒和警告儿童存在危险行为的能力；车联网后台2为企业的车联网服务平台；app为供用户使用的软件应用。
93.实施例4：
94.本发明实施例4提供了一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现如本发明实施例1所述的车辆高速行驶时儿童危险行为检测方法中的步骤。
95.实施例5：
96.本发明实施例5提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的程序，所述处理器执行所述程序时实现如本发明实施例1所述的车辆高速行驶时儿童危险行为检测方法中的步骤。
97.本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储
介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
98.本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
99.这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
100.这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
101.本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(read-only memory，rom)或随机存储记忆体(random access memory，ram)等。
102.以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。