乘客运输装置的监测系统、乘客运输装置及其监测方法与流程

本发明涉及一种乘客运输装置领域，更具体而言，本发明涉及乘客运输装置的监测系统及其监测方法。

背景技术：

1、作为改善乘客在楼层间的行走或缩短乘客步行距离的工具，乘客运输装置在日常生活中十分常见。作为示例，尤为常见的是通常用于商厦楼层间的自动扶梯以及通常用于大型机场的移动人行道。

2、对于此类工具，由于其具有极其广泛的适用范围及使用人群。因此，在使用过程中也不可避免地容易发生多种存在安全隐患的问题。作为其中一类情形，部分群体由于自身原因可能无法乘坐乘客运输装置，例如无人陪同的老年人、残疾人等等，再如无主的宠物或者携带了尺寸超出规格的物品的人群。作为其中另一类情形，一些能够乘坐乘客运输装置的群体在特定情形下可能会处于一些能够导致安全隐患的状态，例如突然在乘客运输装置上跌倒、在乘客运输装置上做出一些危险动作或者由于人流量较大而导致乘客运输装置上过于拥挤。如果能够对这些行为进行较好地检测，以消除安全隐患，则能够进一步改善乘客运输装置的应用。

3、另外，在判断出乘客运输装置上是否发生或即将发生存在安全隐患的特定事件的过程中，需要处理大量冗余的数据。如果在对这些数据进行分析判定前能够先筛除掉部分而不影响其判断准确度的话，也将更进一步地善乘客运输装置的应用。

4、再者，由于现在的人类通常都会随身携带一件或多件可穿戴设备，如果能够对这些设备加以合理的利用，使其也能够起到监测乘客运输装置的作用，则也能够进一步改善乘客运输装置的应用。

技术实现思路

1、本发明目的在于提供一些能够避免或及时制止各种形式的安全问题发生的用于乘客运输装置的监测系统。

2、本发明目的还在于提供一些能够避免或及时制止各种形式的安全问题发生的用于乘客运输装置的监测方法。

3、本发明目的还在于提供一种能够避免或及时制止各种形式的安全问题发生乘客运输装置。

4、根据本发明的一个方面，提供一种乘客运输装置的监测系统，其包括：成像传感器和/或深度感测传感器，用于对所述乘客运输装置的监测区域进行感测以获取数据帧；以及处理装置，用于对所述数据帧进行数据处理以监测所述监测区域是否异常，其被配置为包括：背景获取模块，用于基于在所述监测区域处于正常状态下感测的数据帧获取背景模型；前景检测模块，用于将实时感测的数据帧与所述背景模型进行比对以获得前景对象；以及前景特征提取模块，用于从所述前景对象提取相应的前景对象标示特征；状态判断模块，用于至少基于所述前景对象标示特征判断所述前景对象是否属于异常群体，并在判断为“是”的情况下确定所述前景对象属于异常群体。

5、根据本发明的另一个方面，还提供一种乘客运输装置的监测方法，其包括：s100，数据帧获取步骤：对所述乘客运输装置的监测区域进行感测以获取数据帧；s200，背景获取步骤：基于在所述监测区域处于正常状态下感测的数据帧获取背景模型；s300，前景检测步骤：将实时感测的数据帧与所述背景模型进行比对以获得前景对象；s400，前景特征提取步骤，从所述前景对象提取相应的前景对象标示特征；以及s500，状态判断步骤：至少基于所述前景对象标示特征判断所述前景对象是否属于异常群体，并在判断为“是”的情况下确定所述前景对象属于异常群体。

6、根据本发明的又一个方面，还提供一种乘客运输装置的监测系统，其包括：成像传感器和/或深度感测传感器，用于对所述乘客运输装置的监测区域进行感测以获取数据帧；以及处理装置，用于对所述数据帧进行数据处理以监测所述监测区域内是否异常，其被配置为包括：背景获取模块，用于基于在所述监测区域处于正常状态下感测的数据帧获取背景模型；前景检测模块，用于将实时感测的数据帧与所述背景模型进行比对以获得前景对象；以及前景特征提取模块，用于从所述前景对象提取相应的前景对象状态特征；状态判断模块，用于至少基于所述前景对象状态特征判断所述前景对象是否处于异常状态，并在判断为“是”的情况下确定所述前景对象处于异常状态。

7、根据本发明的再一个方面，还提供一种乘客运输装置的监测方法，其包括：s100，数据帧获取步骤：对所述乘客运输装置的监测区域进行感测以获取数据帧；s200，背景获取步骤：基于在所述监测区域处于正常状态下感测的数据帧获取背景模型；s300，前景检测步骤：将实时感测的数据帧与所述背景模型进行比对以获得前景对象；s400，前景特征提取步骤，从所述前景对象提取相应的前景对象状态特征；以及s500，状态判断步骤：至少基于所述前景对象状态特征判断所述前景对象是否处于异常状态，并在判断为“是”的情况下确定所述前景对象处于异常状态。

8、根据本发明的再一个方面，还提供一种乘客运输装置的监测系统，其包括：成像传感器和/或深度感测传感器，用于对所述乘客运输装置的监测区域进行感测以获取第一数据帧；接收装置，其用于接收来自可穿戴设备的第二数据帧；所述第二数据帧由可穿戴设备的数据传感器对所述可穿戴设备及其携带者进行感测以获取；以及处理装置，用于对所述第一数据帧及第二数据帧进行分析处理以监测运行的所述乘客运输装置和/或所述可穿戴设备携带者是否处于正常状态。

9、根据本发明的再一个方面，还提供一种乘客运输装置的监测方法，其包括：s100，第一数据帧获取步骤：对所述乘客运输装置的监测区域进行感测以获取第一数据帧；s200，第二数据帧获取步骤：接收来自可穿戴设备的第二数据帧；所述第二数据帧由可穿戴设备的数据传感器对所述可穿戴设备及其携带者进行感测以获取；以及s300，处理步骤，对所述第一数据帧及第二数据帧进行分析处理以监测运行的所述乘客运输装置和/或所述可穿戴设备携带者是否处于正常状态。

10、根据本发明的再一个方面，还提供一种乘客运输装置的监测系统，其包括：深度感测传感器，用于对所述乘客运输装置的监测区域进行感测以获取第一数据帧；辅助传感器组，用于对所述乘客运输装置的监测区域进行感测以获取第二数据帧组；以及预处理装置，用于对所述第二数据帧组中的数据帧进行发生特定事件的概率分布处理，获取经过预处理后的第二数据帧组；处理装置，用于对所述第一数据帧及经过预处理的第二数据帧组进行分析处理以监测运行的所述乘客运输装置是否发生特定事件。

11、根据本发明的再一个方面，还提供一种乘客运输装置的监测方法，其包括：s100，第一数据帧获取步骤，对所述乘客运输装置的监测区域进行感测以获取第一数据帧；s200，第二数据帧组获取步骤，对所述乘客运输装置的监测区域进行感测以获取第二数据帧组；s300，预处理步骤，对所述第二数据帧组中的数据帧进行发生特定事件的概率分布处理，获取经过预处理后的第二数据帧组；以及s400，状态判断步骤，用于对所述第一数据帧及经过预处理的第二数据帧组进行分析处理以监测运行的所述乘客运输装置是否发生特定事件。

12、根据本发明的再一个方面，还提供一种乘客运输装置，其包括如前所述的监测系统。

技术特征：

1.一种乘客运输装置的监测系统，其特征在于，包括：

2.如权利要求1所述的监测系统，其特征在于，所述前景特征提取模块包括场景模型生成子模块，其用于基于在所述乘客运输装置的监测区域处于正常状态下感测的数据帧和/或场景自学模型和/或安装者或使用者在计算机上所呈现的区域中标识来定义危险区域。

3.如权利要求2所述的监测系统，其特征在于，所述前景特征提取模块提取的前景对象状态特征包括前景对象的速度、加速度、目标密集度及位置中的一个或多个，所述状态判断模块基于所述前景对象的速度、加速度、目标密集度及位置中的一个或多个来判断所述前景对象是否处于异常状态。

4.如权利要求3所述的监测系统，其特征在于，

5.如权利要求1所述的监测系统，其特征在于，所述人体自学建模通过深度学习技术来获得人体异常动作模型，所述深度学习技术包括深度神经网络、卷积神经网络、递归神经网络、字典学习或视觉词袋模型；且/或所述人体非自学建模包括：骨骼图模型和/或二值图模型。

6.如权利要求1所述的监测系统，其特征在于，所述人体自学建模通过马尔可夫模型技术、隐马尔可夫模型、马尔可夫决策过程、部分可观测马尔可夫决策过程、马尔可夫决策逻辑或概率编程来获得人体异常动作模型。

7.如权利要求1所述的监测系统，其特征在于，所述前景特征提取模块提取的前景对象状态特征包括前景对象中人体的动作，所述状态判断模块基于所述前景对象中的人体的动作来判断所述前景对象是否处于异常状态。

8.如权利要求7所述的监测系统，其特征在于，在前景对象中人体的动作落入所述人体异常动作模型时，所述状态判断模块判断所述前景对象处于异常状态。

9.如权利要求8所述的监测系统，其特征在于，所述前景特征提取模块还包括场景模型生成子模块，其用于基于在所述乘客运输装置的监测区域处于正常状态下感测的数据帧和/或场景自学模型来定义危险区域。

10.如权利要求9所述的监测系统，其特征在于，所述前景特征提取模块提取的前景对象状态特征包括前景对象中人体的位置及动作，所述状态判断模块基于所述前景对象中的人体的位置及人体的动作来判断所述前景对象是否处于异常状态。

11.如权利要求10所述的监测系统，其特征在于，在前景对象中人体的位置处于所述危险区域且前景对象中人体的动作落入所述人体异常动作模型时，所述状态判断模块判断所述前景对象处于异常状态。

12.如权利要求1所述的监测系统，其特征在于，所述处理装置被配置为还包括：

13.如权利要求12所述的监测系统，其特征在于，所述状态判断模块还被配置为：基于所述前景对象状态特征的变化轨迹预判前景对象是否即将处于异常状态，并在判断为“是”的情况下确定所述前景对象即将处于异常状态。

14.如权利要求13所述的监测系统，其特征在于，所述前景特征提取模块提取的前景对象状态特征包括前景对象的速度、加速度及目标密集度中的一个或多个，所述状态判断模块基于所述前景对象在危险区域的速度、加速度及目标密集度中的一个或多个的变化轨迹来判断所述前景对象是否即将处于异常状态。

15.如权利要求14所述的监测系统，其特征在于，

16.如权利要求13所述的监测系统，其特征在于，所述前景特征提取模块提取的前景对象状态特征包括前景对象中人体的动作，所述状态判断模块基于所述前景对象中人体的动作的变化轨迹来判断所述前景对象是否即将处于异常状态。

17.如权利要求16所述的监测系统，其特征在于，在所述前景对象中人体的动作变化轨迹在预设时段内超出动作轨迹设定阈值时，所述状态判断模块判断所述前景对象即将处于异常状态。

18.如权利要求16所述的监测系统，其特征在于，所述前景特征提取模块提取的前景对象状态特征还包括前景对象中人体的位置，所述状态判断模块基于所述前景对象中人体的位置及人体的动作的变化轨迹来判断所述前景对象是否即将处于异常状态。

19.如权利要求18所述的监测系统，其特征在于，在所述前景对象中人体的位置变化轨迹在预设时段内逼近危险区域时，且在所述前景对象中人体的动作变化轨迹在预设时段内超出动作轨迹设定阈值时，所述状态判断模块判断所述前景对象即将处于异常状态。

20.根据权利要求1至19任意一项所述的监测系统，其特征在于，所述状态判断模块还被配置为，在至少连续两幅的所述数据帧的判断结果均为所述前景对象处于异常状态时，确定所述前景对象处于异常状态。

21.根据权利要求1至19任意一项所述的监测系统，其特征在于，所述成像传感器和/或深度感测传感器每隔预定时段后感测获取在预定时段内的数据帧供所述处理装置进行数据处理。

22.根据权利要求1至19任意一项所述的监测系统，其特征在于，所述成像传感器和/或深度感测传感器为多个，其被布置成能够覆盖所述乘客运输装置的入口和/或出口和/或整个长度方向。

23.根据权利要求1至19任意一项所述的监测系统，其特征在于，所述监测系统还包括警报单元，所述状态判断模块在确定所述前景对象处于异常状态的情况下触发所述警报单元工作。

24.根据权利要求1至19任意一项所述的监测系统，其特征在于，所述处理装置还被配置为，在所述状态判断模块确定所述前景对象处于异常状态时触发输出信号至所述乘客运输装置和/或楼宇的电梯维护中心以实现预防安全事故发生。

25.一种乘客运输装置的监测方法，其特征在于，包括：

26.如权利要求25所述的监测方法，其特征在于，所述s400还包括s410，场景模型生成子步骤：用于基于在所述乘客运输装置的监测区域处于正常状态下感测的数据帧和/或场景自学模型和/或在计算机上所呈现的区域中标识来定义危险区域。

27.如权利要求26所述的监测方法，其特征在于，在s410中，提取的前景对象状态特征包括前景对象的速度、加速度、目标密集度及位置中的一个或多个，在s500中，基于所述前景对象在速度、加速度、目标密集度及位置中的一个或多个来判断所述前景对象是否处于异常状态。

28.如权利要求27所述的监测方法，其特征在于，

29.如权利要求25所述的监测方法，其特征在于，所述人体自学建模通过深度学习技术来获得人体异常动作模型，所述深度学习技术包括深度神经网络、卷积神经网络、递归神经网络、字典学习或视觉词袋模型；且/或所述人体非自学建模包括：骨骼图模型和/或二值图模型。

30.如权利要求25所述的监测方法，其特征在于，所述人体自学建模通过马尔可夫模型技术、隐马尔可夫模型、马尔可夫决策过程、部分可观测马尔可夫决策过程、马尔可夫决策逻辑或概率编程来获得人体异常动作模型。

31.如权利要求25所述的监测方法，其特征在于，

32.如权利要求31所述的监测方法，其特征在于，在前景对象中人体的动作落入所述人体异常动作模型时，判断所述前景对象处于异常状态。

33.如权利要求32所述的监测方法，其特征在于，所述s400还包括s430，场景模型生成子步骤：基于在所述乘客运输装置的监测区域处于正常状态下感测的数据帧和/或场景自学模型来定义危险区域。

34.如权利要求33所述的监测方法，其特征在于，

35.如权利要求34所述的监测方法，其特征在于，在前景对象中人体的位置处于所述危险区域且前景对象中人体的动作落入所述人体异常动作模型时，判断所述前景对象处于异常状态。

36.如权利要求25所述的监测方法，其特征在于，还包括：

37.如权利要求36所述的监测方法，其特征在于，在s500中，基于所述前景对象状态特征的变化轨迹预判前景对象是否即将处于异常状态，并在判断为“是”的情况下确定所述前景对象即将处于异常状态。

38.如权利要求37所述的监测方法，其特征在于，

39.如权利要求38所述的监测方法，其特征在于，

40.如权利要求37所述的监测方法，其特征在于，

41.如权利要求40所述的监测方法，其特征在于，在所述前景对象中人体的动作变化轨迹在预设时段内超出动作轨迹设定阈值时，判断所述前景对象即将处于异常状态。

42.如权利要求40所述的监测方法，其特征在于，

43.如权利要求42所述的监测方法，其特征在于，在所述前景对象中人体的位置变化轨迹在预设时段内逼近危险区域时，且在所述前景对象中人体的动作变化轨迹在预设时段内超出动作轨迹设定阈值时，判断所述前景对象即将处于异常状态。

44.根据权利要求25至42任意一项所述的监测方法，其特征在于，在s500中，在至少连续两幅的所述数据帧的判断结果均为所述前景对象处于异常状态时，确定所述前景对象处于异常状态。

45.根据权利要求25至42任意一项所述的监测方法，其特征在于，每隔预定时段后感测获取在预定时段内的数据帧供所述处理装置进行数据处理。

46.根据权利要求25至42任意一项所述的监测方法，其特征在于，还包括s700，警报步骤：在确定所述前景对象处于异常状态的情况下触发所述警报单元工作。

47.一种乘客运输装置，其特征在于，包括如权利要求1至24中任意一项所述的监测系统。

技术总结
在此提供一种乘客运输装置的监测系统、乘客运输装置及其监测方法。该监测系统包括：成像传感器和/或深度感测传感器，用于对所述乘客运输装置的监测区域进行感测以获取数据帧；以及处理装置，用于对所述数据帧进行数据处理以监测所述监测区域是否异常，其配置为包括：背景获取模块，用于基于在所述监测区域处于正常状态下感测的数据帧获取背景模型；前景检测模块，用于将实时感测的数据帧与所述背景模型进行比对以获得前景对象；前景特征提取模块，用于从所述前景对象提取相应的前景对象状态特征；状态判断模块，用于至少基于所述前景对象状态特征判断所述前景对象是否处于异常状态，并在判断为“是”的情况下确定所述前景对象处于异常状态。

技术研发人员：方辉,贾真,陈彦至,A.M.芬恩,A.徐,赵建伟,胡朝霞,李蔷,苏安娜,王龙文,郭旭雷,A.森杰
受保护的技术使用者：奥的斯电梯公司
技术研发日：
技术公布日：2024/4/22