基于AR辅助的自助登机系统及自助登机方法与流程

本发明涉及登机系统的，特别是指一种基于ar辅助的自助登机系统及自助登机方法。

背景技术：

1、近几年，越来越多的机场开始推行旅客通过自助登机设备进行登机业务。与轨道交通不同，航空业务更加重视安全，必须做到“人对、数准”，即只让正确的旅客登机，且登机旅客的数量必须是正确的。加上旅客对自助登机设备使用熟练程度不一致。乃需要数名地服人员在登机口现场进行旅客登机引导工作。当多个登机口同时开始登机业务，地服人员需要分别前往不同登机口开展工作，因此，自助登机设备的使用并没有让地服人员完全从登机业务中释放出来。在指挥中心，缺乏对登机过程的有效监控，无法实时观看旅客登机过程。在旅客登机出现问题的时候，无法还原旅客登机过程。缺少多系统联动机制，在旅客迟到的时候，需要在多个系统之间切换，通过全域广播寻找旅客，操作繁琐、低效。

2、有鉴于此，本设计人针对现有机场登机系统未臻完善所导致的诸多缺失及不便而深入构思，且积极研究改良试做而开发出本发明。

技术实现思路

1、本发明的目的在于克服现有技术的不足，提供一种能够减少地服人员的投入，减员增效的基于ar辅助的自助登机系统及自助登机方法。

2、为了达成上述目的，本发明的解决方案是：

3、一种基于ar辅助的自助登机系统，其包括自助登机设备、设备管理系统和ar前端系统，自助登机设备连接设备管理系统，设备管理系统连接ar前端系统；

4、自助登机设备采集旅客登机数据，并将旅客登机数据发送到设备管理系统；

5、设备管理系统接收存储自助登机设备发送的信息，并进行加工处理后实时推送到ar前端系统；

6、ar前端系统向设备管理系统请求实时旅客登机数据，将真实世界的旅客登机视频、虚拟数据世界的登机数据和相关操作融合在一起，在实时的旅客登机视频上同时显示当前登机信息及设备告警信息；

7、所述自助登机设备、设备管理系统及ar前端系统分别具有远程语音对讲功能。

8、进一步，自助登机设备为具备自助登机业务能力的通行闸机，其安装在机场的各个登机口，自助登机设备通过摄像头拍摄旅客在登机口的登机过程，使用nvr录像机存储旅客登机视频，自助登机设备通过网络将旅客登机数据发送到设备管理系统。

9、进一步，所述旅客登机数据包括航班信息、旅客登机信息及设备告警信息，旅客登机信息包括旅客实时登机视频数据。所述ar前端系统显示的登机信息包括航班信息、旅客信息及已登机旅客数量。

10、进一步，所述设备管理系统设置在机场的机房内，设备管理系统为b/s架构的web系统，设备管理系统集成机场的离港系统、安防系统、广播系统获取未登机旅客等信息，集成远程语音对讲服务提供远程语音对讲功能。

11、进一步，所述ar前端系统是基于html5实现的前端系统，在显示终端上进行信息展示，ar前端系统通过rtsp协议接入nvr获取旅客实时登机视频和历史登机视频，通过webscoket技术实时接收设备管理系统推送的旅客登机信息，通过restful服务向设备管理系统请求未登机旅客信息，提供远程语音对讲终端设备与登机口进行语音通讯。

12、一种基于ar辅助的自助登机方法，其包括以下步骤：

13、s1：登机口旅客登机开检，自助登机设备向设备管理系统发送航班开检信息；

14、s2：自助登机设备将旅客登机视频上传并进行存储；

15、s3：设备管理系统将航班开检信息推送到ar前端系统；

16、s4：ar前端系统播放设备管理系统推送的航班开检信息及旅客登机视频；

17、s5：旅客通过自助登机设备，自助登机设备将旅客登机信息发送到设备管理系统；

18、s6：设备管理系统接收旅客登机信息，统计航班旅客登机情况后将登机旅客信息和航班登机进度推送到ar前端系统；

19、s7：前端系统采用图层的方式将旅客登机信息、航班登机进度信息与旅客登机直播视频融合显示；

20、s8：在登机闭检前，设备管理系统将未登机旅客信息发送到ar前端系统展示，并向机场广播系统发送寻人请求；

21、s9：ar前端系统在不同登机口之间进行切换显示，或者同时播放多个登机口的登机过程；

22、s10：旅客登机结束，自助登机设备发送闭检信息，ar前端系统结束旅客登机直播。

23、进一步，自助登机设备异常时，发送告警信息至设备管理系统，设备管理系统将告警信息同步到ar前端系统，ar前端系统实施提示设备告警，地服通过叠加在登机视频上的菜单或告警记录回放旅客登机视频进行确认处理。

24、进一步，自助登机设备在登机过程中出现异常时，地服查看告警信息，根据告警信息使用语音对讲终端设备连接到当前正在登机的自助登机设备的语音对讲终端设备进行语音，引导旅客正确使用自助登机设备。

25、进一步，步骤s8中，地服寻找未登机旅客，设备管理系统通过集成机场业务系统来实现，设备管理系统向离港系统发送查找未登机旅客的请求，接收到未登机旅客信息后，发送旅客图片到安防系统搜索旅客在安全区内的行动轨迹；ar前端系统展示未登机旅客信息，并按时间顺序列出安防摄像头抓拍的旅客照片；最后向机场广播系统发送寻人请求；自助登机设备管理系统通过机场总线或者restful服务与机场业务系统进行服务调用，安防系统通过将旅客的照片和摄像头抓拍的照片进行1：n人脸比对来给出旅客的行动轨迹。

26、采用上述方案后，本发明基于ar辅助的自助登机系统及自助登机方法基于ar技术融合登机口实时视频数据和登机业务数据，在显示设备上通过真实世界的登机视频与虚拟信息世界的登机数据（包括：航班信息，旅客信息，旅客登机方式，已登机旅客数量，设备告警信息等）的叠加，实现在指挥中心对多个登机口的登机业务进行全程跟踪监控。再进一步结合远程对讲技术，实现远程旅客使用自助登机设备的引导，减少登机口地服人员的投入。当出现旅客登机问题的时候，可以结合自助登机设备上传的旅客登机记录快速回放登机视频，真实还原登机过程。本发明的设备管理系统可进一步集成机场的离港系统、安防系统、广播系统获取未登机旅客等信息，集成远程语音对讲服务提供远程语音对讲功能，在旅客登机迟到的时候，通过集成离港系统服务、机场安防服务在显示设备上叠加迟到旅客的行动轨迹，锁定旅客当前锁在位置，利用区域广播精准催促旅客登机。

27、本发明基于ar（现实增强）技术辅助机场登机口的自助登机设备实现旅客自助登机业务。通过ar技术将登机口实时登机视频画面与登机业务数据巧妙地融合在一起。使指挥中心能够通过统一视图直观地、多维度地掌握登机口的旅客登机过程；结合远程对讲技术引导旅客高效使用自助登机设备完成自助登机，确保旅客能够在规定时间内完成登机业务；在旅客未及时登机的时候，联动机场安防系统的轨迹回放技术在屏幕上给出旅客的行动轨迹，并联动区域广播完成催促登机业务；可以在指挥中心完成对登机口突发事件的应急指挥。

28、与现有技术相比，本发明可以使机场负责人、地服人员无需到登机口现场，在指挥中心也能通过ar技术轻松地掌控登机口旅客使用自助登机设备的过程；能够实时掌握机场所有登机口的登机情况，能够对突发状态进行快速响应，统筹调度；能够联动机场业务系统催促旅客登机，解决系统的信息孤岛问题；能够减少地服人员的投入，减员增效。