本发明涉及数据处理领域,具体地,涉及高速公路收费车道日志采集处理方法及系统。
背景技术:
1、随着信息技术和互联网技术的广泛应用,高速公路收费系统每天产生大量的日志数据。这些日志数据包含运行状态、交易信息、交易行为、交易过程信息。在此背景下,开发高速公路收费日志采集分析系统,对高速公路收费日志进行实时收集、集中存储和查询分析,对及早发现系统问题、实时监控系统性能、提升收费系统质量具有重要意义。
2、此外,现有监控日志的方式是远程连接车道工控机,打开日志文件并搜索相关信息。或者,把日志复制到本地再打开日志文件搜索,这种方法适合待搜索的车道工控机少的场景。在车道工控机数量达到数千台的条件下,人工需要远程连接大量的车道工控机来查询日志,并在大量日志内容中人工查找相关内容,导致高速公路收费日志的查询效率非常低、操作非常繁琐、严重影响工作效率。
技术实现思路
1、本申请提供了高速公路收费车道日志采集处理方法及系统。解决了现有技术中高速公路收费车道日志的采集处理效率低,以及高速公路收费车道日志的日志分析效果差的技术问题。达到了提高高速公路收费车道日志的采集处理效率,提高高速公路收费车道日志的查询效率、查询灵活性,提升高速公路收费车道日志的日志分析效果,提高高速公路收费车道的运行质量评价精准性的技术效果。
2、鉴于上述问题,本申请提供了高速公路收费车道日志采集处理方法及系统。
3、第一方面,本申请提供了高速公路收费车道日志采集处理方法,其中,所述方法应用于高速公路收费车道日志采集处理系统,所述方法包括:构建车道日志采集处理平台,其中,所述车道日志采集处理平台包括filebeat车道日志采集层、车道日志预处理层、车道日志分析层和车道日志存储层;根据所述filebeat车道日志采集层对目标高速公路收费站内的q个实时收费车道进行实时日志读取,获得q个车道实时日志集,其中,q为大于1的正整数;基于所述车道日志预处理层内的日志过滤器和日志转换器,分别对所述q个车道实时日志集进行数据清洗,获得q个收费车道日志序列;基于所述q个收费车道日志序列,根据所述车道日志分析层执行所述q个实时收费车道的车道运行效率与车道通行能力的联合评价,获得q个车道联合评价结果;基于所述q个车道联合评价结果进行所述目标高速公路收费站的实时全局评价,获得实时全局评价结果;基于所述车道日志存储层对所述q个收费车道日志序列、所述q个车道联合评价结果和所述实时全局评价结果进行链式存储。
4、第二方面,本申请还提供了高速公路收费车道日志采集处理系统,其中,所述系统包括:平台构建模块,所述平台构建模块用于构建车道日志采集处理平台,其中,所述车道日志采集处理平台包括filebeat车道日志采集层、车道日志预处理层、车道日志分析层和车道日志存储层;日志读取模块,所述日志读取模块用于根据所述filebeat车道日志采集层对目标高速公路收费站内的q个实时收费车道进行实时日志读取,获得q个车道实时日志集,其中,q为大于1的正整数;日志清洗模块,所述日志清洗模块用于基于所述车道日志预处理层内的日志过滤器和日志转换器,分别对所述q个车道实时日志集进行数据清洗,获得q个收费车道日志序列;联合评价模块,所述联合评价模块用于基于所述q个收费车道日志序列,根据所述车道日志分析层执行所述q个实时收费车道的车道运行效率与车道通行能力的联合评价,获得q个车道联合评价结果;实时全局评价模块,所述实时全局评价模块用于基于所述q个车道联合评价结果进行所述目标高速公路收费站的实时全局评价,获得实时全局评价结果;日志存储模块,所述日志存储模块用于基于所述车道日志存储层对所述q个收费车道日志序列、所述q个车道联合评价结果和所述实时全局评价结果进行链式存储。
5、本申请中提供的一个或多个技术方案,至少具有如下技术效果或优点:
6、搭建由filebeat车道日志采集层、车道日志预处理层、车道日志分析层、车道日志存储层组成的车道日志采集处理平台;根据filebeat车道日志采集层对目标高速公路收费站内的q个实时收费车道进行实时日志读取,获得q个车道实时日志集;根据车道日志预处理层内的日志过滤器和日志转换器,分别对q个车道实时日志集进行数据清洗,获得q个收费车道日志序列;基于q个收费车道日志序列,根据车道日志分析层执行q个实时收费车道的车道运行效率与车道通行能力的联合评价,获得q个车道联合评价结果,并对q个车道联合评价结果进行实时全局评价,获得实时全局评价结果;根据车道日志存储层对q个收费车道日志序列、q个车道联合评价结果和实时全局评价结果进行链式存储。达到了提高高速公路收费车道日志的采集处理效率,提高高速公路收费车道日志的查询效率、查询灵活性,提升高速公路收费车道日志的日志分析效果,提高高速公路收费车道的运行质量评价精准性的技术效果。
7、上述说明仅是本申请技术方案的概述,为了能够更清楚了解本申请的技术手段,而可依照说明书的内容予以实施,并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂,以下特举本申请的具体实施方式。
1.高速公路收费车道日志采集处理方法,其特征在于,所述方法包括:
2.如权利要求1所述的方法,其特征在于,基于所述q个收费车道日志序列,根据所述车道日志分析层执行所述q个实时收费车道的车道运行效率与车道通行能力的联合评价,获得q个车道联合评价结果,包括:
3.如权利要求2所述的方法,其特征在于,根据所述车道日志分析层内的车道运行效率评价器对所述第一收费车道日志序列进行分析,获得第一车道运行效率系数,包括:
4.如权利要求3所述的方法,其特征在于,所述车道运行效率评价函数为:
5.如权利要求2所述的方法,其特征在于,根据所述车道日志分析层内的车道通行能力分析器对所述第一收费车道日志序列进行分析,获得第一车道通行能力系数,包括:
6.如权利要求5所述的方法,其特征在于,获得多个车辆驶离时距算子之后,包括:
7.如权利要求1所述的方法,其特征在于,基于所述车道日志存储层对所述q个收费车道日志序列、所述q个车道联合评价结果和所述实时全局评价结果进行链式存储,包括:
8.高速公路收费车道日志采集处理系统,其特征在于,所述系统用于执行权利要求1至7任一项所述的方法,所述系统包括: