航迹存储与检索方法、系统、设备及计算机存储可读介质与流程

文档序号:26050437发布日期:2021-07-27 15:25阅读:来源:国知局

技术特征:

1.一种航迹存储与检索方法,其特征在于,包括如下步骤:

步骤s1:数据采集端通过数据采集器收集航迹数据;

步骤s2:通过分布式日志接收服务把航迹数据接入到分布式数据总线中;

步骤s3:分布式数据总线通过分区管理数据,分布式数据总线通过消费者组和偏移量记录大数据计算引擎使用数据的情况;

步骤s4:通过大数据计算引擎读取分布式数据总线中的数据进行数据融合并统一数据记录目标;

步骤s5:融合并统一后的数据存储到分布式搜索引擎中;

步骤s6:将存储到分布式搜索引擎的数据通过时间及空间叠加过滤,并且自定义数据精度获取详细航迹及抽样航迹。

2.根据权利要求1所述的航迹存储与检索方法,其特征在于,所述步骤s1中是通过雷达控制器和ais设备对航迹数据进行收集。

3.根据权利要求1所述的航迹存储与检索方法,其特征在于,所述步骤s2中的分布式日志接收服务包括:

分布式接收服务:通过部署多台不同接收服务来接收不同数据采集器采集的航迹数据,并由总控服务器控制数据接收状况;

分布式译码服务:利用不同接收服务的配置对采集的航迹数据进行译码,转化成可识别字符数据;

分布式传输服务:将可识别字符数据发送到分布式数据总线。

4.根据权利要求1所述的航迹存储与检索方法,其特征在于,所述步骤s3中的分布式数据总线通过主题和分区存储航迹数据,同一个主题的航迹数据存储在不同分区里,每个分区包括主分区和备分区,主分区和备分区分布在不同的节点上。

5.根据权利要求1所述的航迹存储与检索方法,其特征在于,所述步骤s4中通过大数据计算引擎读取分布式数据总线的数据进行数据融合,把同一目标及同一时刻的不同数据融合成统一的航迹记录。

6.根据权利要求1所述的航迹存储与检索方法,其特征在于,所述步骤s5中将融合并统一后的数据存储到分布式搜索引擎中,每个计算周期的数据作为一个索引,每个索引包括主分片和备分片,将数据存储到不同分片中,并且对不同的字段类型匹配不同的存储策略。

7.根据权利要求1所述的航迹存储与检索方法,其特征在于,所述步骤s6包括如下步骤:

步骤s6.1:建立空间网格,将所有的航迹数据放入空间网格中,通过自定义网格精度计算得到每个空间网格的长度stile,计算公式如下:

stile=c*cos(latitude)/2zoomlevel

其中,c代表地球周长,c=2πr,r为航迹点处地球的半径;latitude为航迹点的纬度值;zoomlevel为查询所自定义的网格精度;

步骤s6.2:根据查询检索条件所指定的时间范围内检索出所有原始航迹数据放入一级时间数据桶;

步骤s6.3:根据查询检索条件所自定义的网格精度检索出所有原始航迹数据中放入二级空间网格数据桶;

步骤s6.4:在一级时间数据桶中划分二级空间网格数据桶,把检索的原始航迹数据,按照航迹点时间和经纬度匹配对应的一级和二级数据桶,每个二级空间网格数据桶里保留一条记录。

8.一种航迹存储与检索系统,其特征在于,包括:

模块m1:数据采集端通过数据采集器收集航迹数据;

模块m2:通过分布式日志接收服务把航迹数据接入到分布式数据总线中;

模块m3:分布式数据总线通过分区管理数据,分布式数据总线通过消费者组和偏移量记录大数据计算引擎使用数据的情况;

模块m4:通过大数据计算引擎读取分布式数据总线中的数据进行数据融合并统一数据记录目标;

模块m5:融合并统一后的数据存储到分布式搜索引擎中;

模块m6:将存储到分布式搜索引擎的数据通过时间及空间叠加过滤获取详细航迹及抽样航迹。

9.一种存储由计算机程序的计算机可读存储介质,其特征在于,所述计算机程序被处理器执行时实现权利要求1-7中任一项所述的方法的步骤。

10.一种航迹存储与检索设备,其特征在于,包括权利要求8所述的航迹存储与检索系统或者权利要求9所述的存储有计算机程序的计算机可读存储介质。


技术总结
本发明提供了一种航迹存储与检索方法,包括如下步骤:步骤S1:数据采集端通过数据采集器收集航迹数据;步骤S2:通过分布式日志接收服务把航迹数据接入到分布式数据总线中;步骤S3:分布式数据总线通过分区管理数据,分布式数据总线通过消费者组和偏移量记录大数据计算引擎使用数据的情况;步骤S4:通过大数据计算引擎读取分布式数据总线中的数据进行数据融合并统一数据记录目标;步骤S5:融合并统一后的数据存储到分布式搜索引擎中;步骤S6:将存储到分布式搜索引擎的数据通过时间及空间叠加过滤,并且自定义数据精度获取详细航迹及抽样航迹。本发明基于时间空间叠加的航迹过滤算法,可以自定义航迹精度,能做到毫秒级检索历史航迹数据。

技术研发人员:林德银;孙林;王林
受保护的技术使用者:上海鹰觉科技有限公司;安徽鹰觉科技有限公司
技术研发日:2021.04.25
技术公布日:2021.07.27
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1