数据处理方法和装置与流程

文档序号:26940357发布日期:2021-10-12 15:46阅读:来源:国知局

技术特征:
1.一种数据处理方法,包括:分别从仓库的仓库系统和入驻所述仓库的用户的用户系统实时获取待处理用户的库存流水数据和业务流水数据;响应于确定出所述库存流水数据的时间戳和业务流水数据的时间戳相匹配,将所述库存流水数据和业务流水数据进行数据对齐;将数据对齐后的所述库存流水数据和业务流水数据进行对比;基于对比结果,生成所述待处理用户的所述库存流水数据和业务流水数据之间的差异数据。2.根据权利要求1所述的方法,其中,所述响应于确定出所述库存流水数据的时间戳和业务流水数据的时间戳相匹配,将所述库存流水数据和业务流水数据进行数据对齐,包括:确定多个数据对比的时间节点;针对所述多个时间节点中的时间节点,确定该时间节点与相邻的时间节点构成的目标时间段;响应于确定出所获取的库存流水数据的时间戳和业务流水数据的时间戳位于所述目标时间段内,确定所述库存流水数据的时间戳和业务流水数据的时间戳相匹配;将所获取的库存流水数据和业务流水数据进行数据对齐。3.根据权利要求1所述的方法,其中,所述将数据对齐后的所述库存流水数据和业务流水数据进行对比,包括:确定数据对齐后的所述库存流水数据和业务流水数据的数据量之和;基于所述数据量之和,采用哈希算法和/或数据集合的集合运算方式将数据对齐后的所述库存流水数据和业务流水数据进行对比,其中,所述数据集合包括库存流水数据集合和业务流水数据集合,所述库存流水数据集合包括数据对齐后的库存流水数据,所述业务流水数据集合包括数据对齐后的业务流水数据。4.根据权利要求3所述的方法,其中,所述基于所述数据量之和,采用哈希算法和/或数据集合的集合运算方式将数据对齐后的所述库存流水数据和业务流水数据进行对比,包括:响应于确定出所述数据量之和小于预设阈值,采用哈希算法将数据对齐后的所述库存流水数据和业务流水数据进行对比;响应于确定出所述数据量之和大于或等于所述预设阈值,采用数据集合的集合运算方式将数据对齐后的所述库存流水数据和业务流水数据进行对比。5.根据权利要求4所述的方法,其中,所述采用数据集合的集合运算方式将数据对齐后的所述库存流水数据和业务流水数据进行对比,包括:按照所述库存流水数据的时间戳和业务流水数据的时间戳的时间先后顺序,将数据对齐后的所述库存流水数据和业务流水数据分别划分为多个所述库存流水数据集合和与各所述库存流水数据集合对应的业务流水数据集合;针对所述多个库存流水数据集合中的库存流水数据集合,将该库存流水数据集合和对应的业务流水数据集合进行差集运算和交集运算。6.根据权利要求1所述的方法,其中,所述分别从仓库的仓库系统和入驻所述仓库的用户的用户系统实时获取待处理用户的库存流水数据和业务流水数据,包括:
从所述仓库系统实时获取多个用户的库存流水数据,以及从所述用户系统实时获取所述待处理用户的业务流水数据;获取各所述待处理用户的预设标识信息;基于所获取的预设标识信息,从所获取的多个用户的库存流水数据中获取各所述待处理用户的库存流水数据。7.根据权利要求1所述的方法,其中,所述基于对比结果,生成所述待处理用户的所述库存流水数据和业务流水数据之间的差异数据,包括:基于对比结果,生成所述待处理用户的待验证差异数据;获取所述待处理用户在预设历史时间段内的历史差异数据;响应于确定出所获取的历史差异数据中不存在所述待验证差异数据,将所述待验证差异数据确定为所述待处理用户的差异数据。8.一种数据处理装置,包括:获取单元,被配置成分别从仓库的仓库系统和入驻所述仓库的用户的用户系统实时获取待处理用户的库存流水数据和业务流水数据;数据对齐单元,被配置成响应于确定出所述库存流水数据的时间戳和业务流水数据的时间戳相匹配,将所述库存流水数据和业务流水数据进行数据对齐;对比单元,被配置成将数据对齐后的所述库存流水数据和业务流水数据进行对比;生成单元,被配置成基于对比结果,生成所述待处理用户的所述库存流水数据和业务流水数据之间的差异数据。9.一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。10.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。

技术总结
本公开的实施例公开了数据处理方法和装置。该方法的一具体实施方式包括:分别从仓库的仓库系统和入驻仓库的用户的用户系统实时获取待处理用户的库存流水数据和业务流水数据;响应于确定出库存流水数据的时间戳和业务流水数据的时间戳相匹配,将库存流水数据和业务流水数据进行数据对齐;将数据对齐后的库存流水数据和业务流水数据进行对比;基于对比结果,生成待处理用户的库存流水数据和业务流水数据之间的差异数据。该实施方式通过将仓库系统的库存流水数据和用户系统的业务流水数据进行数据对齐,使得数据对比更加的便捷,提高了差异数据的生成效率。了差异数据的生成效率。了差异数据的生成效率。


技术研发人员:梁宝彬
受保护的技术使用者:北京京东振世信息技术有限公司
技术研发日:2020.04.08
技术公布日:2021/10/11
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1