数据的离线计算方法、装置、设备以及存储介质与流程

文档序号:35661632发布日期:2023-10-06 16:19阅读:36来源:国知局
数据的离线计算方法、装置、设备以及存储介质与流程

本公开涉及数据处理,尤其涉及大数据、云计算、数据分析、离线计算等。


背景技术:

1、离线计算是在计算开始前已知所有输入数据,且在解决一个问题后就要立即得出结果的前提下进行的计算。在大数据中属于数据的计算部分,在该部分中与离线计算对应的则是实时计算。


技术实现思路

1、本公开提供了一种数据的离线计算方法、装置、设备以及存储介质。

2、根据本公开的一方面,提供了一种数据的离线计算方法,包括:

3、根据目标业务的时间需求信息,基于第一预计算指标,生成至少一个时间维度的第二预计算指标;

4、根据第二预计算指标的第一数据维度信息,确定第一数据源;以及

5、根据第二预计算指标的第一计算逻辑信息和第一时间维度信息,基于第一数据源进行离线计算,以得到第二预计算指标的第一预计算结果。

6、根据本公开的另一方面,提供了一种数据的离线计算装置,包括:

7、生成模块,用于根据目标业务的时间需求信息,基于第一预计算指标,生成至少一个时间维度的第二预计算指标;

8、第一确定模块,用于根据第二预计算指标的第一数据维度信息,确定第一数据源;以及

9、第一计算模块,用于根据第二预计算指标的第一计算逻辑信息和第一时间维度信息,基于第一数据源进行离线计算,以得到第二预计算指标的第一预计算结果。

10、根据本公开的另一方面,提供了一种电子设备,包括:

11、至少一个处理器;以及

12、与该至少一个处理器通信连接的存储器;其中,

13、该存储器存储有可被该至少一个处理器执行的指令,该指令被该至少一个处理器执行,以使该至少一个处理器能够执行本公开实施例中任一的方法。

14、根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,该计算机指令用于使该计算机执行根据本公开实施例中任一的方法。

15、根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,该计算机程序在被处理器执行时实现根据本公开实施例中任一的方法。

16、根据本公开的技术,通过利用第二预计算指标进行离线计算,可以预先获取到业务所需指标的计算结果,解决了对业务所需指标进行实时计算的耗时问题,提升了业务的整体计算效率。

17、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。



技术特征:

1.一种数据的离线计算方法,包括:

2.根据权利要求1所述的方法,其中,根据目标业务的时间需求信息,基于第一预计算指标,生成至少一个时间维度的第二预计算指标,包括:

3.根据权利要求2所述的方法,其中,根据所述第一时间维度信息、所述第一计算逻辑信息和所述第一数据维度信息,生成至少一个时间维度的第二预计算指标,包括:

4.根据权利要求1所述的方法,其中,根据所述第二预计算指标的第一数据维度信息,确定第一数据源,包括:

5.根据权利要求1所述的方法,还包括:

6.根据权利要求1至5任一项所述的方法,其中,根据目标业务的时间需求信息,基于第一预计算指标,生成至少一个时间维度的第二预计算指标之前,还包括:

7.根据权利要求1至5任一项所述的方法,还包括:

8.根据权利要求7所述的方法,还包括:

9.根据权利要求7所述的方法,还包括:

10.根据权利要求9所述的方法,还包括:

11.一种数据的离线计算装置,包括:

12.根据权利要求11所述的装置,其中,所述生成模块用于:

13.根据权利要求12所述的装置,其中,所述生成子模块用于:

14.根据权利要求11所述的装置,其中,所述第一确定模块用于:

15.根据权利要求11所述的装置,还包括:

16.根据权利要求11至15任一项所述的装置,还包括:

17.根据权利要求11至15任一项所述的装置,还包括:

18.根据权利要求17所述的装置,还包括:

19.根据权利要求17所述的装置,还包括:

20.根据权利要求19所述的装置,还包括:

21.一种电子设备,包括:

22.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1至10中任一项所述的方法。

23.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1至10中任一项所述的方法。


技术总结
本公开提供了数据的离线计算方法、装置、设备以及存储介质,涉及数据处理技术领域,尤其涉及大数据、云计算、数据分析、离线计算等技术领域。具体实现方案为:根据目标业务的时间需求信息,基于第一预计算指标,生成至少一个时间维度的第二预计算指标;根据第二预计算指标的第一数据维度信息,确定第一数据源;根据第二预计算指标的第一计算逻辑信息和第一时间维度信息,基于第一数据源进行离线计算,以得到第二预计算指标的第一预计算结果。根据本公开的技术,通过利用第二预计算指标进行离线计算,可以预先获取到业务所需指标的计算结果,解决了对业务所需指标进行实时计算的耗时问题,提升了业务的整体计算效率。

技术研发人员:贾光楠,刘彦江,高坡,尉乃升
受保护的技术使用者:北京百度网讯科技有限公司
技术研发日:
技术公布日:2024/1/15
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1