一种基于hadoop框架模型的数据重构方法以及装置与流程

文档序号:19155558发布日期:2019-11-16 00:42阅读:来源:国知局

技术特征:

1.一种基于hadoop框架模型的数据重构方法,其特征在于,所述方法包括:

可视化建模步骤,基于hadoop数据仓库工具的底层数据存储建立可视化数据模型;

预汇总步骤,对接入所述可视化数据模型的数据进行预汇总;

数据服务步骤,基于结构化查询语句的,将所述可视化数据模型预汇总数据进行解析,进行数据服务;

可视化分析步骤,基于hadoop数据仓库工具进行数据可视化分析。

2.如权利要求1所述的方法,其特征在于,所述可视化建模步骤还包括:

基于关系型数据库的底层数据存储建立可视化数据模型。

3.如权利要求1所述的方法,其特征在于,所述数据服务步骤还包括:

根据查询请求的维度和指标,将所述查询请求封装成查询语句,从数据存储段获取数据,进行数据服务。

4.如权利要求1所述的方法,其特征在于,所述可视化分析步骤还包括:

通过拖拽、选取的可视化操作进行数据源、表结构、维度、指标、汇总指标模型元素的配置。

5.如权利要求1所述的方法,其特征在于,所述可视化分析步骤还包括:

提供批量创建模型接口,基于hadoop数据仓库工具进行批量数据可视化分析。

6.如权利要求1所述的方法,其特征在于,所述方法还包括自定义计算指标:

数据查询指标不限于模型中提供的指标,提供根据现有指标新建计算指标,满足查询数据需求。

7.如权利要求6所述的方法,其特征在于,所述自定义指标可以保存成固定指标,在维度查询时实现自定义指标的可重复使用。

8.一种基于hadoop框架模型的数据重构装置,其特征在于,所述装置包括:

可视化建模模块,用于基于hadoop数据仓库工具的底层数据存储建立可视化数据模型;

预汇总模块,用于对接入所述可视化数据模型的数据进行预汇总;

数据服务模块,用于基于结构化查询语句的,将所述可视化数据模型预汇总数据进行解析,进行数据服务;

可视化分析模块,用于基于hadoop数据仓库工具进行数据可视化分析。

9.一种电子设备,其特征在于,包括处理器;以及存储器,所述存储器上存储有计算机可读指令,所述计算机可读指令被所述处理器执行时实现根据权利要求1至7中任一项所述的方法。

10.一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现根据权利要求1至7中任一项所述方法。


技术总结
本公开是关于一种基于hadoop框架模型的数据重构方法、装置、电子设备以及计算机可读存储介质。其中,该方法包括:基于hadoop数据仓库工具的底层数据存储建立可视化数据模型;对接入所述可视化数据模型的数据进行预汇总;基于结构化查询语句的,将所述可视化数据模型预汇总数据进行解析,进行数据服务;基于hadoop数据仓库工具进行数据可视化分析。本公开通过总结业务模型并提出一套可自由组合的数据模型,通过简单的设置选择操作就可以从大数据平台快速准确的查询数据。

技术研发人员:曾祥玮;张俊飞
受保护的技术使用者:北京市天元网络技术股份有限公司
技术研发日:2019.07.15
技术公布日:2019.11.15
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1