一种分布式大数据计算引擎及架构方法与流程

文档序号:16608137发布日期:2019-01-14 21:18阅读:来源:国知局

技术特征:

技术总结
本发明公开了一种分布式大数据计算引擎及架构方法。计算引擎包括:分布式协调服务集群,用于为分布式应用提供协调服务、保存相关插件程序和业务数据库对象集合Schema配置文件;消息中间集群,用于传输不同类型的业务数据,所述业务数据包括原始数据、计算结果、快照数据、基线数据和报警数据;流式计算集群,基于Storm的底层计算框架,用于将时序指标大数据处理过程抽象为若干流程;可视化控制模块,用于将数据通过web的方式进行展现和管理;数据缓存集群,用于降低大批量计算时对流式计算集群内存的开销。本发明可以帮助大数据技术积累较少的企业,或者项目周期和人力紧张的项目团队便捷快速的实现海量时序指标数据的在线流式处理。

技术研发人员:程捷;张念礼;罗俊
受保护的技术使用者:北京博睿宏远数据科技股份有限公司
技术研发日:2018.08.14
技术公布日:2019.01.11
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1