一种流式数据处理方法及装置与流程

文档序号:16999689发布日期:2019-03-02 01:40阅读:来源:国知局

技术特征:

技术总结
本发明涉及一种流式数据处理方法及装置,应用于大数据综合处理系统,所述大数据综合处理系统对接多个信托综合账户系统,所述多个信托综合账户系统包括订单系统和多个系统内部子系统;所述流式数据处理方法包括业务数据库、内存计算模块Spark和离线计算模块Hive,包括如下步骤:从所述多个系统内部子系统中选定源头子系统的订单号为系统全局标识,通过所述spark完成对每个子系统相关表增加全局标识的任务。

技术研发人员:彭阳;张小言
受保护的技术使用者:深圳中顺易金融服务有限公司
技术研发日:2018.10.17
技术公布日:2019.03.01
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1