多源异构数据融合系统及方法与流程

文档序号:14403125阅读:来源:国知局

技术特征:

技术总结
本发明公开了一种多源异构数据融合系统,其包括数据源层、计算层、数据层及分析层。计算层包括内存计算框架、流计算框架、数据仓库、数据挖掘引擎、分布式计算框架及文件系统;数据层包括SQL系统、NoSQL系统及缓存系统,分析层用于包括语义层及OLAP引擎。本发明还公开了一种多源异构数据融合方法,包括:S1、对航空公司官网进行改造,获取代表用户唯一身份的用户拉链表;S2、获取多源异构数据,对多源异构数据进行融合,并以单一用户的数据方式存储在大数据平台上;S3、应用支持:利用融合后的多源异构数据形成用户画像;将形成的用户画像采用NOSQL的表示形式存储到大数据平台上面。本发明实现了多源异构数据的融合,为航空公司的科学决策提供支持。

技术研发人员:彭向晖;黄文强;卢春;邱文辉;黄瑞辉
受保护的技术使用者:中国南方航空股份有限公司
技术研发日:2017.12.06
技术公布日:2018.05.11
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1