海量传感器数据收集处理及反馈的系统和方法与流程

文档序号:14249490阅读:来源:国知局

技术特征:

技术总结
本发明提供了一种海量传感器数据收集处理及反馈的系统和方法,传感器数据上传接口收集传感器上传的数据和请求,并下发到网关;网关将请求转发到服务处理节点集群;服务处理节点集群对数据进行处理,并将数据和请求下发到消息队列和日志服务中;消息队列和日志服务将收集的数据与请求发送到分布式文件系统中,同时发送到在线数据处理引擎;在线数据处理引擎接收消息队列和日志服务发送的数据,实时筛选并处理,得到局部最优模型参数,并发送到模型验证组件;分布式文件系统存储海量数据,离线数据处理引擎处理分布式文件系统中存储的海量数据,得到全局最优模型参数,并发送到模型验证组件;调度引擎调度在线数据处理引擎和离线数据处理引擎。

技术研发人员:丁源熊
受保护的技术使用者:千寻位置网络有限公司
技术研发日:2017.11.07
技术公布日:2018.04.20
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1