技术编号:11677736
提示:您尚未登录,请点 登 陆 后下载,如果您还没有账户请点 注 册 ,登陆完成后,请刷新本页查看技术详细信息。本发明涉及数据处理技术领域,具体而言,涉及一种数据处理平台和系统。背景技术目前,随着大数据时代的到来,大数据的存储与查询成为大数据领域的热点之一。大数据就是巨量数据集合,通过分布式的方式存储到大数据存储系统中。大数据存储系统会在已存储存量数据的基础上,对后来得到的增量数据继续进行存储。而对增量数据的处理可以实时动态的根据数据源的改变,对数据及时处理并将处理结果增量导入数据库以备后续利用。相关技术中,对增量数据进行处理时,Spark集群会抽取增量数据并做同步分析和存储,完成后Spark集群将同步分...
注意:该技术已申请专利,请尊重研发人员的辛勤研发付出,在未取得专利权人授权前,仅供技术研究参考不得用于商业用途。
该专利适合技术人员进行技术研发参考以及查看自身技术是否侵权,增加技术思路,做技术知识储备,不适合论文引用。
请注意,此类技术没有源代码,用于学习研究技术思路。