本发明涉及数据集成技术领域,具体涉及一种外卖平台数据集成系统。
背景技术:
现目前的外卖行业发展迅速,针对不同的领域和不同的行业,具有多种不同类型的外卖平台,如餐饮、生鲜、药品等,且同一行业可能具备多个不同的外卖平台,而商家为了提升销售额,往往同时注册多个外卖平台来同时接受订单,在管理时就会非常不方便,需要多台设备来实时接收来自不同平台的订单消息,无法进行统一管理,且管理效率低,商家学习成本高,其无法满足商家的需求。
技术实现要素:
本发明针对现有技术中存在的技术问题,提供一种外卖平台数据集成系统,其整合各平台商家版数据集成,解决用户不同终端不便操作,不便管理问题,整合的数据经过分析处理检测经营数据,提供给用户作为参考。
为此,本发明提供了一种外卖平台数据集成系统,其包括用户管理模块,建立系统独立的店铺id,并将该用户的不同平台的店铺账号绑定在该店铺id下,以此获取该用户在不同平台的店铺所设定的商家信息;
数据集成模块,对于绑定的该用户不同平台店铺的信息进行集成和整合,以便于将该数据源接入到系统中;
数据清理模块,用于对经过数据集成模块整合后的初始数据进行转换、效验、清洗和分析;
数据逻辑仓库,通过数据逻辑仓库分析店铺数据指标,数据指标至少包括各项经营指标、商品指标和用户行为指标;
可视化数据展示模块,以线状图、饼图、柱状图实时展示各个数据指标;
数据备份管理模块,对使用过程中的数据信息进行备份和管理;
用户首先通过用户管理模块创建一个独立的店铺id,然后将该用户注册在多个不同外卖平台下的店铺id与在本系统所建立的独立的店铺id进行绑定,用以接入该用户多个不同外卖平台的商家信息,商家信息接入后通过数据集成模块对其他外卖平台的数据源信息进行数据整合,整合后的数据信息经过数据清理模块进行处理,然后输入到数据逻辑仓库中,再通过可视化数据展示模块进行展示,并通过数据备份管理模块进行备份存储。
作为优选的,所述数据集成模块包括在现有的datastage作业中添加streams分析,并在现有streams应用中添加datastage处理,然后从头创建一个datastage作业和streams应用;整合过程中包括以下数据流:datastage—streams、datastage—streams—datastage和streams-datastage。
作为优选的,所述数据清理模块包括:图形化快速构建复杂转换和数据质量效验作业,重用已有作业,并本地运行datastage转换处理hdfs数据,建立数据管家并设立数据世系和数据治理,减少冗余的数据基础架构,支持hadoop节点标签,并自动通过hdfs二进制本地化。
作为优选的,所述数据清理模块支持支持apache2.6、iop4.0、hdp2.2和chd5.3。
作为优选的,商家信息包括商家名称、商家电话、商家地址、商家账号以及商品相关信息。
本发明的有益效果是:本发明提供一种外卖平台数据集成系统,其整合各平台商家版数据集成,解决用户不同终端不便操作,不便管理问题,整合的数据经过分析处理检测经营数据,提供给用户作为参考。
附图说明
图1为本发明的原理框图。
具体实施方式
以下结合附图对本发明的原理和特征进行描述,所举实例只用于解释本发明,并非用于限定本发明的范围。
如图1所示,本实施例公开了一种外卖平台数据集成系统,其包括:
用户管理模块,建立系统独立的店铺id,并将该用户的不同平台的店铺账号绑定在该店铺id下,以此获取该用户在不同平台的店铺所设定的商家信息;
数据集成模块,对于绑定的该用户不同平台店铺的信息进行集成和整合,以便于将该数据源接入到系统中;
数据清理模块,用于对经过数据集成模块整合后的初始数据进行转换、效验、清洗和分析;
数据逻辑仓库,通过数据逻辑仓库分析店铺数据指标,数据指标至少包括各项经营指标、商品指标和用户行为指标;
可视化数据展示模块,以线状图、饼图、柱状图实时展示各个数据指标;
数据备份管理模块,对使用过程中的数据信息进行备份和管理;
用户首先通过用户管理模块创建一个独立的店铺id,然后将该用户注册在多个不同外卖平台下的店铺id与在本系统所建立的独立的店铺id进行绑定,用以接入该用户多个不同外卖平台的商家信息,商家信息接入后通过数据集成模块对其他外卖平台的数据源信息进行数据整合,整合后的数据信息经过数据清理模块进行处理,然后输入到数据逻辑仓库中,再通过可视化数据展示模块进行展示,并通过数据备份管理模块进行备份存储。
作为优选的,所述数据集成模块包括在现有的datastage作业中添加streams分析,并在现有streams应用中添加datastage处理,然后从头创建一个datastage作业和streams应用;整合过程中包括以下数据流:datastage—streams、datastage—streams—datastage和streams-datastage。
作为优选的,所述数据清理模块包括:图形化快速构建复杂转换和数据质量效验作业,重用已有作业,并本地运行datastage转换处理hdfs数据,建立数据管家并设立数据世系和数据治理,减少冗余的数据基础架构,支持hadoop节点标签,并自动通过hdfs二进制本地化。
作为优选的,所述数据清理模块支持支持apache2.6、iop4.0、hdp2.2和chd5.3。
作为优选的,商家信息包括商家名称、商家电话、商家地址、商家账号以及商品相关信息。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
1.一种外卖平台数据集成系统,其特征在于,其包括:
用户管理模块,建立系统独立的店铺id,并将该用户的不同平台的店铺账号绑定在该店铺id下,以此获取该用户在不同平台的店铺所设定的商家信息;
数据集成模块,对于绑定的该用户不同平台店铺的信息进行集成和整合,以便于将该数据源接入到系统中;
数据清理模块,用于对经过数据集成模块整合后的初始数据进行转换、效验、清洗和分析;
数据逻辑仓库,通过数据逻辑仓库分析店铺数据指标,数据指标至少包括各项经营指标、商品指标和用户行为指标;
可视化数据展示模块,以线状图、饼图、柱状图实时展示各个数据指标;
数据备份管理模块,对使用过程中的数据信息进行备份和管理;
用户首先通过用户管理模块创建一个独立的店铺id,然后将该用户注册在多个不同外卖平台下的店铺id与在本系统所建立的独立的店铺id进行绑定,用以接入该用户多个不同外卖平台的商家信息,商家信息接入后通过数据集成模块对其他外卖平台的数据源信息进行数据整合,整合后的数据信息经过数据清理模块进行处理,然后输入到数据逻辑仓库中,再通过可视化数据展示模块进行展示,并通过数据备份管理模块进行备份存储。
2.根据权利要求1所述的一种外卖平台数据集成系统,其特征在于,所述数据集成模块包括在现有的datastage作业中添加streams分析,并在现有streams应用中添加datastage处理,然后从头创建一个datastage作业和streams应用;整合过程中包括以下数据流:datastage—streams、datastage—streams—datastage和streams-datastage。
3.根据权利要求2所述的一种外卖平台数据集成系统,其特征在于,所述数据清理模块包括:图形化快速构建复杂转换和数据质量效验作业,重用已有作业,并本地运行datastage转换处理hdfs数据,建立数据管家并设立数据世系和数据治理,减少冗余的数据基础架构,支持hadoop节点标签,并自动通过hdfs二进制本地化。
4.根据权利要求3所述的一种外卖平台数据集成系统,其特征在于,所述数据清理模块支持支持apache2.6、iop4.0、hdp2.2和chd5.3。
5.根据权利要求1所述的一种外卖平台数据集成系统,其特征在于,商家信息包括商家名称、商家电话、商家地址、商家账号以及商品相关信息。