基于大数据架构的企业数据监测方法及系统

文档序号:26010146发布日期:2021-07-23 21:30阅读:63来源:国知局
基于大数据架构的企业数据监测方法及系统

本发明属于企业数据监测技术领域,具体涉及基于大数据架构的企业数据监测方法及系统。



背景技术:

随着经济的快速发展,企业得到了深入创新与改革,也使企业内部涉及的信息数据越来越多,且种类越来越丰富。但是,现有的企业管理系统很难对企业的相关数据及时进行对比,到达监测的目的,因此,本发明提出了大数据架构的企业数据监测方法及系统。



技术实现要素:

为解决上述背景技术中提出的问题。本发明提供了基于大数据架构的企业数据监测方法及系统,具有及时对企业数据进行监测的特点。

为实现上述目的,本发明提供如下技术方案:基于大数据架构的企业数据监测方法,所述方法包括:

基础服务平台、数据的采集与基本处理、数据的储存、数据的计算和分析以及数据展现平台;

其中,利用基础服务平台中的云计算平台、网络技术、云储存、虚拟化技术和资源监控技术,用户通过自动上传相关信息到达基础服务平台上;

相关信息通过etl工具、数据智能感知技术或爬虫服务可以对相关数据进行采集和基本处理,且采集和处理后的数据,通过nosql技术、分布式文件系统、关系型数据库、关系型数据库和非关系型数据库的融合或内存数据进行储存;

储存的数据经过数据预测和挖掘、数据查询与分析、bi商业智能或图谱处理的计算和分析,最终在展现平台上以可视化工具、图形与报表以及现实技术进行展示,可对数据进行监测。

数据展现平台还包括监测平台。

优选的,基础服务平台可为移动端、pc端及现有设备,移动端可通过企业app进行登录,pc端可以通过网站进行登录。

优选的,数据的采集与基本处理包括采集、差分、分类、清洗、融合、发布和更新。

优选的,数据的计算和分析包括对数据的整理和加工、数据交换和计算分析。

优选的,数据展现平台包括数据质量监控、动态更新比对、用户图像和用户指纹等。

优选的,数据的储存包括用户个人信息、文档信息和环境数据等。

基于大数据架构的企业数据监测系统,包括平台服务层、数据服务层、应用服务层和综合信息分析层;

平台服务层用在云服务的基础了提供存储服务、计算服务和网络服务;

数据服务层用在为监测平台的构建,对数据进行整合和加工,满足企业的常规化需求和专业需求,并进行数据交换,在源数据库的基础上进行实时采集、批量采集和加密处理等,通过计算分析和数据支撑的共同作用下,为应用服务层提供相对应的数据;

综合信息分析层,建立在数据服务层和应用服务层的基础上,对各种类型的数据信息进行挖掘与分析,把握各个数据信息之间的关联,实现动态化的监测。

优选的,数据服务层和应用服务层通过服务接口连接。

优选的,计算分析作用于实现爬虫服务、数据挖掘管理和etl管理等。

与现有技术相比,本发明的有益效果是:

1、本发明,通过基础服务平台的设置,用户可以在移动端、pc端或指纹打卡机等现有设备上进行登录并上传个人信息及文档信息,经过数据的采集和基本处理,可以对数据进行分类、融合、进行发布和更新并进行储存,经过数据的计算和分析,最终在展现平台上以可视化工具、图形与报表以及现实技术进行展示,用户也可通过综合信息分析层相对应的后台上对整个企业的数据进行查看,从而达到监测整个企业数据的目的。

2、本发明,通过数据服务层的设置,可以对储存的数据进行整合、加工、比对和交换,达到可以对应用服务层提供需要查询的各种数据,使用更加的方便,在综合服务层的作用下,可以对各个数据进行关联和综合,到达快速提供信息,监管人员可以快速获取企业信息的目的。

附图说明

图1为本发明的流程示意图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

实施例1

请参阅图1,本发明提供以下技术方案:基于大数据架构的企业数据监测方法,所述方法包括:

基础服务平台、数据的采集与基本处理、数据的储存、数据的计算和分析以及数据展现平台;基础服务平台可为移动端、pc端及现有设备,移动端可通过企业app进行登录,pc端可以通过网站进行登录,现有设备可以指纹打卡机和人像识别器等,通过基础服务平台的设置,用户可以在移动端、pc端或指纹打卡机等现有设备上进行登录并上传个人信息及文档信息。

其中,利用基础服务平台中的云计算平台、网络技术、云储存、虚拟化技术和资源监控技术,用户通过自动上传相关信息到达基础服务平台上;

相关信息通过etl工具、数据智能感知技术或爬虫服务可以对相关数据进行采集和基本处理,且采集和处理后的数据,通过nosql技术、分布式文件系统、关系型数据库、关系型数据库和非关系型数据库的融合或内存数据进行储存,数据的储存包括用户个人信息、文档信息和环境数据等,数据的采集与基本处理包括采集、差分、分类、清洗、融合、发布和更新;

储存的数据经过数据预测和挖掘、数据查询与分析、bi商业智能或图谱处理的计算和分析,最终在展现平台上以可视化工具、图形与报表以及现实技术进行展示,可对数据进行监测,数据展现平台还包括监测平台。经过数据的采集和基本处理,可以对数据进行分类、融合、进行发布和更新并进行储存,经过数据的计算和分析,最终在展现平台上以可视化工具、图形与报表以及现实技术进行展示,用户也可通过综合信息分析层相对应的后台上对整个企业的数据进行查看,从而达到监测整个企业数据的目的。

优选的,数据的计算和分析包括对数据的整理和加工、数据交换和计算分析,数据展现平台包括数据质量监控、动态更新比对、用户图像和用户指纹等。

基于大数据架构的企业数据监测系统,包括平台服务层、数据服务层、应用服务层和综合信息分析层;

平台服务层用在云服务的基础了提供存储服务、计算服务和网络服务;

数据服务层用在为监测平台的构建,对数据进行整合和加工,满足企业的常规化需求和专业需求,并进行数据交换,在源数据库的基础上进行实时采集、批量采集和加密处理等,通过计算分析和数据支撑的共同作用下,为应用服务层提供相对应的数据,通过数据服务层的设置,可以对储存的数据进行整合、加工、比对和交换,达到可以对应用服务层提供需要查询的各种数据,使用更加的方便;

综合信息分析层,建立在数据服务层和应用服务层的基础上,对各种类型的数据信息进行挖掘与分析,把握各个数据信息之间的关联,实现动态化的监测,在综合服务层的作用下,可以对各个数据进行关联和综合,到达快速提供信息,监管人员可以快速获取企业信息的目的。

优选的,数据服务层和应用服务层通过服务接口连接,计算分析作用于实现爬虫服务、数据挖掘管理和etl管理等。

最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1