一种基于数据全生命周期管理的数据管理平台的制作方法

文档序号:11952528阅读:来源:国知局

技术特征:

1.一种基于数据全生命周期管理的数据管理平台,其特征在于,包括数据源层、数据集成层、数据存储层、数据整合层、数据服务层、数据视图层及统一管理层,其中:

数据源层负责对所有数据源的配置和管理;

数据集成层负责对外部数据的接入、采集、传输进行管理;

数据存储层负责对存储数据、数据存储环境、状态进行管理;

数据整合层实现数据的标准、标签、分类分级进行管理和数据转换、加工处理任务的管理、以及对数据与数据逻辑关系建模管理和数据分析任务管理工作;

数据服务层负责对数据共享服务进行管理;

数据视图层通过数据视图、服务视图、监控视图、数据建模视图、统计分析视图的方式实现数据的可视化、服务的可视化、监控的可视化、数据建模的可视化和统计分析的可视化;

统一管理层用于数据全生命周期的数据质量管理、数据安全管理、元数据管理和集中监控管理。

2.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,数据源层完成以下管理功能:采集源、目标源的数据源定义、数据源接入、数据源模型描述、数据源权限配置和数据源检验规则,该采集源包括EXCEL文档、多媒体数据、数据库,数据源介入通过业务系统接口实现,目标源的数据源定义、数据源模型描述、数据源权限配置和数据源检验规则由数据填报人完成。

3.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,数据集成层完成以下管理功能:采集任务的定义管理、采集任务调度管理、数据采集实施管理、采集规则配置管理和采集日志管理,对应该管理功能,数据采集层通过EXCEL接入、服务调用、数据库抽取、文件传输协议和手工填报接口实现。

4.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,数据存储层完成以下管理功能:数据存储介质定义、存储资源管理、数据存储状态管理、存储备份管理、存储日志的管理,与该管理功能相对应的,数据存储层通过关系数据库、消息队列、分布式文件系统和NOSQL数据库实现。

5.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,数据整合层完成以下管理:数据标准管理、数据标签管理、数据分类分级管理;数据处理任务定义、数据清洗、数据转换等任务实施;数据建模定义,数据模型管理和数据建模实施;数据分析任务定义、任务管理、数据分析实施管理,与该管理功能相对应的,数据整合层通过数据清洗转换、数据建模、数据分析和NOSQL数据库实现。

6.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,数据服务层完成包括数据服务的定义、服务发布、服务订阅、服务授权、服务调用的实施和管理,该数据服务层的功能实现基于技术协议和数据协议,其中技术协议包括HTTP、FTP、REST、Socket,数据协议包括Json、XML。

7.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,所述数据视图包括管理的数据内容视图、数据状态视图;服务视图包括服务资源目录视图、服务授权视图;监控视图包括采集任务监控视图、数据处理监控视图、数据使用监控视图;数据建模视图包括数据建模视图、数据模型视图;统计分析视图包括对数据使用热度统计分析视图数据、数据日志分析视图、元数据影响分析、血缘分析。

8.根据权利要求1所述的一种基于数据全生命周期管理的数据管理平台,其特征在于,在统一管理层中,质量管理负责数据全过程的质量管理,包括质量目标定义、质量度量设置、质量识别配置、数据质量监控和质量预警;安全管理实现数据从接入、采集、存储、处理和使用全生命周期的安全管理,包括数据采集安全管理、数据存储安全管理、数据访问安全管理、数据传输安全管理和数据使用安全管理;集中监控实现数据从接入、采集、存储、处理和使用全过程的数据和任务监控,包括数据采集监控、数据存储环境和存储状态监控、数据处理监控、服务状态和调用监控、数据使用如数据访问、应用系统调用监控;元数据管理负责数据从定义到存储、处理、分析和共享元数据的管理,包括数据源元数据、目标源元数据,采集元数据、处理元数据、分析元数据、建模元数据、服务元数据、整合元数据。

当前第2页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1