本发明涉及数据处理,特别是涉及一种高校数据治理融合应用系统及方法。
背景技术:
1、高效数据体量巨大,但数据质量不佳,孤岛化、碎片化问题比较突出。很多校园各部门建设了各自的信息系统,数据不互通,标准不统一。高校的数据中心保存了大量重复杂乱的数据,浪费了资源又不能有效利用,无法充分发挥数据的价值。
技术实现思路
1、本发明所要解决的技术问题是,克服现有技术的缺点,提供一种高校数据治理融合应用系统及方法。
2、为了解决以上技术问题,本发明的技术方案如下:
3、一种高校数据治理融合应用系统,包括:
4、数据源层,用于实现高校数据的采集;
5、数据管理层,用于对采集到的所述高校数据进行治理,并生成规范化数据;
6、数据服务层,用于对所述数据管理层生成的数据进行数据封装,并设计数据服务总线,开放数据库层面和应用程序层面的数据接口,并通过所述数据接口为外部系统提供数据访问服务和数据推送;
7、数据应用层,用于基于所述数据接口形成校情分析系统和信息服务系统。
8、作为本发明所述高校数据治理融合应用系统的一种优选方案,其中:所述数据源层通过etl技术实现对学校现有信息系统数据的采集,通过互联网和智能感知技术实现对学校过程性数据的采集,通过网络爬虫实现对网络日志数据和外部互联网数据的采集,通过建立智能表单系统实现学校日常数据的采集。
9、作为本发明所述高校数据治理融合应用系统的一种优选方案,其中:所述数据管理层包括数据处理层和数据存储层;
10、所述数据处理层用于根据数据治理规则对所述数据源层采集到的数据中的噪声数据、无关数据、遗漏数据和空缺值进行处理,并对数据处理和数据改变进行记录,形成数据资产;
11、所述数据存储层用于建立主题数据库,并将所述数据资产分类储存至对应数据库。
12、作为本发明所述高校数据治理融合应用系统的一种优选方案,其中:所述主题数据库包括综合校情数据库、教师主题数据库和学生主题数据库。
13、作为本发明所述高校数据治理融合应用系统的一种优选方案,其中:所述数据服务层包括数据接口模块、查询分析模块、数据报表模块以及数据推送模块;
14、所述数据接口模块用于形成数据库层面和应用程序层面的数据接口;
15、所述查询分析模块用于基于所述数据接口模块对数据进行查询和分析;
16、所述数据推送模块用于基于所述数据接口模块实现数据推送。
17、作为本发明所述高校数据治理融合应用系统的一种优选方案,其中:所述信息服务系统包括教师发展中心服务系统和学生发展中心服务系统。
18、本发明还提供了一种高校数据治理融合应用方法,包括:
19、对高校数据进行采集;
20、对采集到的所述高校数据进行处理,并生成规范化数据;
21、对所述数据管理层生成的数据进行数据封装,并设计数据服务总线,形成与不同层面数据连通的数据接口,并通过所述数据接口进行数据推送;
22、基于所述数据接口形成校情分析系统和信息服务系统。
23、作为本发明所述高校数据治理融合应用方法的一种优选方案,其中:所述对高校数据进行采集包括:
24、通过etl技术对学校现有信息系统数据进行采集;
25、通过互联网和智能感知技术对学校过程性数据进行采集;
26、通过网络爬虫对网络日志数据和外部互联网数据进行采集;
27、通过建立智能表单系统对学校日常数据进行采集。
28、本发明的有益效果是:
29、本发明采用分层技术架构,利用大数据技术,广泛采集高校数据,对数据进行治理和融合,开发数据服务接口,开发数据应用,生成高效数据资产,有效提升了高校数据应用效率和数据价值。
1.一种高校数据治理融合应用系统,其特征在于:包括:
2.根据权利要求1所述的高校数据治理融合应用系统,其特征在于:所述数据源层通过etl技术实现对学校现有信息系统数据的采集,通过互联网和智能感知技术实现对学校过程性数据的采集,通过网络爬虫实现对网络日志数据和外部互联网数据的采集,通过建立智能表单系统实现学校日常数据的采集。
3.根据权利要求1所述的高校数据治理融合应用系统,其特征在于:所述数据管理层包括数据处理层和数据存储层;
4.根据权利要求3所述的高校数据治理融合应用系统,其特征在于:所述主题数据库包括综合校情数据库、教师主题数据库和学生主题数据库。
5.根据权利要求1所述的高校数据治理融合应用系统,其特征在于:所述数据服务层包括数据接口模块、查询分析模块、数据报表模块以及数据推送模块;
6.根据权利要求1所述的高校数据治理融合应用系统,其特征在于:所述信息服务系统包括教师发展中心服务系统和学生发展中心服务系统。
7.一种高校数据治理融合应用方法,其特征在于:包括:
8.根据权利要求7所述的高校数据治理融合应用方法,其特征在于:所述对高校数据进行采集包括: