数据分析系统、数据分析方法、介质及电子设备与流程

文档序号:36162365发布日期:2023-11-23 10:58阅读:37来源:国知局
数据分析系统的制作方法

本申请属于数据分析领域,涉及一种数据分析系统,特别是涉及一种数据分析系统、数据分析方法、介质及电子设备。


背景技术:

1、目前行业内业务人员对于新能源项目策划、建设过程中,需要及时获取政策、新闻等信息,并需要对政策、新闻等信息进行快速的数据分析,目前的数据分析系统存在数据分析能力效果不佳的问题。


技术实现思路

1、本申请的目的在于提供一种数据分析系统、数据分析方法、介质及电子设备,用于解决目前的数据分析系统存在着的数据分析能力效果不佳的问题。

2、第一方面,本申请提供一种数据分析系统,所述数据分析系统包括:源数据存储模块,用于存储能源信息数据,所述能源信息数据包括关于可再生能源的政策数据和关于可再生能源的新闻数据,外部数据获取模块,用于获取所述数据分析系统外部的能源信息数据,知识图谱生成模块,用于根据所述知识图谱生成模块的传入数据生成所述传入数据的知识图谱,统一检索模块,用于基于中文分词器和索引结构对输入文本进行处理,以获取检索数据,情报分析模块,用于对输入时间进行处理,以获取情报数据和基于所述情报数据的知识图谱,所述情报数据包括:所述输入时间范围内的所述政策数据和/或所述输入时间范围内的所述新闻数据,统计分析模块,用于对双碳项目数据进行处理,以获取所述双碳项目数据的统计分析结果,简报生成模块,用于对选定的文本数据进行处理,以生成简报。

3、根据以上描述可知,所述数据分析系统根据所述知识图谱生成模块、所述统一检索模块、所述情报分析模块、所述统计分析模块等模块能够提升系统整体的数据分析能力,特别是对政策数据的数据分析能力,所述数据分析系统具备更佳的数据分析能力。

4、于本申请的一实施例中,所述情报分析模块包括筛选单元、显示设置单元、知识推荐数据生成单元、情感分析单元,所述筛选单元用于基于筛选区域、筛选领域或筛选时间段对所述情报数据进行筛选处理,以获取筛选后的情报数据,所述显示设置单元用于设置所述情报数据的发布时间、标签、权重、关键词的个性化显示,所述知识推荐数据生成单元用于基于所述情报数据生成所述情报数据的知识推荐数据,所述情感分析单元用于基于训练完毕的情感分析模型对所述情报数据进行情感分析,以获取所述情报数据的情感倾向。

5、于本申请的一实施例中,所述情感分析单元还包括:预训练子单元和微调子单元,所述预训练子单元用于基于无标签数据和不同的预训练任务对初始化的情感分析模型进行训练,以获取预训练的情感分析模型,所述微调子单元用于基于下游任务的标签数据对所述预训练的情感分析模型进行微调,以获取所述训练完毕的情感分析模型。

6、于本申请的一实施例中,所述统计分析模块包括双碳项目签发量统计单元、双碳项目类型统计单元、双碳项目年份统计单元、双碳项目知识图谱检索单元、双碳项目知识图谱布局获取单元,所述双碳项目知识图谱检索单元用于基于输入关键词获取基于与所述输入关键词关联的双碳项目数据的知识图谱,所述双碳项目知识图谱布局获取单元用于基于选定的知识图谱布局结构获取与所述选定的知识图谱布局结构相对应的双碳项目知识图谱布局,所述双碳项目签发量统计单元用于基于所述双碳项目数据获取所述双碳项目数据中各类型的双碳项目的签发量,所述双碳项目类型统计单元用于基于所述双碳项目数据获取所述双碳项目数据中各类型的双碳项目占总双碳项目的百分比,所述双碳项目年份统计单元用于基于所述双碳项目数据获取所述双碳项目数据中各年份的双碳项目数。

7、于本申请的一实施例中,所述数据分析系统还包括:简报管理模块,所述简报生成模块包括:文本获取单元、简报生成单元和简报上传单元,所述文本获取单元用于基于文本选择操作指令获取所述选定的文本数据,简报生成单元,所述简报生成单元用于基于所述选定的文本数据、选定的简报类型、选定的简报专题、选定的业务板块、选定的简报日期和选定的简报封面生成所述简报,所述简报上传单元用于上传所述简报至所述简报管理模块。

8、于本申请的一实施例中,所述数据分析系统还包括任务调度模块和多模式匹配采集模块,所述任务调度模块用于基于任务调度框架实时获取所述外部的能源信息数据,所述多模式匹配采集模块用于基于多种采集方式匹配采集所述外部的能源信息数据,所述采集方式为基于标记语言解析器的解析结构采集的方式、基于浏览器采集的方式或基于应用程序接口采集的方式。

9、于本申请的一实施例中,所述数据分析系统还包括数据分类模块,所述数据分类模块用于基于适配器模式对所述外部的能源信息数据进行分类,以获取分类后的外部的能源信息数据。

10、第二方面,本申请提供一种数据分析方法,获取操作脚本,所述操作脚本用于第一方面任一项所述数据分析系统服务的启动、停止、部署、维护和和/或更新,所述数据分析系统服务的部署包括:在所述数据分析系统的服务实例启动时,所述数据分析系统的服务被注册至服务注册表,并且在所述服务实例关闭时,所述数据分析系统服务注销,所述数据分析系统服务的启动包括:通过容器命令将容器化部署完毕的数据分析系统服务启动,所述数据分析系统服务的更新包括:基于上传至工作目录的更新服务包,通过容器替换处理对所述数据分析系统服务进行更新,基于所述操作脚本和所述数据分析系统服务获取数据分析结果。

11、第三方面,本申请提供一种计算机可读存储介质,其上存储有一计算机程序,该计算机程序被处理器执行时实现本申请第二方面所述数据分析方法。

12、第四方面,本申请提供一种电子设备,所述电子设备包括:存储器,存储有一计算机程序;处理器,与所述存储器通信相连,调用所述计算机程序时执行本申请第二方面所述数据分析方法。

13、如上所述,本申请所述数据分析系统、数据分析方法、介质及电子设备,具有以下有益效果:

14、所述数据分析系统根据所述知识图谱生成模块、所述统一检索模块、所述情报分析模块、所述统计分析模块等模块能够提升系统整体的数据分析能力,特别是对政策数据的数据分析能力,所述数据分析系统具备更佳的数据分析能力。



技术特征:

1.一种数据分析系统,其特征在于,所述数据分析系统包括:

2.根据权利要求1所述的数据分析系统,其特征在于,所述情报分析模块包括筛选单元、显示设置单元、知识推荐数据生成单元、情感分析单元,所述筛选单元用于基于筛选区域、筛选领域或筛选时间段对所述情报数据进行筛选处理,以获取筛选后的情报数据,所述显示设置单元用于设置所述情报数据的发布时间、标签、权重、关键词的个性化显示,所述知识推荐数据生成单元用于基于所述情报数据生成所述情报数据的知识推荐数据,所述情感分析单元用于基于训练完毕的情感分析模型对所述情报数据进行情感分析,以获取所述情报数据的情感倾向。

3.根据权利要求2所述的数据分析系统,其特征在于,所述情感分析单元还包括:预训练子单元和微调子单元,所述预训练子单元用于基于无标签数据和不同的预训练任务对初始化的情感分析模型进行训练,以获取预训练的情感分析模型,所述微调子单元用于基于下游任务的标签数据对所述预训练的情感分析模型进行微调,以获取所述训练完毕的情感分析模型。

4.根据权利要求1所述的数据分析系统,其特征在于,所述统计分析模块包括双碳项目签发量统计单元、双碳项目类型统计单元、双碳项目年份统计单元、双碳项目知识图谱检索单元、双碳项目知识图谱布局获取单元,所述双碳项目知识图谱检索单元用于基于输入关键词获取基于与所述输入关键词关联的双碳项目数据的知识图谱,所述双碳项目知识图谱布局获取单元用于基于选定的知识图谱布局结构获取与所述选定的知识图谱布局结构相对应的双碳项目知识图谱布局,所述双碳项目签发量统计单元用于基于所述双碳项目数据获取所述双碳项目数据中各类型的双碳项目的签发量,所述双碳项目类型统计单元用于基于所述双碳项目数据获取所述双碳项目数据中各类型的双碳项目占总双碳项目的百分比,所述双碳项目年份统计单元用于基于所述双碳项目数据获取所述双碳项目数据中各年份的双碳项目数。

5.根据权利要求1所述的数据分析系统,其特征在于,所述数据分析系统还包括:简报管理模块,所述简报生成模块包括:文本获取单元、简报生成单元和简报上传单元,所述文本获取单元用于基于文本选择操作指令获取所述选定的文本数据,简报生成单元,所述简报生成单元用于基于所述选定的文本数据、选定的简报类型、选定的简报专题、选定的业务板块、选定的简报日期和选定的简报封面生成所述简报,所述简报上传单元用于上传所述简报至所述简报管理模块。

6.根据权利要求1所述的数据分析系统,其特征在于,所述数据分析系统还包括任务调度模块和多模式匹配采集模块,所述任务调度模块用于基于任务调度框架实时获取所述外部的能源信息数据,所述多模式匹配采集模块用于基于多种采集方式匹配采集所述外部的能源信息数据,所述采集方式为基于标记语言解析器的解析结构采集的方式、基于浏览器采集的方式或基于应用程序接口采集的方式。

7.根据权利要求1所述的数据分析系统,其特征在于,所述数据分析系统还包括数据分类模块,所述数据分类模块用于基于适配器模式对所述外部的能源信息数据进行分类,以获取分类后的外部的能源信息数据。

8.一种数据分析方法,其特征在于,所述数据分析方法包括:

9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求8所述数据分析方法。

10.一种电子设备,其特征在于,所述电子设备包括:


技术总结
本申请提供一种数据分析系统、数据分析方法、介质及电子设备。包括:源数据存储模块,用于存储能源信息数据,外部数据获取模块,用于获取所述数据分析系统外部的能源信息数据,知识图谱生成模块,用于根据所述知识图谱生成模块的传入数据生成基于所述传入数据的知识图谱,统一检索模块,用于基于中文分词器和索引结构对输入文本进行处理,以获取检索数据,情报分析模块,用于对输入时间进行处理,以获取情报数据和基于所述情报数据的知识图谱,统计分析模块,用于对双碳项目数据进行处理,以获取所述双碳项目数据的统计分析结果,简报生成模块,用于对选定的文本数据进行处理,以生成简报。所述数据分析系统具备更佳的数据分析能力。

技术研发人员:王梦园,杭旭超,王瑞,杜凯,俞晓波,陈凯华,付佳珂
受保护的技术使用者:上海勘测设计研究院有限公司
技术研发日:
技术公布日:2024/1/16
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1