一种企业大数据业务报表自动化监控方法与流程

文档序号:33712054发布日期:2023-04-01 00:18阅读:来源:国知局

技术特征:
1.一种企业大数据业务报表自动化监控方法,其特征在于,方法包括以下步骤:s1、获取不同报表的不同种类的核心指标数据;s2、对核心指标数据进行数据配置,将每个报表对应一个接口地址,每个接口地址对应其映射的唯一主键,每个接口地址对应多个接口参数,每个接口参数对应一种核心指标数据;s3、在预配置的不同的调度频率下,基于主键获取接口地址,通过接口参数和接口地址拼接获取报表中的所需的核心指标数据,若所需的核心指标数据的指标路径不唯一,则基于不同的正则表达式对所需的核心指标数据解析响应报文,得到解析后的结果,执行s4;若所需的核心指标数据的指标路径唯一,则进行基础标记,解析响应报文,得到解析后的结果,执行s4;s4、将解析后的结果拆分成定长的字符数据进行aes加密,将加密后的数据存入mysql数据库,所述mysql数据库中还包括历史数据;s5、配置监控条件,进行预警监控,得到监控结果,所述监控条件包括指标关联关系、监控阈值、监控时效、监控属性和预警优先级;预警监控过程中,通过配置的监控条件访问mysql数据库中的数据,得到需要监控的数据并判断数据是否出发告警,告警的结果作为监控结果。2.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,所需的核心指标数据为字符串,若所需的核心指标数据的指标路径不唯一,基于不同的正则表达式对核心指标数据解析响应报文,得到字符串的具体值,所述具体值为解析后的结果。3.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,s1中的核心指标数据包括离线数据和实时数据。4.根据权利要求3所述的一种企业大数据业务报表自动化监控方法,其特征在于,实时数据基于大数据平台在保证实时数据不丢失的情况下实时采集获得。5.根据权利要求4所述的一种企业大数据业务报表自动化监控方法,其特征在于,通过保存消费者偏移量信息、端到端上下游幂等性、源数据备份或离线补偿方式中的一种或多种保证实时数据不丢失。6.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,不同的调度频率为每天一次、每小时一次或每分钟一次。7.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,将加密后的数据存入mysql数据库的过程中,通过数据库连接池直连对应的mysql数据库,访问mysql已有的数据表,将加密后的数据存入访问的数据表中。8.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,配置监控条件后,将配置的监控条件作为服务打成jar包,所述jar包中包括前端文件,用于前端文件监控结果的显示。9.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,预警监控的过程中,对mysql数据库中的数据进行周期性定时清理。10.根据权利要求1所述的一种企业大数据业务报表自动化监控方法,其特征在于,方法还包括,得到监控结果后,基于监控结果和历史数据评价鲁棒性,基于鲁棒性评价结果调试监控条件。

技术总结
本发明涉及一种企业大数据业务报表自动化监控方法,方法包括以下步骤:S1、获取不同报表的不同种类的核心指标数据;S2、对核心指标数据进行数据配置;S3、在预配置的不同的调度频率下,基于主键获取接口地址,通过接口参数和接口地址拼接获取报表中的所需的核心指标数据,对所需的核心指标数据解析响应报文;S4、将加密后的数据存入MySQL数据库;S5、配置监控条件,进行预警监控,得到监控结果。与现有技术相比,本发明采用灵活快速地配置报表接口地址和接口参数,配置后自动生成完整的接口访问地址,再通过正则表达式和基础标记法去解析和标记接口返回的结果数据,实现全局自动化监控。实现全局自动化监控。实现全局自动化监控。


技术研发人员:铁锦程 陈嘉 王尧 朱建兵 潘兴成 梅周 马海平 莫伊捷 田志广
受保护的技术使用者:上海浦东发展银行股份有限公司
技术研发日:2022.12.14
技术公布日:2023/3/31
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1