一种信息系统应用运营能力的评估方法和系统与流程

本发明涉及信息技术服务和管理领域，尤其涉及一种信息系统应用运营能力的评估方法和系统。

背景技术：

1、在信息系统的运营质量管理领域，准确的评估机制对于确保系统的稳定性、效率和安全性至关重要。然而，现有技术在信息系统运营质量评估方面存在若干局限性。

2、目前公开的系统或设备运行质量评估方法，主要是针对具体业务领域系统或终端设备提出的评价指标进行运行质量评估。现有评估方法和评价指标侧重于基于系统运行表现的数据开展评估，缺少从系统内部所具备的运营支撑能力。

3、为促进信息系统运营质量和运营能力提升，对信息系统的生产运行表现及运营支撑能力进行度量十分必要。有助于企业全面、客观掌握信息系统应用运营能力，开展精细化运营管理，引导研发、运营人员识别系统能力短板、问题风险，自驱式开展优化工作，实现数字驱动运营能力提升。应用运营能力评估是从保障信息系统安全、高效运营的目的出发，基于信息系统的运行表现、生产环境、安装配置等信息，对信息系统运营质量及能力进行全面综合评估。

4、现阶段针对信息系统应用运营能力的评估未形成完善指标体系，缺少统一“度量标准”，难以对信息系统的应用运营能力实施标准化、可量化评估。针对信息系统运营质量和能力缺少“绩效管理”，信息系统的能力短板、风险问题得不到及时关注和有效治理。现有技术侧重于对信息系统的应用运营能力开展一次性评估，没有将评估工作与系统全生命周期管理活动相结合，形成持续改进的机制。

技术实现思路

1、为解决现有技术的不足，本发明实现了建立信息系统应用运营能力的评估的“度量标准”，基于监管要求等提炼指标，构建全面、通用的评估模型，涵盖运营质量、效能、可靠性、易维护性、安全性等领域，且能从新技术与运营实践中补充指标、优化模型。该评估方法应用于系统全生命周期管理，开发测试阶段有《能力提升规范指引》；系统投产阶段，新系统上线前进行应用运营能力评估以加强准入管控；生产运营阶段，基于生产数据对“运营态”系统常态化评估，通过排名与比对，识别短板与风险，引导优化，形成研发、运营、评估、提升的pdca循环，促进系统应用运营能力持续提升。

2、为实现以上目的，本发明所采用的技术方案包括：

3、一种信息系统应用运营能力的评估方法，其特征在于，包括：

4、确定由三级指标体系构成的应用运营能力评估指标体系，并按照设定原则统一所述评估指标的能力等级；

5、确定所述评估指标的所述能力等级，依据所述能力等级设定评分系数，再根据所述评估指标评分得出评估域评获分，按照评估域的重要性、评分指标数量分配评估域在运营能力评估的权重，获得运营能力总评分；

6、应用所述运营能力总评分，为新建的信息系统设置准入标准，实现准入管控，并结合评估能力对所述信息系统进行常态化数字驱动的运营能力提升。

7、进一步的，所述应用运营能力评估指标体系，其中一级指标为评估域，包括运营质量、运营效能、可靠性、易维护性、安全性；二级指标为评估子域，为评估域的细分子域；三级指标为评估指标，针对评估子域提出能反映其能力的评估指标和评估标准。

8、具体而言，评估子域是在评估领域下对其评估内容进一步细分，是开展领域评估的落脚点，是系统在某一具体领域的能力体现。在评估体系设计中起到承上启下作用，对上要能覆盖、体现评估领域的核心能力，对下要能进一步提出具体、可实施的评估指标。

9、进一步的，所述按照设定原则统一所述评估指标的能力等级，包括包括将能力等级按照需要划分层级，其中按照制度规范提出的评估指标，所述评估指标的评估标准与制度规范一致，将违背强制性原则的评估指标评定为初始级，对于违背非强制性原则或未完全符合制度规范时评定为管控级，其余按照设定等级设定评分权重。

10、进一步的，所述获得运营能力总评分计算公式是：

11、

12、评估域评分数值范围是[0-100]，若得分超过100分按100分计算，低于0分按0分计算；

13、

14、其中n是评估指标个数，评分指标扣分值＝评分指标分值*(1-评分系数)。

15、进一步的，所述结合评估能力对所述信息系统进行常态化数字驱动的运营能力提升，包括：评估管理员对评估指标进行更新维护；

16、针对运营能力评估指标体系获得的数据进行展示，包括提供评估结果查询、信息系统评估排名、信息系统评估报告，支持开发、运维人员在线分析查看评估结果。

17、进一步的，所述结合评估能力对所述信息系统进行常态化数字驱动的运营能力提升，还包括提供数据采集，其中，

18、对于有运营数据支撑的评估指标，通过调用工具接口，自动查询获取数据，按规则自动填写评估指标评分；

19、对于涉及主观评估的指标，通过提供评估页面，支持运维人员在线填写评估结果；

20、对于使用专项工作结果数据的评估指标，支持对数据进行批量导入。

21、进一步的，所述结合评估能力对所述信息系统进行常态化数字驱动的运营能力提升还包括，能力提升分析，针对评估为“不可评估级”、“初始级”、“管控级”的评估指标，提示优化改进方向，对于评估为“不可评估级”和“初始级”的评估指标，在关闭所述评估报告时，强制要求对所述评估指标反馈整改建议；

22、专项问题分析，支持从评估指标维度进行纵向分析，支持针对具体类型的问题开展专项治理；

23、问题建议反馈，支持针对评估结果，反馈指标体系及评估模型的优化改建意见，推进评估模型的持续优化。

24、本发明还提供了一种信息系统应用运营能力的评估系统，其特征在于，包括：

25、评估体系构建模块，用于确定由三级指标体系构成的应用运营能力评估指标体系，并按照设定原则统一所述评估指标的能力等级；

26、评估模型设置模块，用于确定所述评估指标的所述能力等级，依据所述能力等级设定评分系数，再根据所述评估指标评分得出评估域评获分，按照评估域的重要性、评分指标数量分配评估域在运营能力评估的权重，获得运营能力总评分；

27、评估功能体系应用模块，用于应用所述运营能力总评分，为新建的信息系统设置准入标准，实现准入管控，并结合评估能力对所述信息系统进行常态化数字驱动的运营能力提升。

28、本发明还提供一种电子设备，其特征在于，包括处理器和存储器；

29、所述存储器，用于存储计算机程序；

30、所述处理器，用于通过调用存储计算机程序，执行权利要求1至7中任一项所述的方法。

31、本发明还涉及一种计算机程序产品，包括计算机程序和/或指令，其特征在于，该计算机程序和/或指令被处理器执行时实现权利要求1-7中任一所述方法。

32、本发明的有益效果为：实现了建立信息系统应用运营能力的评估的“度量标准”，基于监管要求等提炼指标，构建全面、通用的评估模型，涵盖运营质量、效能、可靠性、易维护性、安全性等领域，且能从新技术与运营实践中补充指标、优化模型。该评估方法应用于系统全生命周期管理，开发测试阶段有《能力提升规范指引》；系统投产阶段，新系统上线前进行应用运营能力评估以加强准入管控；生产运营阶段，基于生产数据对“运营态”系统常态化评估，通过排名与比对，识别短板与风险，引导优化，形成研发、运营、评估、提升的pdca循环，促进系统应用运营能力持续提升。