告警文本信息处理方法、装置、设备及存储介质与流程

1.本技术涉及文本信息处理技术领域，尤其涉及一种告警文本信息处理方法、装置、设备及存储介质。


背景技术：

2.目前，大型数据中心的系统繁多且架构复杂，涉及的技术栈也经常变化，因此监控系统会产生海量的告警数据信息。由于告警数据信息所需统计的数据量过于庞大，且一次报表制作需要生成成百上千个子表，如果在监控系统中完成计算，会占用监控系统大量的服务器资源，且遇到新的需求时，会在新功能的扩展上出现灵活度不足的问题。
3.因此，亟需一种告警文本信息处理方法，能够对告警数据信息进行分析，并应用于容量管理和监控策略管理中，并且能够降低监控系统中服务器资源的占用率。


技术实现要素：

4.本技术提供一种告警文本信息处理方法、装置、设备及存储介质，能够利用告警数据信息进行分析并应用于容量管理和监控策略管理中，并且能够降低监控系统中服务器资源的占用率。
5.第一方面，本技术提供一种告警文本信息处理方法，所述方法包括：
6.获取至少一个告警数据信息；
7.根据所述至少一个告警数据信息，确定告警数据帧；
8.对所述告警数据帧进行分析，生成告警文本信息，并对所述告警文本信息进行处理。
9.在一个示例中，所述对所述告警数据帧进行分析，生成告警文本信息，并对所述告警文本信息进行处理，包括：
10.根据预设的字段信息对所述告警数据帧进行遍历，确定遍历结果；
11.根据所述遍历结果，生成告警文本信息，并对所述告警文本信息进行处理。
12.在一个示例中，所述对所述告警文本信息进行处理，包括：
13.将所述告警文本信息按照至少两个维度进行分类，得到分类结果；
14.根据所述分类结果，对所述告警文本信息进行处理，生成告警处理结果。
15.在一个示例中，所述告警数据信息包括告警设备名称、告警应用系统、告警事项名称、告警故障数据信息和告警级别。
16.在一个示例中，所述根据所述至少一个告警数据信息，确定告警数据帧，包括：
17.通过预设的函数读取所述至少一个告警数据信息，生成初始数据帧；
18.对所述初始数据帧进行预处理，得到所述告警数据帧。
19.在一个示例中，所述根据所述至少一个告警数据信息，确定告警数据帧之后，还包括：
20.将所述告警数据帧存储至预设数据库中。
21.第二方面，本技术提供一种告警文本信息处理装置，所述装置包括：
22.获取单元，用于获取至少一个告警数据信息；
23.确定单元，用于根据所述至少一个告警数据信息，确定告警数据帧；
24.生成单元，用于对所述告警数据帧进行分析，生成告警文本信息，并对所述告警文本信息进行处理。
25.在一个示例中，生成单元，包括：
26.确定模块，用于根据预设的字段信息对所述告警数据帧进行遍历，确定遍历结果；
27.生成模块，用于根据所述遍历结果，生成告警文本信息，并对所述告警文本信息进行处理。
28.在一个示例中，生成模块，包括：
29.分类子模块，用于将所述告警文本信息按照至少两个维度进行分类，得到分类结果；
30.生成子模块，用于根据所述分类结果，对所述告警文本信息进行处理，生成告警处理结果。
31.在一个示例中，所述告警数据信息包括告警设备名称、告警应用系统、告警事项名称、告警故障数据信息和告警级别。
32.在一个示例中，确定单元，包括：
33.读取模块，用于通过预设的函数读取所述至少一个告警数据信息，生成初始数据帧；
34.预处理模块，用于对所述初始数据帧进行预处理，得到所述告警数据帧。
35.在一个示例中，所述装置包括：
36.存储单元，用于将所述告警数据帧存储至预设数据库中。
37.第三方面，本技术提供一种电子设备，包括：处理器，以及与所述处理器通信连接的存储器；
38.所述存储器存储计算机执行指令；
39.所述处理器执行所述存储器存储的计算机执行指令，以实现如第一方面所述的方法。
40.第四方面，本技术提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如第一方面所述的方法。
41.第五方面，本技术提供一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现如第一方面所述的方法。
42.本技术提供的一种告警文本信息处理方法、装置、设备及存储介质，通过获取至少一个告警数据信息；根据所述至少一个告警数据信息，确定告警数据帧；对所述告警数据帧进行分析，生成告警文本信息，并对所述告警文本信息进行处理。采用本技术方案，能够利用告警数据信息进行分析并应用于容量管理和监控策略管理中，并且能够降低监控系统服务器资源的占用率。
附图说明
43.此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本技术的实施例，并与说明书一起用于解释本技术的原理。
44.图1是根据本技术实施例一提供的一种告警文本信息处理方法的流程示意图；
45.图2是根据本技术实施例二提供的一种告警文本信息处理方法的流程示意图；
46.图3是根据本技术实施例三提供的一种告警文本信息处理装置的结构示意图；
47.图4是根据本技术实施例四提供的一种告警文本信息处理装置的结构示意图；
48.图5是根据一示例性实施例示出的一种电子设备的框图。
49.通过上述附图，已示出本技术明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本技术构思的范围，而是通过参考特定实施例为本领域技术人员说明本技术的概念。
具体实施方式
50.这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本技术相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本技术的一些方面相一致的装置和方法的例子。
51.本技术提供的一种告警文本信息处理方法，旨在解决现有技术的如上技术问题。
52.下面以具体地实施例对本技术的技术方案以及本技术的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本技术的实施例进行描述。
53.图1是根据本技术实施例一提供的一种告警文本信息处理方法的流程示意图。实施例一中包括如下步骤：
54.s101、获取至少一个告警数据信息。
55.本实施例中，告警数据信息包括告警设备名称、告警应用系统、告警事项名称、告警故障数据信息和告警级别。其中，告警故障数据信息包括告警故障描述信息、告警故障首次发生的时间、告警故障最后发生的时间和告警故障次数。进一步地，告警数据信息是以xls格式或者csv格式存储的。告警设备名称为具体设备的编号，不同的告警设备名称不同，编号也不同。告警应用系统为产生告警数据信息的系统，可以为一个，也可以为多个。告警事项名称可以为cpu占用率比较大。不同的告警数据信息可以设置不同的标识信息，例如，告警数据信息a、告警数据信息b和告警数据信息c。
56.具体的，获取至少一个告警数据信息的方式可以是通过pandas，pandas是一个用于数据分析的开源python库，提供了高性能且易于使用的数据结构和数据分析的工具。本实施例中，可以按照预设的时间从监控系统中获取至少一个告警数据信息。
57.s102、根据至少一个告警数据信息，确定告警数据帧。
58.本实施例中，告警数据帧是数据链路层的协议数据单元，它包括三部分：帧头，数据部分和帧尾。其中，帧头和帧尾包含控制信息，比如同步信息、地址信息和差错控制信息；数据部分则包含网络层传下来的数据，比如ip数据包。具体的，告警数据帧是一个二维数据结构，且以行和列的表格形式排列。本实施例中，对至少一个告警数据信息进行处理，得到
告警数据帧。
59.s103、对告警数据帧进行分析，生成告警文本信息，并对告警文本信息进行处理。
60.本实施例中，采用python多线程技术方式，实现对告警数据帧快速分析，具体的为对不同的告警设备名称、不同的告警应用系统、不同的告警事项名称、不同的告警故障数据信息和不同的告警级别进行统计，并得到告警文本信息，将告警文本信息与不同时段的告警数据信息的数量进行比对后，对告警文本信息进行处理。
61.本技术提供的一种告警文本信息处理方法，通过获取至少一个告警数据信息；根据至少一个告警数据信息，确定告警数据帧；对告警数据帧进行分析，生成告警文本信息，并对告警文本信息进行处理。采用本技术方案，能够对告警数据信息进行筛选，避免人工筛查，提升效率，并能够利用告警数据信息进行分析并应用于容量管理和监控策略管理中，并且能够降低监控系统服务器资源的占用率。
62.图2是根据本技术实施例二提供的一种告警文本信息处理方法的流程示意图。实施例二中包括如下步骤：
63.s201、获取至少一个告警数据信息。
64.示例性地，本步骤可以参见上述步骤s101，不再赘述。
65.s202、通过预设的函数读取至少一个告警数据信息，生成初始数据帧。
66.本实施例中，预设的函数可以是pandas中的read_csv或read_excel等函数，通过上述函数读取至少一个告警数据信息后，生成初始数据帧。
67.s203、对初始数据帧进行预处理，得到告警数据帧。
68.本实施例中，预处理可以为删除无用的初始数据帧或者填充初始数据帧中的缺失项。具体的，可以为调用pandas的fillna函数填充缺失项，再把多个初始数据帧进行拼接合并成一个完整的数据帧，并删除无用的字段，缩小数据帧规模，得到告警数据帧。
69.s204、将告警数据帧存储至预设数据库中。
70.本实施例中，预设数据库可以为sqlite。sqlite是一款轻量级的数据库，无服务器、零配置、事务性的sql数据库引擎，占用资源非常低，支持windows/linux/unix等主流操作系统，与mysql、postgresql两款开源数据库管理系统相比，它的处理速度更快。将告警数据帧存储至预设数据库后，以便从预设数据库中调用告警数据帧。
71.s205、根据预设的字段信息对告警数据帧进行遍历，确定遍历结果。
72.本实施例中，预设的字段信息可以是告警级别或者时间的数值。具体的，可以通过sql语句进行获取。本实施例中，遍历的过程可以是第一轮以告警应用系统的名称进行遍历，第二轮以告警事项名称进行遍历，确定遍历结果。
73.s206、根据遍历结果，生成告警文本信息，并对告警文本信息进行处理。
74.对告警数据帧中的项数、次数、排名和对比结果进行统计，并将告警数据帧及统计结果写入到xlsx类型文件，生成告警文本信息，并对告警文本信息进行处理。
75.在一个示例中，对告警文本信息进行处理，包括：
76.将告警文本信息按照至少两个维度进行分类，得到分类结果；
77.根据分类结果，对告警文本信息进行处理，生成告警处理结果。
78.本实施例中，至少两个维度可以是告警级别和告警应用系统。分类结果可以为对象变更、批量运行、业务变化以及优化对象等类型。具体的，若为对象变更，则可以获取变更
管理系统中的变更对象以及变更时间等信息，与告警设备名称、告警应用系统、告警事项名称和告警时间进行比对，若匹配，则分类结果为对象变更。通过获取服务目录管理系统中的系统批量时间进行比对，若告警时间与批量运行时间匹配，且服务器为批量服务器，则分类结果为批量运行。通过获取业务部门发布的业务变化时间，若在该时间段内产生告警，则分类结果为业务变化。其他情况的分类结果为优化对象。
79.本实施例中，需要对分类结果为优化对象的告警文本信息进行处理，具体的，若该告警事项名称为容量类指标，且发生频率大于阈值后，则确定告警处理结果为容量优化类问题。若某一时间段内同类告警文本信息在多个不同的对象上发生次数大于阈值后，则划分为监控优化类问题。经系统管理员确认无误后，根据告警应用系统、告警应用分区、告警指标、告警事项名称等生成告警处理结果。具体的，告警处理结果可以为容量优化方案、告警策略优化方案和问题处置单。其中，容量优化方案可以通过变更管理系统生成变更申请，通过变更实现容量优化；告警策略优化方案可以通过监控系统实施告警策略优化，将问题处置单通过问题管理系统跟踪管理。
80.本技术提供的一种告警文本信息处理方法，通过根据预设的字段信息对告警数据帧进行遍历，确定遍历结果，根据遍历结果，生成告警文本信息，并对告警文本信息进行处理。采用本技术方案，能够分别与监控系统、变更管理系统、问题管理系统结合实现动态地调整告警文本信息，并根据新的需求，对阈值进行调整。
81.图3是根据本技术实施例三提供的一种告警文本信息处理装置的结构示意图。具体的，实施例三的装置30中包括：
82.获取单元301，用于获取至少一个告警数据信息；
83.确定单元302，用于根据至少一个告警数据信息，确定告警数据帧；
84.生成单元303，用于对告警数据帧进行分析，生成告警文本信息，并对告警文本信息进行处理。
85.所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
86.图4是根据本技术实施例四提供的一种告警文本信息处理装置的结构示意图。具体的，实施例四的装置40中包括：
87.获取单元401，用于获取至少一个告警数据信息。
88.确定单元402，用于根据至少一个告警数据信息，确定告警数据帧。
89.生成单元403，用于对告警数据帧进行分析，生成告警文本信息，并对告警文本信息进行处理。
90.在一个示例中，生成单元403，包括：
91.确定模块4031，用于根据预设的字段信息对告警数据帧进行遍历，确定遍历结果。
92.生成模块4032，用于根据遍历结果，生成告警文本信息，并对告警文本信息进行处理。
93.在一个示例中，生成模块4032，包括：
94.分类子模块40321，用于将告警文本信息按照至少两个维度进行分类，得到分类结果。；
95.生成子模块40322，用于根据分类结果，对告警文本信息进行处理，生成告警处理
结果。
96.在一个示例中，告警数据信息包括告警设备名称、告警应用系统、告警事项名称、告警故障数据信息和告警级别。
97.在一个示例中，确定单元402，包括：
98.读取模块4021，用于通过预设的函数读取至少一个告警数据信息，生成初始数据帧。
99.预处理模块4022，用于对初始数据帧进行预处理，得到告警数据帧。
100.在一个示例中，装置包括：
101.存储单元404，用于将告警数据帧存储至预设数据库中。
102.所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
103.图5是根据一示例性实施例示出的一种电子设备的框图，该设备可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
104.装置500可以包括以下一个或多个组件：处理组件502，存储器504，电源组件506，多媒体组件508，音频组件510，输入/输出(i/o)接口512，传感器组件514，以及通信组件516。
105.处理组件502通常控制装置500的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件502可以包括一个或多个处理器520来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件502可以包括一个或多个模块，便于处理组件502和其他组件之间的交互。例如，处理组件502可以包括多媒体模块，以方便多媒体组件508和处理组件502之间的交互。
106.存储器504被配置为存储各种类型的数据以支持在装置500的操作。这些数据的示例包括用于在装置500上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(sram)，电可擦除可编程只读存储器(eeprom)，可擦除可编程只读存储器(eprom)，可编程只读存储器(prom)，只读存储器(rom)，磁存储器，快闪存储器，磁盘或光盘。
107.电源组件506为装置500的各种组件提供电力。电源组件506可以包括电源管理系统，一个或多个电源，及其他与为装置500生成、管理和分配电力相关联的组件。
108.多媒体组件508包括在装置500和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(lcd)和触摸面板(tp)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件508包括一个前置摄像头和/或后置摄像头。当装置500处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
109.音频组件510被配置为输出和/或输入音频信号。例如，音频组件510包括一个麦克
风(mic)，当装置500处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中，音频组件510还包括一个扬声器，用于输出音频信号。
110.i/o接口512为处理组件502和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
111.传感器组件514包括一个或多个传感器，用于为装置500提供各个方面的状态评估。例如，传感器组件514可以检测到装置500的打开/关闭状态，组件的相对定位，例如所述组件为装置500的显示器和小键盘，传感器组件514还可以检测装置500或装置500一个组件的位置改变，用户与装置500接触的存在或不存在，装置500方位或加速/减速和装置500的温度变化。传感器组件514可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器，如cmos或ccd图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件514还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
112.通信组件516被配置为便于装置500和其他设备之间有线或无线方式的通信。装置500可以接入基于通信标准的无线网络，如wifi，2g或3g，或它们的组合。在一个示例性实施例中，通信组件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件516还包括近场通信(nfc)模块，以促进短程通信。例如，在nfc模块可基于射频识别(rfid)技术，红外数据协会(irda)技术，超宽带(uwb)技术，蓝牙(bt)技术和其他技术来实现。
113.在示例性实施例中，装置500可以被一个或多个应用专用集成电路(asic)、数字信号处理器(dsp)、数字信号处理设备(dspd)、可编程逻辑器件(pld)、现场可编程门阵列(fpga)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
114.在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器504，上述指令可由装置500的处理器520执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是rom、随机存取存储器(ram)、cd-rom、磁带、软盘和光数据存储设备等。
115.一种非临时性计算机可读存储介质，当该存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行上述电子设备的一种告警文本信息处理方法。
116.本技术还公开了一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现如本实施例中所述的方法。
117.本技术以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(fpga)、专用集成电路(asic)、专用标准产品(assp)、芯片上系统的系统(soc)、负载可编程逻辑设备(cpld)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
118.用于实施本技术的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或电子设备上执行。
119.在本技术的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦除可编程只读存储器(eprom或快闪存储器)、光纤、便捷式紧凑盘只读存储器(cd-rom)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
120.为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，crt(阴极射线管)或者lcd(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
121.可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据电子设备)、或者包括中间件部件的计算系统(例如，应用电子设备)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(lan)、广域网(wan)和互联网。
122.计算机系统可以包括客户端和电子设备。客户端和电子设备一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-电子设备关系的计算机程序来产生客户端和电子设备的关系。电子设备可以是云电子设备，又称为云计算电子设备或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与vps服务("virtual private server"，或简称"vps")中，存在的管理难度大，业务扩展性弱的缺陷。电子设备也可以为分布式系统的电子设备，或者是结合了区块链的电子设备。应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本技术中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本技术公开的技术方案所期望的结果，本文在此不进行限制。
123.本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本技术的其它实施方案。本技术旨在涵盖本技术的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本技术的一般性原理并包括本技术未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本技术的真正范围和精神由下面的
权利要求书指出。
124.应当理解的是，本技术并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本技术的范围仅由所附的权利要求书来限制。