应用服务监控方法、装置、电子设备及可读存储介质与流程

1.本技术涉及云计算领域，特别是涉及一种应用服务监控方法、装置、电子设备及可读存储介质。


背景技术：

2.随着云平台应用规模的不断提升，目前已经实现了对云平台中的平台资源、核心服务和自研模块的监控告警，平台资源例如主机、云主机和裸机等，核心服务如rabbitmq集群、mysql和存储集群等。而云平台规模的增大，运行在云主机内部的用户方服务也即应用服务如mysql、rabbitmq集群、tomcat等必然增多，对应用服务进行监控告警也越来越迫切。
3.可以理解的是，应用服务在业务网，云平台的监控告警系统在管理网，二者直接网络不互通。如果打通网络来利用监控告警系统对应用服务进行监控告警，无疑会提升网络复杂度，而且还存在安全隐患。此外，由于应用服务多种多样，相关技术由于并未实现统一的数据采集，导致添加一种服务就需要大量的开发；而且云平台在创建一个应用服务后无法被自动识别并正确地采集监控数据，也即其并不支持应用服务实例的自动化添加。
4.鉴于此，如何安全、高效地对云平台的各种类型应用服务进行监控，是所属领域技术人员需要解决的技术问题。


技术实现要素：

5.本技术提供了一种应用服务监控方法、装置、电子设备及可读存储介质，可以安全、高效地对云平台的各种类型应用服务进行监控。
6.为解决上述技术问题，本发明实施例提供以下技术方案：本发明实施例一方面提供了一种应用服务监控方法，包括：预先在云平台的云主机中安装与宿主机交互不依赖网络的通讯装置，并在所述宿主机中部署数据采集代理；预先将与所述数据采集代理相匹配的数据采集程序和各类应用服务的数据采集模板集成在应用服务安装包中；当检测到生成目标应用服务，根据所述目标应用服务的属性信息与其类型相匹配的目标数据采集模板生成数据采集配置文件；当所述目标应用服务部署在所述云主机，获取所述云主机基于所述数据采集配置文件所采集的监控性能数据。
7.可选的，所述当检测到生成目标应用服务之后，还包括：获取与所述目标应用服务类型相匹配的目标告警模板；按照所述目标告警模板自动为所述目标应用服务生成告警实例；响应阈值设置指令，为所述告警实例的每个性能条项设置相应的告警阈值。
8.可选的，所述按照所述目标告警模板自动为所述目标应用服务生成告警实例之后，还包括：
判断所述告警实例所属类型的目标告警任务是否存在；若所述告警实例所属类型的目标告警任务存在，将所述告警实例添加至所述目标告警任务中；若所述告警实例所属类型的目标告警任务不存在，自动创建所述告警实例所属类型的目标告警任务，同时将所述告警实例添加至所述目标告警任务中。
9.可选的，所述按照所述目标告警模板自动为所述目标应用服务生成告警实例之后，还包括：按照预设频率自动为每类告警任务自动生成相应的周期性任务；当检测到目标周期性任务生成，获取所述目标周期性任务对应告警任务的所有待告警应用服务的当前性能数据值；从各待告警应用服务的告警实例中获取各性能条项的告警阈值；对每个待告警应用服务，根据当前待告警应用服务的当前性能数据值和相应的告警阈值生成告警信息。
10.可选的，所述预先将与所述数据采集代理相匹配的数据采集程序和各类应用服务的数据采集模板集成在应用服务安装包中之后，还包括：基于告警任务个数平均和告警任务权重平均，将当前所有告警任务自动平均分配至多个告警任务实例上执行。
11.可选的，所述当所述目标应用服务部署在所述云主机之后，还包括：预先为每类应用服务配置数据查询模板，并设置查询标识；响应数据查询指令，获取与所述目标应用服务类型相匹配的目标数据查询模板；根据所述目标应用服务的查询标识，按照所述目标数据查询模板生成所述目标应用服务的数据查询信息。
12.本发明实施例另一方面提供了一种应用服务监控装置，包括：部署模块，用于预先在云平台的云主机中安装与宿主机交互不依赖网络的通讯装置，并在所述宿主机中部署数据采集代理；预先将与所述数据采集代理相匹配的数据采集程序和各类应用服务的数据采集模板集成在应用服务安装包中；数据采集配置模块，用于当检测到生成目标应用服务，根据所述目标应用服务的属性信息与其类型相匹配的目标数据采集模板生成数据采集配置文件；数据采集模块，用于当所述目标应用服务部署在所述云主机，获取所述云主机基于所述数据采集配置文件所采集的监控性能数据。
13.可选的，还包括告警配置模块，用于获取与所述目标应用服务类型相匹配的目标告警模板；按照所述目标告警模板自动为所述目标应用服务生成告警实例；响应阈值设置指令，为所述告警实例的每个性能条项设置相应的告警阈值。
14.本发明实施例还提供了一种电子设备，包括处理器，所述处理器用于执行存储器中存储的计算机程序时实现如前任一项所述应用服务监控方法的步骤。
15.本发明实施例最后还提供了一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如前任一项所述应用服务监控方法的步骤。
16.本技术提供的技术方案的优点在于，云平台的宿主机和云主机之间的数据交互不通过网络，无需打通业务网和管理网之间的网络，不会提升网络复杂度，而且还可安全地进
行应用服务的监控。通过数据采集模板的配置，云平台可支持统一数据采集，进而可支持多种多样的应用服务的接入，丰富了云平台监控系统支持的资源种类，监控管理系统对云主机的各应用程序的性能数据提取过程方便简单，可实现对应用服务的高效监控，有利于提升云平台稳定性和用户使用体验。
17.此外，本发明实施例还针对应用服务监控方法提供了相应的实现装置、电子设备及可读存储介质，进一步使得所述方法更具有实用性，所述装置、电子设备及可读存储介质具有相应的优点。
18.应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本公开。
附图说明
19.为了更清楚的说明本发明实施例或相关技术的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
20.图1为本发明实施例提供的一种应用服务监控方法的流程示意图；图2为本发明实施例提供的应用服务监控装置的一种具体实施方式结构图；图3为本发明实施例提供的电子设备的一种具体实施方式结构图。
具体实施方式
21.为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
22.本技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等是用于区别不同的对象，而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可包括没有列出的步骤或单元。
23.在介绍了本发明实施例的技术方案后，下面详细的说明本技术的各种非限制性实施方式。
24.首先参见图1，图1为本发明实施例提供的一种应用服务监控方法的流程示意图，本发明实施例可包括以下内容：s101：预先在云平台的云主机中安装与宿主机交互不依赖网络的通讯装置，并在宿主机中部署数据采集代理。
25.在本实施例中，云平台上搭载宿主机和云主机，本实施例的执行主语为监控管理系统，监控管理系统部署在宿主机上，所在网络属于管理网。应用服务部署在云平台的云主机中，其所在网络是应用网。云平台的监控管理系统要对云主机的应用服务进行监控管理，就需要获取云主机的性能数据，而管理网与应用网是不通的，为了不增加网络复杂度，就不能打通管理网与应用网。本实施例的云主机与宿主机的数据通信需要依赖不通过网络的通
url="http：//host：ports103：当检测到生成目标应用服务，根据目标应用服务的属性信息与其类型相匹配的目标数据采集模板生成数据采集配置文件。
30.每创建一个应用服务实例，根据实例的基本信息或者是属性信息替换数据采集模板的特定变量，也即初始化相应的数据采集模板以生成实际的数据采集配置文件。属性信息比如应用id、应用实例名称mysql、用户名、密码等。以目标应用服务为mysql为例，基于该步骤生成的mysql的数据采集配置文件可表述为：[[global_tags]]
ꢀꢀ
appid=“1111111111111111”#32位uuidappname=“xx厅信息化mysql数据库”[[inputs.mysql]]interval=“60s”timeout=“60s”s104：当目标应用服务部署在云主机，获取云主机基于数据采集配置文件所采集的监控性能数据。
[0031]
当检测到目标应用服务成功部署在云主机上，云平台的宿主机的监控管理系统通过s101的通讯装置，利用数据采集代理调用云主机内部的数据采集代理对应的数据采集程序捕获运行过程中的性能数据作为监控性能数据，为了便于后续数据处理，可将采集的监控性能数据上传至时序数据库。
[0032]
在本发明实施例提供的技术方案中，云平台的宿主机和云主机之间的数据交互不通过网络，无需打通业务网和管理网之间的网络，不会提升网络复杂度，而且还可安全地进行应用服务的监控。通过数据采集模板的配置，云平台可支持统一数据采集，进而可支持多种多样的应用服务的接入，丰富了云平台监控系统支持的资源种类，监控管理系统对云主机的各应用程序的性能数据提取过程方便简单，可实现对应用服务的高效监控，有利于提升云平台稳定性和用户使用体验。
[0033]
需要说明的是，本技术中各步骤间没有严格的先后执行顺序，只要符合逻辑上的顺序，则这些步骤可以同时执行，也可按照某种预设顺序执行，图1只是一种示意方式，并不代表只能是这样的执行顺序。
[0034]
为了进一步提高本技术技术方案的实用性和灵活性，提升用户使用体验，基于上述实施例，本技术在获取云主机上部署的各应用程序的监控性能数据之后，还可基于监控性能数据进行告警处理，可包括下述内容：获取与目标应用服务类型相匹配的目标告警模板；按照目标告警模板自动为目标应用服务生成告警实例；响应阈值设置指令，为告警实例的每个性能条项设置相应的告警阈值。
[0035]
在本实施例中，为了便于管理，支持多种多样的应用程序接入云平台，可将每一类应用服务的所有告警信息统一为告警模板，包括告警id、资源种类id，应用id、性能数据表名、查询字段、过滤字段、分组字段、告警阈值等，如表1所示。并为每一类告警创建一个告警任务，通过查询性能数据并与阈值进行比较产生告警信息。每添加一个应用服务实例，此资
源下所有告警模板都会生成一个告警实例，告警实例可参阅表2所示。生成告警实例后，用户可以自定义告警阈值，性能条项是指需要监控应用程序的性能指标，例如温度。
[0036]
表1 告警模板示例表2 实例化告警模板
由于系统会为每一类告警创建一个告警任务，在创建当前应用程序的告警实例之后，可判断告警实例所属类型的目标告警任务是否存在；若告警实例所属类型的目标告警任务存在，将告警实例添加至目标告警任务中；若告警实例所属类型的目标告警任务不存在，自动创建告警实例所属类型的目标告警任务，同时将告警实例添加至目标告警任务中。
[0037]
作为一种可选的实施方式，系统执行告警任务的流程可为：按照预设频率自动为每类告警任务自动生成相应的周期性任务；当检测到目标周期性任务生成，获取目标周期性任务对应告警任务的所有待告警应用服务的当前性能数据值；从各待告警应用服务的告警实例中获取各性能条项的告警阈值；对每个待告警应用服务，根据当前待告警应用服务的当前性能数据值和相应的告警阈值生成告警信息。
[0038]
在本实施例中，每一类告警任务都会自动生成周期性任务，每执行一次都会从数据库中查询出所有服务实例当前的性能数据值，从告警实例中查询出所有服务实例的此告警实例的告警阈值，然后进行比较而产生告警信息，告警信息包括是否告警，告警方式如蜂鸣器报警或输出报警文字信息等，告警级别等，所属领域技术人员可根据实际需求灵活确定，本技术对此不做任何限定。
[0039]
为了提高告警的高效性和有效性，本技术还支持告警任务的负载均衡，告警调度模块支持多实例，多实例之间平均分配执行所有告警任务，分配策略支持按任务个数平均和任务权重平均。也即可基于告警任务个数平均和告警任务权重平均，将当前所有告警任
务自动平均分配至多个告警任务实例上执行。
[0040]
本实施例通过告警任务的负载均衡，可实现告警任务的自动重新平衡，当存在实例异常或者新增实例能快速达到新的平衡状态。
[0041]
不可避免的，用户需要向云平台查询各应用程序的性能数据，基于此，本技术在上述实施例基础上，还支持数据查询，可包括：预先为每类应用服务配置数据查询模板，并设置查询标识；响应数据查询指令，获取与目标应用服务类型相匹配的目标数据查询模板；根据目标应用服务的查询标识，按照目标数据查询模板生成目标应用服务的数据查询信息。
[0042]
在本实施例中，可将每一类应用服务的所有性能数据类型中可进行展示查询的基本信息统一为数据查询模板，例如可包括数据id、数据名称、表名、查询字段、过滤字段、分组字段等，如表3所示。查询标识为数据查询模板的索引信息，例如可根据应用程序的数据id即可以查询性能数据。在完成统一数据查询接口，接口参数中包括数据id，应用id（appid），起止时间就可以查询历史数据。添加所有支持的查询数据时，只需按照查询数据模板生成查询数据实例即可。
[0043]
表3查询数据模板示例为了使所属领域技术人员更加清楚明白本技术技术方案，本技术还提供了一个示意性例子，可包括下述内容：a1：实现应用数据采集模板。在应用安装包中集成数据采集agent telegraf和相应应用服务的数据采集模板。
[0044]
a2：初始化数据采集实例。（1）创建应用服务时，使用其应用服务id、名称、用户名、密码等信息初始化数据采集模板生成数据采集实例，即telegraf配置文件。（2）将数据采集agent telegraf和数据采集实例集成到应用服务所在的云主机。（3）云主机中配置好qga服务。
[0045]
a3：部署监控管理系统数据采集代理。在每一个宿主机上部署数据采集agent telegraf，通过qga调用云主机内部的数据采集agent telegraf。
[0046]
a4：部署监控管理系统时序数据库存储集群。telegraf采集完数据后上报数据到时序数据库存储集群。
[0047]
a5：实现应用告警模板。
[0048]
a6：部署监控系统告警任务调度集群。集群会对任意一种告警类型启动一个告警任务。所有告警任务会自动平均分配到多个告警任务实例上去执行。
[0049]
a7：初始化应用告警实例。当有新的应用服务创建后并正常采集数据后，告警任务会识别出并初始化告警实例。
[0050]
a8：初始化数据查询模板。将所有应用服务的所有需要在接口中进行查询的监控数据指标进行初始化，前端或者第三方可以根据数据id查询监控数据指标历史曲线图。
[0051]
由上可知，本实施例可以实现云平台的监控管理系统对应用服务进行监控告警，支持统一数据采集、数据展示和告警模板，可高效的支持多种多样的应用服务的接入，支持告警任务的负载均衡等。
[0052]
本发明实施例还针对应用服务监控方法提供了相应的装置，进一步使得方法更具有实用性。其中，装置可从功能模块的角度和硬件的角度分别说明。下面对本发明实施例提供的应用服务监控装置进行介绍，下文描述的应用服务监控装置与上文描述的应用服务监控方法可相互对应参照。
[0053]
基于功能模块的角度，参见图2，图2为本发明实施例提供的应用服务监控装置在一种具体实施方式下的结构图，该装置可包括：部署模块201，用于预先在云平台的云主机中安装与宿主机交互不依赖网络的通讯装置，并在宿主机中部署数据采集代理；预先将与数据采集代理相匹配的数据采集程序和各类应用服务的数据采集模板集成在应用服务安装包中。
[0054]
数据采集配置模块202，用于当检测到生成目标应用服务，根据目标应用服务的属性信息与其类型相匹配的目标数据采集模板生成数据采集配置文件。
[0055]
数据采集模块203，用于当目标应用服务部署在云主机，获取云主机基于数据采集配置文件所采集的监控性能数据。
[0056]
可选的，在本实施例的一些实施方式中，上述装置还可以包括告警配置模块，用于获取与目标应用服务类型相匹配的目标告警模板；按照目标告警模板自动为目标应用服务生成告警实例；响应阈值设置指令，为告警实例的每个性能条项设置相应的告警阈值。
[0057]
作为本实施例的一种可选的实施方式，上述告警配置模块可用于：判断告警实例所属类型的目标告警任务是否存在；若告警实例所属类型的目标告警任务存在，将告警实例添加至目标告警任务中；若告警实例所属类型的目标告警任务不存在，自动创建告警实例所属类型的目标告警任务，同时将告警实例添加至目标告警任务中。
[0058]
作为本实施例的另一种可选的实施方式，上述告警配置模块可进一步用于：按照预设频率自动为每类告警任务自动生成相应的周期性任务；当检测到目标周期性任务生成，获取目标周期性任务对应告警任务的所有待告警应用服务的当前性能数据值；从各待告警应用服务的告警实例中获取各性能条项的告警阈值；对每个待告警应用服务，根据当前待告警应用服务的当前性能数据值和相应的告警阈值生成告警信息。
[0059]
作为本实施例的其他一种可选的实施方式，上述作告警配置模块还可进一步用于：基于告警任务个数平均和告警任务权重平均，将当前所有告警任务自动平均分配至多个告警任务实例上执行。
[0060]
可选的，在本实施例的另一些实施方式中，上述装置例如还可以包括查询模块，用于预先为每类应用服务配置数据查询模板，并设置查询标识；响应数据查询指令，获取与目标应用服务类型相匹配的目标数据查询模板；根据目标应用服务的查询标识，按照目标数据查询模板生成目标应用服务的数据查询信息。
[0061]
本发明实施例应用服务监控装置的各功能模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。
[0062]
由上可知，本发明实施例可以安全、高效地对云平台的各种类型应用服务进行监控。
[0063]
上文中提到的应用服务监控装置是从功能模块的角度描述，进一步的，本技术还提供一种电子设备，是从硬件角度描述。图3为本技术实施例提供的电子设备在一种实施方式下的结构示意图。如图3所示，该电子设备包括存储器30，用于存储计算机程序；处理器31，用于执行计算机程序时实现如上述任一实施例提到的应用服务监控方法的步骤。
[0064]
其中，处理器31可以包括一个或多个处理核心，比如4核心处理器、8核心处理器，处理器31还可为控制器、微控制器、微处理器或其他数据处理芯片等。处理器31可以采用dsp(digital signal processing，数字信号处理)、fpga(field－programmable gate array，现场可编程门阵列)、pla(programmable logic array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器31也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称cpu(central processing unit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器31可以集成有gpu(graphics processing unit，图像处理器)，gpu用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器31还可以包括ai(artificial intelligence，人工智能)处理器，该ai处理器用于处理有关机器学习的计算操作。
[0065]
存储器30可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器30还可包括高速随机存取存储器以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。存储器30在一些实施例中可以是电子设备的内部存储单元，例如服务器的硬盘。存储器30在另一些实施例中也可以是电子设备的外部存储设备，例如服务器上配备的插接式硬盘，智能存储卡（smart media card，smc），安全数字（secure digital，sd）卡，闪存卡（flash card）等。进一步地，存储器30还可以既包括电子设备的内部存储单元也包括外部存储设备。存储器30不仅可以用于存储安装于电子设备的应用软件及各类数据，例如：执行漏洞处理方法的程序的代码等，还可以用于暂时地存储已经输出或者将要输出的数据。本实施例中，存储器30至少用于存储以下计算机程序301，其中，该计算机程序被处理器31加载并执行之后，能够实现前述任一实施例公开的应用服务监控方法的相关步骤。另外，存储器30所存储的资源还可以包括操作系统302和数据303等，存储方式可以是短暂存储或者永久存储。其中，操作系统302可以包括windows、unix、linux等。数据303可以包括但不限于应用服务监控结果对应的数据等。
[0066]
在一些实施例中，上述电子设备还可包括有显示屏32、输入输出接口33、通信接口
34或者称为网络接口、电源35以及通信总线36。其中，显示屏32、输入输出接口33比如键盘（keyboard）属于用户接口，可选的用户接口还可以包括标准的有线接口、无线接口等。可选地，在一些实施例中，显示器可以是led显示器、液晶显示器、触控式液晶显示器以及oled（organic light
‑
emitting diode，有机发光二极管）触摸器等。显示器也可以适当的称为显示屏或显示单元，用于显示在电子设备中处理的信息以及用于显示可视化的用户界面。通信接口34可选的可以包括有线接口和/或无线接口，如wi
‑
fi接口、蓝牙接口等，通常用于在电子设备与其他电子设备之间建立通信连接。通信总线36可以是外设部件互连标准(peripheral component interconnect，简称pci)总线或扩展工业标准结构(extended industry standard architecture，简称eisa)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图3中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
[0067]
本领域技术人员可以理解，图3中示出的结构并不构成对该电子设备的限定，可以包括比图示更多或更少的组件，例如还可包括实现各类功能的传感器37。
[0068]
本发明实施例所述电子设备的各功能模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。
[0069]
由上可知，本发明实施例可以安全、高效地对云平台的各种类型应用服务进行监控。
[0070]
可以理解的是，如果上述实施例中的应用服务监控方法以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，执行本技术各个实施例方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器（read
‑
only memory，rom）、随机存取存储器（random access memory，ram）、电可擦除可编程rom、寄存器、硬盘、多媒体卡、卡型存储器（例如sd或dx存储器等）、磁性存储器、可移动磁盘、cd
‑
rom、磁碟或者光盘等各种可以存储程序代码的介质。
[0071]
基于此，本发明实施例还提供了一种可读存储介质，存储有计算机程序，所述计算机程序被处理器执行时如上任意一实施例所述应用服务监控方法的步骤。
[0072]
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的硬件包括装置及电子设备而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
[0073]
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
[0074]
以上对本技术所提供的一种应用服务监控方法、装置、电子设备及可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实
施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本技术进行若干改进和修饰，这些改进和修饰也落入本技术权利要求的保护范围内。