网站可用性监测方法、装置、设备及介质与流程

本发明涉及数据安全领域，尤其涉及一种多维度的网站可用性监测方法、装置、设备及介质。

背景技术：

网站可用性是网站性能监测的重要指标之一，表示在一段时间内，网站处于正常状态的几率。目前网站的可用性监测通常是从不同的运营商，模拟普通的用户对网站进行访问，然后根据访问的结果及预先定义的策略来判断网站的可用性。但这种方法缺点误报率太高，网络的抖动、或者部分运营商网络故障，都会影响监测的准确率。

技术实现要素：

(一)要解决的技术问题

针对目前存在的技术问题，本发明提出一种多维度的网站可用性监测的方法、装置、设备及介质，通过从网络协议维度、网络环境维度及用户网站维度多个维度采集的网站数据来监测网站的可用性，以提高监测的准确率。

(二)技术方案

本发明提供一种网站可用性监测方法，包括：在不同客户端对目标网站进行监控，通过不同的协议探测获取网络协议数据；根据节点动态分配规则，选择与目标网站相邻且运营商相同的监控节点对目标网站进行监控，获取目标网站的网络环境数据；对目标网站的服务器进行监控，获取服务器cpu、内存、磁盘及网卡流量状态信息，作为目标网站的服务器数据；根据预先配置的策略，对网络协议数据、网络环境数据及服务器数据进行数据分析，得到目标网站的可用性信息。

可选地，网络协议数据至少包括联通状态数据、丢包率，响应时间、服务端口存活状态数据、域名解析状态数据、响应状态数据及请求数据中的一种，所述获取所述目标网站的网络协议数据包括：在客户端对目标网站进行ping监控，获取联通状态数据、丢包率及响应时间；和/或，在客户端对目标网站进行传输控制协议监控，获取服务端口存活状态数据；和/或，在客户端对目标网站进行域名解析探测，获得域名解析状态数据；和/或，在客户端对目标网站进行超文本传输协议监控，获得响应状态数据及请求数据。

可选地，获取目标网站的网络环境数据，选择与目标网站相邻且运营商相同的监控节点对所述目标网站进行监控，还包括：当监测节点为多个时，分别计算每个监测节点采集到的目标网站的数据的权重，根据权重得到网络环境数据。

可选地，根据目标网站的地理位置及运营商信息确定节点分配规则；若只需获取目标网站的访问信息，则不需根据节点动态分配规则选择监控节点，自选监控节点。

可选地，使用简单网络层管理协议采集器对目标网站的服务器进行监控。

可选地，在得到目标网站的可用性信息之后还包括：根据可用性信息生成告警信息，并以邮件或短信的发送告警信息。

可选地，通过采集器采集目标网站的内网服务器数据。

本发明另一方面提供一种网站可用性监测装置，装置包括：客户端采集模块，用于通过不同的协议探测采集目标网站的网络协议数据；调度模块，用于调度与目标网站相邻且运营商相同的监控节点获取网络环境数据；网站采集模块，用于采集目标网站的服务器数据；数据处理模块，用于根据预先配置的策略，对网络协议数据、网络环境数据及服务器数据进行数据分析，得到目标网站的可用性信息；告警模块，用于根据可用性信息生成告警信息。

本发明另一方面还提供一种电子设备，包括：处理器；存储器，其存储有计算机可执行程序，该程序在被所述处理器执行时，使得所述处理器执行本发明中的网站可用性监测方法。

本发明另一方面还提供一种计算机可读介质，其上存储有计算机程序，该程序被处理器执行时实现本发明中的网站可用性监测方法。

(三)有益效果

本发明提供的一种多维度网站可用性监测方法，通过网站协议数据、网站环境数据及网站服务器数据进行分析，得到网站可用性的状态信息。该方法对网站可用性的分析具有综合性，提高网站可用性监控的准确率，及时发现可用性事件，大大降低网站因不可以用造成的损失，同时为网站优化提供数据基础。

附图说明

为了更完整地理解本发明及其优势，现在将参考结合附图的以下描述，其中：

图1示意性示出了根据本发明实施例的多维度网站可用性监测方法方法的流程图。

图2示意性示出了根据本发明实施例的网络协议数据采集示意图

图3示意性示出了根据本发明实施例的网络环境数据采集示意图

图4示意性示出了根据本发明实施例的网站服务器数据采集示意图。

图5示意性示出了根据本发明实施例的多维度网站可用性监测装置的框图。

图6示意性示出了根据本发明实施例的电子设备的框图。

具体实施方式

以下，将参照附图来描述本发明的实施例。但是应该理解，这些描述只是示例性的，而并非要限制本发明的范围。在下面的详细描述中，为便于解释，阐述了许多具体的细节以提供对本发明实施例的全面理解。然而，明显地，一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外，在以下说明中，省略了对公知结构和技术的描述，以避免不必要地混淆本发明的概念。

本发明实施例提出一种多维度的网站可用性监测方法。

图1示意性示出了根据本发明实施例的多维度的网站可用性监测的方法的流程图。

如图1所示，该方法包括：

s1，在不同客户端对目标网站进行监控，通过不同的协议探测获取网络协议数据。

网站服务的可用性包括：服务服务本身不可用，如异常服务宕机，服务因网站自身设计的原因访问慢，遭到分布式拒绝服务(distributeddenialofservice，ddos)攻击，借助代理服务器生成的指向受害主机的合法请求(challengecollapsar，cc)导致资源被耗尽的不可访问，域名系统(domainnamesystem，dns))无法解析，或者dns劫持等因素造成的网站不可用等，如图2所示。基于以上因素，本发明实施例通过分布在不同运营商，不同地理位置的客户端，针对目标网站，实现周期性数据采集，具体地：

(1)在客户端对目标网站进行ping监控，获取站点或服务的联通状态数据、丢包率及数据往返的响应时间(real-timetactics，rtt)。其中。ping监控可以为solarwindsengineer’stoolset(freetrial)、prtgnetworkmonitor(freetrial)、manageenginefreepingandtraceroutetool、nagiosxi、spiceworksnetworkmonitor、emcopingmonitor、pinginfoview、dotcom-monitoricmppingtoolmonitor及poweradmin中的至少一种。

(2)在客户端对目标网站进行传输控制协议监控(transmissioncontrolprotocol，tcp)监控，获取服务端口存活状态数据。

(3)在客户端对目标网站进行dns探测，获得指定域名的解析状态数据，发现网站的区域解析异常以及dns劫持信息。

(4)在客户端对目标网站进行超文本传输协议(hypertexttransferprotocol，http)探测，实时获取目标网站的响应状态数据和请求数据。

其中，上述客户端的四种监控方式为可选服务，根据目标网站的的实际情况，自定义监控策略，可以采用其中的一种或多种监控法师采集目标网站的网络协议数据，即网络协议数据为联通状态数据、丢包率，响应时间、服务端口存活状态数据、域名解析状态数据、响应状态数据及请求数据中的至少一种。采集完网络协议数据后，将其传输至云端数据处理中心。

s2，根据节点动态分配规则，选择与目标网站相邻且运营商相同的监控节点对目标网站进行监控，获取目标网站的网络环境数据。

目前网络互联互通的问题依然存在，比如：跨运营商访问不稳定，不通，网络抖动，丢包，或者访问速度变慢，然而，正是因为这些因素的存在，降低了网络可用性监测的准确性。因此，本发明实施例需要排除互联互通的因素造成的误报，如图3所示，具体的根据目标网站的地理位置和运营商信息，确定节点动态分配规则，根据该规则动态分配监控节点对目标网站进行监控，获取网络环境数据。节点动态分配规则为：选择与目标网站相邻的且运营商相同的监测节点对目标网站进行监控。同时，当监测的节点选取为多个时，分别计算不同节点采集的目标网站的数据的权重，根据权重获得最终的网络环境数据。其中，如果只需要获取全网的访问情况，可以不必根据节点动态分配规则选择监控节点，根据实际需求自选监控节点，满足不同的业务需求。

s3，对目标网站的服务器进行监控，获取服务器cpu、内存、磁盘及网卡流量状态信息，作为目标网站的服务器数据。

网站本身的可用性数据是最直接的体现网站本身可用性状态的关键数据，如果网站所在网络本身出现问题，那么，及时监测出现的网络异常或服务质量，然后及时反馈给网络管理员，提升网站性能，是非常必要的措施。因此，本发明实施例使用简单网络层管理协议(simplenetworkmanagementprotocol，snnp)采集器对目标网站的服务器进行监控，监控并获取服务器cpu，内存，磁盘及网卡流量状态信息，作为目标网站的服务器数据，从而全方位了解网站服务器状态，为网站系统优化提供数据基础。同时，本发明实施例还提出对网站内网服务器集群做监控，只需要在集群内部安装采集器插件，采集器会自动采集内网服务器数据，然后同步到云端，解决了内网状态无法监控的问题，实现监控无死角的目的。整个监控流程如图4所示。

s4，根据预先配置的策略，对网络协议数据、网络环境数据及服务器数据进行数据分析，得到目标网站的可用性信息。

将采集的网络协议数据、网络环境数据及服务器数据汇总到数据处理中心，对数据实现过滤处理，并采用智能数据分析算法根据网站预先配置的策略得到对数据进行分析及状态匹配，得到目标网站的可用性信息。

同时，数据处理中心会将目标网站的可用性信息推送至告警模块，若可用性中包含该目标网站不可用的相关信息，告警模块会根据目标网站不可用的相关信息生成告警信息，并以邮件或短信的形式发送至网站管理员，以便做出相应的优化对策。

综上所述，本发明实施例提出一种多维度网站可用性监测方法，通过网站协议维度、网站环境维度及用户网站维度，周期性采集网站可用性涉及的因素相关的多方面的数据，完成数据的收集，然后对数据进行过滤，智能算法数据分析，最终输出网站可用性的状态信息，提高网站可用性监控的准确率，及时发现可用性事件，大大降低网站因不可以用造成的损失，同时为网站优化提供数据基础。

图5示意性示出了根据本发明实施例的多维度网站可用性监测装置500的框图。

如图5所示，该多维度网站可用性监测装置500依赖于分布式的软件即服务(software-as-a-service，saas)的服务系统，包括客户端采集模块510、调度模块520、网站采集模块530、数据分析模块540及告警模块550。

客户端采集模块510，用于采集目标网站的网络协议数据，包括dns，http，tcp，icmp等网络协议数据。

调度模块520，用于调度与目标网站相邻且运营商相同的监控节点获取网络环境数据，其中，监控节点是根据网站的地理位置和运营商信息，来动态分配的，根据网站站设置不同的采集策略，以及监控节点自身的业务压力，动态分配不同的采集客户端，同时对客户端采集器的存活做动态监控，实时更新采集器状态。

网站采集模块530，用于采集目标网站的服务器数据，具体是使用snnp采集器对目标网站的服务器进行监控，监控并获取服务器cpu，内存，磁盘及网卡流量状态信息，作为目标网站的服务器数据。

数据处理模块540，包括存储系统和数据分析系统，用于存储获取的网络协议数据、网络环境数据及服务器数据，根据预先配置的策略，对网络协议数据、网络环境数据及服务器数据进行数据分析，得到目标网站的可用性信息，并推送给告警模块550。

告警模块550，用于根据可用性信息生成告警信息，若可用性中包含该目标网站不可用的相关信息，告警模块会根据目标网站不可用的相关信息生成告警信息，并以邮件或短信的形式发送至网站管理员，以便做出相应的优化对策。

应当理解，客户端采集模块510、调度模块520、网站采集模块530、数据分析模块540及告警模块550可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合，并在一个模块中实现。根据本发明的实施例，客户端采集模块510、调度模块520、网站采集模块530、数据分析模块540及告警模块550中的至少一个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(fpga)、可编程逻辑阵列(pla)、片上系统、基板上的系统、封装上的系统、专用集成电路(asic)，或可以以对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式的适当组合来实现。或者，客户端采集模块510、调度模块520、网站采集模块530、数据分析模块540及告警模块550中的至少一个可以至少被部分地实现为计算机程序模块，当该程序被计算机运行时，可以执行相应模块的功能。

本发明提供一种电子设备，如图6所示，该电子设备600包括处理器610和存储器620。该电子设备600可以执行根据图1所示的本发明实施例的方法。

具体地，处理器610例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如，专用集成电路(asic))，等等。处理器610还可以包括用于缓存用途的板载存储器。处理器610可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。

存储器620，例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如，可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括：磁存储装置，如磁带或硬盘(hdd)；光存储装置，如光盘(cd-rom)；存储器，如随机存取存储器(ram)或闪存；和/或有线/无线通信链路。

存储器620可以包括计算机程序621，该计算机程序621可以包括代码/计算机可执行指令，其在由处理器610执行时使得处理器610执行根据本公开实施例的方法或其任何变形。

计算机程序621可被配置为具有例如包括计算机程序模块的计算机程序代码。例如，在示例实施例中，计算机程序621中的代码可以包括至少一个程序模块，例如包括模块621a、模块621b、……。应当注意，模块的划分方式和个数并不是固定的，本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合，当这些程序模块组合被处理器610执行时，使得处理器610可以执行根据本公开实施例的方法或其任何变形。

本公开还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的；也可以是单独存在，而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被执行时，实现根据本公开实施例的方法。

根据本公开的实施例，计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、有线、光缆、射频信号等等，或者上述的任意合适的组合。

尽管已经参照本公开的特定示例性实施例示出并描述了本公开，但在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下，可对本公开进行形式和细节上的多种改变。因此，本公开的范围不应该限于上述实施例，而是应该不仅由所附权利要求来进行确定，还由所附权利要求的等同物来进行限定。