消息发送方法和装置与流程

本发明涉及通信技术领域，尤其涉及一种消息发送方法和装置。

背景技术：

集群高可用性(highavailability；以下简称：ha)是指通过尽量缩短因日常维护操作(计划)和突发的系统崩溃(非计划)所导致的停机时间，以提高系统和应用的可用性。

目前主流的集群ha软件使用监测(corosync)软件和资源管理(pacemaker)软件的组合。监测软件实现节点关系管理和通信服务的功能，资源管理软件实现资源管理的功能。部署集中管控模型的集群，可以划分为资源区、网络以及控制(controller)节点三个部分，在资源区，每一个主机(host)均需要部署监测和资源管理软件。资源区内的资源管理选择一个节点作为资源区的主节点(master节点)。如果master节点在资源区内监测到某一节点离开，则由master节点负责向controller节点发送节点离开消息。controller节点收到节点离开消息后，查找到其他有闲置资源的主机之后，将上述节点离开消息发送到有闲置资源的主机进行故障恢复。

但是，当资源区的主节点监测到某一个节点离开，且主节点与controller节点之间的网络不可达，而资源区内又存在有闲置资源的主机时，离开节点上的资源无法进行故障恢复。

技术实现要素：

本发明的目的旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的第一个目的在于提出一种消息发送方法。该方法可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，从而控制节点可以通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

本发明的第二个目的在于提出一种消息发送装置。

为了实现上述目的，本发明第一方面实施例的消息发送方法，应用于部署集中管控模型的集群中，所述集群包括资源区和控制节点，所述资源区中包括至少两个节点，所述至少两个节点与所述控制节点通过网络连接，所述方法包括：所述资源区中的主节点监测到所述资源区中有节点离开；如果所述主节点与所述控制节点之间的网络不可达，或者所述主节点向所述控制节点发送节点离开消息后未收到所述控制节点针对所述节点离开消息的确认消息，并且所述主节点向所述控制节点发送所述节点离开消息的次数达到预设阈值，则所述主节点向所述主节点的相邻非主节点发送节点离开消息，所述节点离开消息包括离开节点的基本信息和所述离开节点上的资源，以使所述主节点的相邻非主节点在与所述控制节点之间的网络可达时，将所述节点离开消息发送给所述控制节点。

本发明实施例的消息发送方法中，资源区中的主节点监测到上述资源区中有节点离开之后，如果主节点与控制节点之间的网络不可达，或者主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且主节点向控制节点发送节点离开消息的次数达到预设阈值，则主节点向上述主节点的相邻非主节点发送节点离开消息，以使上述主节点的相邻非主节点在与控制节点之间的网络可达时，将节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

为了实现上述目的，本发明第二方面实施例的消息发送方法，应用于部署集中管控模型的集群中，所述集群包括资源区和控制节点，所述资源区中包括至少两个节点，所述至少两个节点与所述控制节点通过网络连接，所述方法包括：所述资源区中主节点的相邻非主节点接收所述主节点发送的节点离开消息，所述节点离开消息包括离开节点的基本信息和所述离开节点上的资源，所述节点离开消息是所述主节点监测到所述资源区中有节点离开，所述主节点与所述控制节点之间的网络不可达，或者所述主节点向所述控制节点发送节点离开消息后未收到所述控制节点针对所述节点离开消息的确认消息，并且所述主节点向所述控制节点发送所述节点离开消息的次数达到预设阈值之后发送的；如果所述主节点的相邻非主节点与所述控制节点之间的网络可达，则所述主节点的相邻非主节点将所述节点离开消息发送给所述控制节点。

本发明实施例的消息发送方法中，资源区中主节点的相邻非主节点接收主节点发送的节点离开消息之后，如果上述主节点的相邻非主节点与控制节点之间的网络可达，则主节点的相邻非主节点将上述节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

为了实现上述目的，本发明第三方面实施例的消息发送装置，应用于部署集中管控模型的集群中，所述集群包括资源区和控制节点，所述资源区中包括至少两个节点，所述至少两个节点与所述控制节点通过网络连接，所述消息发送装置设置于所述至少两个节点的主节点中，所述消息发送装置包括：监测模块，用于监测所述资源区中是否有节点离开；发送模块，用于当所述监测模块监测到所述资源区中有节点离开时，如果所述主节点与所述控制节点之间的网络不可达，或者所述主节点向所述控制节点发送节点离开消息后未收到所述控制节点针对所述节点离开消息的确认消息，并且所述主节点向所述控制节点发送所述节点离开消息的次数达到预设阈值，则向所述主节点的相邻非主节点发送节点离开消息，所述节点离开消息包括离开节点的基本信息和所述离开节点上的资源，以使所述主节点的相邻非主节点在与所述控制节点之间的网络可达时，将所述节点离开消息发送给所述控制节点。

上述消息发送装置中，监测模块监测到上述资源区中有节点离开之后，如果主节点与控制节点之间的网络不可达，或者主节点向控制节点发送节点离开消息后未收到控制节点针对上述节点离开消息的确认消息，并且主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值，则发送模块向上述主节点的相邻非主节点发送节点离开消息，以使上述主节点的相邻非主节点在与控制节点之间的网络可达时，将节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

为了实现上述目的，本发明第四方面实施例的消息发送装置，应用于部署集中管控模型的集群中，所述集群包括资源区和控制节点，所述资源区中包括至少两个节点，所述至少两个节点与所述控制节点通过网络连接，所述消息发送装置设置于所述至少两个节点中与主节点相邻的非主节点中，所述消息发送装置包括：接收模块，用于接收所述主节点发送的节点离开消息，所述节点离开消息包括离开节点的基本信息和所述离开节点上的资源，所述节点离开消息是所述主节点监测到所述资源区中有节点离开，所述主节点与所述控制节点之间的网络不可达，或者所述主节点向所述控制节点发送节点离开消息后未收到所述控制节点针对所述节点离开消息的确认消息，并且所述主节点向所述控制节点发送所述节点离开消息的次数达到预设阈值之后发送的；发送模块，用于当所述主节点的相邻非主节点与所述控制节点之间的网络可达时，将所述节点离开消息发送给所述控制节点。

上述消息发送装置中，接收模块接收主节点发送的节点离开消息之后，如果上述主节点的相邻非主节点与控制节点之间的网络可达，则发送模块将上述节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1为本发明消息发送方法一个实施例的流程图；

图2为本发明消息发送方法另一个实施例的流程图；

图3为本发明消息发送方法再一个实施例的流程图；

图4为本发明部署集中管控模型的集群一个实施例的架构图；

图5为本发明消息发送装置一个实施例的结构示意图；

图6为本发明消息发送装置另一个实施例的结构示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。相反，本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。

图1为本发明消息发送方法一个实施例的流程图，上述消息发送方法应用于部署集中管控模型的集群中，上述集群包括资源区和控制节点，上述资源区中包括至少两个节点，上述至少两个节点与上述控制节点通过网络连接。资源区中的每一个节点均需要部署监测和资源管理软件，资源区内的资源管理软件选择一个节点作为资源区的主节点(master节点)。

如图1所示，该消息发送方法可以包括：

步骤101，资源区中的主节点监测到上述资源区中有节点离开。

步骤102，如果上述主节点与上述控制节点之间的网络不可达，或者上述主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值，则主节点向上述主节点的相邻非主节点发送节点离开消息，上述节点离开消息包括离开节点的基本信息和上述离开节点上的资源，以使主节点的相邻非主节点在与上述控制节点之间的网络可达时，将上述节点离开消息发送给控制节点。

也就是说，当资源区中的主节点监测到上述资源区中有节点离开时，如果上述主节点与上述控制节点之间的网络不可达，这时主节点无法向控制节点发送节点离开消息；或者主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值，这两种情形下，主节点可以将节点离开消息发送给主节点的相邻非主节点，如果主节点的相邻非主节点与上述控制节点之间的网络可达，则主节点的相邻非主节点可以将上述节点离开消息发送给控制节点，而如果主节点的相邻非主节点与上述控制节点之间的网络也不可达，则主节点的相邻非主节点可以将上述节点离开消息继续发送给相邻的下一非主节点，以此类推，直到接收到节点离开消息的非主节点与控制节点之间的网络可达，则与控制节点之间的网络可达的非主节点就可以将接收到的节点离开消息发送给控制节点。

其中，当主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息时，说明上述节点离开消息发送失败。此时主节点需要重新向控制节点发送节点离开消息，这时，如果主节点向控制节点发送节点离开消息的次数达到预设阈值，主节点可以将上述节点离开消息发送给主节点的相邻非主节点。

上述预设阈值可以在具体实现时，根据实现需求和/或系统性能等自行设定，本实施例对上述预设阈值的大小不作限定，举例来说，上述预设阈值可以为5。

在网络最坏的情况下，如果上述资源区中所有节点与控制节点之间的网络均不可达，上述主节点发出的上述节点离开消息最终被发送回主节点，也就是说，当上述资源区中所有节点与控制节点之间的网络均不可达时，主节点发出的节点离开消息在被发送了一圈之后又被传送回主节点。这时，在经过预定时长之后，主节点重新向上述主节点的相邻非主节点发送节点离开消息。具体地，主节点可以设置一个定时器，在定时器到时之后，主节点重新发送节点离开消息，确保在资源区中有节点与控制节点之间的网络可达时，可以及时将节点离开消息发送给控制节点。其中，上述预定时长的长短可以在具体实现时自行设定，本实施例对此不作限定，举例来说，上述预定时长可以为10秒。

由于资源区内监测进程支持可靠的通信服务，因此主节点向上述主节点的相邻非主节点发送节点离开消息可以为：主节点的资源管理进程将上述节点离开消息发送给上述主节点的监测进程，上述主节点的监测进程将上述节点离开消息发送给上述主节点的相邻非主节点的监测进程。

上述消息发送方法中，资源区中的主节点监测到上述资源区中有节点离开之后，如果主节点与控制节点之间的网络不可达，或者主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且主节点向上述控制节点发送所述节点离开消息的次数达到预设阈值，则主节点向上述主节点的相邻非主节点发送节点离开消息，以使上述主节点的相邻非主节点在与控制节点之间的网络可达时，将节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

图2为本发明消息发送方法另一个实施例的流程图，上述消息发送方法应用于部署集中管控模型的集群中，上述集群包括资源区和控制节点，上述资源区中包括至少两个节点，上述至少两个节点与上述控制节点通过网络连接。资源区中的每一个节点均需要部署监测和资源管理软件，资源区内的资源管理软件选择一个节点作为资源区的主节点(master节点)。

如图2所示，上述消息发送方法可以包括：

步骤201，上述资源区中主节点的相邻非主节点接收主节点发送的节点离开消息，上述节点离开消息包括离开节点的基本信息和上述离开节点上的资源，上述节点离开消息是主节点监测到上述资源区中有节点离开，上述主节点与控制节点之间的网络不可达，或者主节点向上述控制节点发送节点离开消息后未收到控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值之后发送的。

由于资源区内监测进程支持可靠的通信服务，因此步骤201可以为：主节点的相邻非主节点中的监测进程接收上述主节点的监测进程发送的节点离开消息。

步骤202，如果上述主节点的相邻非主节点与上述控制节点之间的网络可达，则上述主节点的相邻非主节点将上述节点离开消息发送给上述控制节点。

具体地，上述主节点的相邻非主节点将上述节点离开消息发送给上述控制节点可以为：上述主节点的相邻非主节点的监测进程将上述节点离开消息发送给上述主节点的相邻非主节点的资源管理进程，上述主节点的相邻非主节点的资源管理进程将上述节点离开消息发送给上述控制节点。

图3为本发明消息发送方法再一个实施例的流程图，如图3所示，步骤201之后，还可以包括：

步骤301，如果上述主节点的相邻非主节点与控制节点之间的网络不可达，则上述主节点的相邻非主节点将上述节点离开消息发送给相邻的下一非主节点，以此类推，直至接收到上述节点离开消息的非主节点与上述控制节点之间的网络可达，则与上述控制节点之间的网络可达的非主节点将接收到的上述节点离开消息发送给上述控制节点。

具体地，主节点的相邻非主节点中的监测进程接收上述主节点的监测进程发送的节点离开消息之后，将节点离开消息发送给主节点的相邻非主节点中的资源管理进程，这时，由于上述主节点的相邻非主节点与控制节点之间的网络不可达，因此主节点的相邻非主节点中的资源管理进程无法将节点离开消息发送给控制节点，因此主节点的相邻非主节点中的资源管理进程将节点离开消息发送回主节点的相邻非主节点中的监测进程，由主节点的相邻非主节点中的监测进程将节点离开消息发送给相邻的下一非主节点的监测进程。

上述消息发送方法中，资源区中主节点的相邻非主节点接收主节点发送的节点离开消息之后，如果上述主节点的相邻非主节点与控制节点之间的网络可达，则主节点的相邻非主节点将上述节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

本发明图1～图3所示实施例提供的消息发送方法应用于部署集中管控模型的集群中，上述集群的架构图可以如图4所示，图4为本发明部署集中管控模型的集群一个实施例的架构图，参见图4，图4所示的集群包括资源区和控制节点，上述资源区中包括n个节点，n≥2，图4中的host1～hostn即为资源区中的n个节点，host1～hostn与上述控制节点通过网络连接。资源区中的host1～hostn均需要部署监测和资源管理软件，资源区内的资源管理软件选择一个节点作为资源区的主节点(master节点)，这里假设host1作为资源区的master节点，并假设host1～hosti-1与控制节点之间的网络不可达，hosti～hostn与控制节点之间的网络可达，hostn是有闲置资源的主机。如果master节点监测到资源区中某一节点离开，且master节点与控制节点之间的网络不可达，则host1节点向host2节点发送节点离开消息。host2节点收到节点离开消息后，host2节点与控制节点之间的网络也不可达，则host2节点继续将节点离开消息发送给host3节点；参见图4中的虚线①，节点离开消息的发送过程为：host1节点的资源管理进程将节点离开消息发送给host1节点的监测进程，host1节点的监测进程将节点离开消息发送给host2节点的监测进程，host2节点的监测进程将节点离开消息发送给host2节点的资源管理进程，由于host2节点与控制节点之间的网络也不可达，于是host2节点的资源管理进程将节点离开消息返回给host2节点的监测进程，由host2节点的监测进程继续将节点离开消息发送给host3节点的监测进程。

以此类推，当hosti节点收到节点离开消息，由于hosti节点与控制节点之间的网络是可达的，于是hosti节点的资源管理进程向controller节点发送节点离开的消息，消息的发送过程如图4中虚线①所示。控制节点接收到节点离开消息之后，找到有闲置资源和网络可达的节点，将节点离开消息传送给hostn节点，如图4中实线②所示。hostn节点接收到节点离开消息后，对离开节点上的资源进行故障恢复。图4中，节点离开消息的传送顺序为：host1->host2->...hosti->控制节点->hostn。

在网络最坏的情况，资源区内所有节点与控制节点之间的网络均不可达，则主节点(host1)发出的节点离开消息在被发送了一圈之后又被传回给主节点。此时主节点可以设置一个定时器，在定时器到时之后，主节点重新发送节点离开消息，确保在资源区中有节点与控制节点之间的网络可达时，可以及时将节点离开消息发送给控制节点。其中，上述定时器的定时时长的长短可以在具体实现时自行设定，本实施例对此不作限定，举例来说，上述定时器的定时时长可以为10秒。

本发明图1～图3所示实施例提供的消息发送方法按照令牌环的方式依次传递节点离开消息，在没有增加网络的负载的情况下，可以最大可能地将节点离开消息发送给控制节点，确保离开节点上的资源得以进行故障恢复，进而可以提高集群的高可用性。

图5为本发明消息发送装置一个实施例的结构示意图，上述消息发送装置应用于部署集中管控模型的集群中，上述集群包括资源区和控制节点，上述资源区中包括至少两个节点，上述至少两个节点与上述控制节点通过网络连接。资源区中的每一个节点均需要部署监测和资源管理软件，资源区内的资源管理软件选择一个节点作为资源区的主节点(master节点)。本实施例中，上述消息发送装置设置于上述至少两个节点的主节点中。

如图5所示，上述消息发送装置可以包括：监测模块51和发送模块52；

监测模块51，用于监测上述资源区中是否有节点离开；

发送模块52，用于当监测模块51监测到上述资源区中有节点离开时，如果主节点与控制节点之间的网络不可达，或者上述主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值，则向上述主节点的相邻非主节点发送节点离开消息，上述节点离开消息包括离开节点的基本信息和上述离开节点上的资源，以使上述主节点的相邻非主节点在与上述控制节点之间的网络可达时，将上述节点离开消息发送给上述控制节点。

也就是说，当监测模块51监测到上述资源区中有节点离开时，如果主节点与上述控制节点之间的网络不可达，则发送模块52无法向控制节点发送节点离开消息；或者主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值，这两种情形下，发送模块52可以将节点离开消息发送给主节点的相邻非主节点，如果主节点的相邻非主节点与上述控制节点之间的网络可达，则主节点的相邻非主节点可以将上述节点离开消息发送给控制节点，而如果主节点的相邻非主节点与上述控制节点之间的网络也不可达，则主节点的相邻非主节点可以将上述节点离开消息继续发送给相邻的下一非主节点，以此类推，直到接收到节点离开消息的非主节点与控制节点之间的网络可达，则与控制节点之间的网络可达的非主节点就可以将接收到的节点离开消息发送给控制节点。

其中，当主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息时，说明上述节点离开消息发送失败。此时主节点需要重新向控制节点发送节点离开消息，这时，如果主节点向控制节点发送节点离开消息的次数达到预设阈值，主节点可以将上述节点离开消息发送给主节点的相邻非主节点。

上述预设阈值可以在具体实现时，根据实现需求和/或系统性能等自行设定，本实施例对上述预设阈值的大小不作限定，举例来说，上述预设阈值可以为5。

进一步地，发送模块52还用于当上述资源区中所有节点与控制节点之间的网络均不可达时，主节点发出的上述节点离开消息最终被发送回上述主节点，则在经过预定时长之后，重新向上述主节点的相邻非主节点发送节点离开消息。也就是说，在网络最坏的情况下，如果上述资源区中所有节点与控制节点之间的网络均不可达，则发送模块52发出的节点离开消息在被发送了一圈之后又被传送回主节点，这时，在经过预定时长之后，发送模块52可以重新向上述主节点的相邻非主节点发送节点离开消息。具体地，可以设置一个定时器，在定时器到时之后，发送模块52重新发送节点离开消息，确保在资源区中有节点与控制节点之间的网络可达时，可以及时将节点离开消息发送给控制节点。其中，上述预定时长的长短可以在具体实现时自行设定，本实施例对此不作限定，举例来说，上述预定时长可以为10秒。

本实施例中，由于资源区内监测支持可靠的通信服务，因此发送模块52，具体用于通过上述主节点的资源管理进程将上述节点离开消息发送给上述主节点的监测进程，再由上述主节点的监测进程将上述节点离开消息发送给上述主节点的相邻非主节点的监测进程。

上述消息发送装置中，监测模块51监测到上述资源区中有节点离开之后，如果主节点与控制节点之间的网络不可达，或者上述主节点向控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值，则发送模块52向上述主节点的相邻非主节点发送节点离开消息，以使上述主节点的相邻非主节点在与控制节点之间的网络可达时，将节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

图6为本发明消息发送装置另一个实施例的结构示意图，应用于部署集中管控模型的集群中，上述集群包括资源区和控制节点，上述资源区中包括至少两个节点，上述至少两个节点与上述控制节点通过网络连接。资源区中的每一个节点均需要部署监测和资源管理软件，资源区内的资源管理软件选择一个节点作为资源区的主节点(master节点)。上述消息发送装置设置于上述至少两个节点中与主节点相邻的非主节点中。

如图6所示，上述消息发送装置可以包括：接收模块61和发送模块62；

其中，接收模块61，用于接收上述主节点发送的节点离开消息，上述节点离开消息包括离开节点的基本信息和上述离开节点上的资源，上述节点离开消息是主节点监测到上述资源区中有节点离开，上述主节点与上述控制节点之间的网络不可达，或者上述主节点向上述控制节点发送节点离开消息后未收到上述控制节点针对上述节点离开消息的确认消息，并且上述主节点向上述控制节点发送上述节点离开消息的次数达到预设阈值之后发送的；由于资源区内监测进程支持可靠的通信服务，因此本实施例中，接收模块61，具体用于通过上述主节点的相邻非主节点中的监测进程接收上述主节点的监测进程发送的节点离开消息。

发送模块62，用于当上述主节点的相邻非主节点与上述控制节点之间的网络可达时，将上述节点离开消息发送给上述控制节点。本实施例中，发送模块62，具体用于通过上述主节点的相邻非主节点的监测进程将上述节点离开消息发送给上述主节点的相邻非主节点的资源管理进程，再由上述主节点的相邻非主节点的资源管理进程将上述节点离开消息发送给上述控制节点。

进一步地，发送模块62，还用于当上述主节点的相邻非主节点与上述控制节点之间的网络不可达时，将上述节点离开消息发送给相邻的下一非主节点，以此类推，直至接收到上述节点离开消息的非主节点与上述控制节点之间的网络可达，则与上述控制节点之间的网络可达的非主节点将接收到的节点离开消息发送给上述控制节点。

具体地，接收模块61通过主节点的相邻非主节点中的监测进程接收上述主节点的监测进程发送的节点离开消息之后，发送模块62通过监测进程将节点离开消息发送给主节点的相邻非主节点中的资源管理进程，这时，由于上述主节点的相邻非主节点与控制节点之间的网络不可达，因此发送模块62无法通过主节点的相邻非主节点中的资源管理进程将节点离开消息发送给控制节点，因此发送模块62通过主节点的相邻非主节点中的资源管理进程将节点离开消息发送回主节点的相邻非主节点中的监测进程，由主节点的相邻非主节点中的监测进程将节点离开消息发送给相邻的下一非主节点的监测进程。

上述消息发送装置中，接收模块61接收主节点发送的节点离开消息之后，如果上述主节点的相邻非主节点与控制节点之间的网络可达，则发送模块62将上述节点离开消息发送给上述控制节点，从而可以在资源区中的主节点与控制节点之间的网络不可达时，最大可能地将节点离开消息发送到控制节点，以便控制节点通知其他有闲置资源的节点对离开节点上的资源进行故障恢复，进而可以提高集群的高可用性。

需要说明的是，在本发明的描述中，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。此外，在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。

应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(programmablegatearray；以下简称：pga)，现场可编程门阵列(fieldprogrammablegatearray；以下简称：fpga)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，本发明各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。