管理消息队列节点的方法、装置和系统与流程

本发明涉及计算机领域，尤其涉及一种管理消息队列节点的方法、装置和系统。

背景技术：

目前，基于分布式开发的java应用系统由于可以满足互联网平台在高并发、大流量业务要求下的高性能、高可用性及高架构伸缩性等性能要求，从而得到迅速发展。消息队列作为分布式系统间的重要通信方式，可以实现系统解耦、异步通信等功能，具有提升分布式系统协作效率、缓解集群压力的作用，因此在分布式系统得到广泛的应用。

实际应用中，消息队列的消费往往需要根据业务需求进行频繁启动、暂停(下称启停)，例如海关报关系统，在与各海关交互的过程中需要根据业务需求启停消息队列消费。现有技术中管理消息队列启停的方法主要有：

1.应用本身提供开放入口，通过手动配置hosts文件进行管理。其缺点是操作不便捷，对于多实例的应用来说，操作量较大。

2.采用反射方法调用消息队列状态，对其进行启停操作。其缺点是缺乏可拓展性，每次功能添加都需要代码开发，开发过程复杂且冗余。

在实现本发明的过程中，发明人发现现有技术至少存在以下问题：

1.效率低：现有技术的单点控制在应用实例较多的情况下，管理操作较为复杂，效率较低。

2.安全性差：现有技术的对外开放或者反射获取都会对应用本身的安全性造成影响。

3.拓展性差：现有技术每次添加消息队列消费，都需要单独开发控制的代码，造成代码冗余、拓展性差。

技术实现要素：

有鉴于此，本发明实施例提供一种管理消息队列节点的方法、装置和系统，能够在分布式系统中高效、安全地对消息队列节点进行统一管理，同时拓展性较好。

为实现上述目的，根据本发明的一个方面，提供了一种管理消息队列节点的方法。

本发明实施例的管理消息队列节点的方法包括：创建通信协议，在至少一个消息队列节点根据所述通信协议创建管理工具；获取所述至少一个消息队列节点中的任一消息队列节点向分布式协调服务端发送的注册信息，基于所述注册信息与该消息队列节点建立连接；利用所述管理工具管理该消息队列节点。

可选地，所述分布式协调服务端为zookeeper服务端，所述通信协议为jmx协议，所述管理工具为jmx协议基础部件mbean。

可选地，所述消息队列节点包括：消息队列的生产者、消息队列的消费者、或消息队列的中间件，所述注册信息包括：消息队列节点的ip地址及端口号。

可选地，所述创建通信协议包括：确定mbean的标识、以及至少一种用于管理消息队列节点的管理方法。

可选地，所述管理方法包括以下至少一种：启动、暂停及状态展示。

可选地，所述mbean中封装该mbean的标识、与该mbean的标识对应的至少一个消息队列节点主题、以及至少一种所述管理方法。

可选地，所述利用所述管理工具管理该消息队列节点包括：根据所述mbean的标识确定消息队列节点中的mbean；并针对与该mbean中封装的消息队列节点主题对应的消息队列节点，调用该mbean中封装的所述管理方法进行管理。

为实现上述目的，根据本发明的另一方面，提供了一种管理消息队列节点的装置。

本发明实施例的管理消息队列节点的装置，包括：通信协议创建模块，可用于创建通信协议，在至少一个消息队列节点根据所述通信协议创建管理工具；连接建立模块，可用于获取所述至少一个消息队列节点中的任一消息队列节点向分布式协调服务端发送的注册信息，基于所述注册信息与该消息队列节点建立连接；管理模块，可用于利用所述管理工具管理该消息队列节点。

可选地，所述分布式协调服务端为zookeeper服务端，所述通信协议为jmx协议，所述管理工具为jmx协议基础部件mbean。

可选地，所述消息队列节点包括：消息队列的生产者、消息队列的消费者、或消息队列的中间件，所述注册信息包括：消息队列节点的ip地址及端口号。

可选地，所述通信协议创建模块用于：确定mbean的标识、以及至少一种用于管理消息队列节点的管理方法。

可选地，所述管理方法包括以下至少一种：启动、暂停及状态展示。

可选地，所述mbean中封装该mbean的标识、与该mbean的标识对应的至少一个消息队列节点主题、以及至少一种所述管理方法。

可选地，所述管理模块用于：根据所述mbean的标识确定消息队列节点中的mbean；并针对与该mbean中封装的消息队列节点主题对应的消息队列节点，调用该mbean中封装的所述管理方法进行管理。

为实现上述目的，根据本发明的再一方面，提供了一种管理消息队列节点的系统。

本发明实施例的管理消息队列节点的系统，包括：分布式协调服务端与多个分布式协调客户端；分布式协调客户端包括消息队列管理端与至少一个消息队列节点；其中，所述消息队列节点用于向所述分布式协调服务端发送注册信息；根据所述消息队列管理端创建的通信协议创建管理工具；所述分布式协调服务端用于接收所述消息队列节点发送的注册信息，将所述注册信息向所述消息队列管理端发送；所述消息队列管理端用于利用所述注册信息与消息队列节点建立连接；并在建立连接之后，利用所述管理工具管理消息队列节点。

可选地，所述分布式协调服务端为zookeeper服务端，所述分布式协调客户端为zookeeper客户端，所述通信协议为jmx协议，所述管理工具为jmx协议基础部件mbean。

可选地，所述消息队列节点包括：消息队列的生产者、消息队列的消费者、或消息队列的中间件，所述注册信息包括：消息队列节点的ip地址与端口号。

可选地，所述消息队列管理端用于创建通信协议：确定mbean的标识、以及至少一种用于管理消息队列节点的管理方法。

可选地，所述管理方法包括以下至少一种：启动、暂停及状态展示。

可选地，所述mbean中封装该mbean的标识、与该mbean的标识对应的至少一个消息队列节点主题、以及至少一种所述管理方法。

可选地，所述消息队列管理端用于：根据所述mbean的标识确定消息队列节点中的mbean；并针对与该mbean中封装的消息队列节点主题对应的消息队列节点，调用该mbean中封装的所述管理方法进行管理。

为实现上述目的，根据本发明的又一方面，提供了一种电子设备。

本发明的一种电子设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明所提供的管理消息队列节点的方法。

为实现上述目的，根据本发明的再一方面，提供了一种计算机可读存储介质。

本发明的一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现本发明所提供的管理消息队列节点的方法。

根据本发明的技术方案，上述发明中的一个实施例具有如下优点或有益效果：通过将分布式协调框架zookeeper与jmx协议结合，在分布式系统中实现中心化的统一、高效、可拓展管理消息队列节点的功能，解决了现有的单点控制方法的效率较低、拓展性较差的问题；通过在管理端与消息队列节点建立jmx协议，使得只有满足jmx协议的管理端与消息队列节点才能进行通信，从而避免了恶意访问，提高了系统安全性，解决了现有技术安全性较差的问题；通过采用非入侵式代码开发，引入轻客户端即可实现管理端与消息队列节点的jmx协议通信，从而能够便捷地管理新增的消息消费节点。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明，不构成对本发明的不当限定。其中：

图1是根据本发明实施例的管理消息队列节点的方法的主要步骤示意图；

图2是根据本发明实施例的管理消息队列节点的方法的流程示意图；

图3是根据本发明实施例的管理消息队列节点的装置的主要部分示意图。

图4是根据本发明实施例的管理消息队列节点的系统的组成示意图。

图5是用来实现本发明实施例的管理消息队列节点的方法的电子设备的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

本发明的实施例的技术方案通过将分布式协调框架：动物园管理者(zookeeper)与java管理扩展(javamanagementextensions，jmx)协议结合，在分布式系统中实现中心化的统一、高效、可拓展管理消息队列的功能，解决了现有的单点控制方法的效率较低、拓展性较差的问题；通过在管理端与消息队列节点建立jmx协议，使得只有满足jmx协议的管理端与消息队列节点才能进行通信，从而避免了恶意访问，提高了系统安全性，解决了现有技术安全性较差的问题；通过采用非入侵式代码开发，引入轻客户端即可实现管理端与消息队列节点的jmx协议通信，从而能够便捷地管理新增的消息消费节点。

图1是根据本实施例的管理消息队列节点的方法的主要步骤示意图。

如图1所示，本发明实施例的管理消息队列节点的方法主要包括如下步骤：

步骤s101：创建通信协议，在至少一个消息队列节点根据所述通信协议创建管理工具。

在本发明实施例中，在步骤s101之前，首先建立分布式协调框架用于实现消息队列节点的管理，分布式协调框架包括分布式协调服务端与多个分布式协调客户端。一般地，消息队列管理端与所述至少一个消息队列节点都为分布式协调客户端。

实际应用中，分布式协调框架具体为分布式应用程序协调框架zookeeper，分布式协调服务端为zookeeper服务端，消息队列管理端与所述至少一个消息队列节点都为zookeeper客户端。

在本发明实施例中，zookeeper服务端提供配置维护、名字服务、集群管理的功能，并将消息队列节点的各类数据保存在zookeeper的文件系统中，同时保存消息队列节点上下线的信息。消息队列管理端通过连接zookeeper服务端获取消息队列节点的启停状态，进一步与消息队列节点进行通信，从而对消息队列节点管理。消息队列节点连接zookeeper服务端实现服务注册，并按照消息队列管理端建立的通信协议提供通信内容。消息队列节点可以是：消息队列的生产者、消息队列的消费者或消息队列的中间件。具体应用中，一般通过控制消息队列的中间件达到启停消息队列消费的目的。

在本步骤中，消息队列管理端创建通信协议，在至少一个消息队列节点根据所述通信协议创建管理工具。

实际应用中，通信协议为jmx协议。jmx协议能够监控java虚拟机(javavirtualmachine，jvm)上的内存、中央处理器(centralprocessingunit，cpu)负载等信息，能够管理jvm上的应用，解决分布式管理中存在的问题，jmx协议以jmx协议基础部件mbean为基本类单位进行管理。

在本步骤中，消息队列管理端创建通信协议具体为：消息队列管理端确定mbean的标识以及至少一种管理方法。一般地，管理方法可以是：启动、暂停及状态展示。其中，启动方法用于将处于暂停状态的消息队列节点启动，暂停方法用于将处于启动状态的消息队列节点暂停，状态展示节点用于展示消息队列节点的启动状态或暂停状态。

这样，消息队列管理端建立了jmx协议，确定了mbean的标识、属性与功能，用于后续与消息队列节点进行通信。

在本发明实施例中，在消息队列节点根据通信协议创建管理工具具体为：消息队列节点创建mbean，mbean中封装mbean的标识、与mbean的标识对应的至少一个消息队列节点主题以及至少一种管理方法。

具体应用中，在消息队列管理端建立jmx协议之后，消息队列节点服从该jmx协议，引用消息队列管理端提供的jar包(javaarchive)，建立mbean。一般地，消息队列节点在基础部件容器mbeanserver里注册mbean，该mbean封装map集合信息，所述map集合信息存储消息队列管理端确定的mbean的标识objectname(基础部件的标识)与消息队列节点主题topic的映射关系，该mbean还封装消息队列管理端确定的至少一种管理方法。一般地，map集合信息以xml(可扩展标记语言，extensiblemarkuplanguage)文件形式存储。其中，管理方法包括下列方法中的一种或多种：启动、暂停及状态展示。

这样，通过建立mbean并将mbean信息装载于mbeanserver中，消息队列节点与消息队列管理端实现了通信协议的一致，消息队列管理端可通过objectname确定对应的mbean，从而对消息队列节点进行管理。

步骤s102：获取所述至少一个消息队列节点中的任一消息队列节点向分布式协调服务端发送的注册信息，基于所述注册信息与该消息队列节点建立连接。

在本发明实施例中，在建立zookeeper框架后，作为zookeeper客户端的每一消息队列节点将其注册信息上传到zookeeper服务端实现服务注册。注册信息一般包括：消息队列节点的ip地址与端口号。

在本步骤中，消息队列管理端首先利用zookeeper的通知机制，从zookeeper服务端获取注册信息，实现服务发现功能；之后利用注册信息包括的消息队列节点的ip地址、端口号与该消息队列节点建立连接。

步骤s103：利用所述管理工具管理该消息队列节点。

在具体应用中，与消息队列节点建立连接之后，消息队列管理端可通过mbean的标识objectname确定对应的mbean，进而从该mbean中确定要进行管理的消息队列节点的主题topic，最终确定该topic对应的消息队列节点，选用一种或多种管理方法对该消息队列节点进行操作，从而实现对消息队列节点的管理。

实际应用中，消息队列管理端在对某一消息队列节点进行启停管理时，一般首先通过状态展示方法获得该消息队列节点处于启动状态或暂停状态，之后通过启动方法或暂停方法对该消息队列节点进行管理。

通过上述步骤，本发明实施例的管理消息队列节点的方法在分布式应用系统中实现了消息队列节点的中心化、统一管理的功能，可根据业务需求对任一消息队列节点进行状态展示、启动或暂停等操作。

特别地，在本发明实施例中，zookeeper服务端可保存消息队列节点上下线的信息，从而实时检测消息队列节点的在线状态。如果需要对新增节点进行管理，则将新增节点的ip地址、端口号发送到消息队列管理端，消息队列管理端可在map集合信息中补入新增节点topic，即可对新增节点进行管理。

需要说明的是，本发明实施例的管理消息队列节点的方法可以采用zookeeper之外的、具有类似功能的其它分布式协调系统、与jmx之外的、具有类似功能的通信协议实现管理消息队列节点的功能。

图2是根据本发明实施例的管理消息队列节点的方法的流程示意图。

如图2所示，本发明实施例的管理消息队列节点的方法通过以下步骤得以实现：建立zookeeper服务端、消息队列节点服务注册、消息队列节点mbean装载、消息队列管理端服务发现、消息队列管理端与消息队列节点建立连接、消息队列管理端通过jmx协议管理消息队列节点。

从以上描述可以看出，因为采用了将分布式协调框架zookeeper与jmx协议结合的技术手段，从而在分布式系统中实现中心化的统一、高效、可拓展管理消息队列的功能，解决了现有的单点控制方法的效率较低、拓展性较差的问题；通过在管理端与消息队列节点建立jmx协议，使得只有满足jmx协议的管理端与消息队列节点才能进行通信，从而避免了恶意访问，提高了系统安全性，解决了现有技术安全性较差的问题；通过采用非入侵式代码开发，引入轻客户端即可实现管理端与消息队列节点的jmx协议通信，从而能够便捷地管理新增的消息消费节点。

图3是根据本发明实施例的管理消息队列节点的装置的主要部分示意图。

如图3所示，本发明实施例的管理消息队列节点的装置300包括：通信协议创建模块301、连接建立模块302以及管理模块303。其中：

通信协议创建模块301可用于创建通信协议，在至少一个消息队列节点根据所述通信协议创建管理工具。

连接建立模块302可用于获取所述至少一个消息队列节点中的任一消息队列节点向分布式协调服务端发送的注册信息，基于所述注册信息与该消息队列节点建立连接。

管理模块303可用于利用所述管理工具管理该消息队列节点。

实际应用中，所述分布式协调服务端为zookeeper服务端，所述通信协议为jmx协议，所述管理工具为jmx协议基础部件mbean。

较佳地，在本发明优选实施例中，所述消息队列节点可包括：消息队列的生产者、消息队列的消费者、或消息队列的中间件，所述注册信息可包括：消息队列节点的ip地址及端口号。

在本发明实施例中，所述通信协议创建模块301用于：确定mbean的标识、以及至少一种管理方法。所述管理方法包括以下至少一种：启动、暂停及状态展示。

作为一个优选方案，所述通信协议创建模块301用于：在所述至少一个消息队列节点中的任一消息队列节点创建mbean，所述mbean中封装所述mbean的标识、与所述mbean的标识对应的至少一个消息队列节点主题、以及至少一种管理方法。

此外，在本发明优选实施例中，所述管理模块303用于：根据所述mbean的标识确定消息队列节点中的mbean；并针对与该mbean中封装的消息队列节点主题对应的消息队列节点，调用该mbean中封装的管理方法进行管理。

图4是根据本发明实施例的管理消息队列节点的系统的组成示意图。

如图4所示，本发明实施例的管理消息队列节点的系统可包括：分布式协调服务端401与多个分布式协调客户端。分布式协调客户端包括消息队列管理端402与至少一个消息队列节点403。其中：

所述消息队列节点403可用于向所述分布式协调服务端401发送注册信息；根据所述消息队列管理端402建立的通信协议创建管理工具。

所述分布式协调服务端可用于接收所述消息队列节点403的注册信息，将所述注册信息向所述消息队列管理端402发送。

所述消息队列管理端402可用于利用获取的消息队列节点403的注册信息，与消息队列节点403建立连接；并在建立连接之后，利用所述管理工具管理消息队列节点403。

在本发明实施例中，所述分布式协调服务端为zookeeper服务端，所述分布式协调客户端为zookeeper客户端，所述通信协议为jmx协议，所述管理工具为jmx协议基础部件mbean，所述消息队列节点包括：消息队列的生产者、消息队列的消费者、或消息队列的中间件，所述注册信息包括：消息队列节点的ip地址与端口号。

实际应用中，所述消息队列管理端402可用于创建通信协议；所述创建通信协议包括：确定mbean的标识、以及至少一种管理方法。所述管理方法包括以下至少一种：启动、暂停及状态展示。所述消息队列节点403可用于：在所述消息队列管理端建立通信协议之后，创建mbean，所述mbean中封装所述mbean的标识、与所述mbean的标识对应的至少一个消息队列节点主题、以及至少一种管理方法。

此外，在本发明实施例中，所述消息队列管理端402可用于：根据所述mbean的标识确定消息队列节点中的mbean；并针对与该mbean中封装的消息队列节点主题对应的消息队列节点，调用该mbean中封装的管理方法进行管理。

本发明还提供了一种电子设备。

本发明实施例的电子设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明所提供的管理消息队列节点的方法。

下面参考图5，其示出了适于用来实现本发明实施例的电子设备的计算机系统500的结构示意图。图5示出的电子设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图5所示，计算机系统500包括中央处理单元(cpu)501，其可以根据存储在只读存储器(rom)502中的程序或者从存储部分508加载到随机访问存储器(ram)503中的程序而执行各种适当的动作和处理。在ram503中，还存储有计算机系统500操作所需的各种程序和数据。cpu501、rom502以及ram503通过总线504彼此相连。输入/输出(i/o)接口505也连接至总线504。

以下部件连接至i/o接口505：包括键盘、鼠标等的输入部分506；包括诸如阴极射线管(crt)、液晶显示器(lcd)等以及扬声器等的输出部分507；包括硬盘等的存储部分508；以及包括诸如lan卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至i/o接口505。可拆卸介质511，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器510上，以便从其上读出的计算机程序根据需要被安装入存储部分508。

特别地，根据本发明公开的实施例，上文的主要步骤图描述的过程可以被实现为计算机软件程序。例如，本发明实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行主要步骤图所示的方法的程序代码。在上述实施例中，该计算机程序可以通过通信部分509从网络上被下载和安装，和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元501执行时，执行本发明的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。在本发明中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、rf等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这根据所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，例如，可以描述为：一种处理器包括通信协议创建模块、连接建立模块和管理模块。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定，例如，通信协议创建模块还可以被描述为“向所连接的管理模块发送管理工具的单元”。

作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中的。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该设备执行时，使得该设备执行的步骤包括：创建通信协议，在至少一个消息队列节点根据所述通信协议创建管理工具；获取所述至少一个消息队列节点中的任一消息队列节点向分布式协调服务端发送的注册信息，基于所述注册信息与该消息队列节点建立连接；利用所述管理工具管理该消息队列节点。

根据本发明实施例的技术方案，通过将分布式协调框架zookeeper与jmx协议结合，在分布式系统中实现中心化的统一、高效、可拓展管理消息队列的功能，解决了现有的单点控制方法的效率较低、拓展性较差的问题；通过在管理端与消息队列节点建立jmx协议，使得只有满足jmx协议的管理端与消息队列节点才能进行通信，从而避免了恶意访问，提高了系统安全性，解决了现有技术安全性较差的问题；通过采用非入侵式代码开发，引入轻客户端即可实现管理端与消息队列节点的jmx协议通信，从而能够便捷地管理新增的消息消费节点。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。