模块的节点调度方法、装置、电子设备及存储介质与流程

1.本发明实施例涉及跨集群模块技术领域，尤其涉及一种模块的节点调度方法、装置、电子设备及存储介质。


背景技术：

2.在分布式系统产品中，一个功能的实现往往需要多个业务模块协作完成。其中每个模块可以多节点部署，同时每个模块节点都有对应的能力级。当硬件资源固定的情况下，在系统部署的时候，考虑到整系统能力的协调性，不同业务模块部署的数量对应提供的能力是相互平衡的。
3.但是在系统长期运行的过程中，可能会出现部分节点逐渐故障的情况，那此时随着不同模块节点故障的数量不同，其对应提供的业务能力也可能不对等，导致整系统能力受到故障最多的业务模块能力的限制，资源存在浪费的情况。
4.因此急需一种方法，使得高优先级业务以及整机系统能力尽量最大化。


技术实现要素：

5.本发明实施例提供了一种模块的节点调度方法、装置、电子设备及存储介质，以实现高优先级业务以及整机系统能力最大化。
6.第一方面，本发明实施例提供了一种模块的节点调度方法，适用于分布式系统中，其中，所述分布式系统中包括至少两个模块，各模块中包括至少一个节点，所述方法包括：
7.若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；
8.根据所述目标模块的优先级，确定请求所述分布式系统中的支援模块；
9.通过所述目标模块向所述支援模块发送节点支援请求，以调度所述支援模块的节点处理所述目标模块的业务。
10.第二方面，本发明实施例还提供了一种模块的节点调度装置，适用于分布式系统中，其中，所述分布式系统中包括至少两个模块，各模块中包括至少一个节点，所述装置包括：
11.目标模块确定模块，用于若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；
12.支援模块确定模块，用于根据所述目标模块的优先级，确定请求所述分布式系统中的支援模块；
13.节点支援请求发送模块，用于通过所述目标模块向所述支援模块发送节点支援请求，以调度所述支援模块的节点处理所述目标模块的业务。
14.第三方面，本发明实施例还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如本发明实施例中任一所述的模块的节点调度方法。
15.第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机
程序，该程序被处理器执行时实现如本发明实施例中任一所述的模块的节点调度方法。
16.本发明通过提供一种模块的节点调度方法，适用于分布式系统中，其中，所述分布式系统中包括至少两个模块，各模块中包括至少一个节点，所述方法包括：若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；然后根据目标模块的优先级，确定请求分布式系统中目标模块的支援模块；通过支援模块向目标模块调度节点，进而实现高效率地处理目标模块的业务。采用上述技术手段能够实现高优先级业务以及整机系统能力最大化。
附图说明
17.图1是本发明实施例一中提供的一种模块的节点调度方法的流程示意图；
18.图2是本发明实施例二中提供的一种模块的节点调度方法的流程示意图；
19.图3是本发明实施例三中提供的一种模块的节点调度装置的结构示意图；
20.图4是本发明实施例四中提供的一种设备的结构示意图。
具体实施方式
21.下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
22.在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理，但是其中的许多步骤可以被并行地、并发地或者同时实施。此外，各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等。
23.实施例一
24.图1是本发明实施例一提供的一种模块的节点调度方法的流程示意图，本实施例可适用于分布式系统中不同模块节点分配的情况，适用于分布式系统中，其中，分布式系统中包括至少两个模块，各模块中包括至少一个节点。该方法可以由一种模块的节点调度装置来执行，该装置可以采用软件和/或硬件的方式实现，并可集成于电子设备中，具体包括如下步骤：
25.s110、若当前模块检测到节点调度触发事件，则确定当前模块为目标模块。
26.本实施例中，分布式系统中存在至少两个模块在并行处理不同的业务，示例性的，视频监控管理平台的分布式系统中处理业务的模块有：相机接入管理模块、存储建立模块、实况建立模块、用户管理模块和云台管理模块。上述每一个模块执行不同的功能，每一个模块中通过模块内的节点执行任务。本实施例中，当前模块可以是分布式系统中的至少两个模块中的任意一个模块。节点调度触发事件是用于调度不同模块之间节点的触发指令。目标模块是指分布式系统中进行请求支援的模块。
27.在本实施例中，可选的，所述若当前模块检测到节点调度触发事件，则确定当前模块为目标模块，包括：
28.在所述当前模块中正在运行的节点中确定一个节点作为主节点，其余节点作为分
节点；
29.控制所述主节点按照预设时间间隔发送节点运行检测消息至所述分节点；
30.若检测到主节点或者分节点中存在至少一个节点运行状态为静止状态，则确定存在节点调度触发事件，并确定所述当前模块为目标模块。
31.本实施例中，主节点在当前模块中有且仅为一个，其中，主节点可以是当前模块中正在运行的节点中的任意一个节点，也可以是当前模块中第一个上线的节点。本实施例中，若主节点出现故障，则从当前模块中的分节点中重新确定一个节点作为主节点。
32.本实施例中，预设时间间隔是分布式系统中的模块预设设置的。节点运行检测消息是用于判断接收消息的节点是否正在运行。本实施例中，还可以是分节点按照预设的时间间隔发送保活报文至主节点，进而使系统确定各个节点的运行状态。
33.本实施例中，节点运行状态为静止状态时，说明节点当前处于故障中，则存在节点调度触发事件，并将当前模块确定为目标模块。这样设置的好处是能够及时发现需要被支援的目标模块，使得系统处理业务的能力最大化。
34.本实施例中，还可以是检测到节点的数量增多的情况，这种情况下，节点是由故障状态转化为正在运行的状态。此时，当前模块可以用于支援其他模块。
35.若分布式系统中存在优先级高于当前模块优先级的模块需要支援，则将需要支援的高优先级模块按照优先级的顺序由大到小进行排序，使得被支援模块被支援后满足nz·cz
≤maxz；其中，nz为被支援模块当前正在运行的节点数量，cz为被支援模块的能力容量级，maxz为被支援模块最大可获得的能力容量值。
36.若分布式系统中的高优先级模块不需要支援，则在同优先级模块中进行比较，确定能力容量值最小的模块，并对该模块进行支援。其中，支援后需要满足nz·cz
≤nm·cm
且(nz+1)
·cz
≥(n
m-1)
·cm
且nm·cm
≤maxm；其中，nz为被支援模块当前正在运行的节点数量，nm为当前模块当前正在运行的节点数量；cz为被支援模块的能力容量级，cm为当前模块的能力容量级，maxm为当前模块最大可获得的能力容量值。
37.若分布式系统中的同优先级的模块无需支援，则对低优先级的模块进行支援。将低优先级的模块按照优先级的大小顺序进行排序，其中，被支援后的被支援模块满足：nz·cz
≤maxz；其中，nz为被支援模块当前正在运行的节点数量，cz为被支援模块的能力容量级，maxz为被支援模块最大可获得的能力容量值。
38.s120、根据所述目标模块的优先级，确定请求所述分布式系统中的支援模块。
39.本实施例中，优先级是指分布式系统中不同模块的重要级，优先级越高的模块所处理的业务的重要级越高，进而需要保证的剩余能力值也越大。示例性的，视频监控管理平台的分布式系统中的模块的优先级从高到低为：设备接入管理模块、存储建立模块、实况建立模块、用户管理模块和云台建立模块。
40.本实施例中，支援模块是指分布式系统中被调度节点的模块，可以是除目标模块的其他模块。
41.s130、通过所述目标模块向所述支援模块发送节点支援请求，以调度所述支援模块的节点处理所述目标模块的业务。
42.本实施例中，节点支援请求是用于指示分布式系统中其他模块调度节点以支援目标模块的消息指令。本实施例中，支援模块的节点在处理本模块的任务时，节点是相对冗余
的。因此，支援模块能够通过调度本模块的节点处理目标模块的业务，实现不同模块之间的能力容量值尽量平衡的目的。
43.本发明实施例通过提供一种模块的节点调度方法，适用于分布式系统中，其中，所述分布式系统中包括至少两个模块，各模块中包括至少一个节点，所述方法包括：若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；然后根据目标模块的优先级，确定请求分布式系统中目标模块的支援模块；通过支援模块向目标模块调度节点，进而实现高效率地处理目标模块的业务。采用上述技术手段能够实现高优先级业务以及整机系统能力最大化。
44.实施例二
45.图2是本发明实施例二提供的一种模块的节点调度方法的流程示意图，本实施例是在实施例一的基础上的进一步细化，该方法可以由一种模块的节点调度装置来执行，该装置可以采用软件和/或硬件的方式实现，并可集成于电子设备中，具体包括如下步骤：
46.s210、若当前模块检测到节点调度触发事件，则确定当前模块为目标模块。
47.s220、确定所述分布式系统是否存在优先级低于所述目标模块的优先级的候选模块。
48.本实施例中，在分布式系统中按照优先级的顺序将不同的模块进行比较，若存在优先级低于目标模块的模块，则将该模块作为候选模块。
49.若是，则执行s230；若否，则执行s240。
50.s230、则确定低于所述目标模块的优先级的候选模块为支援模块。
51.本实施例中，从候选模块中将优先级最低的候选模块作为支援模块，若优先级最低的候选模块无法满足目标模块的节点调度的目标，则从候选模块中确定优先级次低的候选模块作为支援模块。
52.在本实施例中，可选的，采用如下公式确定支援的条件：
53.n
x
·cx
≤max
x
且ny·cy
≥miny；
54.其中，n
x
为所述目标模块当前正在运行的节点数量，ny为所述支援模块当前正在运行的节点数量；c
x
为所述目标模块的能力容量级，cy为所述支援模块的能力容量级；max
x
为所述目标模块最大可获得的能力容量值；miny为所述支援模块最小需保留的能力容量值。
55.本实施例中，目标模块的能力容量级是指目标模块能够处理业务的能力的容量。支援模块的能力容量级是指支援模块能够处理业务的能力的容量。
56.本实施例中，支援模块调度自身的节点进行支援需要保证支援模块能够保持最小需保留的能力容量值且目标模块当前的能力容量值不能超过目标模块当前最大可获得的能力容量值。这样设置的好处是使得低优先级的模块作为支援模块时，能够尽可能地支援目标模块，只需使得低优先级的支援模块满足最小需保留的能力容量值。
57.s240、则确定所述分布式系统是否存在优先级等于所述目标模块的优先级的候选模块；若存在，则确定等于所述目标模块的优先级的候选模块为支援模块。
58.在本实施例中，可选的，采用如下公式确定支援的条件：
59.n
x
·cx
≤ny·cy
且(n
x
+1)
·cx
≥(n
y-1)
·cy
；
60.其中，n
x
为所述目标模块当前正在运行的节点数量，ny为所述支援模块当前正在运行的节点数量；c
x
为所述目标模块的能力容量级，cy为所述支援模块的能力容量级。
61.本实施例中，从优先级相同的候选模块中确定支援模块，则目标模块的能力容量值需小于等于支援模块的能力容量级，即，应当先满足同等优先级的支援模块的能力容量级，进而再去支援目标模块的能力容量级。目标模块若增加一个节点后，目标模块的能力容量级大于支援模块少一个节点的能力容量级后，则支援模块停止调用节点支援目标模块。这样设置的好处是尽可能平衡同优先级的模块之间的能力容量值，使得不同的同优先级的模块均能高效地处理业务。
62.本实施例中，由分布式系统中优先级低于或者等于目标模块优先级的候选模块支援目标模块，能够尽量保证高优先级业务模块的服务被最大化地提供，使得用户最需要的业务能力更高。
63.实施例三
64.图3是本发明实施例三提供的一种模块的节点调度装置的结构示意图。本发明实施例所提供的一种模块的节点调度装置可执行本发明任意实施例所提供的一种模块的节点调度方法，具备执行方法相应的功能模块和有益效果。如图3所示，该装置包括：
65.目标模块确定模块310，用于若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；
66.支援模块确定模块320，用于根据所述目标模块的优先级，确定请求所述分布式系统中的支援模块；
67.节点支援请求发送模块330，用于通过所述目标模块向所述支援模块发送节点支援请求，以调度所述支援模块的节点处理所述目标模块的业务。
68.在本实施例中，可选的，所述目标模块确定模块310，用于：
69.将所述当前模块中正在运行的节点中确定一个节点作为主节点，其余节点作为分节点；
70.控制所述主节点按照预设时间间隔发送节点运行检测消息至所述分节点；
71.若检测到主节点或者分节点中存在至少一个节点运行状态切换为静止状态，则确定存在节点调度触发事件，并确定所述当前模块为目标模块。
72.在本实施例中，可选的，所述支援模块确定模块320，用于：
73.确定所述分布式系统是否存在优先级低于所述目标模块的优先级的候选模块；
74.若是，则确定低于所述目标模块的优先级的候选模块为支援模块。
75.在本实施例中，可选的，所述支援模块确定模块320，用于：
76.若否，则所述分布式系统是否存在优先级等于所述目标模块的优先级的候选模块；
77.若存在，则确定等于所述目标模块的优先级的候选模块为支援模块。
78.在本实施例中，可选的，采用如下公式确定支援的条件：
79.n
x
·cx
≤max
x
且ny·cy
≥miny；
80.其中，n
x
为所述目标模块当前正在运行的节点数量，ny为所述支援模块当前正在运行的节点数量；c
x
为所述目标模块的能力容量级，cy为所述支援模块的能力容量级；max
x
为所述目标模块最大可获得的能力容量值；miny为所述支援模块最小需保留的能力容量值。
81.在本实施例中，可选的，采用如下公式确定支援的条件：
82.n
x
·cx
≤ny·cy
且(n
x
+1)
·cx
≥(n
y-1)
·cy
；
83.其中，n
x
为所述目标模块当前正在运行的节点数量，ny为所述支援模块当前正在运行的节点数量；c
x
为所述目标模块的能力容量级，cy为所述支援模块的能力容量级。
84.所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
85.实施例四
86.图4为本发明实施例四提供的一种设备的结构示意图，图4示出了适于用来实现本发明实施例实施方式的示例性设备的结构示意图。图4显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
87.如图4所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
88.总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(isa)总线，微通道体系结构(mac)总线，增强型isa总线、视频电子标准协会(vesa)局域总线以及外围组件互连(pci)总线。
89.设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
90.系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(ram)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图4未显示，通常称为“硬盘驱动器”)。尽管图4中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如cd-rom,dvd-rom或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。系统存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明实施例各实施例的功能。
91.具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如系统存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明实施例所描述的实施例中的功能和/或方法。
92.设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(lan)，广域网(wan)和/或公共网络，例如因特网)通信。如图4所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。
93.处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及
数据处理，例如实现本发明实施例所提供的一种模块的节点调度方法，包括：
94.若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；
95.根据所述目标模块的优先级，确定请求所述分布式系统中的支援模块；
96.通过所述目标模块向所述支援模块发送节点支援请求，以调度所述支援模块的节点处理所述目标模块的业务。
97.实施例五
98.本发明实施例五还提供一种计算机可读存储介质，其上存储有计算机程序(或称为计算机可执行指令)，该程序被处理器执行时可实现上述任意实施例所述的一种模块的节点调度方法，包括：
99.若当前模块检测到节点调度触发事件，则确定当前模块为目标模块；
100.根据所述目标模块的优先级，确定请求所述分布式系统中的支援模块；
101.通过所述目标模块向所述支援模块发送节点支援请求，以调度所述支援模块的节点处理所述目标模块的业务。
102.本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑磁盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
103.计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
104.计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、rf等等，或者上述的任意合适的组合。
105.可以以一种或多种程序设计语言或其组合来编写用于执行本发明实施例操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++，还包括常规的过程式程序设计语言—诸如”c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
106.注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、
重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。