一种适配毫秒级源网荷切负荷的5G切片编排方法与流程

一种适配毫秒级源网荷切负荷的5g切片编排方法
技术领域
1.本发明涉及一种适配毫秒级源网荷切负荷的5g切片编排方法，属于通信领域。


背景技术：

2.近年来，随着电力系统形态朝着双向多能源互联互动方向发展，柔性可变负荷爆发式接入，新能源大量并网背景下的柔性负荷特性各异，同时其分布区域离散化，随机性较强的环境因素更加剧了负荷的不确定性，配电网故障频率显著上升，在配电网故障前期，其频率快速下降，需要通过源网荷切负荷系统及时下发指令，精确、快速、可靠切除可中断负荷，及时控制故障发生范围，为满足电网安全稳定要求，保证切负荷迅速执行，避免造成较大的经济损失及社会影响，源网荷切负荷业务指令数据下发的传输时延应控制在毫秒级。且其指令下发时延主要包括路由转发时延和空口时延，其性能提升的关键在于核心网路由路径选择和接入网子频带选择。
3.而第五代移动通信技术(5th-generation，5g)以其大带宽、低时延、高可靠、广连接的优点，为源网荷切负荷毫秒级需求提供了有效的通信手段，毫秒级切负荷业务要求负荷终端的精准控制与灵活响应，基于5g毫秒级时延性能，通过合理的5g电力通信网业务编排，毫秒级源网荷切负荷的实时通信需求可得到充分满足，然而，面向毫秒级源网荷切负荷的5g切片编排技术还需要解决如下技术挑战：
4.第一，差异化传输方式下的中继路由路径与子频带选择联合优化，切负荷指令下发时延性能由核心网路由路径选择和接入网子频带选择共同决定，且在核心网传输过程中为有线传输而在接入网传输过程中为无线传输，如何有效构建决策模型，进而实现5g切片有效传输编排，是一个亟待解决的问题。
5.第二，全局信息不确定，电力系统通信中信道状态严重影响切负荷指令传输性能，而获取信道状态信令开销大，获取信道状态的全局信息并不现实，因此需要设计算法在信息不确定情况下优化路由路径与子频带选择，降低切负荷指令下发时延。
6.第三，电磁干扰影响，电力系统通信中无线传输易受电力设备等影响，而突发变化的电磁干扰会大幅度降低网络传输性能。因此，需要模拟实际情况下存在电磁干扰突变时的切负荷指令传输性能，以保证源网荷切负荷业务在所提方法下正常进行。
7.因此，迫切需要设计一种适配毫秒级源网荷切负荷的5g切片编排方法，提升电网系统安全性和可靠性。


技术实现要素：

8.为解决上述技术问题，本发明的目的是提供一种适配毫秒级源网荷切负荷的5g切片编排方法，具体切片编排步骤为：
9.构建基于5g网络层的毫秒级源网荷切负荷优化配置架构，由控制主站通过控制子站下发切负荷指令，通过核心网中继路由器转发至基站，进而通过基站在接入网利用子频带资源下将切负荷指令发至切负荷终端，在该优化配置架构下通过控制子站进行中继路由
路径和子频带选择，实现源网荷切负荷系统在电网应急情况下切负荷指令5g切片的毫秒级传输；
10.将毫秒级源网荷切负荷优化配置架构所构建的系统模型分别建模为核心网和接入网的传输速率模型以及核心网和接入网的传输时延模型。进而将中继路由路径和子频带选择联合优化问题描述为最小化传输总时延问题；
11.将上述中继路由路径和子频带选择联合优化问题转化成mab问题(multi-armed bandit，多臂老虎机)，利用ucb算法的学习能力，通过控制子站观察历史传输性能，不断更新不同选择奖励值并进行最优中继路由路径与子频带选择，实现毫秒级切负荷的5g切片编排。
12.优选的，所述控制子站下发的切负荷指令5g切片为q(u,m,b,c,s)，控制子站为u，核心网中继路由器为m，数据经基站传输至切负荷终端所需的子频带资源为c，切负荷指令5g切片数据包大小为d，接受切负荷指令的切负荷终端为s，控制子站所产生的切负荷指令5g切片个数记作i,i∈{1,...i,...,i}，采用离散化正交子频带方法表示基站与切负荷终端间的子频带资源，其集合为路由传输层物理网络视为有向图具备转发能力的中继路由器表示为j为路由器总数量，v1为控制子站路由，因此数据转发层中共有j-1个中继路由器，由相连接的路由器所构成的转发链路集合表示为h(vj)为与路由器vj所连接的下一跳中继路由器集合，在基站和控制子站路由器之间存在k条路径，其集合表示为其中fk代表在v1下发指令至基站的第k条传输路径，路径fk中共有n个路由器且n《j-1，定义控制子站路由器从路径fk传输切负荷指令5g切片数据包至基站所经过的路由器集合为其中1≤n≤n，且和分别表示路径fk中的控制子站路由器和基站，设5g切片数据包不可分割，即在切负荷指令下发传输过程中，每个5g切片数据包只能通过一条路由链路传输至基站，且只能选择一个子频带传输至切负荷终端，基于上述限定设置时隙模型，设总优化过程有t个时隙，集合表示为同时设路由链路和子频带状态信息和在一个时隙内保持不变，在不同时隙间动态变化，定义时隙长度为5g切片数据包从控制子站路由器传输至切负荷终端的传输时延。
13.优选的，传输速率模型定义控制子站第t个时隙所产生的第i个5g切片数据包经过路径fk由中继路由器到的传输速率为从基站选择第l个子带传输至切负荷终端的传输速率为分别为：
[0014][0015][0016]
其中，为子频带c
l
的带宽，为第t时隙第i个数据包在路径fk中的两个中继路由器之间传输时的链路带宽，与分别为路由器到之间的信噪比以及基站与切负荷终端间的信干噪比，分别计算为：
[0017][0018][0019]
其中，为第t时隙第i个数据包在中继路由器到之间的链路增益，为第t时隙第i个数据包从基站至切负荷终端之间的子频带信道增益，和分别为路径fk中从到和基站与切负荷终端间的噪声功率，和分别为路径fk中的从到和基站与切负荷终端间的链路传输功率，为基站与切负荷终端间传输所受到的电磁干扰。
[0020]
优选的，传输时延模型为构建控制子站路由器下发指令到基站的中继转发时延模型和基站转发指令到切负荷终端的空口时延模型，其中第t时隙第i个数据包在路径fk中的到的中继转发时延为：
[0021][0022]
则第i个数据包选择路径fk经路由器转发到基站的总传输时延表示为：
[0023][0024]
其中是二进制指示变量，表示第i个数据包从传输到否则
[0025]
基站与切负荷终端之间传输的空口时延可以表示为：
[0026][0027]
其中，为二进制指示变量，若基站在第t个时隙将第i个数据流传输至终端时，选择子频带c
l
传输，则否则
[0028]
在5g切片数据包由控制子站路由器传输至切负荷终端的过程中，5g切片数据包传输的总时延由路由器转发时延和空口时延构成，可以表示为：
[0029][0030]
优选的，而最小化传输总时延问题所优化的问题可以构建为：
[0031][0032][0033][0034]
[0035][0036]
其中，c1表示路由选择约束，c2表示子频带选择约束，c3表示最大空口时延约束，c4表示路径fk的最大时延约束。
[0037]
优选的，mab问题还包括对决策者、摇臂、奖赏、动作和策略的设计，具体如下，
[0038]
决策者：执行策略并产生动作的主体，即可以通过学习历史反馈的奖赏值，不断更新策略，将控制子站作为决策者，通过不断学习中继路由器以及子频带历史传输性能进行决策；
[0039]
摇臂：决策者可以进行动作的候选项，即有多少个候选项即有多少个摇臂，将中继路由器与子频带构成的可选组合定义为摇臂，共有k*l个摇臂；
[0040]
奖赏：每个回合决策者进行动作之后收到的反馈信息，即定义控制子站选择中继路由路径fk以及子频带c
l
将切负荷指令下发至切负荷终端所获得的奖励为传输总时延的倒数，表示为：
[0041][0042]
动作：决策者按下摇臂，将控制子站选择中继路由路径以及子频带的行为定义为动作；
[0043]
策略：执行动作的依据，将不同中继路由路径以及子频带选择策略的组合定义为策略。
[0044]
优选的，mab问题定义选择中继路由路径以及子频带策略组合的变量为优选的，mab问题定义选择中继路由路径以及子频带策略组合的变量为表示控制子站选择路径fk传输数据包i至基站，并进一步通过子频带c
l
传输切负荷指令5g切片数据包至终端。
[0045]
优选的，ucb算法分为变量初始化、决策制定和学习3个阶段，具体为，
[0046]
①
初始化阶段，设置在前k*l个时隙数据包传输时，控制子站遍历选择所有的中继路由路径和子频带组合，并观测其传输性能。
[0047]
②
决策制定阶段，控制子站通过历史经验，在第t个时隙对传输路径fk以及子频带c
l
的偏好估计值可以计算为：
[0048][0049]
式中为第t个时隙前路径fk以及子频带c
l
的经验估计值，估计值越大，说明该组合被选中的概率越高；为置信区间，表示估计值的不确定度；为前(t-1)个时隙路径fk和子频带c
l
被选择的总次数。控制子站根据选择偏好值最大的中继路由路径和子频带组合，其表达式为：
[0050][0051]
③
学习阶段，控制子站观察历史传输性能τ
isum
(t)，并更新平均奖励值和选择次数其表达式分别为：
[0052][0053][0054]
令t＝t+1，直到t＞t时，ucb算法终止。
[0055]
优选的，所述优化配置架构包括：主站层、子站层、5g网络层及终端用户层；
[0056]
所述主站层包括控制主站，所述子站层包括控制子站，所述5g网络层包括核心网及接入网，所述终端用户层包括切负荷终端；
[0057]
所述控制主站通过控制子站下发切负荷指令，通过核心网中继路由器转发至基站，进而通过基站在接入网利用子频带资源下将切负荷指令发至切负荷终端，在所述优化配置架构下通过控制子站进行中继路由路径和子频带选择，实现源网荷切负荷系统在电网应急情况下切负荷指令5g切片的毫秒级传输；
[0058]
将毫秒级源网荷切负荷优化配置架构所构建的系统模型分别建模为核心网和接入网的传输速率模型以及核心网和接入网的传输时延模型，进而将中继路由路径和子频带选择联合优化问题描述为最小化传输总时延问题；
[0059]
将上述中继路由路径和子频带选择联合优化问题转化成mab问题，利用ucb算法的学习能力，通过控制子站观察历史传输性能，不断更新不同选择奖励值并进行最优中继路由路径与子频带选择，实现毫秒级切负荷的5g切片编排。
[0060]
借由上述方案，本发明至少具有以下优点：
[0061]
(1)解决差异化传输方式下的中继路由路径与子频带选择问题：
[0062]
本发明构建了核心网有线传输模型和接入网无线传输模型，切片在核心网中的有线传输需基于已构建线路选择网络拓扑路径进行传输，在接入网中的无线传输需通过选择合适的子频带进行传输，本发明基于多臂老虎机理论(multi-armed bandit，mab)，通过将核心网中继路由路径选择与子频带选择的组合建模为老虎机摇臂，解决差异化传输方式下的中继路由路径与子频带选择问题。
[0063]
(2)解决全局信息未知情况下的传输时延优化问题：
[0064]
本发明提出了一种基于上置信界(upper confidence bound，ucb)的源网荷切负荷5g切片编排方法，基于mab模型的建立，利用ucb算法根据历史选择次数和经验性能，解决获取信道状态信令开销过大导致的全局信息不可知情况下传输时延优化问题。
[0065]
(3)解决动态变化电磁干扰导致毫秒级切负荷传输性能下降问题：
[0066]
本发明考虑了电力系统存在的电磁干扰变化，结合仿真实验，模拟实际场景中电磁干扰突变情况下的切负荷指令传输过程，利用ucb算法的学习能力，在实际情况下突变电磁干扰发生时，仍能够有效优化源网荷切负荷时延性能。
[0067]
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，
并可依照说明书的内容予以实施，以下以本发明的较佳实施例并配合附图详细说明如后。
附图说明
[0068]
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某个实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
[0069]
图1是本发明毫秒级源网荷精准切负荷场景下的网络切片资源优化配置架构；
[0070]
图2是本发明基于ucb的适配毫秒级源网荷切负荷5g切片编排算法流程图；
[0071]
图3是本发明l＝5,k＝5时传输总时延随时隙的变化；
[0072]
图4是本发明l＝5,k＝5时噪声突变情况下总时延随时隙的变化；
[0073]
图5是本发明l＝5,k＝5时中继路由通信恶化情况下总时延随时隙的变化。
具体实施方式
[0074]
下面结合附图和实施例，对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。
[0075]
如背景技术中所介绍，面向毫秒级源网荷切负荷的5g切片编排技术还需要解决如下技术挑战：
[0076]
第一，差异化传输方式下的中继路由路径与子频带选择联合优化，切负荷指令下发时延性能由核心网路由路径选择和接入网子频带选择共同决定，且在核心网传输过程中为有线传输而在接入网传输过程中为无线传输，如何有效构建决策模型，进而实现5g切片有效传输编排，是一个亟待解决的问题。
[0077]
第二，全局信息不确定，电力系统通信中信道状态严重影响切负荷指令传输性能，而获取信道状态信令开销大，获取信道状态的全局信息并不现实，因此需要设计算法在信息不确定情况下优化路由路径与子频带选择，降低切负荷指令下发时延。
[0078]
第三，电磁干扰影响，电力系统通信中无线传输易受电力设备等影响，而突发变化的电磁干扰会大幅度降低网络传输性能。因此，需要模拟实际情况下存在电磁干扰突变时的切负荷指令传输性能，以保证源网荷切负荷业务在所提方法下正常进行。
[0079]
为了改善上述问题，本发明提供了一种适配毫秒级源网荷切负荷的5g切片编排方法，该方法构建基于5g网络层的毫秒级源网荷切负荷优化配置架构，由控制主站通过控制子站下发切负荷指令，通过核心网中继路由器转发至基站，进而通过基站在接入网利用子频带资源下将切负荷指令发至切负荷终端，在该优化配置架构下通过控制子站进行中继路由路径和子频带选择，实现源网荷切负荷系统在电网应急情况下切负荷指令5g切片的毫秒级传输；进而将中继路由路径和子频带选择联合优化问题描述为最小化传输总时延问题；将上述优化问题转化成mab问题，利用ucb算法的学习能力完成中继路由路径和子频带选择，实现毫秒级切负荷的5g切片编排，从而改善了上述问题，下面对上述方案进行详细介绍。
[0080]
整个技术方案包括三个步骤：
[0081]
1、构件系统模型：
[0082]
基于5g的毫秒级源网荷精准切负荷优化配置架构如图1所示，架构主要包含主站层、子站层、5g网络层以及终端用户层；
[0083]
精准负荷控制主站基于监测到的可切负荷量，当系统发生直流闭锁故障导致功率大面积缺额时，将切负荷指令下发至各子站。子站层主要包括处于不同地理位置进行区域分管的控制子站，当控制子站接受到主站的切负荷指令后，依据其数据特征以及传输需求构建切负荷指令数据包，通过5g网络层以5g切片形式将切负荷指令转发至终端用户层，终端接受控制子站指令，进而快速切除部分可中断负荷，实现毫秒级精准切负荷系统在突发电网负荷超载情况下的精准管控。
[0084]
5g网络层分为核心网与接入网，核心网主要由多个具备转发功能的路由器组成，通过有线传输的方式将自身接收的切负荷指令5g切片数据包转发至接入网，接入网连接终端用户侧各种切负荷终端，在接入网数据包通过基站以无线传输方式将指令下发至切负荷终端，差别于无线接入方式，切负荷指令5g切片在核心网中需通过已有路由构建的网络拓扑路径进行有线传输，根据当前路由信息构建路由转发规则，完成切负荷指令5g切片从控制子站到5g基站的传输；
[0085]
由于控制子站下发指令需分别在核心网进行有线传输以及在接入网进行无线传输，其传输时延是影响切负荷指令下发总时延的主要因素，因此，为满足精准切负荷的毫秒级时延需求，需要制定合适的5g切片编排方案，实现控制子站对终端切负荷指令的低时延下发，本发明定义q(u,m,b,c,s)为控制子站下发的切负荷指令5g切片，其中u表示控制子站，m表示切负荷指令5g切片传输所经过的核心网中继路由器，c表示数据经基站传输至终端所需的频带资源，d表示切负荷指令5g切片的数据大小，s表示接受切负荷指令的切负荷终端，本发明将控制子站所产生的切负荷指令切片个数记作i,i∈{1,...i,...,i}，采用离散化正交子频带方法表示基站与终端间的频带资源，其集合为
[0086]
本发明将路由传输层物理网络视为有向图具备转发能力的中继路由器表示为j为路由器总数量，v1为控制子站路由，因此数据转发层中共有j-1个中继路由器，由相连接的路由器所构成的转发链路集合表示为h(vj)为与路由器vj所连接的下一跳中继路由器集合，在基站和控制子站路由器之间存在k条路径，其集合表示为其中fk代表在v1下发指令至基站的第k条传输路径，路径fk中共有n个路由器且n《j-1，定义控制子站路由器从路径fk传输切负荷指令5g切片数据包至基站所经过的路由器集合为其中1≤n≤n，且和分别表示路径fk中的控制子站路由器和基站；
[0087]
假设切片数据包不可分割，即在切负荷指令下发传输过程中，每个切片数据包只能通过一条路由链路传输至基站，且只能选择一个子频带传输至终端，本发明考虑时隙模型，假设总优化过程有t个时隙，集合表示为同时假设路由链路和子频带状态信息和在一个时隙内保持不变，在不同时隙间动态变化，定义时隙长度为数据包从控制子站路由器传输至终端的传输时延；
[0088]
(1)传输速率模型
[0089]
定义控制子站在第t个时隙所产生的第i个数据包经过路径fk由中继路由器到的传输速率为从基站选择第l个子频带传输至切负荷终端的传输速率为分别为：
[0090][0091][0092]
其中，为子频带c
l
的带宽，为第t时隙第i个数据包在路径fk中的两个中继路由器之间传输时的链路带宽，与分别为路由器到之间的信噪比以及基站与切负荷终端间的信干噪比，分别计算为：
[0093][0094][0095]
其中，为第t时隙第i个数据包在中继路由器到之间的链路增益，为第t时隙第i个数据包从基站至切负荷终端之间的子频带信道增益，和分别为路径fk中从到和基站与切负荷终端间的噪声功率，和分别为路径fk中的从到和基站与切负荷终端间的链路传输功率，为基站与切负荷终端间传输所受到的电磁干扰。
[0096]
(2)传输时延模型
[0097]
本发明分别构建控制子站路由器下发指令到基站的中继转发时延模型和基站转发指令到终端的空口时延模型，其中第t时隙第i个数据包在路径fk中的到的中继转发时延为：
[0098][0099]
则第i个数据包选择路径fk经路由器转发到基站的总传输时延表示为：
[0100][0101]
其中是二进制指示变量，表示第i个数据包从传输到否则
[0102]
基站与终端之间传输的空口时延可以表示为：
[0103][0104]
其中，为二进制指示变量，若基站在第t个时隙将第i个数据流传输至终端
时，选择子频带c
l
传输，则否则
[0105]
在切片数据包由控制子站路由器传输至终端的过程中，5g切片数据包传输的总时延由路由器转发时延和空口时延构成，可以表示为：
[0106][0107]
2、问题建模：
[0108]
本发明构建了一种适配毫秒级源网荷切负荷的5g切片编排方法，即控制子站根据历史传输性能，通过选择中继路由路径及子频带完成切负荷指令5g切片编排，以实现切负荷指令的毫秒级传输。所提出方法优化目标为最小化传输总时延，优化问题构建为：
[0109][0110][0111][0112][0113][0114]
其中，c1表示路由选择约束，c2表示子频带选择约束，c3表示最大空口时延约束，c4表示路径fk的最大时延约束。
[0115]
3、基于ucb算法的毫秒级源网荷切负荷的5g切片编排方法
[0116]
ucb算法是一种解决mab问题的有效方法，通过在每次决策中选取性能上界估计值最大的摇臂，观察收益，并将其作为下一次决策的依据，能够很好地实现探索与利用之间的平衡。因此，本发明设计了基于ucb的适配毫秒级源网荷切负荷5g切片编排算法以解决切负荷指令下发时的总时延最小化问题。
[0117]
定义选择中继路由路径以及子频带策略组合的变量为定义选择中继路由路径以及子频带策略组合的变量为表示控制子站选择路径fk传输数据包i至基站，并进一步通过子频带cl传输切负荷指令5g切片至终端。
[0118]
本发明所提出的基于ucb的适配毫秒级源网荷切负荷的5g切片编排算法分为变量初始化、决策制定和学习3个阶段。具体所下。
[0119]
在初始化阶段，设置在前k*l个时隙数据包传输时，控制子站遍历选择所有的中继路由路径和子频带组合，并观测其传输性能。
[0120]
在决策制定阶段，控制子站通过历史经验，在第t个时隙对传输路径fk以及子频带c
l
的偏好估计值可以计算为：
[0121][0122]
式中为第t个时隙前路径fk以及子频带c
l
的经验估计值，估计值越大，说明该组合被选中的概率越高；为置信区间，表示估计值的不确定度；为前
(t-1)个时隙路径fk和子频带c
l
被选择的总次数。控制子站根据选择偏好值最大的中继路由路径和子频带组合，其表达式为：
[0123][0124]
在学习阶段，控制子站观察历史传输性能τ
isum
(t)，并更新平均奖励值和选择次数其表达式分别为：
[0125][0126][0127]
令t＝t+1，直到t＞t时，ucb算法终止，其算法流程图如图3所示。
[0128]
所述优化配置架构包括：主站层、子站层、5g网络层及终端用户层；
[0129]
所述主站层包括控制主站，所述子站层包括控制子站，所述5g网络层包括核心网及接入网，所述终端用户层包括切负荷终端；
[0130]
所述控制主站通过控制子站下发切负荷指令，通过核心网中继路由器转发至基站，进而通过基站在接入网利用子频带资源下将切负荷指令发至切负荷终端，在所述优化配置架构下通过控制子站进行中继路由路径和子频带选择，实现源网荷切负荷系统在电网应急情况下切负荷指令5g切片的毫秒级传输；
[0131]
将毫秒级源网荷切负荷优化配置架构所构建的系统模型分别建模为核心网和接入网的传输速率模型以及核心网和接入网的传输时延模型，进而将中继路由路径和子频带选择联合优化问题描述为最小化传输总时延问题；
[0132]
将上述中继路由路径和子频带选择联合优化问题转化成mab问题，利用ucb算法的学习能力，通过控制子站观察历史传输性能，不断更新不同选择奖励值并进行最优中继路由路径与子频带选择，实现毫秒级切负荷的5g切片编排。
[0133]
而本发明的技术方案所带来的有益效果是显而易见的，具体体现在：
[0134]
本发明对上述提出的基于ucb的毫秒级源网荷切负荷的5g切片编排算法进行了仿真实验，通过matlab分别在正常网络状态以及无线链路噪声突变状态下对所提算法进行了验证，其中重要参数如下。数据包大小di＝[0.4,0.6]mbit，无线子频带带宽有线信道带宽为噪声噪声与均为0.4w，链路时延约束等级分别为和并设置了两个对比算法进行性能的对比验证，对比算法设置如下：
[0135]
最大数据链路信道增益算法(maximum channel gain of data links，mads)：该算法在每次选择时，控制子站在核心网选择信道增益最大的中继路由器路径，在基站传输至终端时，选择信道增益最大的子频带传输数据包；
[0136]
最短路径算法(shortest route selection,srs)：该算法在控制子站路由器传输至基站时，选择转发路径最短的中继路由路径进行传输，在基站传输至终端时子频带随机选择；
[0137]
仿真结果如图3所示，图3描述了空口频带资源为5个子频带，传输路径k为5条的传输总时延随时隙的变化情况，在初始阶段，ucb算法遍历全部可能的选择对传输信道与传输路径进行学习，在遍历学习之后传输总时延有明显下降趋势，相比于mads算法与srs算法，采用ucb算法对路由路径和子频带选择进行联合优化，保证其总时延始终最低，且在传输路径变多导致全局信息更为复杂的情况下，ucb算法凭借其优异的学习性能，动态调整中继路由路径和子频带选择策略，其传输总时延降低更为明显，相比于mads算法与srs算法，在第3000个时隙时，总时延分别降低了12.23％和20.19％。在实际应用环境中，基于ucb的毫秒级源网荷切负荷的5g切片编排算法能够在全局信息未知情况下，支撑源网荷切负荷业务下切负荷指令5g切片的及时下发；
[0138]
而图4展示了在第500个时隙基站到终端的传输噪声突变情况下传输总时延变化情况，仿真结果表明，由于ucb算法对当前网络状态变化反应迅速并根据当前网络状态下的奖赏值更新置信区间，所提算法的空口时延在第500时隙的噪声突变后会呈现先上升后下降的趋势，因此，在面对实际应用中电磁干扰突变情况下所提算法仍然能保证切负荷指令5g切片毫秒级时延传输；
[0139]
而图5展示了在第1000个时隙控制子站到基站间中继路由器通信状态恶化时总时延变化情况，仿真结果表明，所提算法仅在变化后的500个时隙内有时延的上升，而在第1500个时隙后又重新恢复平稳，其原因在于所提算法能实现对网络状态信息的迅速感知，并重新学习探索得到最优解。
[0140]
以上所述仅是本发明的优选实施方式，并不用于限制本发明，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变型，这些改进和变型也应视为本发明的保护范围。