技术特征：
1.一种次氯酸钠的发生工艺，其特征在于：进液经计量泵输入到电解槽中，电解槽连接有促使进液电解形成次氯酸钠的电源，各参数经控制器的信号输入端输入，控制器的信号输出端分别与电源和计量泵连接，电源和计量泵根据信号实现电解槽作业状态的改变：(1)给定参数：目标次氯酸钠的总用量v与浓度c
ln
，电解槽的额定产氯量s
n
、额定进液流量q
n
、额定电解电流i
n
、电解电压u
n
、最高出液温度t
max
，以及盐费、电费；(2)实时参数：进液浓度c、进液电导率g、进液温度t1、出液温度t2、进液流量q、出液浓度c
l
、实时电费f
c
，电解电压u、电解电流i；(3)构建具体算法模型：将一天内次氯酸钠发生器的控制问题转化建模为马尔可夫决策过程，该过程表达为：p
k
(s
k+1
|s
k
，o
k
，a
k
)，其中：
①
k：表示马尔科夫决策节点，k＝1，2
…
，h，h≤24，
②
s：表示所有节点的有限状态集合，s
k
∈s，表示第k个节点的状态，
③
o：表示环境观测集合，o
k
表示第k个节点下，对次氯酸钠产生环境的实时观测，即o
k
∈o，
④
a：表示动作集合，包括注入盐水/软化水的配比、实时流量控制和电解电流大小控制，a
k
∈a，表示第k个节点的动作；(4)强化学习模型建模：向马尔科夫决策过程中引入总价值函数q
π
(
·
)，其由动作价值回报和状态价值回报共同构成，表示为：其中：
①
π(
·
)：表示策略选取网络，数学表示为π(a
k
|s
k
，o
k
)，即建模当前节点的状态s
k
和环境观测o
k
下，对于不同决策动作a
k
的条件概率，
②
tr(
·
)：表示状态转移网络，用于预测下一个时刻的状态s
k+1
，步骤(3)建模的马尔科夫状态转移过程中，已知当前时刻状态s
k
、由策略选取网络预测得出动作a
k
、环境观测o
k
，得p
k
(s
k+1
)＝tr(s
k
，o
k
，a
k
)，
③
r
k
(
·
)：表示动作价值回报函数，其中δv
k
为动作a
k
后加次氯酸钠产生速率，δc与δs分别为节点时间内的用电量与用盐量，f
c
为实时电费，f
s
为盐耗费，f
o
＝f
c
+f
s
，
④
v
π
(
·
)：表示状态价值函数，预测马尔科夫决策过程中每一个动作a
k
的后续长时间回报，v
π
(s
k
)＝e(r
k+1
+γr
k+2
+γ2r
k+2
+
…
+γ
h-k-1
r
h
)，其中γ为回报衰减因子，0＜γ＜1；(5)在线更新算法训练强化学习模型：更新步骤(4)中的策略选取网络π(
·
)和状态转移网络tr(
·
)，其整体回报更新方式为：q
π
(s，a)＝(1-β)q
π
(s
k
，a
k
)+βa
k
[r
k+1
(a
k+1
)+γq
π
(s
k+1
，a
k+1
)]，β为平衡短期回报和长期回报之间的权重，q
π
(s，a)最大时即对应为次氯酸钠对应的发生工艺。2.根据权利要求1所述的一种次氯酸钠的发生工艺，其特征在于：进液浓度c是由饱和盐水与软化水混合调解得到。3.根据权利要求1所述的一种次氯酸钠的发生工艺，其特征在于：步骤(4)中，环境观测集合包括每个时间点节点实时观测的进液浓度c、进液电导率g、进液温度t1、出液温度t2、进
液流量q、出液浓度c
l
，每一种实时状态均为有范围的连续状态。4.根据权利要求1所述的一种次氯酸钠的发生工艺，其特征在于：动作集合中，注入盐水/软化水的配比、实时流量控制和电解电流大小各设定5种选择。5.根据权利要求4所述的一种次氯酸钠的发生工艺，其特征在于：盐水/软化水的配比预设为10％、30％、50％、70％、90％，流量预设为20％、40％、60％、80％、100％，电解电流预设为20％、40％、60％、80％、100％。
技术总结
本申请提供一种次氯酸钠的发生工艺，属于可控制或调节的电解技术领域。进液经计量泵输入到电解槽中，电解槽连接有促使进液电解形成次氯酸钠的电源，各参数经控制器的信号输入端输入，控制器的信号输出端分别与电源和计量泵连接，电源和计量泵根据信号实现电解槽作业状态的改变。将本申请应用于次氯酸钠加工，可以从不断重复次氯酸钠生产的实际控制中，自我修正错误的决策，获得最低综合费用。获得最低综合费用。获得最低综合费用。
技术研发人员：王榕栋 蒋铼 周明
受保护的技术使用者：浙江天行健水务有限公司
技术研发日：2022.05.31
技术公布日：2022/8/12