21、人工智能赋能的面向QoS的网络关联技术解析

人工智能赋能的面向QoS的网络关联技术解析

1. 相关基础与随机算法

在网络路由中，存在一些基础的度量方式。其中， dis_id 和 dis_jd 分别代表路由器 i 和 j 到目的地 d 的跳数。依据特定公式，相关函数会将服务质量（QoS）指标归一化到 [-1, 1] 区间。当函数 f(·) 的值接近 1 时，更倾向于选择该下一跳；而当 f(·) 的值接近 -1 时，该选择则可能被拒绝。

为了平衡探索与利用，提出了一种随机算法。具体而言，以 1 - ϵ 的概率采取行动 a + ϵ · N ，其中 a = π(s; θμ) 是 Actor_P 的输出。为探索可能的最优策略，会推导出行动 abase + ϵ · N ，这里的 abase 是基础路由策略。 N 采用了 Ornstein - Uhlenbeck 过程，其公式为：
[
\begin{cases}
N = θ(μ - a) + σW \
N = θ(μ - abase) + σW
\end{cases}
]
其中， W 是有摩擦的布朗粒子的速度， μ = 1/V 是均值，