前向型神经网络(Feedforward Neural Networks)
M-P模型
- n个输入,n个权值, θ \theta θ为阈值
- S = ∑ i = 1 n w i x i − θ S=\sum_{i=1}^n{w_ix_i-\theta} S=∑i=1nwixi−θ, φ ( ⋅ ) \varphi(·) φ(⋅)为非线性函数
- 输出为: y = φ ( S ) = φ ( ∑ i = 1 n w i x i − θ ) y=\varphi(S)=\varphi(\sum_{i=1}^n{w_ix_i-\theta}) y=φ(S)=φ(∑i=1nwixi−θ)
-
在M-P模型中,激活函数 φ ( ) \varphi() φ()一般为:
φ ( s ) = U ( s ) = { 1 , s ≥ 0 0 , s < 0 \varphi(s)=U(s)=\begin{cases}1,&s\ge0\\0,&s<0\end{cases} φ(s)=U(s)={