吉林大学22级机器学习B(软件工程)期末证明题+计算题极限速成

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

---

前言(废话)

各位晚上好，发布的时间距离考试还有正好十二个小时

先简单整理一下可能考察的算法的计算，至于详细内容很难说有没有时间补了——

首先我们回顾一下关于这次考试的几点情报：

1. 证明题+计算题共计三道，论述题可能也有计算内容；

2. Python不是已知知识，排除了现场默写包名和函数名的风险；

3. 杜伟老师说他不喜欢考察公式推导，因此我们先考虑能够手搓出来计算过程的算法；

正文部分——题型整理

1. 各种模型评估的参数

2. 求解最小二乘法的正规方程

3. 使用梯度下降法求解线性回归(最小二乘法)

   个人感觉概率不大，手搓梯度下降这种"近似算法"还是有点过于拟人了；

4. 逻辑回归中，计算最大似然估计的牛顿中，以及求解黑塞矩阵

   如上，感觉手撕梯度下降还是过于拟人了，所以只写了牛顿法；

5. SVM计算硬间隔+画图

   你问我会不会有软的，会不会带核，会不会有软的带核的支持向量回归，我不到啊；
   
   

6. SMO算法：

   感觉不会考，有空再写吧

7. 使用PCA算法投影(降维)：
   

8. 神经网络中，反向传播算法的公式推导：