1、变分推断 2、Optimization AI 问题=模型+优化 线性回归:最小二乘法 逻辑回归:交叉熵 svm:点到分离超平面距离 协同过滤:矩阵分解 k-均值 Portfolio optimization 3、Optimization categories smooth/non-smooth:大部分是smooth