FM
参考资料:ref
核心思想:每一维特征 x i x_i xi增加相对应的隐变量 v i v_i vi,在线性回归/逻辑回归问题中增加特征组合项(二次项) x i x j x_ix_j xixj,其相应的权重为 w i j w_{ij} wij。
假设原始数据 x i x_i xi比较稀疏,直接学习 w i j w_{ij} wij不太好学(主要是 x i , x j x_i,x_j xi,xj都非0的数据太少),所以对 w i j w_{ij} wij做矩阵分解,即假设每个特征 x i x_i xi对应一个隐变量 v i = [ v i 1 , v i 2 , . . . , v i r ] v_i=[v_{i1},v_{i2},...,v_{ir}] vi=[vi1,vi2,...,<