u010234544的专栏

原博客 http://blog.youkuaiyun.com/caohao2008/article/details/6910794 KL散度，又称KL距离。 详情请见：http://en.wikipedia.org/wiki/Kullback%E2%80%93Leibler_divergence 下面是转载内容： =========================== KL-diverg

最近看到论文中很多地方提到EM算法，之前对EM算法只是大概知道是一个参数优化算法，而不知道具体的过程，通过阅读相关的资料，大概了解了其推导过程以及实现过程。    GMM模型就是由若干个高斯分量相互组成的，通过混合的高斯模型来逼近样本的真实分布。         GMM模型估计包括三个参数：混合权重，每个高斯函数的均值以及方差，他们的递推公式如下：                  权重的递