生成模型与辨别模型(Generative vs discriminative model)
这两个模型一般是讲的分类问题
生成模型
1、使用贝叶斯理论推断后验分布p(Ck|x)p(Ck|x),需要考虑先验分布p(Ck)p(Ck)和p(X|Ck)p(X|Ck)
也可以对联合分布p(X,Ck)p(X,Ck)建模
2、使用决策论对x分配类
例子:
辨别模型(discriminative model)
辨别模型是确定一个函数,这个函数能直接将输入向量X,映射到K类别中的一类,表示为CkCk
1、直接计算p(Ck|X)p(Ck|X)
2、使用决策理论(decision theory)为每一个新的X分配一个类型标签