机器学习之判别式模型和生成式模型
判别式模型（Discriminative Model）是直接对条件概率p(y|x;θ)建模。常见的判别式模型有线性回归模型、线性判别分析、支持向量机SVM、神经网络、boosting、条件随机场等。 举例：要确定一个羊是山羊还是绵羊，用判别模型的方法是从历史数据中学习到模型，然后通过提取这只 ...
原文：机器学习--判别式模型与生成式模型
一 引言 本材料参考Andrew Ng大神的机器学习课程http: cs .stanford.edu 在上一篇有监督学习回归模型中，我们利用训练集直接对条件概率p y x 建模，例如logistic回归就利用h x g Tx 对p y x 建模 其中g z 是sigmoid函数 。假设现在有一个分类问题，要根据一些动物的特征来区分大象 y 和狗 y 。给定这样的一种数据集，回归模型比如logist ...
2014-11-01 16:15 0 46410 推荐指数：
相关推荐
判别式模型与生成式模型的区别
生成式模型(Generative Model)与判别式模型(Discrimitive Model)是分类器常遇到的概念，它们的区别在于： 对于输入x，类别标签y： 生成式模型估计它们的联合概率分布P(x,y) 判别式模型估计条件概率分布P(y|x) 生成式模型可以根据贝叶斯公式 ...
判别式模型与生成式模型的区别
产生式模型(Generative Model)与判别式模型(Discrimitive Model)是分类器常遇到的概念，它们的区别在于： 对于输入x，类别标签y：产生式模型估计它们的联合概率分布P(x,y)判别式模型估计条件概率分布P(y|x)产生式模型可以根据贝叶斯公式得到判别式模型，但反过 ...
常见生成式模型与判别式模型
生成式模型 P(X,Y)对联合概率进行建模，从统计的角度表示数据的分布情况，刻画数据是如何生成的，收敛速度快。 • 1. 判别式分析 • 2. 朴素贝叶斯Native Bayes • 3. 混合高斯型Gaussians • 4. K近邻KNN • 5. 隐马尔科夫模型HMM • 6. 贝叶斯网络 ...
常见生成式模型与判别式模型
生成式模型 P(X,Y)对联合概率进行建模，从统计的角度表示数据的分布情况，刻画数据是如何生成的，收敛速度快。• 1. 判别式分析• 2. 朴素贝叶斯Native Bayes• 3. 混合高斯型Gaussians• 4. K近邻KNN• 5. 隐马尔科夫模型HMM• 6. 贝叶斯网络• 7. ...
生成式模型和判别式模型
有监督学习回归模型中，我们利用训练集直接对条件概率p(y|x;θ)建模，例如logistic回归就利用hθ(x) = g(θTx)对p(y|x;θ)建模（其中g(z)是sigmoid函数）。假设现在有一个分类问题，要根据一些动物的特征来区分大象(y = 1)和狗(y = 0)。给定这样的一种 ...
判别式模型 vs. 生成式模型
1. 简介 生成式模型(generative model)会对\(x\)和\(y\)的联合分布\(p(x,y)\)进行建模,然后通过贝叶斯公式来求得\(p(y|x)\), 最后选取使得\(p(y|x)\)最大的\(y_i\). 具体地, \(y_{*}=arg \max_{y_i}p(y_i ...
判别式模型与生成式模型
目录 一． 简介 1 二． 对比 1 三． 二者所包含的算法 2 3.1 生成式模型 2 3.2 判别式模型 2 判别式模型 vs. 生成式模型 简介 生成式模型（generadtive ...