判别学习与生成学习的区别
參照http://blog.csdn.net/daijiguo/article/details/52218207
比如二類分類問(wèn)題,不管是感知器算法還是邏輯斯蒂回歸算法,都是在解空間中尋找一條直線從而把兩種類別的樣例分開(kāi),對(duì)于新的樣例只要判斷在直線的哪一側(cè)即可;這種直接對(duì)問(wèn)?題求解的方法可以成為判別學(xué)習(xí)方法(discriminative learning algorithm)。
而生成 學(xué)習(xí)算法則是對(duì)兩個(gè)類別分別進(jìn)行建模,用新的樣例去匹配兩個(gè)模型,匹配度較 高的作為新樣例的類別,比如良性腫瘤與惡性腫瘤的分類,首先對(duì)兩個(gè)類別分別 建模,比如分別計(jì)算兩類腫瘤是否擴(kuò)散的概率,計(jì)算腫瘤大小大于某個(gè)值的概率 等等;再比如狗與大象的分類,分別對(duì)狗與大象建模,比如計(jì)算體重大于某個(gè)值 的概率,鼻子長(zhǎng)度大于某個(gè)值的概率等等。
形式化的說(shuō),判別學(xué)習(xí)方法是直接對(duì) p(y|x)進(jìn)行建模或者直接學(xué)習(xí)輸入空間 到輸出空間的映射關(guān)系,其中,x 是某類樣例的特征,y 是某類樣例的分類標(biāo)記。 而生成學(xué)習(xí)方法是對(duì) p(x|y)(條件概率)和 p(y)(先驗(yàn)概率)進(jìn)行建模,然后按 照貝葉斯法則求出后驗(yàn)概率 p(y|x)
總結(jié)
以上是生活随笔為你收集整理的判别学习与生成学习的区别的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: Caffe编译代码的时候报各种未定义未声
- 下一篇: 微软100题第20题