前言：

    本來上一章的結尾提到，準備寫寫線性分類的問題，文章都已經寫得差不多了，但是突然聽說最近Team準備做一套分布式的分類器，可能會使用Random Forest來做，下了幾篇論文看了看，簡單的random forest還比較容易弄懂，復雜一點的還會與boosting等算法結合（參見iccv09），對于boosting也不甚了解，所以臨時抱佛腳的看了看。說起boosting，強哥之前實現過一套Gradient Boosting Decision Tree（GBDT)算法，正好參考一下。

總結

以上是生活随笔為你收集整理的机器学习中的数学(3)-模型组合(Model Combining)之Boosting与Gradient Boosting的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。