从AdaBoost到GBDT（part 1）

标签（空格分隔）： ML

注：本文假设读者已经有了AdaBoost和GBDT的背景知识。

看到网上关于AdaBoost和GBDT资料都不少，可是鲜有资料介绍他们联系，刚好之前有看过，最近复习到此，觉得有所收获，所以记录下来。此为读书笔记，若有错误，请予纠正。

前情概要：涉及公式较多，如要阅读，请提前找一个安静场所。

另一个角度看AdaBoost

我们已经知道AdaBoost每一次的样本的权重更新公式如下：

于是，我么就有了新的目标函数：

走了那么久，别忘了为什么出发，到现在还没有见到GBDT？有了上面这个式子，GBDT马上出场。请见下一部分。

参考资料： 林轩田. 机器学习课程技法部分 Lecture 11. 李宏毅. machine learning course Ensemble.