Boosting

boosting 算法是什么 # 机缘使然，接触到了 Boosting 算法．Boosting是一种通过组合弱学习器来产生强学习器的通用且有效的方法. 动机是基于如下观察：尽管委员会中每个成员只提供一些不成熟的判断，但整个委员会却产生较为准确的决策。通过组合多个弱学习器来解决学习问题。给定训练数据，弱学习算法(如决策树)可以训练产生弱学习器，这些弱学习器只需要比随机猜测的准确率好一些。用不同的训练数据训练可以得到不同的弱学习器。这些弱学习器作为委员会成员，共同决策。