python - AdaBoosting 同时使用几个不同的基础估计器

Question

我知道您可以使用单个模型的多个实例（例如，600 个决策树、贝叶斯岭或线性模型）进行 AdaBoost。是否可以同时使用大量模型进行 AdaBoost，以及如何实现？

AdaBoost([DecisionTree, BayesianRidge, LinearRegressor, ...])

每个独立模型都有其优点和缺点，我想知道是否可以在伞下将它们全部混合在一起。

Answer 1

由于 AdaBoost 与弱分类器的实现分离：是的，你可以。这些架构称为混合集成。然而，它并不总是需要，因为 AdaBoost 只要求弱分类器比随机分类器稍好。因此，拥有一个同质的分类器集合通常就足够了。最后，如果它能给您带来性能提升，您将不得不针对您自己的场景对其进行测试。