adaboost随机森林什么关系

作者头像
醉清风
回答于 2023-04-03 15:25:08 阅读 777
adaboost随机森林什么关系

adaboost随机森林什么关系

1、随机森林会对变量做子抽样,比如变量是p,随机森林每次会随机抽取log p个变量拟合一棵决策树。

2、显然,随机森林适合p比较大的情况。

3、否则log p可能就是1.+ 2.+这种情况,毫无意义。

4、adaboost和GBDT很类似,可以理解成前者就是后者取指数损失的一个特例。

5、适合p比较小的时候用。

6、当然,这两者都只适用于n>>p的情况,此时样本携带了足够多的信息去拟合非线性的关系。

7、也就是说,随机森林也不适合p特别大的情况。

8、如果p>>n,以LASSO为首的惩罚回归是首选工具。

声明:图文来源于互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请联系网站客服,一经查实,本站将立刻删除。

最新推荐