楼主: wh343
977 1

[实际应用] 是否可以使用贝叶斯模型平均,对包括机器学习、线性模型在内的不同类别模型进行平均? [推广有奖]

  • 0关注
  • 0粉丝

已卖:2份资源

高中生

77%

还不是VIP/贵宾

-

威望
0
论坛币
1337 个
通用积分
3.9400
学术水平
0 点
热心指数
0 点
信用等级
0 点
经验
73 点
帖子
3
精华
0
在线时间
68 小时
注册时间
2019-5-19
最后登录
2024-5-7

楼主
wh343 发表于 2021-9-5 17:40:24 |AI写论文
300论坛币
各位前辈:

       我想了解贝叶斯模型平均包(BMA或BMS),能否对不同类型的几个模型进行平均?例如,我使用同样的数据,生产了一个随机森林模型、一个XGboost模型、一个多元线性回归、一个Lasso回归模型,能否使用贝叶斯平均将他们再生产一个最终的模型??

       如果可以的话,大概如何应用,应该看哪个资料?

      谢谢!!!!!1

最佳答案

owenqi 查看完整内容

个人表示怀疑,据我理解,BMA做集成学习需要两步,第一步,估计出n个独立模型的参数,第二步估计出这n个模型的分布。 关于第二步,你可以赋予这4个模型多项分布这个先验分布,可是对于第一步,你的随机森林和XGBoost这两个好像是非参模型,那请问你如何设置这两个树模型先验分布和对应的似然函数呢?
关键词:线性模型 机器学习 贝叶斯 多元线性回归 boost

沙发
owenqi 在职认证  学生认证  发表于 2021-9-5 17:40:25
个人表示怀疑,据我理解,BMA做集成学习需要两步,第一步,估计出n个独立模型的参数,第二步估计出这n个模型的分布。
关于第二步,你可以赋予这4个模型多项分布这个先验分布,可是对于第一步,你的随机森林和XGBoost这两个好像是非参模型,那请问你如何设置这两个树模型先验分布和对应的似然函数呢?

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群
GMT+8, 2026-1-28 14:58