[mlr3] Resample的AUC结果和benchmark不一致?

仿生bug

已于 2025-03-29 20:31:22 修改

阅读量113

点赞数 1

文章标签： r语言流行病学机器学习

于 2025-03-29 20:28:29 首次发布

本文链接：https://blog.youkuaiyun.com/weixin_46623488/article/details/146711643

版权

当 Resample 的AUC结果与基准（bench）在均使用Bootstrap方法的场景下出现不一致时>…

一个查到的方案是：在学习器添加随机种子

learner$param_set$values$seed = 123

Benchmark

set.seed(123)
design = benchmark_grid(task,learners ,
                        rsmps("bootstrap", repeats =200))
future::plan("multisession",workers =7)
bmr = benchmark(design, store_models = T,store_backends = T)
autoplot(bmr, type = "roc")

Resample

set.seed(123)
rr <- resample(task, learner_rf,
         resampling = rsmp("bootstrap",repeats=200),
         store_models = T,store_backends = T)
rr$aggregate(msr("classif.auc"))