带有插入符号 R 包的校准和提升图

calibration and liftchart with caret R package

我正在使用 caret R 包比较二元分类任务的各种预测模型的预测性能 (liftChart) 和预测准确性(校准图)。我发现了以下问题: 1. 当观测值很大或存在各种竞争分类器时,提升函数有时会非常非常慢。另外我想知道是否可以手动定义校准图的切割。我有一个严重不平衡的模型(平均概率为 5%),校准图函数假定切割间隔均匀。

提升图对每个唯一概率值进行计算(很像 ROC 曲线),这就是它速度慢的原因。

这些选项现在都不可用。您可以将两个问题添加到 github page。我现在忙得不可开交,但改变这些应该没什么大不了的(你也可以随时提供解决方案)。

最大