What/Where 是在 DAI 部署期间用于对新预测进行评分的最终阈值吗?

What/Where are the final threshold(s) used to score new predictions during deployment in DAI?

我有一个二元分类问题,运行 通过 DAI 解决,并给出了 AUC 测试。在哪里可以找到部署期间用于对新数据行评分的概率阈值?

例如,阈值为 0.50;即目标变量 >.50 得到 1,目标 <.50 在决策过程中得到 0(反之亦然)。 我需要超出 AUC 曲线时 GUI 中显示的 4 位串联数字的确切阈值。在下面的图片中,我已经匹配了阈值但无法获得具有相同阈值的相同混淆矩阵。请注意误报差异很小。

DAI Threshold @ .0301 Threshold

Sklearn Confusion Matrix @ .0301 Threshold

更新答案:在 DAI 上完成实验后下载 "Experiments Summary" 选项卡。在 zip 文件中,您会找到一个 ensemble_roc_test.json,它给出了最多 10 位数字的阈值。

无人驾驶 AI 预测 return 'scores',因此阈值不适用于预测,这取决于用户如何使用分数。在实验页面ROC曲线上可以看到优化不同指标的推荐阈值。例如,在下面的屏幕截图中,鼠标悬停在 'Best F1' 圆圈上以获得包含阈值的摘要:

更新答案:在 DAI 上完成实验后下载 "Experiments Summary" 选项卡。在 zip 文件中,您会找到一个 ensemble_roc_test.json,它给出了最多 10 位数字的阈值。