离散预测的ROC曲线

Question

我有一个分类器，可以预测二进制类数据集的概率和类。我想将它与另一个预测器进行比较，该预测器仅为每种情况输出二进制类。我获得了性能分数，但现在我需要显示ROC曲线的差异。我可以使用ROCR和pROC等软件包绘制连续预测（概率）的ROC曲线。 由于第二个预测器仅输出二进制类，我四处寻找可用于绘制离散预测（二进制）的ROC曲线的东西。我在python中发现了一些脚本plotroc.py，但我找不到R中的任何类似内容。有人能指出我可以使用一些R包或其他可靠的包来为我的数据绘制ROC曲线吗？

谢谢！

Answer 1

我宁愿将您的第一个预测器的预测二值化（使用ROC曲线来选择阈值），并将它们与Fisher's Exact Test或类似的东西进行比较。为二进制预测构建ROC曲线没有意义。