statistics - 比较 AUC 和 RMSE

Question

我想比较两篇论文的结果，分别是Koren (2009)和Rendle et al (2009)的矩阵分解技术

第一个使用 RMSE 值，第二个使用 AUC。有没有办法比较这些？更具体地说，我想将第一篇论文的隐式反馈的 RMSE（大约 0.89）与第二篇论文最后一页的 BRP-MF 线（AUC 为 0.91-0.92）进行比较。

Answer 1

您根本无法比较这些结果，至少有 3 个原因：

1. 不同的指标
2. 不同的数据集——报告的结果不是来自同一数据集的实验
3. 不同的任务——评级预测与项目推荐不同——你也不会说预测某物的价格和检测垃圾邮件是相同的任务，不是吗？

你为什么要比较这些不同的方法呢？也许你想重新阅读第一篇论文——它使用隐式反馈作为附加信号来计算更好的评分预测，而在第二篇论文中，隐式反馈用于预测隐式反馈。