python - 多标签和多类数据标签的评估

Question

是否有任何可用于多类多标签分类的评估指标？例如，我在 kaggle 参加了以下比赛，它需要 ROC AUC 作为评估指标。：http ://www.kaggle.com/c/mlsp-2013-birds

是否可以使用 sklearn 做到这一点？

Answer 1

Kaggle 的工程总监提供了这个库： https ://github.com/benhamner/Metrics/tree/master/Python

Answer 2

截至 2021 年，sklearn.metrics包括多个可用于评估多类多标签分类模型的函数。例如accuracy_score可以计算正确（即所有预测的标签都是正确的）预测的分数。该hamming_loss函数可以计算给定测试集中的汉明损失或错误预测的标签分数。您可以在此处找到对可用指标的深入讨论。