python - 评估 k 折交叉验证中的准确性与保留数据

Question

我观察到应用后的平均准确度Stratifiedkfold高于holdout data. 我想知道在这种情况下这是否可能是过度拟合的迹象，如果是这样，有人可以解释一下。

模型的准确率holdout约为 95.7%，Stratifiedkfold 集的准确率为 96.3%。

Answer 1

我不明白你的第二段，但是是的。当训练准确率高于验证准确率时，表示过拟合。然而，情况总是如此（除非幸运）。少量的过度拟合是完全正常的，就像你的情况一样。

顺便说一句，这个问题更适合 datascience.stackexchange 或 crossvalidated.stackexchange。