stanford-nlp - 如何在斯坦福关系提取中使用 10 折交叉验证（自定义关系提取模型）

Question

如何在斯坦福关系提取中使用 10 折交叉验证。我创建了一个自定义关系提取模型，我需要评估这个模型

Answer 1

CrossValidator如果您使用的是斯坦福分类器，您可能会发现它很有用。获取数据集，您可以执行以下操作：

Dataset dataset = ...;
double aveAccuracy = new CrossValidator(dataset, 10).computeAverage( (train, dev) -> {
  // train on |train| for the fold
  LinearClassifier classifier = ...;
  // evaluate on |dev| for the fold
  return classifier.evaluateAccuracy(dev);
});