tensorflow - 注释语料库时如何解释 synaxnet 的输出

Question

我使用预训练的语法网络模型（即使用 Parse McParseface）注释了一个语料库。我在理解输出时遇到问题。输出中有两个指标。那些用于 POS 标记和依赖解析？如果是，哪一项是词性标注性能，哪一项是依赖解析性能？

这是输出：

INFO:tensorflow:Total processed documents: 21710 INFO:tensorflow:num correct tokens: 454150 INFO:tensorflow:total tokens: 560993 INFO:tensorflow:Seconds elapsed in evaluation: 1184.63, eval metric: 80.95% INFO:tensorflow:Processed 206 documents INFO:tensorflow:Total processed documents: 21710 INFO:tensorflow:num correct tokens: 291851 INFO:tensorflow:total tokens: 504496 INFO:tensorflow:Seconds elapsed in evaluation: 1193.17, eval metric: 57.85%

Answer 1

如果您使用 的是https://github.com/tensorflow/models/blob/master/syntaxnet/syntaxnet/demo.sh ，那么第一个指标是 POS 标签准确度，第二个是 UAS。只有当您输入的 conll 数据包含黄金 POS 标签和黄金依赖项时，它们才有意义。