python - Python Context Free Grammar 和 PCFG 生成基准测试？

Question

我知道 Python 中有多种函数可用于通用 CFG 和 PCFG；但是它们的速度似乎都不同。

例如：NLTK、PyParsing。

最近有没有比较与速度和内存使用相关的各种属性的基准？

Answer 1

如果您像其他计算软件一样查看 NLP 工具的官方基准测试，您可能会感到非常沮丧。可悲的是，NLP 研究人员正试图将准确度系统推向实时之上。（这样说肯定I score X% more than the state-of-art比I save Y hrs / days training my model在研究中更好）。

他们的研究论文中通常有 1 句话说明训练他们的系统需要多长时间，例如In average, the sampling program run on the Wikipedia dump consumed 20G memory, and each round took about one week on a single AMD Dual-Core 1000MHZ processor.来自www.aclweb.org/anthology/P10-1116.pdf

无论如何，既然你想要一些基准，所以这里有一些你可以用谷歌搜索做的功课 =) www.aclweb.org/anthology/I11-1100 ‎。但是你又一次意识到他们是在衡量准确性而不是速度=）