python - python中的停用词消除和词干分析器

Question

我有一个有点大的文档，想用 Python 对这个文档的单词进行停用词消除和词干处理。有谁知道这些的货架包装？如果不是对大型文档足够快的代码，也欢迎使用。谢谢

Answer 1

NLTK支持这一点。

Answer 2

如果由于某种原因你不想使用 NLTK，你可以试试 PyStemmer。对于停用词，只需下载一个列表（谷歌搜索）并将它们过滤掉。