nlp - 将英语单词映射到它们的单数形式

Question

示例：将复数名词映射到其单数形式：children --> child, boxes ---> box 将形容词和副词的比较级和最高级映射到其基本形式映射动词 ....

我曾经找到一个开源资源来实现它。我记得，它是一个数据表？/电子表格？/数据库？的映射。有谁知道开源资源或任何替代/更好的解决方案？我正在用java编码。

Answer 1

这称为词干提取，而Lucene（特别是雪球贡献者）可以做到这一点。

有许多不同的词干算法。

Answer 2

80 年代有一篇关于 UNIX 拼写检查器的论文解释了词干提取的工作原理。这篇Wikipedia UNIX Spell文章提供了该论文的链接，并确定了一些替代方案。