machine-learning - wit.ai 处理带有或不带变音符号的单词作为同义词

Question

如何训练机器人将带或不带变音符号的单词识别为同义词，是否启用了此功能？例如，当我有一个词（相机）时：foťák我想被视为.的同义词fotak。

在某些情况下，变音符号确实很重要，语义可能会有所不同，在这种情况下，我应该以确切的形式提供单词。但我的目标是更容易训练语义不变的单词。

所以，我想输入没有变音符号的单词，并期望带有变音符号的相同单词被视为同义词。只有当变音符号很重要时，我才会以这种形式提供单词以防止混淆。这甚至可能吗？

Answer 1

您正在寻找的是引理 https://en.wikipedia.org/wiki/Lemma_(morphology) https://pythonprogramming.net/lemmatizing-nltk-tutorial/