nlp - 自然语言处理中的 Unigram vs Bigram vs Posgram

Question

我想知道unigram，bigram和posgram之间的含义和区别。我已经搜索了互联网，但我找不到一个全面的答案。任何帮助将不胜感激。

Answer 1

“这是一个例句”

Unigram：一次考虑一个词->“This”或“is”或“an”...

Bigram（或n-gram）：考虑n-word组合（bi -> n=2） -> “This is”，“is an”，“an example”，“example sentence”

Posgram（对此不太确定）：同时考虑词性上下文（例如“名词”“动词”......）以预测更多信息。更正式地说，它降低了所选择内容的维度（减少到从名词集中选择一个词，而不是从所有词的更大集合中挑选一个东西）。