自然语言处理中的 Unigram vs Bigram vs Posgram

Question

我想知道unigram、bigram和posgram的含义和区别。我在网上搜索过，但找不到全面的答案。非常感谢任何帮助。

Answer 1

"This is an example sentence"

Unigram：一次考虑一个词 -> "This" or "is" or "an"...

Bigram（或 n-gram）：考虑 n 词组合 (bi -> n=2) -> "This is"、"is an"、"an example"、"example sentence"

Posgram（对此不确定）：同时考虑词性上下文（示例是 "Noun" "verb" ...）以预测更多信息。更正式地说，它减少了从中选择的内容的维度（减少到从名词集中选择一个词而不是更大的所有词集）。