Unigram vs Bigram vs Posgram в обработке естественного языка

Question

Я хочу знать, в чем смысл и разница между униграммой, биграммой и посграммой.Я искал в Интернете, но я не мог найти исчерпывающий ответ.Любая помощь будет принята с благодарностью.

Answer 1

"Это пример предложения"

Unigram: Рассматривая одно слово за раз -> «Это» или «есть» или «an» ...

Биграм (или n-грамм): с учетом сочетаний из n слов (bi -> n = 2) -> «Это», «это», «пример», «пример предложения»

Posgram (не совсем уверен в этом): Рассматривая также часть речевого контекста (например, «существительное», «глагол» ...), чтобы предсказать дальнейшую информацию. Более формально, это уменьшает размерность того, из чего выбирают (уменьшите, чтобы выбрать слово из набора существительных вместо большего набора всех слов вроде вещи).