В Word2vec мы можем использовать слова вместо предложений для обучения модели
Как показано ниже, код gberg_sents - это токены предложений.
модель = Word2Vec (предложения = gberg_sents, размер = 64, sg = 1, окно = 10, min_count = 5, семя = 42, рабочие = 8)
Таким образом, мы можем также использовать жетоны слова