Я пытаюсь напечатать только 1 токен всего текста, но он отображает только первую букву индекса 0.
Пожалуйста, дайте мне знать, где я ошибаюсь.
Вот мойкод:
sen = input("Enter Your sentence - ") print(sen) print(word_tokenize(sen[0]))
Попробуйте это:
sen = input("Enter Your sentence - ") print(sen) words = word_tokenize(sen) print(words[0])
Используйте
print(word_tokenize(sen)[0])
Сначала токенизируйте, затем выберите первый элемент, вместо того, чтобы сначала выбрать первый элемент строки (будет только одна буква), а затем попытайтесь токенизировать это.