вы передаете неправильный ввод в методе word_tokenize, вам нужно передать строку, и вы передаете ряд панд
# example
import pandas as pd
df = pd.DataFrame(['how are you', 'i am fine', 'what about others'], columns= ['msg']))
теперь, когда я передаю df ['msg'] в word_tokenize, т.е. word_tokenize (df ['msg ']) он выдаст ту же ошибку, что и вы, вместо этого вы должны передать строку
print([word_tokenize(x) for x in df['msg']])
#o/p
[['how', 'are', 'you'], ['i', 'am', 'fine'], ['what', 'about', 'others']]
надеюсь, это поможет вам