Вы передаете список в word_tokenize
, который вы не можете.
Решение состоит в том, чтобы обернуть вашу логику в другую for-loop
,
data_list = ['the gamers playing games','higher scores','sports']
for words in data_list:
words = tokenize.word_tokenize(words)
for w in words:
print(ps.stem(w))
>>>>the
gamer
play
game
higher
score
sport