Как я обнаруживаю, какой язык текст записан в использовании NLTK?
Примеры я видел использование nltk.detect
, но когда я установил его на своем Mac, я не могу найти этот пакет.
Вы сталкивались со следующим фрагментом кода?
english_vocab = set(w.lower() for w in nltk.corpus.words.words())
text_vocab = set(w.lower() for w in text if w.lower().isalpha())
unusual = text_vocab.difference(english_vocab)
из http://groups.google.com/group/nltk-users/browse_thread/thread/a5f52af2cbc4cfeb?pli=1&safe=active
Или со следующим демонстрационным файлом?