Я пишу бота, который может просто проверить тысячи веб-сайтов, независимо от того, на английском они или нет.
я использую Scrapy (фреймворк python 2.7 )для сканирования первой страницы каждого веб-сайта,
кто-нибудь может подсказать, как лучше всего проверить язык веб-сайта,
любая помощь будет оценена.