Идеальный метод для отправки нескольких HTTP-запросов через Python? [дубликат]

На этот вопрос уже есть ответы здесь:

Закрыто 7 лет назад.

Возможный дубликат:
Множественные (асинхронные) соединения с urllib2 или другой http-библиотекой?

Я работаю над веб-сервером Linux, который запускает код Python для получения данных в реальном времени через HTTP от стороннего API. Данные помещаются в базу данных MySQL. Мне нужно сделать много запросов к большому количеству URL-адресов, и мне нужно сделать это быстро (быстрее = лучше). В настоящее время я использую urllib3 в качестве библиотеки HTTP. Каков наилучший способ сделать это? Должен ли я создавать несколько потоков (если да, то сколько?) и иметь каждый запрос для другого URL-адреса? Хотелось бы услышать ваше мнение по этому поводу - спасибо!

задан Community 23 May 2017 в 12:25

0 ответов

Другие вопросы по тегам:

concurrency http python httprequest

Идеальный метод для отправки нескольких HTTP-запросов через Python? [дубликат]

0 ответов

Похожие вопросы: