Вопросы Теги

Web Scraper возвращает пустой HTML-файл во время работы браузера Chrome; уже попробовал UserAgent

Функция freeze_bdev () не может быть применима для тома, подобного / dev / sda, только для раздела, такого как / dev / sda1.

1
задан EdgarEndre 24 January 2019 в 18:47
поделиться

1 ответ

Решил проблему.

Ранее, когда имитировали браузер, я использовал только следующие заголовки: 

headers = {
'User-Agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Mobile Safari/537.36'
}

Оказалось, что мне пришлось включить все заголовки ответа, отправленные на сервер для запроса (найденные с помощью инструментов разработчика Chrome), как так: 

headers = {
    'Accept': 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8',
    'Accept-Encoding': 'gzip, deflate, br',
    'Accept-Language': 'en-US,en;q=0.9',
    'Connection': 'keep-alive',
    'Cookie': 'Cookie; Cookie',
    'DNT': '1',
    'Host': 'e2.kase.gov.lv',
    'Referer': 'https://e2.kase.gov.lv/pub5.5_pasv/code/pub.php?module=pub',
    'Upgrade-Insecure-Requests': '1',
    'User-Agent': 'Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Mobile Safari/537.36'
}
0
ответ дан EdgarEndre 24 January 2019 в 18:47
поделиться
Другие вопросы по тегам:

Похожие вопросы: