Как обойти WP super cache с помощью python?

Я пытаюсь собрать данные из часто обновляемый блог, поэтому я просто использую цикл while, который включает urllib2.urlopen ("http: \ example.com"), чтобы обновлять страницу каждые 5 минут и собирать нужные мне данные.

Но я замечаю, что при этом я не получаю самый последний контент, он отличается от того, что я вижу в браузере, таком как Firefox, и после проверки исходного кода Firefox и той же страницы, которую я получаю из python, Я обнаружил, что это ' s WP Super Cache, который не позволяет мне получить самый последний результат.

И я все равно получаю ту же страницу кеша, даже если я подделываю заголовки в моем коде Python. Поэтому мне интересно, есть ли способ обойти суперкеш WP? И почему в Firefox вообще нет такого суперкеша?

1
задан Shane 7 September 2010 в 14:13
поделиться