Как объединить scrapy и htmlunit для сканирования URL-адресов с помощью javascript

Я работаю над Scrapy для сканирования страниц, однако , Я не могу обрабатывать страницы с помощью javascript. Люди предлагают мне использовать htmlunit, поэтому я установил его, но я вообще не знаю, как его использовать. Допустим, кто-нибудь может привести пример (scrapy + htmlunit) для меня? Спасибо большое.

12
задан HjySix 8 November 2011 в 08:25
поделиться