Как указать URL для сканирования?

Я хочу использовать scrapy для сканирования веб-страниц. Есть ли способ передать начальный URL-адрес из самого терминала?

В документацииуказано, что можно указать либо имя паука, либо URL-адрес, но когда я указываю URL-адрес, выдается ошибка:

//имя моего паука пример, но я даю URL вместо имени моего паука (он отлично работает, если я даю имя паука).

scrapy crawl example.com

ОШИБКА:

Файл "/usr/local/lib/python2.7/dist-packages/Scrapy-0.14.1-py2.7.egg/scrapy/spidermanager.py", строка 43, при создании поднять KeyError("Паук не найден: %s" % имя_паука) KeyError: 'Паук не найден: example.com'

Как я могу заставить scrapy использовать мой паук по URL-адресу, указанному в терминале??

25
задан G Gill 13 March 2012 в 09:11
поделиться