Воспроизвести паук Scrapy на сохраненных данных

Я начал использовать Scrapy , чтобы очистить несколько веб-сайтов. Если я позже добавлю новое поле в свою модель или изменю свои функции синтаксического анализа, я хотел бы иметь возможность «воспроизвести» загруженные необработанные данные в автономном режиме, чтобы очистить их снова. Похоже, у Scrapy была возможность хранить необработанные данные в файле воспроизведения в какой-то момент:

http://dev.scrapy.org/browser/scrapy/trunk/scrapy/command/commands/replay.py?rev= 168

Но эта функциональность, похоже, была удалена в текущей версии Scrapy. Есть ли другой способ добиться этого?

13
задан del 14 October 2011 в 10:34
поделиться