У кого-либо есть пример кода для конвейера sqlite в Scrapy?

Я ищу некоторый пример кода конвейера SQLite в Scrapy. Я знаю, что существует не создано в поддержке его, но я уверен, что это было сделано. Только фактический код может помочь мне, поскольку я только знаю, что достаточно Python и Scrapy выполняют мою очень ограниченную задачу и нужны в коде как в начальной точке.

9
задан Donal Fellows 20 July 2010 в 21:16
поделиться

1 ответ

Если вы чувствуете себя комфортно с adbapi от twisted, вы можете взять за отправную точку этот mysql pipeline: http://github.com/darkrho/scrapy-googledir-mysql/blob/master/googledir/pipelines.py

And use this line at __init__:

self.dbpool = adbapi.ConnectionPool("sqlite3", database="/path/sqlite.db")
3
ответ дан 4 December 2019 в 08:32
поделиться
Другие вопросы по тегам:

Похожие вопросы: