Я ищу некоторый пример кода конвейера SQLite в Scrapy. Я знаю, что существует не создано в поддержке его, но я уверен, что это было сделано. Только фактический код может помочь мне, поскольку я только знаю, что достаточно Python и Scrapy выполняют мою очень ограниченную задачу и нужны в коде как в начальной точке.
Если вы чувствуете себя комфортно с adbapi от twisted, вы можете взять за отправную точку этот mysql pipeline: http://github.com/darkrho/scrapy-googledir-mysql/blob/master/googledir/pipelines.py
And use this line at __init__
:
self.dbpool = adbapi.ConnectionPool("sqlite3", database="/path/sqlite.db")