小码农

好记性不如烂笔头....

scrapy基于ssdb的分布式插件scrapy-ssdb

https://www.scycoder.com/archives/117 里我们改了一个别人改自scrapy-redis的scrapy-ssdb,结果不是很好,经常中断,然后便有了。。我自己的scrapy-ssdb

项目地址:https://github.com/PickledFish/scrapy-ssdb-spider

项目使用说明:https://github.com/PickledFish/scrapy-ssdb/blob/master/README.md

点赞

发表评论

电子邮件地址不会被公开。 必填项已用*标注