Scrapy

网易云音乐爬虫(二)

2018-11-23 223浏览 0点赞 0评论

这章主要讲Scrapy+Redis分布式的写法和源码分析,有大量干货哦。 调度器Scheduler scrapy_redis的调度器基于redis队列,首先是settings配置: SCHEDULER = 'scrapy_redis.scheduler.Sc...