如何使scrapy-redis获取的不是url而且是请求的数据呢？

Question

参考scrapy-redis在github上使用的方法是

scsrapy默认获取的都是url，但我在项目中请求的URL都是固定，区别都在于请求数据不一致。
scrapy-redis是否有办法做到我向redis push 需要查询的数据，scrapy检测到后使用该数据查询

Answer 1

可以往redis中存放json啊,参考下next_requests的方法，改成解析json。。。
https://github.com/rmax/scrapy-redis/blob/master/src/scrapy_redis/spiders.py