用scrapy+redis+mongodb写了个爬虫,运行时不能爬取所有符合规则的网址,猜想是不是redis需要进行设置之类的,求高手解答。
说的具体一点啊,你这样说我也不清楚到底是哪里有问题,贴出错误代码或者提示大家一起看看
4 回答2.9k 阅读
2 回答931 阅读
1 回答890 阅读
1 回答734 阅读
2 回答9.9k 阅读✓ 已解决
1.6k 阅读
1 回答3.3k 阅读
1 回答2.6k 阅读✓ 已解决
2 回答13k 阅读
说的具体一点啊,你这样说我也不清楚到底是哪里有问题,贴出错误代码或者提示大家一起看看