想用scrapy shell调试response.xpath提取的标签内容,发现response没有内容,response.status显示521,后来直接从网页进,显示内部服务器错误,貌似ip被封了。。。后来换了几个url,response.status都是521,请问该怎么修改,我看见网上有说修改cookie的,但是不知道在哪里找cookie,改哪里的文件设置??废话有点多,谢谢大神们了
想用scrapy shell调试response.xpath提取的标签内容,发现response没有内容,response.status显示521,后来直接从网页进,显示内部服务器错误,貌似ip被封了。。。后来换了几个url,response.status都是521,请问该怎么修改,我看见网上有说修改cookie的,但是不知道在哪里找cookie,改哪里的文件设置??废话有点多,谢谢大神们了
2 回答4.2k 阅读✓ 已解决
2 回答840 阅读✓ 已解决
1 回答4.1k 阅读✓ 已解决
3 回答832 阅读✓ 已解决
2 回答2.1k 阅读✓ 已解决
4 回答2.5k 阅读
3 回答880 阅读✓ 已解决