想用scrapy shell调试response.xpath提取的标签内容,发现response没有内容,response.status显示521,后来直接从网页进,显示内部服务器错误,貌似ip被封了。。。后来换了几个url,response.status都是521,请问该怎么修改,我看见网上有说修改cookie的,但是不知道在哪里找cookie,改哪里的文件设置??废话有点多,谢谢大神们了
想用scrapy shell调试response.xpath提取的标签内容,发现response没有内容,response.status显示521,后来直接从网页进,显示内部服务器错误,貌似ip被封了。。。后来换了几个url,response.status都是521,请问该怎么修改,我看见网上有说修改cookie的,但是不知道在哪里找cookie,改哪里的文件设置??废话有点多,谢谢大神们了
4 回答4.4k 阅读✓ 已解决
4 回答3.8k 阅读✓ 已解决
1 回答3k 阅读✓ 已解决
3 回答2.1k 阅读✓ 已解决
1 回答4.5k 阅读✓ 已解决
1 回答3.8k 阅读✓ 已解决
1 回答2.8k 阅读✓ 已解决