scrapy shell url 报错521

想用scrapy shell调试response.xpath提取的标签内容,发现response没有内容,response.status显示521,后来直接从网页进,显示内部服务器错误,貌似ip被封了。。。后来换了几个url,response.status都是521,请问该怎么修改,我看见网上有说修改cookie的,但是不知道在哪里找cookie,改哪里的文件设置??废话有点多,谢谢大神们了

阅读 2.6k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题