scrapy 实现登录后再爬取数据,【start urls 】配置问题?

start urls 中配置的地址是怎么个执行顺序呢 ,程序可控吗?
将 login 的 url 和 要爬取数据的url 一起配置在start urls 中可以吗?如果写在一起 ,可以控制 登录成功再爬取吗?
另一方面 ,这两个 url 可以分开写吗?把要爬取数据的url 如果写在登录成功的回调函数中 该如何写?

阅读 3.5k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题