scrapy是否可以在一个解析方法中请求另一个页面然后直接在本方法中分析并采集数据?

在一个解析方法中yield Request(url, callback)

是否可以直接用Request(url),得到一个指定页面的数据,在本解析函数中继续解析这个指定url页面数据?

阅读 3.4k
3 个回答

处理请求到的页面是通过回调函数执行的

在yield Request
后面试试yield item嘛

可以直接使用requests库完成请求,
import requests
response = requests(url, headers, params)

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题