scrapy 如何先滚动至底部 待网页内容全部加载完再返回response

我现在爬取的网站 只显示20条数据 只有鼠标滚动到底部才能再显示20条 再滚动到底部 才能继续显示全部的60条数据

我如何才能在scrapy中配合 selenium 达到这个效果? 先滚动到底部 待60条数据全部加载完成后 再返回response

阅读 3k
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题