node爬虫如何获取页面内查询后的数据?

问题描述

写过简单的爬虫,根据url打开的网页,网页中的内容就是要抓取的信息,这样比较好弄。
现在页面默认是没数据的或不是自己想要的数据,需要点击一个查询,从新查询出需要的数据;
但是点击查询按钮,页面的url是不变的,所以根据页面的url是获取不到要的数据的。

这种情况该如何通过爬虫获取查询后的数据?

阅读 2.4k
1 个回答

那你直接模拟发送这个点击"查询"按钮发送的请求url 然后看看返回值,而不是直接发送页面的url

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题