问题描述
写过简单的爬虫,根据url
打开的网页,网页中的内容就是要抓取的信息,这样比较好弄。
现在页面默认是没数据的或不是自己想要的数据,需要点击一个查询,从新查询出需要的数据;
但是点击查询按钮,页面的url是不变的,所以根据页面的url是获取不到要的数据的。
这种情况该如何通过爬虫获取查询后的数据?
写过简单的爬虫,根据url
打开的网页,网页中的内容就是要抓取的信息,这样比较好弄。
现在页面默认是没数据的或不是自己想要的数据,需要点击一个查询,从新查询出需要的数据;
但是点击查询按钮,页面的url是不变的,所以根据页面的url是获取不到要的数据的。
这种情况该如何通过爬虫获取查询后的数据?
13 回答12.8k 阅读
7 回答1.9k 阅读
3 回答2.6k 阅读✓ 已解决
3 回答1.1k 阅读✓ 已解决
2 回答1.2k 阅读✓ 已解决
6 回答889 阅读✓ 已解决
6 回答1.1k 阅读
那你直接模拟发送这个点击"查询"按钮发送的请求url 然后看看返回值,而不是直接发送页面的url