知乎爬虫问题

爬虫新手求助。

知乎关注的人的列表,是一个下拉加载方式的分页。

图片描述

不明白怎么获取下一页的。用post和get带上右下脚的FormData请求,都是403。
“next”是什么方法

图片描述

阅读 4k
4 个回答

next不是什么方法,next只是Form Data中method字段的值。如果请求返回403,看看是否需要带上User-Agent、Referer或Cookie信息

你可以多下拉几次抓包看看,在我看来next就是获取下一页的方法,offset是当前已经加载的数目

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题