请问这种情况为什么爬取不了标签的内容

图片描述

图片描述

如图,只返回了标签,但内容都没了。我才学爬虫没多久,也不知道错的原因

阅读 2.4k
2 个回答

你可以换几种方法测试,例如正则,或pyquery,等方法,看是否成功,
但看你这个情况,网页多半是ajax刷新的,或者,你设置一个time函数,暂停一下再抓取。

你先查看页面源代码,如果里面没有你想要的数据,就说明这些数据都是ajax异步加载的(目前绝大多数网站数据都是异步加载的)。如果是异步加载,你就需要找到那个ajax的URL,看看所需参数,然后自己模拟请求。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题