问大家一个用python进行豆瓣网数据抓取的问题

1.下图中的影人简介可以轻松抓到

图片描述

2.但是如果我想抓取展开全部后的所有内容该怎么做呢?

图片描述

3.我点开展开全部后,network选项卡中都没有新的请求,这难道不是JS加载出来的吗?不太懂。

阅读 2.1k
1 个回答

clipboard.png
分析了一下。由上图可以看出来其实是有两个span
一个放着简介的内容,一个放着全部展开的内容,
是通过控制这两个span的显隐来决定显示的是简介还是全部的内容。

要获得全部的内容,抓取<span class="all"></span>中的内容即可

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题