用Jsoup抓取36氪网站的数据返回null

一、问题描述
用Jsoup抓取36氪网站的这部分数据(下图),也就是<div id="app">里面的数据,总是返回null。
图片描述

二、我的尝试
1、用id查找图片描述

2、用其中的一个类查找图片描述

3、打印整个document,结果如下图,好像这是一个空标签。
图片描述

三、我的思考
当我点击<div id="app">这行代码时(谷歌的“检查”),发现右边的小窗口styles里面有句div{display:block;}。然后我在网站上找到类似的(下图:class="top_swing"),发现获取到的element也是空的。经过查阅,display:block代表元素以块状显示。所以我猜想是不是块状元素要用另外的方法获取,还是其它原因??用Jsoup怎么解决??
图片描述

阅读 3.3k
2 个回答

那些内容是Javascript动态生成的,不要看谷歌开发者工具,而是右键网页,查看源代码。
可以看到

<div id="app"></div>

你用Jsoup之类的,只能抓取到html内容,js生成的内容是无法抓取的。

js动态生成的,可能是Angular.js

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题