python 爬取 js 网页

Question

最近遇到了一个网页
https://cn.bing.com/knows/sea...

我用selenium的webdriver.PhantomJS还是无法获取网页中热门电影的图片

html源文件是div,是通过js改为img的,这个改后img标签始终获取不到

我可以通过原始div获取到图片地址,但是我想通过js生成的代码找到图片地址

求老司机指路

Answer 1

用selenium会很耗资源。。。
推荐分析其数据包，发送请求，返回json来分析来的更方便。

http://30daydo.com/article/4

Answer 2

不一定要用难爬的啊,
豆瓣的api多简单.

https://api.douban.com/v2/movie/search?q=%E5%88%98%E5%BE%B7%E5%8D%8E