爬虫框架pyspider中代码实现网页中"加载更多"?

新手上路,请多包涵

用以下代码爬了一下豆瓣电影,"加载更多"电影却没有反应,为什么?
def on_start(self)

     self.crawl('http://movie.douban.com/explore#more',
               fetch_type='js', js_script="""
               function() {
                 setTimeout("$('.more').click()", 1000); 
               }""", callback=self.phantomjs_parser)
阅读 5k
1 个回答

为啥不直接爬json api 地址。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进