关于connect_timeout无效的问题

我设置了connect_timeout,但是在运行时没有起作用。请问如何解决?

图片描述

代码如下:

 @every(minutes=24 * 60)
 def on_start(self):
    self.crawl('http://??.cn/',fetch_type="js",timeout=300,connect_timeout=100, callback=self.detail_page)
阅读 4.4k
2 个回答

遇到同样问题,win10,另外,抓取ip没问题,只要是网址,就不行。

刚才改了一下tornado_fetcher.py里面的'connect_timeout': 20, 改成大一些,结果有效率了。。。

connect_timeout 对 phantomjs 无效

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进