我在windows环境下使用pyspider,遇到一个问题?
有一个网站,使用etch_type="js",不起作用。偶尔起作用,在起作用的页面里,再次点击运行百分之百出现错误。查看源代码发现,应该是phantomjs不支持flash导致的。没有flash的网站运行正常。请问这个问题如何解决?感谢!
[E 161121 17:18:35 base_handler:195] No response received!
Traceback (most recent call last):
File "e:\anaconda3\lib\site-packages\pyspider\libs\base_handler.py", line 188, in run_task
result = self._run_task(task, response)
File "e:\anaconda3\lib\site-packages\pyspider\libs\base_handler.py", line 167, in _run_task
response.raise_for_status()
File "e:\anaconda3\lib\site-packages\pyspider\libs\response.py", line 190, in raise_for_status
raise http_error
requests.exceptions.HTTPError: No response received!
这个报错倒不是因为phantomjs 不支持 flash,大多数时候是因为渲染超时。