如图我配置配置了快代理的隧道代理。在调试时代理能够正常工作。
但是在爬虫run起来之后,代理却没有生效。
我判断代理没有生效的原因是:
1.快代理网站对我购买的隧道代理的监控中,代理使用次数没有增加
图中零星的代理使用,是在调试过程,尝试爬取页面时的代理正确生效。
2.在Active Tasks
任务的详情内容中,fatch
中,无代理的配置。
我尝试使用下述配置启动,同样无效
pyspider --phantomjs-proxy 用户名:密码@tps158.kdlapi.com:15818
试试把代理写到self.crawl()里