scrapy中启用代理ProxyMiddleware,如何知道代理成功?

import base64 

class ProxyMiddleware(object):

    def process_request(self, request, spider):

        request.meta['proxy'] = "http://IP:posrt"

        #proxy_user_pass = "user:psw"

        #encoded_user_pass = base64.encodestring(proxy_user_pass)

        #request.headers['Proxy-Authorization'] = 'Basic ' + encoded_user_pass

如何知道此次爬取,是用代理的ip爬取?

阅读 12.4k
2 个回答
新手上路,请多包涵
撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进