0

查了各方文档,最后定位在DOWNLOAD_HANDLERS_BASE这里。

{
    'file': 'scrapy.core.downloader.handlers.file.FileDownloadHandler',
    'http': 'scrapy.core.downloader.handlers.http.HttpDownloadHandler',
    'https': 'scrapy.core.downloader.handlers.http.HttpDownloadHandler',
    's3': 'scrapy.core.downloader.handlers.s3.S3DownloadHandler',
}

默认的DOWNLOAD_HANDLERS是上面这样的,好像要自己定义https的实现,现在问题是,我不知道原本的https是怎么写的,所以我也不知道咋定义...有没有改过这个的,源码在哪个文件,我需要参考一下默认的是怎么写的...

另外scrapy 忽略证书还有其他简单点的方法么...

request倒是有忽略证书的参数...

3 天前提问
1 个回答
0

你使用什么版本的scrapy?(粘贴scrapy -v的输出)。最新的scrapy仅发出证书验证失败的警告,而不是错误。

撰写答案

推广链接