文件都下载了,原文件都是1m左右,但是scrapy 下载下来都是3k。如下图。
自答:
这个网站的文件url不能直接yield给scrapy处理,需要用selenium 通过浏览器click方式下载。
2 回答4.3k 阅读✓ 已解决
2 回答867 阅读✓ 已解决
1 回答4.1k 阅读✓ 已解决
3 回答868 阅读✓ 已解决
2 回答2.2k 阅读✓ 已解决
4 回答2.6k 阅读
3 回答912 阅读✓ 已解决
1 回答5k 阅读
2.1k 阅读
2 回答6.5k 阅读✓ 已解决
1 回答3.7k 阅读
4 回答24.5k 阅读
自答:
这个网站的文件url不能直接yield给scrapy处理,需要用selenium 通过浏览器click方式下载。