从https://kh.google.com爬取谷歌地球的数据随机403错误

Question

在使用scrapy爬取谷歌地图的数据时，访问的url为http://kh.google.com/flatfile... , 其中问号为参数，会随机的出现如下的403错误：

同样的url，可能再试一次就能正常下载，也可能不行，有大大遇到过相似的事情吗？还有，通过抓包，看到google earth client等客户端，下载前都会post一个https://kh.google.com/geauth 这样的请求，有知道是什么意思吗？万分感谢！

Answer 1

可能是网络dl的问题