爬虫再做ip 代理的时候 这个开多少线程和ip 啥关系?

就是比如我开1000个线程 和代理ip 每秒并发 是啥关系?

阅读 2.5k
2 个回答

是约等于关系,每个线程都对请求代理ip去访问目标网页,如果恰巧同时请求,此时代理IP每秒并发就是1000。

每个线程都需要占用一个IP,只是会重复使用。
比如,代理IP有500,每秒要请求1000次,那这1000次里会每2次用到同一个IP(讲道理),但是事实上也并不是这样,可能有些IP用了3次,有些只用了1次。具体要看你IP的策略是什么。

推荐问题