使用Java版selenium,多线程爬取,每个线程开启一个chrome浏览器;
每个线程 quit 退出;
可是爬取几天发现后台一堆没有关闭的线程;内存直接爆了
使用Java版selenium,多线程爬取,每个线程开启一个chrome浏览器;
每个线程 quit 退出;
可是爬取几天发现后台一堆没有关闭的线程;内存直接爆了
15 回答8.4k 阅读
8 回答6.2k 阅读
1 回答4k 阅读✓ 已解决
3 回答6k 阅读
1 回答4.5k 阅读✓ 已解决
4 回答1.9k 阅读✓ 已解决
3 回答2.2k 阅读✓ 已解决
可以启动chrome时命令行传一个特殊标识,比如threadId,线程退出前,用wmic命令根据标识找到进程PID,然后taskkill -f -pid xxx强杀之。
另外,没必要每线程单独启动一个浏览器吧,可以用无痕模式吧