前端程序员开发爬虫，用puppeteer，还是学用python爬虫？那个性价比更高？

Question

前端程序员开发爬虫，用puppeteer，还是学用python爬虫？那个性价比更高？

Answer 1

现在上各种反爬策略的网站越来越多，如果想快速开发爬虫，还是驱动浏览器的方式比较好，我推荐用puppeteer+anyproxy，纯js环境，上手快，puppeteer直接驱动无头浏览器速度并不算慢
如果遇到验证码识别等需要深度学习的，可以用python写这部分，然后nodejs和python进程间通信

Answer 2

puppeteer相当于python selenium 控制无头Chrome， 既然是前端程序员，那python虽然语法容易但毕竟算多学的。