1，mitmproxy出现Cannot establish TLS with client 错误，及解决办法 错误详情: {代码...} 这个错误可以理解为mitmproxy缺少https的证书，继而导致mitmproxy解析ssl协议出错。 解决办法: 把tls_passthrough.py中的代码整合进我们的监听脚本即可。 {代码...} tls_passthrough.py 脚本在github上直接可以下载。下载地址：...

windows 上安装 puppeteer 非常的简单，只要安装了chrome浏览器，直接就可以运行，但在 CentOS 上却没那么简单了，需要处理一大堆的依赖程序，所以把这个过程记录下来，方便以后查阅。注意：Chrome已不再支持 CentOS 6 ，所以要么升级到CentOS 7或改用FireFox（据说也不再支持CentOS6了，而且也不兼容Puppeteer）。

给爬虫项目指定分组，具体方法是在deploy:之后添加部署名，比如图中的项目，部署名是sf。 部署名会在后面的部署项目环节用到。 打开url行的注释，并且配置一台安装scrapyd的服务器