默认安装系统，安装pip,virtualenv，建立并进入虚拟环境，开始使用pip在虚拟环境中安装scrapy，然而并没有一键安装的快感 找不到xmlversion.h 解决： {代码...} 找不到cffi.h 解决： {代码...} 找不到opensslv.h 解决： {代码...} 最后一步 {代码...} DONE!

建立一个svn管理文件夹 svnadmin -r [文件夹] 修改svnserve.conf文件，将anon-access=write 启动服务：svnserve -d -r［文件夹］

为了获取静态页面部分的内容，需要使用firefox的开发者功能禁用javascript，如图勾选"Disable JavaScript"。刷新页面后可见。通过静态页面可获取标题，商品ID，分类号，商品URL，图片url等内容。可直接使用正则表达式或xpath等工具分析获得，这里不再赘述。