鄙人由于最近工作要求，需要爬一批安卓安装包做安全分析，遂不得不操刀写爬虫了。虽然久仰scrapy的大名，但一直没有用过。说来惭愧，2年前写的一个爬机票网站的爬虫还是用selenium+sh控制的。这次趁着机会，干脆体验一把scrapy的强劲效力，也分享给大家。