章节目录 01-配置与管理 02-使用Scrapy设置 03-基本设置 04-分析 05-性能 06-提前终止爬取 07-HTTP缓存和离线运行 08-爬取风格 09-feed 10-媒体下载 11-Amazon Web服务 12-使用代理和爬虫 13-进阶设置 14-项目相关设置 15-Scrapy扩展设置 16-下载调优 17-自动限速扩展设置 18-内存使用扩展设置 19-日志和调试 20-本章小结