网络爬虫框架scrapy（配置型爬虫） 什么是爬虫框架？ 爬虫框架是实现爬虫功能的一个软件结构和功能组件集合 爬虫框架是个半成品，帮助用户实现专业网络爬虫 scrapy框架结构(“5+2”结构) spider: 解析downloader返回的响应（Response） 产生爬取项（scraped item） 产生额外的爬去请求（Request）需要用户编写配置代码 engine(...