前面我们都是从头开始编写爬虫，发送请求、解析网页、数据存储等每一个功能模块都需要自己实现。这一章我们学习的Scrapy是一个爬虫框架，它将上述的所有功能都封装到框架里。这样我们使用较少的代码就能完成爬虫的工作。爬虫者往往会经历一个不用框架，到使用框架，再到不用框架的过程。初学者最开始只需要一个简单的小房子，所以使用Requests和bs4很方便。在学会使用Requests和bs4后，再使用Scra