简介
该用户还未填写简介
擅长的技术栈
未填写擅长的技术栈
可提供的服务
暂无可提供的服务
在Docker容器上利用Scrapy-Redis框架的分布式爬虫
目录一、概况二、系统设计1、分布式爬虫框架2、分布式爬虫流程三、系统实现与测试1、系统开发环境2、Docker集群部署3、爬虫实现与测试总结一、概况这段时间在本科毕设和考研复试,所以PAT甲的题目暂缓了,会及时更新,这篇是我的毕设,欢迎大家的指导和交流!本项目主要是Docker容器下利用Scrapy-Redis框架实现了分布式爬虫,爬取的是豆瓣图书的信息,然后在Django下,写了一个简易的图书搜
到底了