由于最近手头的爬虫项目比较多，于是就想搭建一个爬虫管理平台来更好的管理不同类型的爬虫，在看了大佬的开源项目crawlab之后发现非常符合预期的效果，包括爬虫部署、任务调度、任务监控、结果展示等。于是就根据大佬的文章如何快速搭建使用的爬虫管理平台搭建了一个自己本地的项目，本文的目的就是把搭建过程中的走过的坑做一下总结。1.Docker的下载与安装1.需要看一下自己的windows版本，如果是专业..