3.2ip代理反爬:发现某个时段访问大量增加，ip相同，需要登录才能访问处理方式:IP代理池，利用免费资源动态ip代理：思路很简单直接书写中间件利用代理(同user-agent在settings文件中放了一堆的代理ip地址和端口，资源见“西刺网”)from settings import random_proxyclass RandomProxyMiddleware(obje

建议参照目录大纲，即笔记第一篇来了解大致路线后进行博客查阅。每大章的分支都十分清楚。1.环境配置和基础知识铺垫1.1搭建开发环境1.1.1安装pythonwindows:官网下载python2和python3，进行安装，记录对应安装路径，可以改变环境变量中的地址设置默认版本linux:例：sudo apt-get install python3.