文章目录Redis(三)—— redis 性能测试及 Redis 基本知识说明1、redis性能测试2、Redis 基本知识说明Redis(三)—— redis 性能测试及 Redis 基本知识说明1、redis性能测试Redis 自带了一个叫 redis-benchmark 的工具来模拟 N 个客户端同时发出 M 个请求。 （类似于 Apache ab 程序）。检测redis性能Redis 性能

文章目录Spring Cloud Alibaba(03)——Sentinel实现熔断与限流1、Sentinel概述2、Sentinel下载安装运行3、初始化演示工程4、流控规则4.1、流控规则简介4.2、流控模式4.2.1、直接4.2.2、关联4.2.3、链路4.3、流控效果4.3.1、快速失败4.2.2、WarmUp4.2.3、匀速排队5、降级规则5.1、降级规则简介5.2、降级策略实战5.2.

文章目录23种设计模式——建造者模式1、建造者模式概述2、建造者模式的结构3、建造者模式的实现3.1、常规实现3.2、更为灵活的实现4、建造者模式和工厂模式的区别23种设计模式——建造者模式1、建造者模式概述建造者（Builder）模式的定义：指将一个复杂对象的构造与它的表示分离，使同样的构建过程可以创建不同的表示，这样的设计模式被称为建造者模式。它是将一个复杂的对象分解为多个简单的对象，然后一步

文章目录Docker进阶——Docker Compose 的详细使用1、Docker Compose 概述2、Docker Compose 安装与卸载2.1、安装2.2、卸载3、Docker Compose 快速开始4、Compose 模板文件指令5、实战：搭建 WordPress6、Docker-Compose 常用命令6.1、命令对象与格式6.2、命令使用说明Docker进阶——Docker

方法：requests.post()，通过POST请求访问一个页面，对应于 HTTP 的 POST方法。方法：requests.get()，通过GET请求访问一个页面，对应于 HTTP 的 GET 方法。执行结果：返回json数据。

使用代理 IP 时会隐藏了本地网络的真实 IP，让第三方 IP 代替自己去访问网站，避免真实IP被网站封杀，代理 IP 可以通过端口探测技术被识别出来。通过构建代理 IP 池，从 IP 池中随机选择一个 IP 去访问网站，而不使用固定的真实 IP，让爬虫程序更加稳定。注意：通过使用session让请求之间保持状态，而保证了下载的验证码和登录时的验证码是同一个验证码。快代理 https://free

Selenium 是一个用于测试 Web 应用程序的自动化测试工具，最初是为网站自动化测试而开发的。它支持多种平台：Windows、Linux、Mac，支持多种语言：Python、Perl、PHP、C# 等。Selenium 实现了很多自动化功能，比如检测软件与浏览器兼容性，软件自动化测试，生成不同语言的测试脚本，自动录制、以及自动化爬虫等。Selenium 直接运行在浏览器中，就像真正的用户在操

因此，我们一般都会建立一个代理，定期更换一个代理，即使这个IP被封了，也可以换另一个IP。使用User-Agent（用户代理）池，能够避免总是使用一个User-Agent来访问网站，因为短时间内总使用同一个User-Agent高频率访问的网站，可能会引起网站的警觉，从而屏蔽掉IP。代理池就是自己去收集网上的可用免费代理ip，自建自己的ip代理池。补充User-Agent（用户代理）池，类似IP代理

网络爬虫（Web Spider）又称“网络蜘蛛”或“网络机器人”，它是一种按照一定规则从互联网中获取网页内容的程序或者脚本。网络爬虫会模拟人使用浏览器，上网自动抓取互联网中数据。Python 爬虫指的是用 Python来编写爬虫程序。其他语言也可以编写爬虫，如 Java、PHP 、C/C++等，不过相比而言，Python 语法优美、代码简洁、开发效率高、支持多个爬虫模块，比如 urllib、req

有些网站内容是使用ajax加载的，ajax通常返回的是JSON格式的数据，直接对ajax的 url 进行POST或GET方式请求，得到的就是JSON格式的数据。当前端页面想和后端服务器进行数据交互时就可以使用ajax。执行结果：Pycharm 格式化json文件快捷键：ctrl+alt+L执行结果：json文件成功下载执行结果：json文件成功下载到本地...