我从24年11月份开始学习网络爬虫应用开发，经过2个来月的努力，于1月下旬完成了开发一款网络爬虫软件的学习目标。这里对本次学习及应用开发进行一下回顾总结。前几天我已经发了一篇日志（网络爬虫学习：应用selenium从搜*狐搜索爬取新闻结果的数据）记录了应用中使用的爬虫技术。这篇日志记录另外一个问题的解决。

redis-server /etc/redis/redis.conf指定redis在docker中的配置文件路径，后台启动redis。-v /docker/redis/redis.conf:/etc/redis/redis.conf挂载redis.conf文件。如此一来，redis.conf就设置好了，此时在Linux上创建一个redis文件夹去存放redis的配置文件和持久化数据。-v /doc

7、将Redis的目录添加到Path路径中（添加之后，运行client-cli，不需要切换到解压目录下就可以直接打开客户端）6、注册服务（注册之后，启动服务，可以省略到第4步使用redis），同样以管理员身份打开cmd窗口，切换到解压的目录，运行。4、一管理员方式打开cmd窗口，进入到解压的目录下，运行。5、另外再开一个窗口，同样进入安装目录下，运行。（1）运行之前，服务列表中不包含Redis。（

CDC 是（变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据或数据表的插入、 更新以及删除等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。/*** 反序列化数据,转为变更JSON对象*/@Override//5.获取操作类型 CREATE UPDATE DELETE2 : 3;//7.输出数据/*** 从元数据获取出变更之前或之后的数据*/

所以上面这个表整体字段的默认编码是utf8mb4_0900_ai_ci不区分大小写，但是其中的name字段编码为utf8mb3_bin区分大小写。列名与列的别名在所有的情况下均是忽略大小写的 ,不管是Linux系统还是Windows系统下MySQL的列名都默认不区分大小写.属性的讲解，我们发现windows中的值为1不区分大小写，而且创建的表名在数据库中是以小写存储的。表2大小写敏感，所以只能查询

RESTful是一种基于HTTP协议的软件架构风格，它用于设计网络应用程序接口（API）。REST代表“表述性状态转移”（Representational State Transfer），其核心思想是通过一组标准的操作和资源来实现客户端与服务器之间的交互。RESTful API 设计强调简洁、直观和易于理解，遵循无状态通信原则，使得开发者能够快速构建和维护分布式系统。RESTful 的基本原则无状

使用网络摄像头中的rtsp协议---------通过rtsp链接让推流软件获取到视频流------推流软件推流到直播服务器-----直播服务器的搭建-----使用flv.js进行直播。1、配置centos的网络服务，让该虚拟机以局域网的形式链接到实验室的网络（网络上进行搜索，成功的标准是你的主机可以ping通你的虚拟机。这里有一个例子，有好多人说这个例子失效了，我上传到CSDN后，居然需要VIP才

RESTful是一种基于HTTP协议的软件架构风格，它用于设计网络应用程序接口（API）。REST代表“表述性状态转移”（Representational State Transfer），其核心思想是通过一组标准的操作和资源来实现客户端与服务器之间的交互。RESTful API 设计强调简洁、直观和易于理解，遵循无状态通信原则，使得开发者能够快速构建和维护分布式系统。RESTful 的基本原则无状

Redis（远程字典服务器） 是一个开源的、使用 C 语言编写的 NoSQL 数据库即非关系数据库。Redis服务器程序是单进程模型，也就是在一台服务器上可以同时启动多个Redis进程，在实际生产环境中，需要根据实际的需求来决定开启多少个Redis进程。若对高并发要求更高一些，可能会考虑在同一台服务器上开启多个进程。Redis 6.0 中新增加的多线程也只是针对处理网络请求过程采用了多线性，而数据

Quartz是一个功能强大的开源任务调度框架，支持复杂的任务调度需求，如任务的持久化、分布式任务管理、基于数据库的调度等。通过Controller提供API接口，这里的TaskService调用了QartzService的对应接口，并做了一个写数据库读写操作，主要记录定时任务状态、执行记录信息的等。通过TaskScheduler，你可以灵活地安排任务的执行时间，并且可以在运行时动态地创建、取消任务