一、目标首先确定我们要实现的目标1、自定义zabbix监控（1）自定义一个监控，监控用户登录数（2）在linux系统中获取登录的用户数然后传值给zabbix（3）zabbix先定义一个模板，然后在模板中创建items以及triggers，再创建Media types（4）将创建的items添加进我们的主机中去。（5）最后进行测试，如果警报则表示自定义监控创建成功（6）编写

常用命令1、全局命令全局命令即为不进入Scrapy爬虫项目所在目录的情况下，运行scrapy命令。运行scrapy -h，在commands下回出现所有的全局命令。分别为fetch、runspider、settings、shell、startproject、version、view。其中bench命令比较特殊，虽然在Available commands中，但是仍然归为项目命令（...

一、什么是浏览器伪装技术  有一些网站为了避免爬虫的恶意访问，会设置一些反爬虫机制，常见的饭爬虫机制主要有：  1、通过分析用户请求的Headers信息进行反爬虫  2、通过检测用户行为进行反爬虫，比如通过判断同一个IP在短时间内是否频繁访问对应网站等进行分析  3、通过动态页面增加爬虫的爬取难度，达到反爬虫的目的  第一种反爬虫机制在目前网站中应用的最多，大部分反爬虫网站会对...

一、爬取新浪新闻思路1、创建scrapy项目2、分析新浪新闻网站静态页面代码3、编写对应的xpath公式4、写代码二、项目代码步骤1、创建scrapy项目创建爬虫文件scrapy startproject mysqlpjt进入项目目录后scrapy genspider -t crawl bangbing sina.com.cn...

一、matplotlib基本介绍  Matplotlib 是一个 Python 的 2D绘图库，它以各种硬拷贝格式和跨平台的交互式环境生成出版质量级别的图形。  通过 Matplotlib，开发者可以仅需要几行代码，便可以生成绘图，直方图，功率谱，条形图，错误图，散点图等。二、Matplotlib基础知识1.Matplotlib中的基本图表包括的元素（1）x轴和y轴：水...

在上一章节中我们使用 django.http.HttpResponse() 来输出 “Hello python！”。该方式将数据与视图混合在一起，不符合 Django 的 MTV 思想。  本次将详细介绍 Django 模板的应用，模板是一个文本，用于分离文档的表现形式和内容。一、渲染初步认识1、Views.py的作用？执行业务逻辑渲染网页（通常使用模板）通过模型model访问数据库2、

1、我们可以通过scrapy startproject -h调出startproject的帮助信息，在这里可以看到scrapy startprojcct具体可以添加哪些参数。2、如果我们想要删除某个爬虫项目,我们可以直接删除该爬虫项日对应的文件夹即可方式。3、可以使用 genspider命令来创建 Scrap爬虫文件,这是一种快速创建爬虫文件的4、爬虫的测试比较麻烦,所以在在 Scra...

一、什么是Fiddler二、爬虫与Fiddler不得不讲的事三、Fiddler基本原理与界面1、Fiddler工作原理2、Fiddler界面3、捕捉会话功能四、Fiddler的QuickExec的简单使用1、cls2、select3、？4、help五、Fiddler断点功能1、使用Fiddler的断点，可以实现的功能:2、Fiddler断点功能分为两种...

一、数据挖掘介绍  数据挖掘利用了来自如下一些领域的思想：(1) 来自统计学的抽样、估计和假设检验，(2)人工智能、模式识别和机器学习的搜索算法、建模技术和学习理论。数据挖掘也迅速地接纳了来自其他领域的思想，这些领域包括最优化、进化计算、信息论、信号处理、可视化和信息检索。一些其他领域也起到重要的支撑作用。特别地，需要数据库系统提供有效的存储、索引和查询处理支持。源于高性能（并行）计算的技术