logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

python 爬虫(三)cookie和session + 爬虫中使用cookie或session实现登录 + 代理的设置(解决ip被封问题)

文章目录一、cookie和session1.产生的缘由2.cookie和session存放位置3. cookie① cookie定义② cookie的分类③ cookie的组成(属性)④ 常见误区4. session① session的由来② session的定义③ session流程④ session失效时间5. session和cookie的区别二、使用cookie或session登录1. 爬

python 爬虫(八)常见的反爬措施以及应对措施(爬虫必备)+ 动态Html页面的处理方法 + selenium+PhantomJS的介绍及安装

python中文件操作的小知识: 如何打印一个文件同时输出行号方法:枚举enumeratefp = open('test.txt','r',encoding='utf-8')print(fp)#如何输出行号for i,c in enumerate(fp,1):## 接收两个参数,第一个为遍历内容,第二个为起始行号,默认为0print(i,c)文章目录一、常见的反爬...

python 数据分析(四)Pandas 统计分析基础 (文本文件的读写 + DataFrame的常用属性 + loc方法)

文章目录一、读写不同数据源的数据1. 文本文件的读写(1)文本文件读取① 使用 read_table 来读取文本文件② 使用 read_csv 函数来读取 csv 文件③ read_table 和 read_csv 常用参数及其说明(2)文本文件存储① to_csv写入csv 文件② 参数说明(3)读取 Excel 文件① Excel 文件读取② 参数说明(4)Excel 文件储存二、查看 Dat

python 数据分析(六)astype('category')按类别分组 + 分组聚合操作 + 透视表 + 交叉表 + excel表的数据处理

文章目录一、按照类别单独分类astype()1. astype()用法二、时间操作1. 第一种:直接利用to_datetime()2. 第二种:Series.dt三、分组聚合操作1. 分组(1)groupby()方法2. 聚合(1)agg()方法① 使用方法1② 使用方法2③ 使用方法3④ 使用方法4(2)在分组的基础上进行聚合操作(3)apply()方法(4)transform()方法① 对于离

flask 数据库操作orm 封装数据库操作及其使用(flask通过SQLAlchemy操作数据库)

文章目录一、flask数据库操作1. 增① 单条增加add② 多条增加 add_all2. 查① all 方法,获取所有对象,返回列表② get方法 get只能加id才能查询③ filter 过滤 获得符合条件的数据④ first 获取第一条数据⑤ order_by 排序⑥ limit分页⑦ offset(2) 偏移2,从第三个开始,常和imit连用⑧ count()返回记录的数量⑨ 配合fi..

http请求 报错(403)的解决方法 django的form表单请求(get和post)django的form表单类(用于后端校验字段属性)CSRF

文章目录1.认识http请求1.请求的方式2.响应码3.请求request对象的方法4.获取请求传递的参数二、发送post请求的时候,报403(csrf)错误的两种解决方法1.在settings文件的中间件中将csrf验证注掉2.在html中添加3.CSRF的介绍三、Django的form表单请求1.form表单 get请求2.通过form输入文章标题,搜索文章名字3.form表单post请求四、

python 爬虫(七)lxml模块 + lxml数据提取(字符串的xml/html文件--转换--element对象--转换--字符串)调用XPath方法筛选数据 + 案例(扇贝 酷狗 网易云音乐)

文章目录一、lxml模块1. lxml简介与安装2. lxml初步使用1. 导包2.xml转成element对象的方法(1)将字符串形式的xml内容解析成可以调用xpath语法的element对象的方法3. 将一个html文件转化成element对象的方法4. 如何将element对象转化成字符串的方法二、在python中如何使用XPATH1. 使用xpath语法筛选元素一、lxml模块1....

python 数据分析(三)矩阵的创建 + 运算 + 常用属性(转置,共轭,逆矩阵等)+ ufunc广播机制 + numpy文件读写 + 排序 + 去重与重复 + 统计函数 + 欧氏距离的使用

文章目录一、矩阵1. 矩阵的定义2. 矩阵的创建(1)mat()函数方法(2)matrix()函数(3)bmat()函数① 字符串写法② 列表写法3. 矩阵的运算(1)矩阵与数相乘--》数乘:mat*3(2)矩阵加减法:A+B(3)矩阵相乘:A*B(4)矩阵对应元素相乘(5)数组的四则运算(6)数组的比较运算4. 矩阵的常用属性(1)转置----》T(2)共轭转置矩阵-- 》H 即A(i,j)=A

flask部署

文章目录一、flask部署一、flask部署跟之前的Django项目部署类似:首先保证有在centos操作环境下,之前电脑装过虚拟机,里面也有Python2和Python3共存;

在Linux系统下装python3,并使python2和python3共存

一、python2和python3共存前提:保证你的虚拟机要能联网ping www.baidu.com1.安装依赖包切换到root权限下安装直接在终端命令行输入下面的代码即可,等待其下载完毕yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-d...

    共 15 条
  • 1
  • 2
  • 请选择