一、urllib模块1.什么是urllib模块？python内置的网络请求模块2.urllib.request模块python2 ：urllib2、urllibpython3 ：把urllib和urllib2合并3.常用的方法urllib.request.urlopen(“网址”)作用 ：向网站发起一个请求并获取响应字节流 = response.read()字符串 = response.read(

如何在pycharm格式化请求头信息1.以格式化文档形式存放请求头信息。2.使用快捷键Ctrl + r，(.+): (.+)，替换’$1’:’$2’, 点击Replace all。3.第2步，完成效果如下：4.去掉文档字符串的引号，使用快捷键Ctrl + Alt + L，让它变的更符合PEP8标准。...

如何在pycharm删除多余的空行示例1.使用快捷键Ctrl + r，输入^\n，替换为空, 点击Replace all。2.完成效果如下：3. 使用快捷键Ctrl + Alt + L，让它变的更符合PEP8标准。

1.使用快捷键 Ctrl + r :2.输入^\d+.匹配到三位数开头，点击Replace all2.输入^ \d+.匹配到两位数开头，点击Replace all（注意是^空格\d+）3.输入^\d+.匹配到两位数开头，点击Replace all（注意是^空格空格\d+）此时所有的行号都被删除了！拿走，不谢！！！...

爬虫 第七讲 MongoDBMongoDB是一个介于关系数据库和非关系数据库之间的产品，是非关系数据库当中功能最丰富，最像关系数据库的。它支持的数据结构非常松散，因此可以存储比较复杂的数据类型。Mongo最大的特点是它支持的查询语言非常强大，其语法有点类似于面向对象的查询语言，几乎可以实现类似关系数据库单表查询的绝大部分功能，而且还支持对数据建立索引SQL和NoSQL的主要区别• 在SQL中层级关

爬虫 第四讲 selenium一、selenium的使用1.爬虫和反爬虫的斗争爬虫建议尽量减少请求次数保存获取到的HTML，供查错和重复使用关注网站的所有类型的页面H5页面APP多伪装代理IP随机请求头利用多线程分布式在不被发现的情况下我们尽可能的提高速度2.ajax基本介绍动态了解HTML技术JS是网络上最常用的脚本语言,它可以收集用户的跟踪数据,不需要重载页面直接提交表单,在页面嵌入多媒体文件

一、urllib模块1.什么是urllib模块？python内置的网络请求模块2.urllib.request模块python2 ：urllib2、urllibpython3 ：把urllib和urllib2合并3.常用的方法urllib.request.urlopen(“网址”)作用 ：向网站发起一个请求并获取响应字节流 = response.read()字符串 = response.read(

一、爬虫前导知识1.端口1、打开命令窗口,输入命令：netstat -ano 查找所有运行的端口2、查看被占用端口对应的 PID输入命令：netstat -aon|findstr “3306”回车执行该命令，最后一位数字就是 PID, 这里是 1968。3、查看指定 PID 的进程继续输入命令：tasklist|findstr “1968”查看是哪个进程或者程序占用了 3306 端口，结果是：my

函数一. 函数简介函数也是一个对象函数用来保存一些可执行的代码，并且可以在需要时，对这些语句进行多次调用语法def 函数名([形参1,形参2,形参3…]):     代码块注意：函数名必须符合标识符的规范(可以包含字母、数字、下划线_，但是不能以数字开头)print是函数对象print()是调用函数示例# 函数简介def fun():print("

第一讲 Python语言及工作环境准备一、数据分析1 数据分析的基本概念1.用适当的统计分析方法对收集来的大量数据进行分析2.提取有用信息和形成结论3.对数据加以详细研究和概况总结目的:从数据中挖掘规则、验证猜想、进行预测2 数据分析的流程明确目的(提出问题)->准备数据->数据解析->分析数据->获得结论->成果可视化3 为什么要学习数据分析1、有岗位需要2、是机器