继续上次的文章，我们找到了json的数据包，那么证明我们可以获取到他们的数据。点击Headers,Request URL对应的就是json数据的url。找到url之后我们就可以开始爬虫了。import requestsimport jsonimport jsonpathif __name__ == '__main__':#json数据的url(链接)url_ = 'https://movie.do

json数据呢，就是动态数据，在页面不变的情况下呢，有新的数据包产生，一般都是json数据。html数据熟悉吧，一般都是渲染页面主体，而json数据呢是在原有的数据填充页面。一般翻页的数据是json数据。查看json数据在所需数据页面右键选择>检查（比如豆瓣）>点击Network>点击Fetch/XHR>最后点击键盘ctrl+R键（就和ctrl+c复制一样）等待数据刷新。我

第一步搜索ffmpeg官网：第二步：点击Download，下滑，看到下面这个第三步：确定自己的电脑是哪一种，我的是window10，64位。点击第二个，出现下面这个页面第四步：找到win64下载安装。第五步：找到你自己下载安装的路径，准备配置环境变量。第六步：复制安装的路径：找到电脑关于>高级系统设置>点击高级，>点击环境变量第七步：找到path，点击编辑，将复制的路径粘贴，点击

这个数据是用scrapy框架从兼职猫里面爬取出来的一部分数据，保存文件的格式是json格式。我之前有个文章是淘宝数据写入数据库 ，漏了一段代码。现在改回来了。在数据写入数据库之前，我们要做的事是建数据库和数据表数据库创建语句是：create database 数据库名 charset=utf8;create database jianzhimaocharset=utf8;创建一个名为qwe的表。数

空值，异常值，重复值，类型转换和数据整合

列表相关操作#1. 添加元素append 、 extend 、insert# li2 = [1, 'b', 'c', 'd']# li2.append([2, 3, 4])# append整体添加在原来列表后面 [1, 'b', 'c', 'd', [2, 3, 4]]# li2.extend([2, 3, 4])# extend 分散添加， 将另外一个类型中的元素逐一添加 [1, 'b', 'c

喜欢python的同学应该都知道python又很多库，使得我们写起代码的时候相比Java，C语言方便简单，高效很多。今天我们要用到的库呢是第三方库，是需要我们去下载安装的。点击Terminal 进入命令行模式，输入pip install pymysql 按下回车即可下载。等待下载安装好之后我们就可以开始了。（这里写的是爬虫的模板，在写入数据库，先安装MySQL数据库）第一步：写代码之前肯定是导库了

selenium使用使用selenium有一个硬性条件，1;使用Google浏览器 2:下载chromedrive.exe工具。驱动的下载地址如下：http://chromedriver.storage.googleapis.com/index.html查看浏览器的版本:浏览器右上角三个点: > 帮助 > 关于Google chrome--89.0.4389.90 根据这个数字去找对应

这个安装是不需要配置环境变量的，我看见有些博主是有搞哪个环境变量。第一步：进入chromedriver官网:https://npm.taobao.org/mirrors/chromedriver第二步：根据浏览器的版本下载对应的压缩包，我们用的是谷歌浏览器。点击浏览器右上角三个点: > 帮助 > 关于Google chrome -- 94.0.4606.54 根据这个数字去找对应的版本