最近竟然开始磕起了黄晓明和尹正的CP！！！但是万恶的爱某艺不好好更新剧集，居然搞起了超前点映…WTF？？？有什么是我这个贫穷而又尊贵的VIP用户不能看的？？？于是我决定开始看小说了！找个网站把小说爬下来慢慢看吧~先物色一个投缘的小说网站吧就它了！第一步：分析网页首先需要了解要爬取网站的页面，查看网页源代码。然后根据网页源代码的结构，想好代码的步骤和思路。在网页开发者模式中查看...

最近闲着，想学一下爬虫先从简单的练习开始吧~ 爬取单个网页里的所有图片，这个没有什么难点，因为不需要翻页哈哈哈哈我很喜欢一些文章中的配图，比如这篇，里面就会有很多电影中的经典截图第一步：分析网页1.首先我们要了解要爬取网站的页面，查看网页源代码。2.其次要想好代码的步骤和思路。#获取主页面源代码#获取章节超链接#获取小说内容#下载小说import requestsimpor...

今天用Charles抓包发现抓到的https接口请求前都带了一把锁🔒，无法解析，记录一下解决方法～问题现象：解决方法：添加https配置：Proxy -> SSL Proxying SettingSSL Proxying -> Enable SSL Proxying ->Add在弹窗中Host填写需要覆盖的域名，或者直接填‘*’ 表示所有域名，Port填443（https）之后

Charles模拟接口返回异常值/空值/超时一、Charles模拟接口返回异常值1. rewrite方法2. map loacal方法3. 打断点方法二、Charles模拟接口返回空值1. rewrite方法2. map loacal方法3. 打断点方法三、Charles模拟接口返回超时1. rewrite方法2. map loacal方法3. 打断点方法...

本文主要分享关于在对应python版本中安装beautifulsoup之后，在代码执行时还会提示“No module named 'bs4'”的问题。首先需要检查一下，自己安装beautifulsoup的版本与用来执行代码的python版本是不是一致的，为了防止出问题，我将python2与python3都安装了beautifulsoup~安装的方法很简单，执行pip install beautif

python安装第三方库的方法：电脑网络有点问题，直接安装第三方库的时候出现了各种问题，所以在这篇文章里记录一下各种安装第三方库的方法吧。就以之前安装过的beautifulsoup4来举例吧（其实是看上了以前文章里的截图）1. 直接pip install安装打开cmd，输入pip install beautifulsoup4，回车即可安装，这也是最快最简单的方法啦~这个库比较简单，很快...

whistle(读音[ˈwɪsəl]，拼音[wēisǒu])一、简介whistle是基于Node实现的跨平台web调试代理工具，主要用于查看、修改HTTP、HTTPS、Websocket的请求、响应，也可以作为HTTP代理服务器使用。类似的工具有Windows平台上的Fiddler，不同于Fiddler通过断点修改请求响应的方式，whistle采用的是类似配置系统hosts的方式......

python安装第三方库的方法：电脑网络有点问题，直接安装第三方库的时候出现了各种问题，所以在这篇文章里记录一下各种安装第三方库的方法吧。就以之前安装过的beautifulsoup4来举例吧（其实是看上了以前文章里的截图）1. 直接pip install安装打开cmd，输入pip install beautifulsoup4，回车即可安装，这也是最快最简单的方法啦~这个库比较简单，很快...