logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Python3爬虫——用BeautifulSoup解析古诗文网

我们之前已经用Xpath分析过了古诗文网,但还是感觉有点麻烦,所以今天来讲BeautifulSoup库,它可以很方便的帮我们抓取网页的数据,同样也支持lxml解析器,下面我们来详细介绍:安装BeautifulSoup库:pip install beautifulsoup4导入BeautifulSoup库:import bs4# 导入BeautifulSoup整个库fr...

Python爬虫(二)——爬取电影天堂,保存下载地址

首先我们开始要分析一下,下载种子我们需要哪几步:获取所有电影页的访问地址获取电影页源码提取出下载地址将下载地址保存首先第一步,我们来分析一下电影天堂网站的结构,发现他跟我们的古诗文网还是非常类似的,全站静网结构,不需要登录,页面有全新的地址,这对于初学来讲是非常容易上手的;接下来我们以国内电影(https://www.ygdy8.net/html/gndy/china/index...

#爬虫
Python爬虫(四)——小说下载器

既然我们之前已经讲了BeautifulSoup的使用,那么我们今天就来实战下,用BeautifulSoup解析小说网站,做一个小说下载器;首先,先分析一下网站:我们的目标是一个叫全小说的网站:https://qxs.la/我们可以看见右上角的位置有一个搜索框,我们可以将想要搜索的关键词键入,然后搜索我们想要的内容,我们来分析下这个网站的结构;我们在搜索框输入“唐家三少”,看看网页会...

#beautifulsoup
在群辉上搭建git服务器

环境及使用工具Windows10群辉DS3617xsGit-2.22.0-64-bitXShell6一、在群辉上安装Git Server套件二、创建存放git库的共享文件夹(可以在控制面板直接添加,也可以在File中新增共享文件夹)三、创建用来访问git服务器的用户账户四、设置Git Server,允许刚才创建的用户访问git服务器五、启动SSH六、启动家目录(如果...

#git
Python爬虫——获取ajax异步加载数据

在我们访问网页的时候,经常会看到一种技术,当我们点击了一个选项卡或者其他的链接,网页数据发生了改变,但是网址却没有发生任何变化,那么这种技术就是ajax异步加载数据,当我们点击一个链接的时候,它只是发送了一个数据包过来,然后只是将这个数据包的数据进行了替换,这样的好处就是我们进行网页访问的时候可以更加简洁高效,也更加的节省资源,但是这对于我们爬取数据的要求就更高了,那么我们接下来来看一下怎么爬取异

#ajax
注册Keil软件时出现“ TOOLS.INI: TOOLCHAIN NOT INSTALLED ”的解决办法

注册keil软件时“TOOLS.INI: TOOLCHAIN NOT INSTALLED ”的解决方法

面包板是神马东西?。。

面包板是创客硬件布置电路非常常用的器件,它可以看做是一个很大的电路板,只不过这个电路板不需要焊接,只需要将元器件插在面包板上就可以了,非常方便,也降低了硬件设计的难度;至于为什么叫面包板,或者他长得像面包吧,亦或者发明这个的人突然想吃面包了,我更愿意相信第一个理由哈哈;那接下来就让我们看看面包板的内部构造,他为什么能这么强大。。。解剖面包板面包板主要特征(图片内容:接线柱,双列直插式封...

Python爬虫(一)——爬取古诗文网,初识什么是爬虫

首先来说下什么是爬虫,按照百度百科的说法是:是一种按照一定规则,自动抓取万维网信息的程序或者脚本;首先它是程序,需要我们定义好规则,然后程序就会按照定义好的规则抓取网络上的信息,数据抓取下来了之后,需要我们对这个庞大的数据进行筛选、提取,也就是我们通常说的数据清洗,获得我们需要的信息。这里需要说的一点是,爬虫并不是python的专利,用其他的语言也是可以做到的,只是因为python提供了很多方便我

#爬虫
arduino音乐播放器(蜂鸣器版)

蜂鸣器是我们常见的一个电子元器件,它可以发出类似蜂鸣的声音,采用低电压直流供电,广泛运用于计算机、打印机、报警器、电子玩具等众多场合,一般作为提示、警报较多;我们不以结构论述,以工作原理可将其分为有源蜂鸣器和无源蜂鸣器;注意这里的源指的不是电源,而是振荡源,即有源蜂鸣器内部自带振荡源,通电就能发出声音;而无源蜂鸣器不带振荡源,必须用2-5k的方波去驱动;蜂鸣器的发声装置由震动装置和谐...

树莓派通信协议——MQTT的安装及使用

MQTT是一种基于TCP/IP协议栈构建的异步通信协议,是一种轻量级的发布/订阅信息传输协议,基于topic订阅关系的发布和推送;在实践中可空间上,将消息发送者和接受者分离,可以再不可靠的网络环境中进行扩展,适用于设备硬件存储空间有限或网络带宽有限的场景。上面是比较官方的解释,那么我们用我们听得懂的话来解释,现在的抖音很火,那我们就用抖音举个栗子:抖音是一个短视频平台,任何人都可以发布自己拍的视频

#python#物联网
    共 17 条
  • 1
  • 2
  • 请选择