logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Gitlab CI error during connect: Get http://docker:2375/v1.40/containers/json?all=1: dial tcp: lookup

解决办法sudo vim /etc/gitlab-runner/config.toml在你出错的项目下加上image = docker:stableprivileged = true

#运维
Version in “./docker-compose.yml“ is unsupported.

报错信息:ERROR: Version in "./docker-compose.yml" is unsupported. You might be seeing this error because you're using the wrong Compose file version. Either specify a version of "2" (or "2.0") and place y

#docker#容器#运维
docker build速度过慢问题

docker速度过慢的原因在于,docker的默认源主要是在国外,因此会慢,解决办法是替换掉它.我这里使用的是阿里的源:RUN sed -i "s/archive.ubuntu./mirrors.aliyun./g" /etc/apt/sources.listRUN sed -i "s/deb.debian.org/mirrors.aliyun.com/g" /etc/apt/sources.li

#docker#容器#运维
python 领英爬虫

**1.**一般我们爬取领英都是想爬领英上关于那个公司的所有员工,所以我们有两种方法(我已知的),一个是百度(领英+公司名称),从中抽取个人领英页面,从而进入个人领英页面进行信息的抓取,一般百度只会提供前75页信息,so,你可能抓不全,但这里我提供一种思路,这种思路仅仅简历在你想要抓完全的情况下可用:一般领英个人界面的右边回提供,推荐认识的人,你只需在右边的推荐人里进行广度或深度遍历,再建立筛选机

文章图片
#python#爬虫
ERROR: In file ‘./docker-compose.yml‘, service ‘**‘ must be a mapping not

使用dockers-compose编写docker-compose.yml,在使用命令dockers-compose up命令时遇到了这个错误.原因,在编写编写docker-compose.yml没有严格缩进,改进如下(两个空格):效果如下:

#docker
爬虫爬取js渲染网站的思路

如何辨别哪些网站时js渲染的网站?使用requests库访问得到网页文本是否与浏览器得到的网页文本一致,若不一致(可能会存在因浏览器不同,导致不同结构的细微差异),网站多多少少存在js渲染的情况。如何爬取js渲染的网站呢?在这里我提供三种思路:1、使用 selenium pyppeteer splash等等模拟浏览器的方式去爬取,这是最便捷的方法,缺点就是耗时比较慢,但胜在渲染无敌,xpa...

#爬虫
python 领英爬虫

**1.**一般我们爬取领英都是想爬领英上关于那个公司的所有员工,所以我们有两种方法(我已知的),一个是百度(领英+公司名称),从中抽取个人领英页面,从而进入个人领英页面进行信息的抓取,一般百度只会提供前75页信息,so,你可能抓不全,但这里我提供一种思路,这种思路仅仅简历在你想要抓完全的情况下可用:一般领英个人界面的右边回提供,推荐认识的人,你只需在右边的推荐人里进行广度或深度遍历,再建立筛选机

文章图片
#python#爬虫
langchain入门系列之二 LLM之提示词使用

langchain使用提示词与LLM模块及其语言模型进行交互,提示词是与语言模型交互的。来教会语言模型,从而达到更理想的效果。

文章图片
#python
langchain入门系列之二 LLM之提示词使用

langchain使用提示词与LLM模块及其语言模型进行交互,提示词是与语言模型交互的。来教会语言模型,从而达到更理想的效果。

文章图片
#python
    共 13 条
  • 1
  • 2
  • 请选择