logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

ImportError: cannot import name 'log' from 'scrapy'

[root@localhost ~]# python3Python 3.8.2 (default, Apr 20 2020, 10:10:11)[GCC 4.8.5 20150623 (Red Hat 4.8.5-39)] on linuxType "help", "copyright", "credits" or "license" for more information.>>&g

腾讯微视 爬虫

关于腾讯微视频采集解决方案Github 地址点这里前段时间看到一个关于微信数据采集的小项目,我感觉非常不错, 修改它做一些好玩的事,用来获取短视频平台的一些数据,它很容易理解,也很容易进行修改,可以为以后其他爬虫提供思路。首先确保你有一台或多台安卓 手机,使用adb 对手机进行模拟操作,我们可以使用代理拦截的方式进行获取数据 当然我们也可以使用其他的方式,多种多样的玩法或许很有成...

#python
爬虫关于ip的问题

在使用爬虫进行数据抓取时候,会遇到很多反爬虫措施,封IP是常见的一种反扒措施,但是这种反扒措施是很古老的方式,对于运维人员来说当时看起来是比较有效的一种方式,但是一般的大量抓取都会携带使用代理ip 去请求,也就是ip 池现在爬虫使用代理一般有两种 方式:1 购买市面上的一些 API 接口,每次返回多少ip,在爬虫程序种接入使用(买代理)2 自己抓取一些免费的代理,去放到Redis 里面...

AI 微信自动聊天机器人

 微信聊天机器人# /usr/bin/env python# -*- coding: utf-8 -*-# @Time: 18-5-4 下午23:37# @Author: 杨星星# @Email: yangshilong_liu@163.com# @File: wechart.py# @Software: PyCharm#coding=utf8...

#python
2、机器学习三要素之数据、模型、算法

注:  本系列 课程源于李烨 · (微软高级软件工程师)老师的文档   在gitbook 上可以买到李老师课程。机器学习三要素包括数据、模型、算法。简单来说,这三要素之间的关系,可以用下面这幅图来表示:总结成一句话:算法通过在数据上进行运算产生模型。下面我们先分别来看三个要素。 数据关于数据,其实我们之前已经给出了例子。 源数据上一篇中,图1老鼠和其他动...

#机器学习#python
预算有限怎么选 Codex 套餐?我的 AxisCode 使用复盘

摘要:AxisCode是一款Codex 套餐,适合个人开发者和小团队的高频AI编程工具,主打成本可控和稳定性。它采用按请求计费,规则清晰,适合长期使用。作者建议先试用体验档,通过真实项目测试效率、稳定性和成本,再决定是否长期投入。AxisCode的优势在于国内直连、上手门槛低,尤其适合日常开发中的改Bug、补代码等高频任务。

文章图片
#产品运营
预算有限怎么选 Codex 套餐?我的 AxisCode 使用复盘

摘要:AxisCode是一款Codex 套餐,适合个人开发者和小团队的高频AI编程工具,主打成本可控和稳定性。它采用按请求计费,规则清晰,适合长期使用。作者建议先试用体验档,通过真实项目测试效率、稳定性和成本,再决定是否长期投入。AxisCode的优势在于国内直连、上手门槛低,尤其适合日常开发中的改Bug、补代码等高频任务。

文章图片
#产品运营
Python 列表

# /usr/bin/env python# -*- coding: utf-8 -*-# @Time: 18-7-19 下午6:14# @Author: 杨星星# @Email: yangshilong_liu@163.com# @File: python_list_.py# @Software: PyCharm# 创建一个空列表new_list...

#python#list
python 发送邮件

# /usr/bin/env python# -*- coding: utf-8 -*-# @Time: 18-8-20 上午9:52# @Author: xxx# @Email: xxxxxxxx# @File: email_send_msg.py# @Software: PyCharmimport smtplibfrom email.mime.t...

#python
爬虫 - 多线程、进程池、协程

进程池#!/usr/bin/env python# -*- coding:utf-8 -*-from lxml import etree#import threading# multiprocessing.dummy 是多进程类库里里的一个多线程模块,有一个类Pool,表示线程池from multiprocessing.dummy import Poolimport requ...

    共 12 条
  • 1
  • 2
  • 请选择