logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

基于 Python + JSONPath 爬取动态网页数据实战:腾讯招聘与汉堡王中国案例解析

本文介绍了使用Python+JSONPath技术爬取腾讯招聘和汉堡王官网动态数据的实战案例。通过分析AJAX请求,直接获取后端JSON数据,避免了HTML解析的复杂性。文章详细讲解了环境搭建、接口抓包定位、JSONPath表达式编写等关键步骤,并提供了完整的代码实现。案例对比显示,JSONPath在解析多层嵌套JSON时具有显著优势,但同时也存在学习成本高、依赖接口稳定性等不足。最后提出了合规爬取

#python
Python 爬虫从入门到进阶:XPath 解析与实战案例(豆瓣 Top250+4399 登录抓取)

本文介绍了Python爬虫技术,从入门到进阶涵盖了XPath解析和两个实战案例(豆瓣Top250和4399登录抓取)。主要内容包括:1. 爬虫基础工具与XPath解析技术,重点讲解元素定位和属性提取;2. 豆瓣Top250爬取案例,实现分页爬取、数据解析和存储;3. 4399登录抓取案例,学习表单提交、会话保持和权限数据获取;4. 反爬规避技巧和合规建议。文章通过具体代码示例,帮助读者掌握从公开数

#python#爬虫
Python Selenium 核心技巧与实战:从基础操作到极验滑动验证码破解

本文系统讲解了Selenium四大核心技巧在Web自动化测试中的应用,重点聚焦极验滑动验证码破解方案。主要内容包括:1. 四大核心技巧详解:显式等待实现精准元素定位、隐式等待作为全局兜底、动作链模拟人类复杂交互、截图留存操作证据;2. 实战案例:通过集成OpenCV图像处理技术,实现验证码缺口识别与拟人化滑动轨迹生成;3. 完整解决方案:从触发验证到结果验证的全流程自动化实现,包含关键代码解析与优

#python#selenium#microsoft
Python 数据存储:从基础到进阶的完整指南

本文系统梳理了Python生态中主流的数据存储方案,涵盖基础文件存储和专业数据库两大类别。基础存储部分介绍了文本文件、CSV、JSON和Excel的适用场景及操作方法;数据库部分详细讲解了关系型数据库(SQLite、MySQL)与非关系型数据库(MongoDB、Redis)的实践应用。文章特别强调了pandas+SQLAlchemy批量写入的高效方案,并提供了ORM框架、数据序列化等进阶技术。最后

#网络#数据库#服务器 +1
线性回归入门:用 Python 从零实现简单预测模型

本文介绍了机器学习中最基础的线性回归算法及其Python实现。通过"学习时间与考试成绩"的实际案例,详细讲解了线性回归的原理(y=wx+b)、最小二乘法优化目标,并完整演示了使用scikit-learn库实现模型训练、参数获取、可视化效果和预测的全过程。文章包含从数据准备到模型评估的完整代码,适合初学者快速入门。线性回归虽简单但应用广泛,可用于房价预测、销量分析等多种场景,是理

#线性回归#python#算法
Python 分类模型评估:从理论到实战(以信用卡欺诈检测为例)

本文针对机器学习分类任务中的模型评估问题,重点探讨了数据不平衡场景下的评估策略。通过信用卡欺诈检测案例,详细解析了评估指标的选择逻辑:准确率在不平衡数据中会失效,应优先关注召回率、精确率和AUC值。文章演示了Python实现流程,包括数据生成、模型训练、指标计算和可视化分析,并强调阈值调整对业务适配的重要性。核心结论指出评估应匹配业务需求,如欺诈检测需侧重召回率,同时通过加权处理和数据可视化提升模

#人工智能#机器学习#数据挖掘 +1
Python Web 开发:从框架到实战案例

本文系统介绍了Python Web开发的三大主流框架及其适用场景:Django全栈式框架适合中大型项目,Flask轻量灵活适合小型应用,FastAPI则专为高性能API设计。通过博客系统、任务管理工具和TODO API三个实战案例,详细展示了各框架的核心功能实现过程。文章还梳理了Web开发的通用组件和全流程实践,包括数据库交互、路由视图、模板引擎等核心模块,以及从环境搭建到部署运维的完整开发链路。

#python#django
Python 随机森林算法:原理、实现与完整案例解析

本文介绍了随机森林(RandomForest)这一经典集成学习算法。随机森林通过多棵决策树的投票机制实现预测,具有高准确率、抗过拟合和可解释性强的特点。文章详细讲解了算法的两大随机机制(随机样本采样和随机特征选择)及分类/回归任务的处理逻辑,并提供了两个完整案例:1)鸢尾花品种分类(准确率100%),2)波士顿房价回归(R²=0.87)。案例包含数据预处理、模型训练、评估和特征重要性分析的全流程代

#算法#python#随机森林
幸福指数数据分析与预测:从数据预处理到模型构建完整案例

本文以幸福指数公开数据集为案例,系统演示了从原始 csv 到可落地模型的完整机器学习流程。首先进行数据质量检查:删除重复样本,将“无法回答”的异常标签-8 修正为中间值 3,并依据缺失率差异化处理——剔除缺失率>60 % 的高稀疏特征,对配偶、子女、社交等低缺失字段分别用 0、7、中位数等策略填充,保证数据完整性。随后开展特征工程:利用调查时间与出生年份衍生年龄,并对收入、身高、公共服务评分等 1

#python#机器学习#开发语言
Python 数据存储:从基础到进阶的完整指南

本文系统梳理了Python生态中主流的数据存储方案,涵盖基础文件存储和专业数据库两大类别。基础存储部分介绍了文本文件、CSV、JSON和Excel的适用场景及操作方法;数据库部分详细讲解了关系型数据库(SQLite、MySQL)与非关系型数据库(MongoDB、Redis)的实践应用。文章特别强调了pandas+SQLAlchemy批量写入的高效方案,并提供了ORM框架、数据序列化等进阶技术。最后

#网络#数据库#服务器 +1
到底了