logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

猎聘网职位数据爬取实战:逆向 API 接口获取招聘信息

本文介绍了如何通过逆向猎聘网API接口批量获取招聘信息。首先分析猎聘网搜索职位时的POST请求接口,对比直接解析HTML的优势。重点讲解了请求头构造的关键字段(如User-Agent、X-XSRF-TOKEN等)和JSON格式请求体的参数设置。提供了完整的Python代码示例,展示如何发送请求并解析返回的职位数据(公司名称、职位名称、薪资等)。最后解析了API返回的JSON数据结构层级和核心字段路

#python#爬虫
Python 异步抓取懂球帝数据

本文介绍了使用Python异步爬虫抓取懂球帝API JSON数据的方法。通过分析懂球帝的API接口结构,文章展示了如何构造请求URL、解析JSON数据并实现分页抓取。技术实现上采用aiohttp库进行异步请求,配合lxml解析HTML内容,同时对抓取的数据进行清洗和过滤,包括时间筛选、噪音图片过滤等。文章强调该方法仅用于学习研究,并提醒合理控制请求频率。完整的Python代码示例涵盖了从文章列表抓

#okhttp
到底了