终于还是对闲鱼下手了。闲鱼爬虫，idlefish spider来了
闲鱼目前最大的问题在于没有html请求口子了，闲鱼用了自家的app口子，而且还有spdy协议，拒绝使用代理。如果想采集闲鱼数据，并保存下来，做个对比分析之类的，传统的非传统的招数都已经凉了。怎么说呢，面对闲鱼，你想抓个包都不好抓了。所以，这个闲鱼数据采集，真的不容易。手动调用了闲鱼的返回接口，将你在app内看到的数据采集下来。就这样吧。获得数据如下：可点击查看大图项目地址：github:https
文章共299字 · 阅读需要大约1分钟
一键AI生成摘要，助你高效阅读
问答
·
闲鱼目前最大的问题在于没有html请求口子了，闲鱼用了自家的app口子，而且还有spdy协议，拒绝使用代理。
如果想采集闲鱼数据，并保存下来，做个对比分析之类的，传统的非传统的招数都已经凉了。
怎么说呢，面对闲鱼，你想抓个包都不好抓了。
所以，这个闲鱼数据采集，真的不容易。手动调用了闲鱼的返回接口，将你在app内看到的数据采集下来。就这样吧。
获得数据如下：
可点击查看大图
项目地址：
github: https://github.com/FightingForWhat/xianyu_spider-crawler-sender
gitee: https://gitee.com/FightingForWhat/xianyu_spider-crawler-sender
旨在为数千万中国开发者提供一个无缝且高效的云端环境，以支持学习、使用和贡献开源项目。
更多推荐
2
0- 0
已为社区贡献2条内容
所有评论(0)