logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

爬虫——审查元素与网页源代码不一致问题

按照常规做法,获得源网页后无论用selector还是Xpath,均无返回值问题爬取NCBI网站的数据,审查元素与获得的网页源代码不一样,爬取的东西在源码中没有,审查元素中存在。经过查找,发现NCBI该部分为异步传输,所需信息在Network下XHR的第九个文件中,且网址与爬取的网址不一致,需要POST获取网页。...

#python
到底了