爬虫使用xpath部分内容无法获取
使用xpath获取信息，同一个网页的不同内容，有的可以，有的无法获取网页中的内容是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。或者是通过F12控制台分析页面数据加载的链接，找到真正json数据的地址进行爬取。在页面上点击右键，右键菜单中选 "查看网页源代码"。参考：(1条消息) 关于x
·
使用xpath获取信息，同一个网页的不同内容，有的可以，有的无法获取
网页中的内容是通过js代码读取外部json数据来动态更新的。
requests只能获取网页的静态源代码，动态更新的内容取不到。
对于动态更新的内容要用selenium 来爬取。
或者是通过F12控制台分析页面数据加载的链接，找到真正json数据的地址进行爬取。
在页面上点击右键，右键菜单中选 "查看网页源代码"。
瓜分20万奖金 获得内推名额 丰厚实物奖励 易参与易上手
更多推荐
0
0- 0
已为社区贡献1条内容
所有评论(0)