爬取Ajax界面

来源:互联网 发布:淘宝内衣模特偷拍网盘 编辑:程序博客网 时间:2024/06/05 21:14

参考https://www.cnblogs.com/Erma-king/p/5281967.html
膜拜大佬

首先分析采用ajax的界面特点 点击下一页之后网址并没有改变,但是内容更新了,爬取原来的网址 爬不到所有的内容

例如原博客中的京东
.
使用chrome浏览器的开发者工具
刷新查看network
这里写图片描述

找到 关键链接
这里写图片描述

github代码
https://github.com/xuman-Amy/JDscrapy/blob/master/README.md

原创粉丝点击