如何判断一个网页是不是动态页面
来源：互联网 发布：软件编程教学 编辑：程序博客网 时间：2024/05/28 17:04
如果你需要爬取的数据是放在js里面的，那么就是动态，需要用selenium等工具抓取。
跑下面的代码，就会把网页上所有元素都打印出来。ctrl+F搜索一下，如果要找的元素在一个js object里面，就说明是动态获取到的。
import requestsfrom bs4 import BeautifulSoupurl = "xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx"response = requests.get(url)soup = BeautifulSoup(response.text,'lxml')print(soup.prettify()) 0 0
- 如何判断一个网页是不是动态页面
- 如何判断一个网页是不是一个Blog的首页？
- js中如何判断是不是顶层页面
- asp如何判断一个字符是不是汉字
- asp如何判断一个字符是不是汉字
- js如何判断一个对象是不是Array？
- 【转】如何判断一个字符是不是汉字
- js如何判断一个对象是不是Array？
- js如何判断一个对象是不是Array？
- 如何判断一个浏览器是不是ie浏览器
- js如何判断一个对象是不是Array？
- JS如何判断一个对象是不是Array
- javascript如何判断一个对象是不是Array
- js 如何判断一个对象是不是数组
- js如何判断一个对象是不是Array？
- js如何判断一个对象是不是Array？
- js如何判断一个对象是不是Array？
- 如何判断一个请求是不是ajax请求
- Pascal's Triangle II
- java使用spring在静态方法中使用注入类
- Pixhawk原生固件PX4之自定义参数在QGC显示
- 信号报告
- Linux最基本的开关机操作和辅助操作
- 如何判断一个网页是不是动态页面
- MySQL语句
- 一个简单的MyBatis完成插入操作的例子（二）
- 图片加载利器之Picasso（四）源码解析
- junit（单元测试）
- 10分钟搞定kettle源码部署
- PL/SQL程序（一）
- 练习题（视频中习题）
- Java引用传递和值传递
