代码2 代替浏览器行为爬取数据
来源:互联网 发布:批处理软件 编辑:程序博客网 时间:2024/05/16 23:40
# coding=utf-8
import requests
headers = {"User-Agent":"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/61.0.3163.100 Safari/537.36"}
# url = "https://www.baidu.com/s?wd={}".format("python")
url_temp = "http://www.baidu.com/s?"
# params = {"wd":"每天都是新的一天"}
params = dict(wd = "meitiandoushixindeyitian")
r = requests.get(url_temp,params=params,headers=headers)
print(r.status_code)
print(r.request.url) #请求的url和响应的url在后面的内容中不一样,在rquests里面一样
import requests
headers = {"User-Agent":"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/61.0.3163.100 Safari/537.36"}
# url = "https://www.baidu.com/s?wd={}".format("python")
url_temp = "http://www.baidu.com/s?"
# params = {"wd":"每天都是新的一天"}
params = dict(wd = "meitiandoushixindeyitian")
r = requests.get(url_temp,params=params,headers=headers)
print(r.status_code)
print(r.request.url) #请求的url和响应的url在后面的内容中不一样,在rquests里面一样
阅读全文
0 0
- 代码2 代替浏览器行为爬取数据
- 爬取天眼查数据 附代码
- 基于nodejs模拟浏览器post请求爬取json数据
- 基于nodejs模拟浏览器post请求爬取json数据
- 基于nodejs模拟浏览器post请求爬取json数据
- 基于nodejs模拟浏览器post请求爬取json数据
- 基于nodejs模拟浏览器post请求爬取json数据
- 基于nodejs模拟浏览器post请求爬取json数据
- 取数据集代码编辑器
- Java8 in action(1) 通过行为参数化传递代码--lambda代替策略模式
- chrome浏览器console控制台引入jquery,爬取网页数据并下载成csv格式文件
- 代码行为
- C语言 重定向 从txt文件取数据作为输入代替键盘输入
- 爬取高考数据
- 证券数据爬取
- php爬取数据
- 动态数据爬取
- python爬取数据
- 欢迎使用CSDN-markdown编辑器
- C++中struct和class的区别
- android studio 跳出方框提示快捷键如何取消
- 网站前台和后台可以同时登录
- Virtual App对于注解的使用
- 代码2 代替浏览器行为爬取数据
- 63.设计模式笔记-单例模式
- 制作补丁
- nginx在linux下的安装
- 关于spring的配置注入和注释注入的见解
- Linux 系统便捷安装pycharm
- iOS UIFont原生字体和第三方字体.ttf的使用
- JavaScript类型浅谈
- MYSQL之表连接