python3爬虫初探(八)requests
来源:互联网 发布:淘宝闲鱼官网 编辑:程序博客网 时间:2024/06/05 04:36
几个常见的操作:
import requests
#from PIL import Image
#from io import BytesIO
def simple_get(url):
resp = requests.get(url)
print(resp.status_code)
print(resp.encoding)
print(resp.text)
def get_with_parameters(url):
resp = requests.get(url, params={'key1':'你好', 'key2':'世界'})
print(resp.url)
print(resp.text)
def get_with_ua(url):
ua = 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_5) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/59.0.3071.115 Safari/537.36'
resp = requests.get(url, headers={'user-agent':ua})
# print(resp.text)
# print(resp.headers)
jdata = resp.json()
print(jdata['headers']['User-Agent'])
def get_using_cookie(url):
resp = requests.get(url, cookies={'key1':'hello', 'key2':'world'})
for k, v in resp.cookies.items():
print(k, v)
'''
def get_image(url):
resp = requests.get(url)
image = Image.open(BytesIO(resp.content))
image.save('sample.jpg')
'''
simple_get('http://httpbin.org/get')
# get_with_parameters('http://httpbin.org/get')
# get_with_ua('http://httpbin.org/get')
# get_using_cookie('http://www.baidu.com')
#get_image('http://n.sinaimg.cn/news/1_img/cfp/c4b46437/20171009/wZwz-fymrcpu8452587.jpg')
- python3爬虫初探(八)requests
- python3爬虫初探(二)之requests
- python3爬虫初探(六)之EXCEL
- python3爬虫初探(七)使用MySQL
- python3爬虫攻略(9):requests的使用
- python3爬虫(一)requests库的学习
- python3 爬虫入门(二)requests库基本使用
- Python3爬虫简易实例1(Requests正则)
- python3爬虫初探(一)之urllib.request
- python3爬虫初探(三)之正则表达式
- python3爬虫初探(四)之文件保存
- python3爬虫初探(五)之从爬取到保存
- python3的爬虫抓取猫眼电影的信息(requests+正则表达式)
- Python爬虫学习纪要(八):Requests 库学习笔记3
- python3 [爬虫实战] selenium + requests 爬取安居客
- python3 [爬虫实战] selenium + requests 爬取安居客
- Python3网络爬虫:requests爬取动态网页内容
- python3爬虫requests.get(url)出现http 500错误
- cs224d 作业 problem set2 (三) 用RNNLM模型实现Language Model,来预测下一个单词的出现
- 安装Tez 0.9.0
- JMeter java.net.URISyntaxException: Illegal character in query at index 60
- 最长公共子序列的问题
- Lavarel初识
- python3爬虫初探(八)requests
- pygame.key
- cs224d 作业 problem set3 (一) 实现Recursive Nerual Net Work 递归神经网络
- 《Spring 5 官方文档》5. 验证、数据绑定和类型转换
- MATLAB使用积累本
- Python UDP客户端和服务端通信
- spring kafka consumer 提升并行度
- Linux资源监控命令/工具(综合)
- 奥威Power-BI 快消行业数据分析方案——分渠道类型销售情况