使用Python urllib2下载CSDN博客列表到本地
来源:互联网 发布:并发编程的艺术 pdf 编辑:程序博客网 时间:2024/06/05 03:38
# -*- coding: utf-8 -*-import string, urllib2# 下载CSDN博客列表def load_csdn(url, page): name = string.zfill(page, 5) + '.html' print '正在下载' + str(page) + '个页面,并存储其为' + name f = open(name, 'w+') url = url + '/' + str(page) print url # 伪装成浏览器 headers = { 'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/38.0.2125.101 Safari/537.36' } req = urllib2.Request(url = url,headers = headers) m = urllib2.urlopen(req).read() f.write(m) f.close()# http://blog.csdn.net/Geek_ymv/article/list/2url = str(raw_input(u'请输入地址:'))page = int(raw_input(u'请输入第几页:'))# 下载网页到本地load_csdn(url, page)
0 0
- 使用Python urllib2下载CSDN博客列表到本地
- [Python开发] python使用urllib2下载文件
- python 爬取csdn网页并保存博客到本地
- Python 使用urllib2模块实现断点续传下载
- Web Scraping with Python: 使用 Python 下载 CSDN 博客图片
- [Python下载CSDN博客]2. 使用BeautifulSoup分析HTML(一)
- [Python下载CSDN博客]2. 使用BeautifulSoup分析HTML(二)
- python下载图片到本地
- python下载图片到本地
- 备份CSDN博客正文到本地存档
- 备份CSDN博客正文到本地存档
- 使用Python自动下载妹子图的图片到本地
- python urllib2实现刷博客
- python urllib2使用细节
- python urllib2, urllib使用
- Python-urllib2的使用
- Python:urllib2使用总结
- python---urllib2使用
- 【iOS开发】Xcode操作实用贴
- 集团信息化之路 在线收款平台需求对接之销售公司业务变化调整
- POJ2513【并查集+字典树+欧拉】
- [JAVA] 枚举型使用方法
- ios swift 学习
- 使用Python urllib2下载CSDN博客列表到本地
- 第二章
- iOS NSString的常用用法
- 104:Maximum Depth of Binary Tree【树】【DFS】
- SQLite数据库简介
- JS中变量名作为if条件的真/假
- C++中定义比较函数的三种方法
- Rainy season best wbp brown film faced plywood
- C# 中参数验证方式的演变