python 百度贴吧爬虫

来源:互联网 发布:ubuntu修改时区命令 编辑:程序博客网 时间:2024/05/17 06:15
#-*- coding: UTF-8 -*-import string,urllib2# 定义百度函数def baidu_tieba(url, begin_page, end_page):    for i in range(begin_page, end_page + 1):        sName = string.zfill(i, 5) + '.html'  # 自动填充成六位的文件名        print '正在下载第' + str(i) + '个网页,并将其存储为' + sName + '......'        f = open(sName, 'w+')        m = urllib2.urlopen(url + str(i)).read()        f.write(m)        f.close()        # -------- 在这里输入参数 ------------------# 这个是山东大学的百度贴吧中某一个帖子的地址# bdurl = 'http://tieba.baidu.com/p/2296017831?pn='# iPostBegin = 1# iPostEnd = 10bdurl = str(raw_input(u'请输入贴吧的地址,去掉pn=后面的数字:\n'))begin_page = int(raw_input(u'请输入开始的页数:\n'))end_page = int(raw_input(u'请输入终点的页数:\n'))# -------- 在这里输入参数 ------------------# 调用baidu_tieba(bdurl, begin_page, end_page)
0 0
原创粉丝点击
热门问题 老师的惩罚 人脸识别 我在镇武司摸鱼那些年 重生之率土为王 我在大康的咸鱼生活 盘龙之生命进化 天生仙种 凡人之先天五行 春回大明朝 姑娘不必设防,我是瞎子 诸天:主神炸了 蒸汽之国的爱丽丝 1979从教师开始 三国之季汉谋主 我能入殓万物 亮剑!我是晋西北战狼团团长 人在初唐:我的提示词条老不正经 妖修:转生从大蚺开始 NBA:我没打过比赛但天赋爆棚 我有一个废土世界 NBA之我和邓肯同年秀 开局就较真,多大点事 你管这个叫正经炼丹师 全职高手之荣耀天花板 红楼欢歌 无限制适应 直播巡湖:开局邂逅白鱀豚 诡异提示:我疯了,诡异更疯了 从夺取白眼开始征服忍界 最穷英超球星,全网求坑钱 开局召唤汤姆猫,我打穿诸天 斗罗开始的修道生涯 lol:我的天使没有上限 荒野独居:你管这个叫生存? 长生:我曹某人看得到提示语 人在原神:我妹是大家龟秀 乃木坂的奇妙日常 百米谁为王? 我的修罗场有点多 回到过去之四合院春秋 我,赵顼,携百官成团出道 白骨道人 苟到寿终正寝,你说是人生模拟? 从零开始的艾尔登教皇 完美世界之刀帝 苦境:我在黑海当太子 三体:从ETO走出来的面壁者 龙族:从血源归来的路明非 龙族:我在屠龙时代做心灵导师 大明:我的祖父是朱元璋 修行从清理万界垃圾场开始