网络爬虫,python和数据分析学习--part1

来源:互联网 发布:工口mmd动作数据 编辑:程序博客网 时间:2024/05/21 10:13

# -- coding: utf-8 --
“””
Created on Tue Oct 10 08:38:20 2017
本段程序为科大王澎老师《网络爬虫,python和数据分析》中P8,针对spyder3做了微调
主要任务:简单的网页抓取
@author:
“””
import re
import urllib.request#urllib2用在python2.7中,在python3中用urllib.request替代之
import pymysql #需要在anaconda3下安装pymysql
from bs4 import BeautifulSoup#注意这里是from bs4
#设置url
url=’http://bbs.ustc.edu.cn/cgi/bbstdoc?board=PieBridge&start=3558’
#打开url
fp=urllib.request.urlopen(url)
#读取结果
s=fp.read()
#用BeautifulSoup分析读取结果s
soup=BeautifulSoup(s)
#找到所有tag的内容
polist=soup.findAll(‘span’)
#显示第一个tag中间的内容
print (polist[0].contents[0])

原创粉丝点击