Python3中urllib的一点坑

来源:互联网 发布:淘宝推广链接 编辑:程序博客网 时间:2024/06/09 14:11

最近想研究下自动化测试,公司的网站下分成了很多个城市的子站,于是,想通过抓包的方式获得所有城市类别,然后逐一访问

第一步就是

遍历所有城市,然后输出list,为后续自动化做准备
用selenium+re已经可以实现了,但是这个功能好像并不需要selenium,只需要能获得数据就好了,于是想研究下urllib这个库。
prcharm这个ide中提供了很多
但是直接选择urllib之后,安装时报错了大意是版本太高了
最后,找了大概半天之后,找到了结果
python3后urllib的用法有了变更
从最初的 urllib.open()
变成了
url = urllib.request.urlopen("http://www.baidu.com")page = url.read().decode("utf8")url.close()print(page)
#仅用来记录个人在学习过程中遇到的坑,欢迎参考,不欢迎转载

原创粉丝点击