python学习手册之Scrapy学习
来源:互联网 发布:免费的工资条软件 编辑:程序博客网 时间:2024/05/20 01:13
第一章
Scrapy的安装
需要安装的包有
lxml、zope.interface、Twisted、pyOpenSSL、pywin32、Scrapy(pip install scrapy)
大家可以去https://pypi.python.org/pypi这里下载,注意版本号。
这个网址经常不稳定,国内会打不开,所以也可以去http://pypi.douban.com/simple/,里面有所有对应的包,自己找到了下载安装即可。
注意exe和msi结尾的都可以直接安装,压缩包则需要自己解压后放入 C:\Python27\Lib 这个目录下面
Scrapy采用pip install scrapy下载,在cmd窗口中输入即可。这里也可能会撞墙,怎么办呢?
pipy国内镜像目前有:
http://pypi.douban.com/ 豆瓣
http://pypi.hustunique.com/ 华中理工大学
http://pypi.sdutlinux.org/ 山东理工大学
http://pypi.mirrors.ustc.edu.cn/ 中国科学技术大学
对于pip这种在线安装的方式来说,很方便,但网络不稳定的话很要命。使用国内镜像相对好一些,
如果想手动指定源,可以在pip后面跟-i 来指定源,比如用豆瓣的源来安装web.py框架:
pip install web.py -i http://pypi.douban.com/simple
注意后面要有/simple目录!!!
要配制成默认的话,需要创建或修改配置文件(linux的文件在~/.pip/pip.conf,windows在%HOME%\pip\pip.ini),修改内容为:
[global]
index-url = http://pypi.douban.com/simple
这样在使用pip来安装时,会默认调用该镜像。
注意的是%HOME%就是C:\Users\用户名
包安装好了以后检测方法
- python学习手册之Scrapy学习
- 学习python之走进Scrapy
- 《python学习手册》之学习笔记1
- python scrapy学习踩点
- Python scrapy学习入门
- Python学习笔记-----Scrapy
- scrapy 学习之路
- scrapy学习--python字典回顾
- python学习(3)scrapy
- python中scrapy的学习
- python爬虫 scrapy框架学习
- python学习之Mac安装Scrapy指南教程
- python学习手册
- Python学习手册笔记
- python学习手册笔记
- 《Python学习手册》读书笔记
- python学习手册四
- Python学习手册 - 01
- 鸟哥的Linux私房菜(服务器)- 第七章、网络安全与主机基本防护: 限制端口, 网络升级与 SELinux
- 购物计算器
- GDKOI 2016 总结
- 用Python来合并图片(SoEasy)
- 10000小时学习英语 国外旅游无压力 同声传译更大的目标
- python学习手册之Scrapy学习
- 鸟哥的Linux私房菜(服务器)- 第八章、路由观念与路由器设定
- 因为是新手,很多不懂!求点拨!
- 如何查询你的手机号注册绑定过哪些平台软件
- Canvas画布的一些实用技巧
- 鸟哥的Linux私房菜(服务器)- 第九章、防火墙与 NAT 服务器
- 教你处理好人际关系 ! 50招
- sql使用建议及优化方法
- 各位帮忙看一下这个求100!的小程序哪里错啦?