Scrapy安装步骤(第一篇MarkDown博客)

来源:互联网 发布:典型hadoop云计算 编辑:程序博客网 时间:2024/06/03 16:56

Scrapy框架安装步骤

系统版本:Windows 10-64bit
Python版本:python 3.6.1-64bit

注:另外已经安装好了VS2015,不然需要安装各种VC运行库。

以下安装需要在cmd管理员模式下进行

准备工作:替换pip的下载源,不然会非常慢

下面进入安装步骤,需要安装以下库:
- pip
- whell
- lxml
- pyOpenSSL
- twisted
在以上几个库都成功安装后,最后安装scrapy。

一、pip

pip是一个安装和管理 Python 包的工具 ,是easy_install的替代品。
较高版本的python已经自带了pip,所以省去安装步骤。

这里写图片描述

二、whell

安装.whl格式的文件要用到whell(下面的lxml就是.whl格式的)

>>pip install wheel

image

三、lxml

lxml是python中处理xml的一个非常强大的库,可以非常方便的解析和生成xml文件。

>>pip install lxml

这里写图片描述

四、pyOpenSSL

>>pip install pyOpenSSL

这里写图片描述

五、twisted

pip3 install twisted会报错
http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
手动下载相应版本,然后进入到下载目录运行cmd(管理员模式)

>>pip install Twisted-17.5.0-cp36-cp36m-win_amd64.whl

这里写图片描述

六、最后安装scrapy

>>pip install Scrapy

这里写图片描述

- Scrapy安装完后所有的包

这里写图片描述

- 检查是否安装成功:

在python环境中,执行

>>import scrapy

不报错说明安装成功。
这里写图片描述

原创粉丝点击