如何安装爬虫scrapy

来源:互联网 发布:杭州认知网络 招聘 编辑:程序博客网 时间:2024/06/16 06:04

大概要安装的东西:

1、在电脑上安装python,添加python路径

2、安装pywin32;

3、安装lxml;

4、安装scrapy;


一、安装python ; 

    1、首先,我们可以在百度上搜索python,打开Python 的官方网站;

        下载安装文件,找到对应系统的executable install 文件,安装的时候,我们要添加add Path,这就省去了我们后期还要自己去配置环境变量;



2、去https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted找到lxml,,下载对应的版本,下载完成之后;所在文件里按shift+右击,选择"在此处打开命令窗口",输入:pip install 

 lxml按tab会打出来;

3、去https://sourceforge.net/projects/pywin32/files/?source=navbar下载pywin32,进去网站之后,点击file---->pywin32----->build221找到系统对应的版本文件,这个下载有些慢,要多试几次;下载完成之后,点击安装,一直点击下一步

4、安装完成之后就可以安装scrapy了,在windows命令窗口中输入:pip install scrapy;会下载安装,有的可能会报错;报下面这个错,我们去https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted上面找到twisted下载安装,twisted的下载安装跟步骤2的lxml一模一样,地址也是一样的,再执行pip install scrapy 就可以


原创粉丝点击