windows7 64,32位下scrapy爬虫框架的环境搭建

来源:互联网 发布:中介者设计模式 java 编辑:程序博客网 时间:2024/05/21 10:25

随笔- 3 文章- 0 评论- 0 

windows7 6432位下scrapy爬虫框架的环境搭建

 

 

一、       

       1.下载python

                      根据自己的需求,到官网下载适合自己电脑的版本,https://www.python.org/downloads/,我这里选择的                 是python2.7.

    

        2.安装python

                  安装过程十分简单,除了选择路径,一路next到底即可

 

        3.配置环境变量

           找到python的安装路径。C:\Python27;script的路径:C:\Python27\Scripts;配置到环境变量。

                    

                      

 

                    

 

        4打开命令提示符: win+R ,输入 cmd 。输入 python,回车。显示python的版           本信息就表明安装成             功。如图所示:

             

            

 

 二  安装pip

 

         1.我们安装pip。我们同样需要在Python的官网上去下载,下载地址是:                                     https://pypi.python.org/pypi/pip#downloads :

 

       2.下载完成之后,解压到一个文件夹,用CMD控制台进入解压目录,

输入:python setup.py install


      安装玩之后在CMD控制台输入pip –version,下图表示安装成功

           

 

安装pywin32

         在Windows下,必须安装pywin32,下载地址:https://sourceforge.net/projects/pywin32/安装过程也很简         单,     一路next到底,

 安装完之后进入CMD控制台输入python

      

 进入python之后输入import win32com,没有报错表示安装成功,如下图

           

四  安装lxml

           打开cmd,输入pip installlxml。

           

     安装成功在cmd中输入python,然后输入import lxml进行验证,如下图表示安装成功

               

                

五  安装setuptools

           官网下载setuptools(http://pypi.python.org/pypi/setuptools)& 傻瓜安装

    也可以使用pip进行安装 pip install setuptools

          

   安装成功在cmd中输入python,然后输入import  setuptoolsl进行验证,如下图表示安装成功

                

 

 

安装Zope.Interface

            官网下载Zope.Interface(http://pypi.python.org/pypi/zope.interface/)& 傻瓜安装 

      也可使用pip进行安装pip install Zope.interface

           

                   安装成功在cmd中输入python,然后输入import Zope.Interfacel进行验证,如下图表示安装成功

           

七 安装Twisted

         官网下载Twisted(http://twistedmatrix.com/trac/wiki/Downloads)& 傻瓜安装,()

         安装成功在cmd中输入python,然后输入import Twisted进行验证,如下图表示安装成功

             

八  安装w3lib

    官网下载w3lib(http://pypi.python.org/pypi/w3lib) 安装

       #进入插件目录并执行命令安装

     >D:\python-plugin\w3lib-1.3>python setup.py install

       进入cmd输入python,然后import w3lib进行验证

      


九安装libxml2


       官网下载libxml2(http://users.skynet.be/sbi/libxml-python/)& 傻瓜安装

       进入cmd输入python,然后输入import libxml2进行验证



 十安装pyOpenSSL


   官网下载pyOpenSSL(https://pypi.python.org/pypi/pyOpenSSL)& 傻瓜安装

 

十一安装scrapy

    打开cmd控制台输入 pip installscrapy

       

        然后打开cmd输入scrapy,如下图表示安装成功