Scrapy框架学习笔记

    Scrapy是一个爬虫框架，使用Python写成。详细的使用方法可以参考官方文档：http://scrapy.org/

    个人环境：Win8.1 + Python2.7.9 + Scrapy1.0，在安装Scrapy时是使用pip install scrapy的方式。但是在之后的使用过程中执行命令时，会不断地被提示缺少一些依赖模块，这时需要按照出错提示依次安装。需要注意的是，安装的模块有64位和32位之分，依赖模块的版本（32or64）要与python一致，否则会在执行命令时报错。例如pywin32模块需要单独安装，在sourceforge上找到32位的版本进行安装（python2.7.9是32位版本的）。