python scrapy爬虫简单安装使用

系统 Ubuntu14.04

安装python环境：

sudo apt-get install python-dev

安装scrapy：

sudo pip install scrapy

安装twisted：

pip install Twisted==16.4.1

创建新项目：

scrapy startproject name

运行爬虫：

scrapy crawl spidername