Python爬虫

• 介绍

作为一个美剧迷来说，找资源下载是个大问题，那通过爬虫来搞吧。

• 安装

apt-get install python-pip

pip install scrapy

apt-get install python-scrapy

• 爬虫之HelloWorld

1. 新建工程：scrapy startproject usa_movie
2. 执行爬虫：scrapy crawl usa_movie_spider
3. 保存结果：scrapy crawl usa_movie_spider -o items.json -t json

注意：items.py是定义要爬的内容；

• 参考

http://www.cnblogs.com/txw1958/archive/2012/07/16/scrapy-tutorial.html

查看原文：http://surenpi.com/2015/04/23/python%e7%88%ac%e8%99%ab/