4. 基本概念介绍1-scrapy命令行工具(常用)

1、scrapy –help 查看帮助信息
2、scrapy –version 查看scrapy版本
3、scrapy –version -v 查看scrapy中各个依赖主键的版本
4、scrapy startproject projectName 创建工程
5、scrapy genspider spiderName websiteName 创建spider并添加一些网站名称信息
如：scrapy genspider aaa aaa.com
6、scrapy list 列出当前工程有多少spider
7、scrapy view 网页url ：用于明明你认为这个页面有这样的信息，但是实际运行结果就是没有这个信息，
可以使用该命令去查看该页面是什么样子
如：scrapy view http://www.baidu.com 在浏览器中会打开新的页面并跳转到百度
8、scrapy parse url：用于在工程中解析某个页面(可以用于该工程的parse的逻辑是否正确)
9、scrapy shell：用于调试数据、检测xpath、查看页面源码、并且会产生一些全局变量等等
执行shell不需要具体的工程

10、scrapy runspider spiderFileName:运行自包含的spider(单独的文件，没有工程)
11、scrapy bench：执行基准测试；用于检测scrapy是否安装成功