scrapy测试xpath

来源:互联网 发布:电影社交网络真实么 编辑:程序博客网 时间:2024/06/05 20:35

使用scrapy shell

Scrapy终端是一个交互终端,供您在未启动spider的情况下尝试及调试您的爬取代码。其本意是用来测试提取数据的代码,不过您可以将其作为正常的Python终端,在上面测试任何的Python代码。

步骤:
1.终端切换到项目目录,输入以下指令
2.scrapy shell 网址 
3.response.selector.xpath('xpath语句')

0 0
原创粉丝点击