scrapy无法存入数据

来源:互联网 发布:淘宝网址导航 编辑:程序博客网 时间:2024/06/08 10:58

当整个scrapy爬取框架搭建好后,items,pipeline都设置好了,却发现通过Pipeline无法存入文件,这时候就需要设置settings.py了

  • 在scrapy中settings中pipeline的开关是默认关闭的,需要将其注释去掉,之后就可以发挥scrapy的大刀啦。
# Configure item pipelines# See http://scrapy.readthedocs.org/en/latest/topics/item-pipeline.htmlITEM_PIPELINES = {'tutorial.pipelines.TutorialPipeline': 300,}
原创粉丝点击