用pycharm安装scrapy框架

来源:互联网 发布:淘宝达人的账号简介 编辑:程序博客网 时间:2024/06/10 17:58

今天安装scrapy框架,在cmd里用pip install 安装,老是报错,报缺少支持的第三方包还有C++ 14.什么的错,



后来直接用pycharm安装,就成功了,安装的方法如下


在右上角有一个绿色的加号点击它



会弹出这个界面,把需要安装的包的名字输进去会自动检索,然后选定,再点击install Package,就会安装



安装完会有一个绿色的提示,安装成功,如果错误会是红色,然后看看是因为什么,再把缺少的包安装上即可



在cmd里进入scrapy框架所在的路径,用scrapy startproject kehao1 创建一个叫kehao1的爬虫项目



可以看到路径里已经多了一个我们创建的文件,点到里面去,scrapy框架的基本结构已经存在了


还有要在环境变量里添加scrapy的路径


当然还有一种情况是你的电脑无法安装pycharm或不方便安装,那就需要另一种办法了

首先到这个网站下载scrapy所需要的依赖包pywin32和Twisted要下载适合自己电脑系统和python环境的版本

https://www.lfd.uci.edu/~gohlke/pythonlibs

顺便把scrapy也下载下来都放在C:\Users\Administrator下面,然后使用pip install依次安装即可

这是导入和使用scrapy框架和命令都没有报错,但是用scrapy命令运行爬虫却会报错,这是因为还缺少一个python和win间交互的支持包

到这个网站中下载https://sourceforge.net/projects/pywin32/files/pywin32/


点击下载后,会得到一个.exe文件,然后直接安装就可以了