按照笔者看的一本书的教材,分为以下三步骤:
1.pip install twisted.
2.pip install lxml
3.pip install scrapy
虽然就是这简短的3个步骤,但是却有许多坑一般。
本人刚开始是安装的python3.9,无论如何也安不上,找了许多教程,最终重新安装了python3.7.5才算搞定。特别要注意的就是重装python3.7.5一定要重新配置环境变量。
需要注意的就是环境变量里面的path是由上而下生效,所以修改后的路径最好是放在前面。
环境变量配置好以后直接pip install twisted就一帆风顺了。
pip install lxml也是没有什么问题
到了最后pip install scrapy又出现了问题:这么长一大堆,有点懵,但是看见这个warning,决定先解决掉。于是直接根据提示更新了pip。更新完成再次重新安装scrapy,终于搞定了。
twisted下载网站,不太建议使用这个:https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted