Scrapy框架涉及到依赖库,采用本地安装
建议在虚拟环境中安装
python -m venv Scrapy
cd Scrapy
cd Scripts
activate
python3.3以上可以通过上面的步骤进入虚拟环境
升级pip
python -m pip install --upgrade pip
下载lxml文件
https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
pip install wheel
安装下载的文件
pip install lxml-4.2.1-cp36-cp36m-win_amd64.whl
安装zope.interface
下载对应的版本
https://pypi.org/project/zope.interface/#downloads
pip install zope.interface-4.5.0-cp36-cp36m-win_amd64.whl
安装pyOpenSSL
https://pypi.org/project/pyOpenSSL/#downloads
pip install pyOpenSSL-17.5.0-py2.py3-none-any.whl
安装Twisted
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
pip install Twisted-18.4.0-cp36-cp36m-win_amd64.whl
安装pywin32
https://sourceforge.net/projects/pywin32/files/pywin32/ #旧版本网址
https://github.com/mhammond/pywin32/releases #新版本网址
双击安装
pywin32-223.win-amd64-py3.6.exe
安装Scrapy
pip install Scrapy
补充
在使用过程中提示
ModuleNotFoundError: No module named 'win32api'
执行
python -m pip install pypiwin32