scrapy爬虫入门

学习参考：视频链接https://www.bilibili.com/video/av77915149

个人学习记录：

　　pip install scrapy

scrapy报错：

from cryptography.hazmat.bindings._openssl import ffi, lib
ImportError: DLL load failed: 找不到指定的程序。

解决方法：

>>   pip uninstall pyopenssl
 >>  pip uninstall cryptography
 >>  pip install pyopenssl
  >>  pip install cryptography

参考：https://blog.csdn.net/qq_36105224/article/details/90045710

cmd下 scrapy bench(查看安装情况)

scrapy startproject 项目名字           ---创建项目（可在pycharm 下查看）

cd XXX

scrapy genspider 爬虫名字(如:abc) 域名      ---生成主文件

运行：   scrapy crawl 爬虫名字