潭州课堂25班：Ph201805201 爬虫高级 第十二 课 Scrapy-redis分布 项目实战 (课堂笔记)

建代理池，

1，获取多个网站的免费代理IP，

2，对免费代理进行检测，》》》》》携带IP进行请求，

3，检测到的可用IP进行存储，

4，实现api接口，方便调用，

5，各个组件 的调试，

西剌代理：

http://www.xicidaili.com/nn/

66 IP代理

http://www.66ip.cn/

快代理

https://www.kuaidaili.com/free/