1.修改User-Agent2.禁止cookies3.设置请求的时间间隔4.代理IP池5.使用Selenium模拟人工点击访问6.破解验证码7.模拟登陆8.Crawlera爬虫代理组件9.tor洋葱网络,匿名发送数据。10.scrapy-proxies,封装好的ip代理11.分布式爬取12.动态加载数据