反爬机制

1.robots

2.UA伪装

3.基于ajax加载的动态数据

4.图片懒加载

5.数据加密

6.input隐藏数据

7.验证码

8.cookie