- 某些网站会识别python爬虫程序并阻断,通过构造User_Agent可以抵抗某些反爬虫机制
- 用fake-useragent这个库就能很好的实现
pycharm中安装步骤
产生随机的User-Agent
只需一行代码
from fake_useragent import UserAgent
ua = UserAgent()
print(ua.random)
print(ua.random)
print(ua.random)
print(ua.random)
print(ua.random)
会随机产生不同的User-agent