爬虫（GET）——add_header()和get_header()

import urllib.request
import random

url = "http://www.baidu.com/"

# 可以是User-Agent列表，也可以是代理列表
ua_list = [
    "Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv2.0.1) Gecko/20100101 Firefox/4.0.1",
    "Mozilla/5.0 (Windows NT 6.1; RV2.0.1) Gecko/20100101 Firefox/4.0.1",
    "Opera/9.80 (Windows NT 6.1; U; en) Presto/2.8.131 Version/11.11"
    "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.181 Safari/537.36"
]

# 在User-Agent列表里随机选择一个
user_agent = random.choice(ua_list)

# 构造一个请求
request = urllib.request.Request(url)

# 添加/修改 一个HTTP报头
request.add_header("User-Agent", user_agent)

# 获取一个已有的HTTP报头值，！！只能是第一个字母大写，其他字母小写！！

print(request.get_header("User-agent"))

 工具：python3