python爬虫开发 （一）-------requests模块

requests：

　　　　requests函数（可通过pycharm查看详细函数）:  -requests.get()　　requests.post()　　requests.put()　　requests.delet()　　　　.........　　　　requests.request()

　　　　参数：requests.request()

　　　　　　　　-method:　　　　提交方式

　　　　　　　　-url:　　　　　　 提交地址

　　　　　　　　-params　　　　 在url中传递的参数，get

　　例：　　

requests.request(

　　　　　　　　method = "get",
　　　　　　　　url = "www.ekankan.com"
　　　　　　　　params = {"k1":"v1","k2":"v2"}
)
#http://www.www.ekankan.com?k1=v1&k2=v2

　　　　　　　　-data:　　　　　　在请求体里传递的数据

requests.request(
 
 　　　　　　　　method = "get",
 　　　　　　　　url = "www.ekankan.com",
 　　　　　　　　params = {"k1":"v1","k2":"v2",
                        data = {'uers':'alex','pwd':'123'}   
}
 

----------------------->#相当于将字典转化为字符串
requests.request(
 
 　　　　　　　　method = "get",
 　　　　　　　　url = "www.ekankan.com",
 　　　　　　　　params = {"k1":"v1","k2":"v2",
                        data = 'uers=alex&pwd=123'
}

 　　　　　　　-json　　　　　　在请求体里传递的数据

requests.request(
    method = 'get',
    url =    'www.ekankan.com',
    params = {'k1':'v1','k2':'v2'},
    json =      {'uers':'alex','pwd':'123'}
    
    #内部转化："{'uers':'alex','pwd':'123'}"

)

　#思考　　　　如何设置反爬机制：　（源码中的　referer  记录你上一次登陆的网站）

 　　　　　　　　-headers      　　请求头

requests.request(
     method = 'get',
     url =    'www.ekankan.com',
     params = {'k1':'v1','k2':'v2'},
     json =      {'uers':'alex','pwd':'123'}

     headers = {
      'Referer':'www.ekankan.com/'
       'User-Agent':'-------'#属性，表示你用的什么浏览器访问   
}
     #内部转化：伪造上一次访问记录
 
)

　　　　　　　　-cookies　　　　请求服务器

放在headers里面发过去的

以上为最重要的requests函数!!!!

　　　　　更多参数

 

session   拿到cookie 并拿到gpsd授予权限

import requests

session = requests.Session()

#####首先登陆任何页面，获取cookie
i1 = session.get(url = "https://dig.chouti.com/link/vote?linksId=21518036")
#####用户登录，携带上一次的cookie,后台对cookie中的gpsd进行授权
i2 = session.post(
    url = "http://dig.chouti.com/login",
    data= {
        'phone':'xxx',
        'password':'jshfkaj',
        'oneMonth':'1'

    }


)
i3 = session.post(
    url = 'https://dig.chouti.com/link/vote?linksId=21518036'
)
print(i3.text)