zoukankan      html  css  js  c++  java
  • python爬虫(十) requests使用代理ip

    请求时,先将请求发给代理服务器,代理服务器请求目标服务器,然后目标服务器将数据传给代理服务器,代理服务器再将数据给爬虫。

    代理服务器是经常变化的

    使用代理服务器时传一个参数:proxy。是一个字典的形式。

    通过网址:httpbin.org/ip可以看到当前请求得ip地址:

     再快代理官网,点击开放代理可以找到一个代理:

     在选第一个ip时,报错超时,说明这个ip已经不能用了,再选第二个

    import requests
    
    proxy={
        'http':'58.87.98.150:1080'
    }
    
    response=requests.get("http://httpbin.org/ip",proxies=proxy)
    
    print(response.text)

     此时得结果就是代理ip

  • 相关阅读:
    windows服务程序
    DevExpress之时间控件
    DevExpress之列表控件
    Docker安装及基本使用
    配置阿里云yum源
    Centos7安装gitlab
    正则表达式
    sed进阶
    初识sed和gawk
    安装saltstack
  • 原文地址:https://www.cnblogs.com/zhaoxinhui/p/12383760.html
Copyright © 2011-2022 走看看