zoukankan      html  css  js  c++  java
  • wget使用范例

    1、下载单个文件
    $ wget http://osmond.cn/cdbe/CDBE.zip
    2、以续传方式后台下载单个文件
    $ wget -bc http://ftp.hostrino.com/pub/centos/5.0/isos/i386/CentOS-5.0-i386-bin-1of6.iso
    3、只下载单一HTML文件,确保影响着页面显示的所有元素均被下载,并重新建立链接
    $ wget -p -k http://osmond.cn/cdbe/manual/index.html
    4、下载 http://osmond.cn/cdbe/manual/ 目录下的所有文件
    $ wget -p -np -r -k http://osmond.cn/cdbe/manual/index.html
    5、在本地镜像网站 http://www.xyz.edu.cn 的内容
    $ wget –m –l4 -t0 http://www.xyz.edu.cn
    6、只下载网站指定的目录,避免向远程主机的其他目录扩散,并拒绝下载gif和jpg文件
    $ wget -r –L -R gif,jpg http://www.xyz.edu.cn/doc/
    7、递归下载 http://www.xyz.edu.cn 下的 blog 和 wiki 目录并将文件后缀存为html
    $ wget -r -k -p -np -E -I blog,wiki http://www.xyz.edu.cn
    8、递归下载 http://ayo.freshrpms.net/redhat/9/i386/updates/RPMS 的所有文件到当前目录
    $ wget -r -nH -nd http://ayo.freshrpms.net/redhat/9/i386/updates/RPMS
    9、批量下载(首先将每个要下载文件的URL写一行,生成文件 download.txt)
    $ wget -i download.txt -o download.log
    10、使用代理下载
    $ wget -Y -i download.txt -o download.log

    如何设置代理
    在环境变量中设定代理
    $ export PROXY=111.111.111.111:8080
    在 ~/.wge trc 中设定代理
    http_proxy = 111.111.111.111:8080
    ftp_proxy = 111.111.111.111:8080
  • 相关阅读:
    hive sql的常用日期处理函数总结
    超详细的六款主流ETL工具介绍及功能对比
    什么是ETL?
    什么是星型模型和雪花型模型,以及区别
    深入解读和应用RFM分析方法(模型)
    分析方法
    Kimball和Inmon方法论的适用场景比较
    数字化转型的本质(10个关键词)
    64个数据分析常用语
    @Transactional
  • 原文地址:https://www.cnblogs.com/feihongwuhen/p/7170411.html
Copyright © 2011-2022 走看看