zoukankan      html  css  js  c++  java
  • wget命令下载页面里所有资源文件

    https://blog.csdn.net/dghggij/article/details/83654577 简介

    乱码解决

    https://blog.51cto.com/kusorz/1943234

      
    curl示例:
    curl http://www.example.com/123.txt|iconv -f gb2312 -c 
    -c 忽略无效字符
    wget示例:
    wget --restrict-file-names=nocontrol http://www.example.com/123.txt
      
      

    下载页面以及页面 下链接,

    适用于 目录类型 页面 带很多其他文件需要下载
    wget -F -B -c -r -np -k -L -p www.iro.umontreal.ca/~panneton/well/
    
    缺少-F -B
    先介绍几个参数:-c 断点续传(备注:使用断点续传要求服务器支持断点续传),-r 递归下载(目录下的所有文件,包括子目录),-np 递归下载不搜索上层目录,-k 把绝对链接转为相对链接,这样下载之后的网页方便浏览。-L 递归时不进入其他主机,-p 下载网页所需要的所有文件。
    
    比如:
    wget -c -r -np -k -L -p http://www.predictioncenter.org/download_area/CASP10/server_predictions/
    
    缺少-F -B
    wget下载一个页面以及所需的所有文件(包括嵌入的js,css等)
    wget -E -H -k -K -p http://jsonviewer.stack.hu
    
    加载下载好的页面 根据地址下载 页面的链接
    wget http://mirrors.aliyun.com/centos/7.6.1810/cloud/x86_64/openstack-rocky/
     
    wget -i index.html -F -B http://mirrors.aliyun.com/centos/7.6.1810/cloud/x86_64/openstack-rocky/
    
  • 相关阅读:
    UVA 1386 Cellular Automaton
    ZOJ 3331 Process the Tasks
    CodeForces 650B Image Preview
    CodeForces 650A Watchmen
    CodeForces 651B Beautiful Paintings
    CodeForces 651A Joysticks
    HUST 1601 Shepherd
    HUST 1602 Substring
    HUST 1600 Lucky Numbers
    POJ 3991 Seinfeld
  • 原文地址:https://www.cnblogs.com/marklove/p/14817043.html
Copyright © 2011-2022 走看看