zoukankan      html  css  js  c++  java
  • linux下分卷压缩,合并解压的3种方法

    我们上传东西的时候,由于文件过大而不能上传,或者不给上传,最明显的就是发邮件了,附件最大5M,有的10M。如果超过了就郁闷了。这个时候,如果能把压缩的东西,分割开来就比较爽了,windows下面我想大家知道怎么分割,利用winrar,winzip图型化设置压缩出来的块的大小。但是在linux下面有没有这样的方法了,linux下面有rar命令,有zip命令,windows下面这二种方式可以分割压缩,我想linux下面绝对也是可以的。下面是我尝试过程的记录:

    一,rar分卷压缩和合并解压

    rar -h

    我们会发现以下参数,要创建多大的卷。

    v             Create volumes with size autodetection or list all volumes
    v<size>[k,b]  Create volumes with size=<size>*1000 [*1024, *1]

    1. [zhangy@BlackGhost awksed]$ rar a -v5m google.rar Google_Maps_API.doc  //-v和5m之间不要有空格  
    2.   
    3. RAR 3.92   Copyright (c) 1993-2010 Alexander Roshal   10 Feb 2010  
    4. Shareware version         Type RAR -? for help  
    5.   
    6. Evaluation copy. Please register.  
    7.   
    8. Creating archive google.rar  
    9.   
    10. Adding    Google_Maps_API.doc  
    11. Calculating the control sum       
    12.   
    13. Creating archive google.part2.rar  
    14.   
    15. ...       Google_Maps_API.doc  
    16. Calculating the control sum       
    17.   
    18. Creating archive google.part3.rar  
    19.   
    20. ...       Google_Maps_API.doc                                         OK  
    21. Calculating the control sum  
    22. Done  
    23. [zhangy@BlackGhost awksed]$ unrar x google.part1.rar //合并并解压  
    24.   
    25. UNRAR 3.90 freeware      Copyright (c) 1993-2009 Alexander Roshal  
    26.   
    27. Extracting from google.part1.rar  
    28.   
    29. Extracting  Google_Maps_API.doc                                            
    30.   
    31. Extracting from google.part2.rar  
    32.   
    33. ...         Google_Maps_API.doc                                       76%  
    34.   
    35. Extracting from google.part3.rar  
    36.   
    37. ...         Google_Maps_API.doc                                       OK  
    38. All OK  

    二,zip分卷压缩和合并解压

    zip -h2

    你会发现,分卷参数-s,意思是说分割成多大的卷

    Splits (archives created as a set of split files):
    -s ssize  create split archive with splits of size ssize,where ssize nm
    n number and m multiplier (kmgt, default m), 100k -> 100 kB

    下面的意思是说如果是分卷的了,用 -s 0 --out把分卷合成一个

    If input is split, output will default to same split size
    Use -s=0 or -s- to turn off splitting to convert split to single file:
    zip in_split_archive -s 0 --out out_single_file_archive

    用zip来分卷压缩时,他必须是.zip的形势,他的流程是这样的,先把一般文件压缩成.zip的文件,然后在将.zip的文件分成多少块,如果你不这样坐呢,会提示错误的。

    [zhangy@BlackGhost awksed]$ zip -s 4m Google_Maps_API.doc
    zip error: Invalid command arguments (archive name must end in .zip for splits)

    1. [zhangy@BlackGhost awksed]$ zip google.zip Google_Maps_API.doc //先压缩不然就报上面的错  
    2.   adding: Google_Maps_API.doc(deflated 12%)  
    3. [zhangy@BlackGhost awksed]$ zip -s 4m google.zip --out ziptest   //分卷  
    4.  copying: Google_Maps_API.doc  
    5. [zhangy@BlackGhost awksed]$ zip ziptest -s 0 --out google_bak.zip  //这样合卷有问题  
    6. copying: Google_Maps_API.doc  
    7. [zhangy@BlackGhost awksed]$ cat ziptest.z* > google_bak.zip //利用cat来合卷  
    8. [zhangy@BlackGhost awksed]$ unzip google_bak.zip  //解压  

    上面呢用zip来分卷是没有问题的,但是合卷的时候就有问题了,zip -s 0 --out这样的方式,合出来的卷,大约只有分卷前的一半,这就搞的我很无语了,并且解压的时候,提示我输入密码,在次无语,只好有cat来合并了,还好合并后,解压没有任何问题。

    三,利用split来分卷,cat来合并分卷

    我花了很长时间去研究tar的参数,研究了好长时间,还是没有找到可以分卷的参数,英语还是不过关啊,唉。不过我们可以借助split来分卷

    1. [zhangy@BlackGhost awksed]$ tar czvf google.tar.gz Google_Maps_API.doc  
    2. Google_Maps_API.doc  
    3. [zhangy@BlackGhost awksed]$ split -d -b 4m google.tar.gz  
    4. [zhangy@BlackGhost awksed]$ cat x* > google_bak.tar.gz  
    5. [zhangy@BlackGhost awksed]$ tar zxvf google_bak.tar.gz  
    6. Google_Maps_API.doc  
    分卷压缩

    分卷压缩

    上图说明

    1,google.part1.rar等,是rar分卷压缩后的结果

    2,x00,x01等是利用split来分卷后的结果

    3,ziptest.zip,ziptest.z01等是利用zip来分卷后的结果。

    我始终相信tar 可以直接进行分卷的。只不过我没有找到而已,下面是tar的参数,含有翻译

    1.  主操作模式:  
    2.   
    3.  -A, --catenate, --concatenate   追加 tar 文件至归档  
    4.  -c, --create               创建一个新归档  
    5.  -d, --diff, --compare      找出归档和文件系统的差异  
    6.  --delete               从归档(非磁带!)中删除  
    7.  -r, --append               追加文件至归档结尾  
    8.  -t, --list                 列出归档内容  
    9.  --test-label           测试归档卷标并退出  
    10.  -u, --update               仅追加比归档中副本更新的文件  
    11.  -x, --extract, --get       从归档中解出文件  
    12.   
    13.  操作修饰符:  
    14.  --check-device         当创建增量归档时检查设备号(默认)  
    15.  -g, --listed-incremental=文件处理新式的 GNU 格式的增量备份  
    16.  -G, --incremental          处理老式的 GNU 格式的增量备份  
    17.  --ignore-failed-read当遇上不可读文件时不要以非零值退出  
    18.  -n, --seek                 归档可检索  
    19.  --no-check-device      当创建增量归档时不要检查设备号  
    20.  --occurrence[=NUMBER]  仅处理归档中每个文件的第 NUMBER个事件;仅当与以下子命令 --delete,  
    21.  --diff, --extract 或是 --list中的一个联合使用时,此选项才有效。而且不管文件列表是以命令行形式给出或是通过  
    22.  -T 选项指定的;NUMBER 值默认为 1  
    23.  --sparse-version=MAJOR[.MINOR]设置所用的离散格式版本(隐含--sparse)  
    24.  -S, --sparse               高效处理离散文件  
    25.   
    26.  重写控制:  
    27.   
    28.  -k, --keep-old-files       解压时不要替换存在的文件  
    29.  --keep-newer-files不要替换比归档中副本更新的已存在的文件  
    30.  --no-overwrite-dir     保留已存在目录的元数据  
    31.  --overwrite            解压时重写存在的文件  
    32.  --overwrite-dir解压时重写已存在目录的元数据(默认)  
    33.  --recursive-unlink     解压目录之前先清除目录层次  
    34.  --remove-files         在添加文件至归档后删除它们  
    35.  -U, --unlink-first         在解压要重写的文件之前先删除它们  
    36.  -W, --verify               在写入以后尝试校验归档  
    37.   
    38.  选择输出流:  
    39.   
    40.  --ignore-command-error 忽略子进程的退出代码  
    41.  --no-ignore-command-error将子进程的非零退出代码认为发生错误  
    42.  -O, --to-stdout            解压文件至标准输出  
    43.  --to-command=COMMAND将解压的文件通过管道传送至另一个程序  
    44.  操作文件属性:  
    45.   
    46.  --atime-preserve[=METHOD]在输出的文件上保留访问时间,要么通过在读取(默认  
    47.  METHOD=‘replace’)后还原时间,要不就不要在第一次(METHOD=‘system’)设置时间  
    48.  --delay-directory-restore 直到解压结束才设置修改时间和所解目录的权限  
    49.  --group=名称         强制将 NAME作为所添加的文件的组所有者  
    50.  --mode=CHANGES         强制将所添加的文件(符号)更改为权限CHANGES  
    51.  --mtime=DATE-OR-FILE   从 DATE-OR-FILE 中为添加的文件设置mtime  
    52.  -m, --touch                不要解压文件的修改时间  
    53.  --no-delay-directory-restore取消 --delay-directory-restore 选项的效果  
    54.  --no-same-owner        将文件解压为您所有  
    55.  --no-same-permissions从归档中解压权限时使用用户的掩码位(默认为普通用户服务)  
    56.  --numeric-owner        总是以数字代表用户/组的名称  
    57.  --owner=名称         强制将 NAME作为所添加的文件的所有者  
    58.  -p, --preserve-permissions, --same-permissions解压文件权限信息(默认只为超级用户服务)  
    59.  --preserve             与 -p 和 -s 一样  
    60.  --same-owner           尝试解压时保持所有者关系一致  
    61.  -s, --preserve-order, --same-order为解压至匹配归档排序名称  
    62.   
    63.  设备选择和切换:  
    64.   
    65.  -f, --file=ARCHIVE         使用归档文件或 ARCHIVE 设备  
    66.  --force-local即使归档文件存在副本还是把它认为是本地归档  
    67.  -F, --info-script=名称, --new-volume-script=名称在每卷磁带最后运行脚本(隐含 -M)  
    68.  -L, --tape-length=NUMBER   写入 NUMBER × 1024 字节后更换磁带  
    69.  -M, --multi-volume         创建/列出/解压多卷归档文件  
    70.  --rmt-command=COMMAND  使用指定的 rmt COMMAND 代替 rmt  
    71.  --rsh-command=COMMAND  使用远程 COMMAND 代替 rsh  
    72.  --volno-file=文件    使用/更新 FILE 中的卷数  
    73.   
    74.  设备分块:  
    75.   
    76.  -b, --blocking-factor=BLOCKS   每个记录 BLOCKS x 512 字节  
    77.  -B, --read-full-records    读取时重新分块(只对 4.2BSD 管道有效)  
    78.  -i, --ignore-zeros         忽略归档中的零字节块(即文件结尾)  
    79.  --record-size=NUMBER   每个记录的字节数 NUMBER,乘以 512  
    80.   
    81.  选择归档格式:  
    82.   
    83.  -H, --format=FORMAT        创建指定格式的归档  
    84.   
    85.  FORMAT 是以下格式中的一种:  
    86.   
    87.  gnu                      GNU tar 1.13.x 格式  
    88.  oldgnu                   GNU 格式 as per tar <= 1.12  
    89.  pax                      POSIX 1003.1-2001 (pax) 格式  
    90.  posix                    等同于 pax  
    91.  ustar                    POSIX 1003.1-1988 (ustar) 格式  
    92.  v7                       old V7 tar 格式  
    93.   
    94.  --old-archive, --portability等同于 --format=v7  
    95.  --pax-option=关键字[[:]=值][,关键字[[:]=值]]...控制 pax 关键字  
    96.  --posix                等同于 --format=posix  
    97.  -V, --label=TEXT           创建带有卷名 TEXT的归档;在列出/解压时,使用 TEXT作为卷名的模式串  
    98.   
    99.  压缩选项:  
    100.   
    101.  -a, --auto-compress        使用归档后缀来决定压缩程序  
    102.  -I, --use-compress-program=PROG通过 PROG 过滤(必须是能接受 -d选项的程序)  
    103.  -j, --bzip2                通过 bzip2 过滤归档  
    104.  --lzma                 通过 lzma 过滤归档  
    105.  --no-auto-compress     do not use archive suffix to determine thecompression program  
    106.  -z, --gzip, --gunzip, --ungzip   通过 gzip 过滤归档  
    107.  -Z, --compress, --uncompress   通过 compress 过滤归档  
    108.   
    109.  -J, --xz                   filter the archive through xz  
    110.  --lzop                 通过 lzop 过滤归档  
    111.   
    112.  本地文件选择:  
    113.   
    114.  --add-file=文件      添加指定的 FILE 至归档(如果名字以 -开始会很有用的)  
    115.  --backup[=CONTROL]     在删除前备份,选择 CONTROL 版本  
    116.  -C, --directory=DIR        改变至目录 DIR  
    117.  --exclude=PATTERN      排除以 PATTERN 指定的文件  
    118.  --exclude-caches       除标识文件本身外,排除包含CACHEDIR.TAG 的目录中的内容  
    119.  --exclude-caches-all   排除包含 CACHEDIR.TAG 的目录  
    120.  --exclude-caches-under 排除包含 CACHEDIR.TAG的目录中所有内容  
    121.  --exclude-tag=文件   除 FILE 自身外,排除包含 FILE的目录中的内容  
    122.  --exclude-tag-all=文件   排除包含 FILE 的目录  
    123.  --exclude-tag-under=文件   排除包含 FILE的目录中的所有内容  
    124.  --exclude-vcs          排除版本控制系统目录  
    125.  -h, --dereference跟踪符号链接;将它们所指向的文件归档并输出  
    126.  --hard-dereference 跟踪硬链接;将它们所指向的文件归档并输出  
    127.  -K, --starting-file=MEMBER-NAME从归档中的 MEMBER-NAME 成员处开始  
    128.  --newer-mtime=DATE     当只有数据改变时比较数据和时间  
    129.  --no-null              禁用上一次的效果 --null 选项  
    130.  --no-recursion         避免目录中的自动降级  
    131.  --no-unquote           不以 -T 读取的文件名作为引用结束  
    132.  --null                 -T 读取以空终止的名字,-C 禁用  
    133.  -N, --newer=DATE-OR-FILE, --after-date=DATE-OR-FILE只保存比 DATE-OR-FILE 更新的文件  
    134.  --one-file-system      创建归档时保存在本地文件系统中  
    135.  -P, --absolute-names       不要从文件名中清除引导符‘/’  
    136.  --recursion            目录递归(默认)  
    137.  --suffix=STRING        在删除前备份,除非被环境变量SIMPLE_BACKUP_SUFFIX覆盖,否则覆盖常用后缀(‘’)  
    138.  -T, --files-from=文件    从 FILE中获取文件名来解压或创建文件  
    139.  --unquote              以 -T读取的文件名作为引用结束(默认)  
    140.  -X, --exclude-from=文件  排除 FILE 中列出的模式串  
    141.   
    142.  文件名变换:  
    143.   
    144.  --strip-components=NUMBER   解压时从文件名中清除 NUMBER个引导部分  
    145.  --transform=EXPRESSION, --xform=EXPRESSION使用 sed 代替 EXPRESSION 来进行文件名变换  
    146.   
    147.  文件名匹配选项(同时影响排除和包括模式串):  
    148.   
    149.  --anchored             模式串匹配文件名头部  
    150.  --ignore-case          忽略大小写  
    151.  --no-anchored          模式串匹配任意‘/’后字符(默认对  
    152.  exclusion 有效)  
    153.  --no-ignore-case       匹配大小写(默认)  
    154.  --no-wildcards         逐字匹配字符串  
    155.  --no-wildcards-match-slash   通配符不匹配‘/’  
    156.  --wildcards            使用通配符(默认对 exclusion )  
    157.  --wildcards-match-slash通配符匹配‘/’(默认对排除操作有效)  
    158.   
    159.  提示性输出:  
    160.   
    161.  --checkpoint[=NUMBER]  每隔 NUMBER个记录显示进度信息(默认为 10 个)  
    162.  --checkpoint-action=ACTION   在每个检查点上执行 ACTION  
    163.  --index-file=文件    将详细输出发送至 FILE  
    164.  -l, --check-links只要不是所有链接都被输出就打印信息  
    165.  --no-quote-chars=STRING   禁用来自 STRING 的字符引用  
    166.  --quote-chars=STRING   来自 STRING 的额外的引用字符  
    167.  --quoting-style=STYLE  设置名称引用风格;有效的 STYLE值请参阅以下说明  
    168.  -R, --block-number         每个信息都显示归档内的块数  
    169.  --show-defaults        显示 tar 默认选项  
    170.  --show-omitted-dir 列表或解压时,列出每个不匹配查找标准的目录  
    171.  --show-transformed-names, --show-stored-names显示变换后的文件名或归档名  
    172.  --totals[=SIGNAL]      处理归档后打印出总字节数;当此SIGNAL 被触发时带参数 -打印总字节数;允许的信号为:  
    173.  SIGHUP,SIGQUIT,SIGINT,SIGUSR1 和  
    174.  SIGUSR2;同时也接受不带 SIG  
    175.  前缀的信号名称  
    176.  --utc                  以 UTC 格式打印文件修改信息  
    177.  -v, --verbose              详细地列出处理的文件  
    178.  -w, --interactive, --confirmation每次操作都要求确认  
    179.   
    180.  兼容性选项:  
    181.   
    182.  -o                         创建归档时,相当于  
    183.  --old-archive;展开归档时,相当于  
    184.  --no-same-owner  
    185.   
    186.  其它选项:  
    187.   
    188.  -?, --help                 显示此帮助列表  
    189.  --restrict             禁用某些潜在的有危险的选项  
    190.  --usage                显示简短的用法说明  
    191.  --version              打印程序版本  
    192.   
    193. 长选项和相应短选项具有相同的强制参数或可选参数。  
    194.   
    195. 除非以 --suffix 或 SIMPLE_BACKUP_SUFFIX  
    196. 设置备份后缀,否则备份后缀就是“~”。  
    197. 可以用 --backup 或 VERSION_CONTROL 设置版本控制,可能的值为:  
    198.   
    199.  none, off       从不做备份  
    200.  t, numbered     进行编号备份  
    201.  nil, existing  
    202. 如果编号备份存在则进行编号备份,否则进行简单备份  
    203.  never, simple   总是使用简单备份 

    -------

    Linux中关于tar分卷压缩和合并的使用?

    以每卷500M为例
    tar分卷压缩:tar cvzpf - somedir | split -d -b 500m (-d不是split的选项,是shell的选项,表
    示将tar命令的输出作为split的输入)
    tar多卷合并:cat x* > mytarfile.tar.gz

    --------------------------

    linux解压 tar命令
    tar命令

    tar [-cxtzjvfpPN] 文件与目录 ....
    参数:
    -c :建立一个压缩文件的参数指令(create 的意思);
    -x :解开一个压缩文件的参数指令!
    -t :查看 tarfile 里面的文件!
    特别注意,在参数的下达中, c/x/t 仅能存在一个!不可同时存在!
    因为不可能同时压缩与解压缩。
    -z :是否同时具有 gzip 的属性?亦即是否需要用 gzip 压缩?
    -j :是否同时具有 bzip2 的属性?亦即是否需要用 bzip2 压缩?
    -v :压缩的过程中显示文件!这个常用,但不建议用在背景执行过程!
    -f :使用档名,请留意,在 f 之后要立即接档名喔!不要再加参数!
       例如使用『 tar -zcvfP tfile sfile』就是错误的写法,要写成
       『 tar -zcvPf tfile sfile』才对喔!
    -p :使用原文件的原来属性(属性不会依据使用者而变)
    -P :可以使用绝对路径来压缩!
    -N :比后面接的日期(yyyy/mm/dd)还要新的才会被打包进新建的文件中!
    --exclude FILE:在压缩的过程中,不要将 FILE 打包!
    范例:
    范例一:将整个 /etc 目录下的文件全部打包成为 /tmp/etc.tar
    [root@linux ~]# tar -cvf /tmp/etc.tar /etc<==仅打包,不压缩!
    [root@linux ~]# tar -zcvf /tmp/etc.tar.gz /etc<==打包后,以 gzip 压缩
    [root@linux ~]# tar -jcvf /tmp/etc.tar.bz2 /etc<==打包后,以 bzip2 压缩
    # 特别注意,在参数 f 之后的文件档名是自己取的,我们习惯上都用 .tar 来作为辨识。
    # 如果加 z 参数,则以 .tar.gz 或 .tgz 来代表 gzip 压缩过的 tar file ~
    # 如果加 j 参数,则以 .tar.bz2 来作为附档名啊~
    # 上述指令在执行的时候,会显示一个警告讯息:
    # 『tar: Removing leading `/" from member names』那是关於绝对路径的特殊设定。

    范例二:查阅上述 /tmp/etc.tar.gz 文件内有哪些文件?
    [root@linux ~]# tar -ztvf /tmp/etc.tar.gz
    # 由於我们使用 gzip 压缩,所以要查阅该 tar file 内的文件时,
    # 就得要加上 z 这个参数了!这很重要的!

    范例三:将 /tmp/etc.tar.gz 文件解压缩在 /usr/local/src 底下
    [root@linux ~]# cd /usr/local/src
    [root@linux src]# tar -zxvf /tmp/etc.tar.gz
    # 在预设的情况下,我们可以将压缩档在任何地方解开的!以这个范例来说,
    # 我先将工作目录变换到 /usr/local/src 底下,并且解开 /tmp/etc.tar.gz ,
    # 则解开的目录会在 /usr/local/src/etc 呢!另外,如果您进入 /usr/local/src/etc
    # 则会发现,该目录下的文件属性与 /etc/ 可能会有所不同喔!

    范例四:在 /tmp 底下,我只想要将 /tmp/etc.tar.gz 内的 etc/passwd 解开而已
    [root@linux ~]# cd /tmp
    [root@linux tmp]# tar -zxvf /tmp/etc.tar.gz etc/passwd
    # 我可以透过 tar -ztvf 来查阅 tarfile 内的文件名称,如果单只要一个文件,
    # 就可以透过这个方式来下达!注意到! etc.tar.gz 内的根目录 / 是被拿掉了!

    范例五:将 /etc/ 内的所有文件备份下来,并且保存其权限!
    [root@linux ~]# tar -zxvpf /tmp/etc.tar.gz /etc
    # 这个 -p 的属性是很重要的,尤其是当您要保留原本文件的属性时!

    范例六:在 /home 当中,比 2005/06/01 新的文件才备份
    [root@linux ~]# tar -N "2005/06/01" -zcvf home.tar.gz /home

    范例七:我要备份 /home, /etc ,但不要 /home/dmtsai
    [root@linux ~]# tar --exclude /home/dmtsai -zcvf myfile.tar.gz /home/* /etc

    范例八:将 /etc/ 打包后直接解开在 /tmp 底下,而不产生文件!
    [root@linux ~]# cd /tmp
    [root@linux tmp]# tar -cvf - /etc | tar -xvf -
    # 这个动作有点像是 cp -r /etc /tmp 啦~依旧是有其有用途的!
    # 要注意的地方在於输出档变成 - 而输入档也变成 - ,又有一个 | 存在~
    # 这分别代表 standard output, standard input 与管线命令啦!
    # 这部分我们会在 Bash shell 时,再次提到这个指令跟大家再解释啰

     
     
  • 相关阅读:
    hdu 2680 最短路径(dijkstra算法+多源最短路径单源化求最小值)
    kmp算法
    STP根交换机,指定端口,根端口,阻塞端口
    python,django安装
    交换机access与trunk口
    树状数组
    hdoj 2191(多重背包)
    hdoj 2601(判断N=i*j+i+j)
    二维背包经典问题
    hdoj 2602(背包)
  • 原文地址:https://www.cnblogs.com/keystone/p/12704540.html
Copyright © 2011-2022 走看看