1. Linux系统常见的压缩命令
linux下压缩文件的扩展名大多为*.tar, *.tar.gz, *.tgz, *.gz, *.Z, *bz2
Linux 支持的压缩命令非常多,且不同的命令所用的压缩技术并不相同,需要用扩展名进行区分
*.Z compress 程序压缩的文件;
*.gz gzip 程序压缩的文件;
*.bz2 bzip2 程序压缩的文件;
*.tar tar 程序打包的数据,并没有压缩过;
*.tar.gz tar 程序打包的文件,其中并且经过 gzip 的压缩
*.tar.bz2 tar 程序打包的文件,其中并且经过 bzip2 的压缩
|
① Compress(新的CentOS系统已经不安装,gzip已经可以解压compress压缩的文件),压缩后原来文件不存在
安装 ncompress
yum install ncompress
[root@www ~]# compress [-rcv] 文件或目录<==这里是压缩 [root@www ~]# uncompress 文件.Z <==这里是解压缩
选项与参数: -r :可以连同目录下的文件也同时给予压缩 -c :将压缩数据输出成为 standard output (输出到屏幕) -v :可以显示出压缩后的文件信息以及压缩过程中的一些文件名变化。
②gzip, zcat
gzip可以说是应用最广的压缩命令了,目前可以解开compress、zip与gzip等软件压缩的文件。压缩后文件不存在。
[root@www ~]# gzip [-cdtv#] 文件名 [root@www ~]# zcat 文件名.gz
选项与参数: -c :将压缩的数据输出到屏幕上,可通过数据流重定向来处理; -d :解压缩的参数; -t :可以用来检验一个压缩文件的一致性,看看文件有无错误; -v :可以显示出原文件/压缩文件的压缩比等信息; -# :压缩等级,-1 最快,但是压缩比最差;-9 最慢,但是压缩比最好,默认是 -6
压缩文件原来是文本文件的,可以使用zcat进行读取(gizp和compress压缩的)
不要使用 gunzip 这个命令,不好记。使用 gzip -d 来进行解压缩。与 gzip 相反, gzip -d 会将原本的 .gz 删除,产生原本的 man.config 文件。
③bzip2, bzcat 压缩比比gzip更好,用法与gzip一致
[root@www ~]# bzip2 [-cdkzv#] 文件名 [root@www ~]# bzcat 文件名.bz2 |
2. 打包命令:tar
tar 可以将多个目录或文件打包成一个大文件,同时还可以通过 gzip/bzip2 的支持,将该文件同时进行压缩
tar常用选项
[root@www ~]# tar [-j|-z] [cv] [-f 创建的文件名] filename...<==打包与压缩 [root@www ~]# tar [-j|-z] [tv] [-f 创建的文件名] <==察看档名 [root@www ~]# tar [-j|-z] [xv] [-f 创建的文件名] [-C 目录] <==解压缩
选项与参数: -c :创建打包文件,可搭配 -v 来察看过程中被打包的文件名(filename) -t :察看打包文件的内容含有哪些文件名,重点在察看『文件名』就是了; -x :解打包或解压缩的功能,可以搭配 -C (大写) 在特定目录解开 特别留意的是, -c, -t, -x 不可同时出现在一串命令列中。 -j :透过 bzip2 的支持进行压缩/解压缩:此时文件名最好为 *.tar.bz2 -z :透过 gzip 的支持进行压缩/解压缩:此时文件名最好为 *.tar.gz -v :在压缩/解压缩的过程中,将正在处理的档名显示出来! -f filename:-f 后面要立刻接要被处理的文件名!建议 -f 单独写一个选项 -C 目录 :这个选项用在解压缩,若要在特定目录解压缩,可以使用这个选项。 其他后续练习会使用到的选项介绍: -p :保留备份数据的原本权限与属性,常用于备份(-c)重要的配置文件 -P :保留绝对路径,亦即允许备份数据中含有根目录存在之意; --exclude=FILE:在压缩的过程中,不要将 FILE 打包!
- 仅解开单一文件的方法
[root@www ~]# tar -jtv -f /root/etc.tar.bz2 | grep 'shadow'
# 解压包含shadow的文件
将shadow文件解压
[root@www ~]# tar -jxv -f 打包档.tar.bz2 待解开文件名
[root@www ~]# tar -jxv -f /root/etc.tar.bz2 etc/shadow
- 打包某目录,但不含该目录下的某些文件之作法
- [root@www ~]# tar -jcv -f /root/system.tar.bz2 --exclude=/root/etc*
>--exclude=/root/system.tar.bz2 /etc /root
连续输入多行,可以按 然后按Enter
上面是打包压缩/etc和/root,但不包括/root/下以etc开始的文件或文件夹和/root/system.tar.bz2
- 仅备份比某个时刻还要新的文件
--newer-mtime 参数
其实有两个参数:一个是『 --newer 』另一个就是『 --newer-mtime 』, 当使用 --newer 时,表示后续的日期包含『 mtime 与 ctime 』,而 --newer-mtime 则仅是 mtime 而已
tar -jcv -f /root/etc.newer.then.passwd.tar.bz2
>--newer-mtime="2008/09/29"/etc/*
表示mtime比2008-09-29更新的时间会被打包压缩
- 基本名称: tarfile, tarball
如果仅是打包而已,就是『 tar -cv -f file.tar 』而已,这个文件我们称呼为 tarfile 。 如果还有进行压缩的支持,例如『 tar -jcv -f file.tar.bz2 』时,我们就称呼为 tarball。
- 特殊应用:利用管线命令与数据流
# 1. 将 /etc 整个目录一边打包一边在 /tmp 解开 [root@www ~]# cd /tmp [root@www tmp]# tar -cvf - /etc | tar -xvf - |
3. 完整备份工具:
① dump
如果想要备份的数据如下时,则有不同的限制情况:
- 当待备份的数据为单一文件系统:
如果是单一文件系统 (filesystem) ,那么该文件系统可以使用完整的 dump 功能,包括利用 0~9 的数个 level 来备份, 同时,备份时可以使用挂载点或者是设备文件名 (例如 /dev/sda5 之类的设备文件名) 来进行备份! - 待备份的数据只是目录,并非单一文件系统:
例如你仅想要备份 /home/someone/ ,但是该目录并非独立的文件系统时。此时备份就有限制,包括:
- 所有的备份数据都必须要在该目录 (本例为:/home/someone/) 底下;
- 且仅能使用 level 0 ,亦即仅支持完整备份而已;
- 不支持 -u 选项,亦即无法创建 /etc/dumpdates 这个各别 level 备份的时间记录档;
dump简单选项
[root@www ~]# dump [-Suvj] [-level] [-f 备份档] 待备份数据 [root@www ~]# dump -W
选项与参数: -S :仅列出后面的待备份数据需要多少磁盘空间才能够备份完毕; -u :将这次 dump 的时间记录到 /etc/dumpdates 文件中; -v :将 dump 的文件过程显示出来; -j :加入 bzip2 的支持!将数据进行压缩,默认 bzip2 压缩等级为 2 -level:就是我们谈到的等级,从 -0 ~ -9 共十个等级; -f :有点类似 tar ,后面接产生的文件,亦可接例如 /dev/st0 设备文件名等 -W :列出在 /etc/fstab 里面的具有 dump 配置的 partition 是否有备份过
② restore
恢复数据,dump的恢复就是用restore
部分参数
[root@www ~]# restore -t [-f dumpfile] [-h] <==用来察看 dump 文件 [root@www ~]# restore -C [-f dumpfile] [-D 挂载点]<==比较dump与实际文件 [root@www ~]# restore -i [-f dumpfile] <==进入互动模式 [root@www ~]# restore -r [-f dumpfile] <==还原整个文件系统
选项与参数: 相关的各种模式,各种模式无法混用,例如不可以写 -tC 啦! -t :此模式用在察看 dump 起来的备份档中含有什么重要数据,类似 tar -t 功能; -C :此模式可以将 dump 内的数据拿出来跟实际的文件系统做比较, 最终会列出『在 dump 文件内有记录的,且目前文件系统不一样』的文件; -i :进入互动模式,可以仅还原部分文件,用在 dump 目录时的还原; -r :将整个 filesystem 还原的一种模式,用在还原针对文件系统的 dump 备份; 其他较常用到的选项功能: -h :察看完整备份数据中的 inode 与文件系统 label 等信息 -f :后面就接你要处理的那个 dump 文件 -D :与 -C 进行搭配,可以查出后面接的挂载点与 dump 内有不同的文件
4. 光盘写入工具
命令行刻录的步骤:
- 先将所需要备份的数据构建成为一个映像档(iso),利用 mkisofs 命令来处理;
- 将该映像档烧录至光盘或 DVD 当中,利用 cdrecord 命令来处理。
mkisofs:创建镜像文件
[root@www ~]# mkisofs [-o 映像档] [-rv] [-m file] 待备份文件.. [-V vol] > -graft-point isodir=systemdir ...
选项与参数: -o :后面接你想要产生的那个映像文件名。 -r :透过 Rock Ridge 产生支持 Unix/Linux 的文件数据,可记录较多的信息; -v :显示构建 ISO 文件的过程 -m file :-m 为排除文件 (exclude) 的意思,后面的文件不备份到映像文件中 -V vol :创建 Volume,有点像 Windows 在文件资源管理内看到的 CD title 的东西 -graft-point:graft有转嫁或移植的意思。
cdrecord:光盘刻录工具
[root@www ~]# cdrecord -scanbus dev=ATA <==查询刻录机位置 [root@www ~]# cdrecord -v dev=ATA:x,y,z blank=[fast|all]<==抹除重复读写片 [root@www ~]# cdrecord -v dev=ATA:x,y,z -format <==格式化DVD+RW [root@www ~]# cdrecord -v dev=ATA:x,y,z [可用选项功能] file.iso
选项与参数: -scanbus :用在扫瞄磁盘总线并找出可用的刻录机,后续的设备为 ATA接口 -v :在 cdrecord 运行的过程中,显示过程而已。 dev=ATA:x,y,z :后续的 x, y, z 为你系统上刻录机所在的位置,非常重要 blank=[fast|all]:blank 为抹除可重复写入的CD/DVD-RW,使用fast较快,all较完整 -format :仅针对 DVD+RW 这种格式的 DVD 而已; [可用选项功能] 主要是写入 CD/DVD 时可使用的选项,常见的选项包括有: -data :指定后面的文件以数据格式写入,不是以 CD 音轨(-audio)方式写入! speed=X :指定刻录速度,例如CD可用 speed=40 为40倍数,DVD则可用 speed=4 之类 -eject :指定刻录完毕后自动退出光盘 fs=Ym :指定多少缓冲存储器,可用在将映像文件先缓存至缓冲区。默认为 4m, 一般建议可添加到 8m ,不过,还是得视你的刻录机而定。 针对 DVD 的选项功能: driveropts=burnfree :打开 Buffer Underrun Free 模式的写入功能 -sao :支持 DVD-RW 的格式
- 检测你的刻录机所在位置:cdrecord -scanbus dev=ATA
- 进行 CD 的刻录动作:
# 0. 先抹除光盘的原始内容:(非可重复读写则可略过此步骤) [root@www ~]# cdrecord -v dev=ATA:1,1,0 blank=fast
# 中间会跑出一堆信息告诉你抹除的进度,而且会有 10 秒钟的时间等待取消 # 可以避免『手滑』的情况!^_^# 1. 开始烧录: [root@www ~]# cdrecord -v dev=ATA:1,1,0 fs=8m -dummy -data > /tmp/system.img
....中间省略.... Track 01: 168 of 176 MB written (fifo 100%) [buf 100%] 10.5x. <==显示百分比
# 上面会显示进度,还有 10.5x 代表目前的刻录速度 cdrecord: fifo had 2919 puts and 2919 gets. cdrecord: fifo was 0 times empty and 2776 times full, min fill was 97%. # 2. 烧录完毕后,测试挂载一下,检验内容: [root@www ~]# mount -t iso9660 /dev/cdrom /mnt [root@www ~]# df -h /mnt Filesystem Size Used Avail Use% Mounted on /dev/hdd 177M 177M 0 100% /mnt
- 进行 DVD-RW 的烧录动作:
# 0. 同样的,先来抹除一下原本的内容: [root@www ~]# cdrecord -v dev=ATA:1,1,0 blank=fast
# 1. 开始写入 DVD ,请注意,有些选项与 CD 并不相同 [root@www ~]# cdrecord -v dev=ATA:1,1,0 fs=8m -data -sao > driveropts=burnfree /tmp/system.img
# 2. 同样的,j进行测试 [root@www ~]# mount /dev/cdrom /mnt [root@www ~]# df -h /mnt Filesystem Size Used Avail Use% Mounted on /dev/hdd 177M 177M 0 100% /mnt [root@www ~]# umount /mnt
5. 其他常见压缩和备份工具
① dd
不仅能够复制大文件,最大功效在于备份
重要参数
[root@www ~]# dd if="input_file" of="output_file" bs="block_size" > count="number"
选项与参数: if :就是 input file ,也可以是设备 of :就是 output file ,也可以是设备; bs :规划的一个 block 的大小,若未指定则默认是 512 bytes(一个 sector<扇区>的大小) count:多少个 bs 的意思。
② cpio
需要配合find等可以找到文件的指令来告知cpio该备份的数据在哪
[root@www ~]# cpio -ovcB > [file|device]<==备份 [root@www ~]# cpio -ivcdu < [file|device]<==还原 [root@www ~]# cpio -ivct < [file|device]<==察看
备份会使用到的选项与参数: -o :将数据 copy 输出到文件或设备上 -B :让默认的 Blocks 可以添加至 5120 bytes ,默认是 512 bytes ! 这样的好处是可以让大文件的储存速度加快(请参考 i-nodes 的观念) 还原会使用到的选项与参数: -i :将数据自文件或设备 copy 到系统当中 -d :自动创建目录,使用 cpio 所备份的数据内容不见得会在同一层目录中,因此我们 必须要让 cpio 在还原时可以创建新目录,此时就得要 -d 选项的帮助 -u :自动的将较新的文件覆盖较旧的文件! -t :需配合 -i 选项,可用在"察看"以 cpio 创建的文件或设备的内容 一些可共享的选项与参数: -v :让储存的过程中文件名称可以在屏幕上显示 -c :一种较新的 portable format 方式储存
例子:
[root@www ~]# find /boot | cpio -ocvB > /tmp/boot.cpio [root@www ~]# ll -h /tmp/boot.cpio -rw-r--r-- 1 root root 16M Dec 17 23:30 /tmp/boot.cpio
我们使用 find /boot 可以找出文件名,然后通过那条管线 (|, 亦即键盘上的 shift+ 的组合), 就能将档名传给 cpio 来进行处理,最终会得到 /tmp/boot.cpio 那个文件