1 文件查找
- 1.1 locate
- 1.2 find
查找文件类型不是目录并且不为空的文件和目录
找出/tmp 目录下，属主不是root，并且文件名不以f开头的文件
- 1.2.9 根据文件大小来查找
UNIT: (#-1, #]，如：6k 表示(5k,6k]
搜索1k范围是在不包含0字节但是大于0字节，小于等于1字节的范围
搜索2k范围是在不包含1024字节但是大于1024，小于等于2048的范围
搜索0字节到5k的范围
搜索大于2k但是不包含2k，到无穷大
- 1.2.12 正则表达式
- 1.2.13 处理动作
备份配置文件，添加.orig这个扩展名
提示删除存在时间超过３天以上的joe的临时文件
在主目录中寻找可被其它用户写入的文件
查找/data下的权限为644，后缀为sh的普通文件，增加执行权限
- 1.4 练习
2 压缩和解压缩
3 打包和解包
- 3.1 tar
- 3.2 split
分割大的 tar 文件为多份小文件
示例
切换成的多个小分文件使用数字后缀
- 3.3 cpio

内容概述

locate
find
xargs
compress 和 uncompress
gzip 和 gunzip
bzip2 和 bunzip2
xz 和 unxz
zip 和 unzip
tar
cpio

1 文件查找
在文件系统上查找符合条件的文件
文件查找：locate，find
非实时查找（数据库查找）：locate
实时查找：find

1.1 locate
locate 查询系统上预建的文件索引数据库 /var/lib/mlocate/mlocate.db。
索引的构建是在系统较为空闲时自动进行（周期性任务），执行updateall 可以更新数据库。
索引构建过程需要遍历整个根文件系统，很消耗资源。
locate 搜索相对固定的文件，例如配置文件，用户数据。
locate 和 updatedb 命令来自于 mlocate 包

工作特点：

查找速度快
模糊查找
非实时查找
搜索的是文件的全路径，不仅仅是文件名
可能只搜索用户具备读取和执行权限的目录

格式：

Usage: locate [OPTION]... [PATTERN]...

常用选项：

-i ：不区分大小写的搜索
-n N ：只列举前N个匹配项目
-r ：使用基本正则表达式

范例：

# 搜索名称或者路径中包含"conf"的文件
locate conf
# 使用Regex正则表达式搜索以".conf"结尾的文件
locate -r "\.conf$"

范例：locatedb创建数据库

~ yum install -y mlocate
~ locate conf
locate: can not stat o "/var /lib/mlocate/locate.db" : No such file or directory
~ updatedb
~ ls -l /var/lib/mlocate/mlocate.db
-rw-r----- 1 root slocate 9464071 May 22 12:51 /var/lib/mlocate/mlocate.db
~ locate -n 3 conf
/boot/config-3.10.0-1160.el7.x86_64
/boot/grub/grub.conf
/boot/grub2/i386-pc/configfile.mod

范例：文件新创建和删除，无法马上更新 locatedb 数据库

~ touch test.log
~ locate test.log
locate: can not stat o "/var /lib/mlocate/locate.db" : No such file or directory
~ updatedb
~ locate test.log
/root/test.log
~ rm -rf test.log
~ locate test.log
/root/test.log

范例：

~ locate -n 10 -ir '\.CONF$'
/boot/grub/grub.conf
/data/etc2022-05-17/asound.conf
/data/etc2022-05-17/chrony.conf
/data/etc2022-05-17/dracut.conf
/data/etc2022-05-17/e2fsck.conf
/data/etc2022-05-17/grub.conf
/data/etc2022-05-17/host.conf
/data/etc2022-05-17/idmapd.conf
/data/etc2022-05-17/kdump.conf
/data/etc2022-05-17/krb5.conf

1.2 find

find 是实时查找工具，通过遍历指定路径完成文件查找（默认递归，包含隐藏文件的查找）
工作特点：

查找速度较慢
精确查找
实时查找
查找条件丰富
可能只搜索用户具备读取和执行权限的目录

格式：

find [OPTION]... [查找路径] [查找条件] [处理动作]

查找路径：指定具体目标路径；默认为当前目录
查找条件：指定的查找标准，可以文件名、大小、类型、权限等标准进行；默认为找出指定路径下的所有文件
处理动作：对符合条件的文件做操作，默认输出至屏幕

1.2.1 指定搜索目录层级

:::warning -maxdepth level：最大搜索目录深度，指定目录下的文件为第一级
-mindepth level：最小搜索目录深度 ::: 范例：

find /etc -maxdepth 2 -mindepth 2

1.2.2 对每个目录先处理目录内的文件，再处理目录本身

:::warning -depth -d，影响显示次序。
-d # hwarning: the -d option is deprecated; please use -depth instead，because the latter is a POSIX-compliant feature
默认先处理目录，后处理文件 ::: 范例：

~ tree /data/test/
/data/test/
├── f1.txt
├── f2.txt
└── test2
    └── test3
        ├── f3.txt
        └── f4.txt
2 directories, 4 files
~ find /data/test/
/data/test/
/data/test/f1.txt
/data/test/f2.txt
/data/test/test2
/data/test/test2/test3
/data/test/test2/test3/f3.txt
/data/test/test2/test3/f4.txt
~ find /data/test/ -depth
/data/test/f1.txt
/data/test/f2.txt
/data/test/test2/test3/f3.txt
/data/test/test2/test3/f4.txt
/data/test/test2/test3
/data/test/test2
/data/test/

1.2.3 根据文件名和inode查找

:::warning

-name “文件名称”：支持使用glob，如：*, ?, [], [^]
-iname “文件名称”：不区分字母大小写
-inum n 按inode号查找
-samefile name 相同inode号的文件
-links n 链接数为n的文件
-regex “PATTERN”：以PATTERN匹配整个文件路径，而非文件名称 ::: 范例： ```bash ~ find -name snow.png ~ find -iname snow.png ~ find . -name “.txt” ~ find /var -name “log“

~ find . -regex “.*.txt$” ./f1.txt ./f2.txt ./test2/test3/f3.txt ./test2/test3/f4.txt

<a name="GJR4t"></a>
### 1.2.4 根据属主、属组查找
:::warning
- -user USERNAME：查找属主为指定用户(UID)的文件
- -group GRPNAME: 查找属组为指定组(GID)的文件
- -uid UserID：查找属主为指定的UID号的文件
- -gid GroupID：查找属组为指定的GID号的文件
- -nouser：查找没有属主的文件
- -nogroup：查找没有属组的文件  
:::
范例：
```bash
~ find /home -user zzw -ls
67112643    0 drwx------   2 zzw      zzw            62 May 15 17:59 /home/zzw
67112644    4 -rw-r--r--   1 zzw      zzw            18 Apr  1  2020 /home/zzw/.bash_logout
67112645    4 -rw-r--r--   1 zzw      zzw           193 Apr  1  2020 /home/zzw/.bash_profile
67112646    4 -rw-r--r--   1 zzw      zzw           231 Apr  1  2020 /home/zzw/.bashrc
~ find / -nouser -ls
~ find / -nogroup -ls

1.2.5 根据文件类型查找

:::warning -type TYPE
TYPE 可以是以下形式：

f：普通文件
d：目录文件
l：符号链接文件
s：套接字文件
b：块设备文件
c：字符设备文件

p：管道文件 ::: 范例：

~ find /etc -type d -ls
~ find /etc -type f -ls

1.2.6 空文件或者目录

:::warning -empty ::: 范例：

~ find /data/test/ -type d -empty
~ find /data/test/ -empty -ls

1.2.7 组合条件

:::warning 与：-a，默认多个条件是与关系
或：-o
非：-not ! ::: 范例：

~ find /etc/ -type d -o -type l | wc -l
768
~ find /etc/ -type d -o -type l -ls | wc -l # ( find /etc/ -type d -o -type l -a -ls | wc -l )
137
~ find /etc/ \( -type d -o -type l \) -ls | wc -l
768

德-摩根定律：
(非 A) 或 (非 B) = 非(A 且 B)
(非 A) 且 (非 B) = 非(A 或 B)
示例： :::warning !A -a !B = !(A -o B)
!A -o !B = !(A -a B) ::: 范例：

find -user joe -group joe
find -user joe -not -group joe
find -user joe -o -user jane
# 搜索文件和目录所有者不是joe并且也不是jane
find -not \( -user joe -o -user jane \)
find / -user joe -o -uid 500

范例： ```bash

查找文件类型不是目录并且不为空的文件和目录

~ find ! ( -type d -a -empty ) | wc -l ~ find ! -type d -o ! -empty | wc -l

~ find /home/ ! -user wang ! -user mage -ls ~ find ! ( -user wang -o -user mage ) ~ find ! -user wang -a ! -user mage

找出/tmp 目录下，属主不是root，并且文件名不以f开头的文件

find /tmp ( -not -user root -a -not -name “-f” ) -ls find /tmp -not ( -user root -o -name “-f” ) -ls

<a name="X5lPJ"></a>
### 1.2.8 排除目录
范例：
```bash
#查找/etc/下，除/etc/sane.d目录的其它所有.conf后缀的文件
# /etc/sane.d 后面不能出现 / 即：/etc/sane.d/
find /etc -path '/etc/sane.d' -a -prune -o -name "*.conf"

#查找/etc/下，除/etc/sane.d和/etc/fonts两个目录的所有.conf后缀的文件
find /etc \( -path "/etc/sane.d" -o -path "/etc/fonts" \) -a -prune -o -name "*.conf"

# 排除/proc和/sys目录
find / \( -path "/sys" -o -path "/proc" \) -a -prune -o -type f -a -mmin -1

1.2.9 根据文件大小来查找

:::warning -size [+|-]#UNIT # 常用单位：k，M，G，c(byte)，注意大小写敏感

UNIT: (#-1, #]，如：6k 表示(5k,6k]
-#UNIT：[0,#-1]，如：-6k 表示[0,5k]
+#UNIT：(#,∞)，如：+6k 表示(6k,∞) ::: 范例： ```bash
搜索1k范围是在不包含0字节但是大于0字节，小于等于1字节的范围
~ find /data/test/ -size 1k -ls

搜索2k范围是在不包含1024字节但是大于1024，小于等于2048的范围

~ find /data/test/ -size 2k -ls

搜索0字节到5k的范围

~ find /data/test/ -size -6k -ls

搜索大于2k但是不包含2k，到无穷大

~ find /data/test/ -size +2k -ls

~ find / -size +10G ~ ls -lh /proc/kcore ~ du -sh /proc/kcore

<a name="WzaXS"></a>
### 1.2.10 根据时间戳
:::warning
以“天”为单位

- -atime [+|-]#：以“天”为单位来搜索最近文件的访问时间（读取文件内容） 
   - #: [#,#+1)，如 1 表示24小时以上，48小时以内
   - +#: [#+1,∞]，如 1 表示 48小时以上的
   - -#: [0,#) ，如 1 表示 0 小时以上，在 24 小时以内
- -mtime：以“天”为单位来搜索最近文件的修改时间（改变文件内容（数据））
- -ctime：以“天”为单位来搜索最近文件的改变时间（元数据发生改变（文件属性））

以“分钟”为单位

- -amin：以“分钟”为单位来搜索最近文件的访问时间（读取文件内容）
- -mmin：以“分钟”为单位来搜索最近文件的修改时间（改变文件内容（数据））
- -cmin：以“分钟”为单位来搜索最近文件的改变时间（元数据发生改变（文件属性））
:::
![find查找条件助记.png](https://cdn.nlark.com/yuque/0/2022/png/2555283/1653198562851-3e4197de-9cf8-40db-8ef9-fdf43b09bab6.png#clientId=u5238105d-d4d0-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=554&id=ub2ad86de&margin=%5Bobject%20Object%5D&name=find%E6%9F%A5%E6%89%BE%E6%9D%A1%E4%BB%B6%E5%8A%A9%E8%AE%B0.png&originHeight=554&originWidth=1084&originalType=binary&ratio=1&rotation=0&showTitle=false&size=310237&status=done&style=none&taskId=u0fe055e9-8994-4efa-8bbe-ab8fd8ad230&title=&width=1084)
<a name="nmjQd"></a>
### 1.2.11 根据权限查找
:::warning
-perm [/|-]MODE<br />MODE: 精确权限匹配<br />/MODE：任何一类(u,g,o)对象的权限中只要能一位匹配即可，**或关系**，+ 从CentOS 7开始淘汰<br />-MODE：每一类对象都必须同时拥有指定权限，**与关系**<br />0： 表示不关注

说明：

- find -perm 755 会匹配权限模式恰好是755的文件
- 只要当任意人有写权限时，find -perm +222就会匹配
- 只有当每个人都有写权限时，find -perm -222才会匹配
- 只有当其它人（other）有写权限时，find -perm -002才会匹配
:::
范例：
```bash
~ chmod 600 f1.txt
~ find . -type f -perm 600 -ls
67268584    0 -rw-------   1 root     root            0 May 22 13:12 ./f1.txt

# 搜索权限为222(--w--w--w-，即所有者，所属组，其他人都只有写权限)的文件
~ find -perm 222 -type f -ls

# 搜索权限为-222(--w--w--w-，即所有者，所属组，其他人都要有写权限)为文件和目录
~ find -perm -222 -type f -type d -ls

# 搜索权限为/222(--w--w--w-，即所有者，所属组，其他人任意一组有写权限)为文件和目录
~ find -perm /222 -type f -type d -ls

1.2.12 正则表达式

:::warning -regextype type
Changes the regular expression syntax understood by -regex and -iregex tests which occur later on
the command line. Currently-implemented types are emacs (this is the default), posix-awk, posix-
basic, posix-egrep and posix-extended.
-regex pattern
File name matches regular expression pattern. This is a match on the whole path, not a search.
For example, to match a file named ./fubar3', you can use the regular expression.bar.’ or
`.b.3’, but not `f.r3’. The regular expressions understood by find are by default Emacs Regular
Expressions, but this can be changed with the -regextype option. ::: 范例：

find /data -regextype posix-extended -regex "regix"

1.2.13 处理动作

:::warning

-print：默认的处理动作，显示至屏幕（默认行为）
-ls：类似于对查找到的文件执行“ls -l”命令(*)
-delete：删除查找到的文件
-fls file：查找到的所有文件的长格式信息保存至指定文件中(-ls > )
-ok COMMAND {} \; 对查找到的每个文件执行由COMMAND指定的命令，对于每个文件执行命令之前，都会交互式要求用户确认（交互式，非强制）(*)
{} ：占位符，相当于对find命令搜索的内容丢到{}中 \; ：结束符
-exec COMMAND {} ; 对查找到的每个文件执行由COMMAND指定的命令（非交互式，强制）(*)
{}: 用于引用查找到的文件名称自身；\; ：用于结束符 ::: 范例： ```bash
备份配置文件，添加.orig这个扩展名
find -name “.conf” -exec cp {} {}.orig \;

提示删除存在时间超过３天以上的joe的临时文件

find /tmp -ctime +3 -user joe -ok rm {} \;

在主目录中寻找可被其它用户写入的文件

find ~ -perm -002 -exec chmod o-w {} \;

查找/data下的权限为644，后缀为sh的普通文件，增加执行权限

find /data –type f -perm 644 -name “.sh” –exec chmod 755 {} \;

~ find -name “.sh” -ok mv {} /opt \; ~ find -name “.sh” -exec mv {} /opt \;

<a name="haYC3"></a>
## 1.3 参数替换 xargs 
由于很多命令不支持管道 | 来作为传递的参数，xargs 用于产生某个命令的参数，xargs 可以读入 stdin 的数据，并且以空格符或者回车符将 stdin 的数据分隔成为参数。（即很多命令不支持标准输入，可以通过 xargs 命令来使命令支持标准输入）<br />另外，许多命令不能接受过多的参数，命令执行可能会失败，xargs 可以解决。<br />注意：文件名或者是其他意义的名词内含有空格符的情况。<br />find 和 xargs 的组合：
:::warning
find | xargs COMMMAND
:::
范例：
```bash
# xargs 命令的使用
~ type xargs
~ xargs --help
Usage: xargs [OPTION]... COMMAND INITIAL-ARGS...
~ echo /etc/passwd | xargs ls -l
-rw-r--r-- 1 root root 1927 May 21 22:57 /etc/passwd

# xargs 默认会以横向的方式显示（默认行为）
~ echo {1..10} | xargs
~ echo {1..10} | xargs -n1
~ echo {1..10} | xargs -n2
~ seq 3
1
2
3
~ seq 3 | xargs
1 2 3

# 删除当前目录下的大量文件
~ ls | xargs rm -rf

# 批量创建用户
echo user{1..9} | xargs -n1 useradd
# 批量删除用户
echo user{1..9} | xargs -n1 userdel -rf

#这个命令是错误的，7代表可读可写可执行，权限也为或的关系，0代表不关心
find /sbin/ -perm /700 | ls -l

# 查找有特殊权限的文件，并排序，7代表可读可写可执行，权限也为或的关系，0代表不关心
find /bin/ -perm /7000 | xargs ls -lS
# 此命令和上面有何区别？查找是否有suid，sgid，stick三个特殊权限均有的文件，0代表不关心
find /bin/ -perm -7000 | xargs ls -lS
# 以字符nul分隔
# print 0 ：0作为文件名的切割符
find -type f -name "*.txt" -print0 | xargs -0 rm

# 并发执行多个进程
seq 100 | xargs -i -P10 wget -P /data http://10.0.0.100/{}.html

# 并行下载bilibili视频
yum install -y python3-pip
pip3 install you-get
seq 10 | xargs -i -P3 you-get https://www.bilibili.com/video/BV1PZ4y1k7m1?p={}&spm_id_from=pageDriver
#并行下载视频 -P 并发量为 3
seq 389 | xargs -i -P3 you-get https://www.bilibili.com/video/av36489007?p={}

1.4 练习

# 1、查找/var目录下属主为root，且属组为mail的所有文件
# 2、查找/var目录下不属于root、lp、gdm的所有文件
# 3、查找/var目录下最近一周内其内容修改过，同时属主不为root，也不是postfix的文件
# 4、查找当前系统上没有属主或属组，且最近一个周内曾被访问过的文件
# 5、查找/etc目录下大于1M且类型为普通文件的所有文件
# 6、查找/etc目录下所有用户都没有写权限的文件
# 7、查找/etc目录下至少有一类用户没有执行权限的文件
# 8、查找/etc/init.d目录下，所有用户都有执行权限，且其它用户有写权限的文件

# 1、查找/var目录下属主为root，且属组为mail的所有文件
~ find /var -type f -user root -group mail -ls

# 2、查找/var目录下不属于root、lp、gdm的所有文件
~ find /var ! \( -user root -o -user lp -o -user gdm \) -type f | xargs ls -l
~ find /var ! -user root ! -user lp ! -user gdm -type f | xargs ls -l

# 3、查找/var目录下最近一周内其内容修改过，同时属主不为root，也不是postfix的文件
~ find /var ! \( -user root -o -user postfix \) -mtime -7 -type f -ls
~ find /var ! -user root ! -user postfix -mtime -7 -type f -ls 

# 4、查找当前系统上没有属主或属组，且最近一个周内曾被访问过的文件
~ find / -nouser -nogroup -atime -7 -type f -ls

# 5、查找/etc目录下大于1M且类型为普通文件的所有文件
~ find /etc -size +1M -type f | xargs ls -lh

# 6、查找/etc目录下所有用户都没有写权限的文件
~ find /etc ! -perm /222 -type f -ls

# 7、查找/etc目录下至少有一类用户没有执行权限的文件
~ find /etc ! -perm /111 -type f -ls

# 8、查找/etc/init.d目录下，所有用户都有执行权限，且其它用户有写权限的文件
~ find /etc/init.d -perm -111 -perm /002 -ls
~ find /etc/init.d -perm -113 -ls

2 压缩和解压缩

压缩的简单思路：就是将文件中相同的字符变成一个较短的单一的字符来表示；例如：如果zhongzw的字符在进行压缩时，会制作一个转换表，在转换表中会有一个z来表示zhongzw，这样就节省了空间。如果有1M的0，在压缩时，则会显示1M0，用1M0来表示1M的0。3个字符来表示1M的0。
主要针对单个文件压缩，而非目录

2.1 compress 和 uncompress

:::info Linux compress命令是一个相当古老的 unix 档案压缩指令，压缩后的档案会加上一个 .Z 延伸档名以区别未压缩的档案，压缩后的档案可以以 uncompress 解压。若要将数个档案压成一个压缩档，必须先将档案 tar 起来再压缩。由于 gzip 可以产生更理想的压缩比例，一般人多已改用 gzip 为档案压缩工具。 ::: 此工具来自于ncompress包，此工具目前已经很少使用
对应的文件是Z后缀
格式：

compress Options [file ...]
uncompress file.Z # 解压缩

常用选项： :::warning

-d：解压缩，相当于 uncompress
-c：结果输出至标准输出，不删除原文件
-v：显示详情 ::: zcat file.Z 不显式解压缩的提前下查看文本文件的内容
范例：
```
zcat file.Z > file
```
uncompress file.Z 解压缩
范例：常用搭配
```
compress-c message > message.Z
uncompress -c message.Z > m
zcat message.Z
```
2.2 gzip 和 gunzip
:::info Linux gzip命令用于压缩文件。
gzip是个使用广泛的压缩程序，文件经它压缩过后，其名称后面会多出”.gz”的扩展名。 ::: 来自 gzip 包，对应的文件是 .gz 后缀
格式：
```
gzip [OPTION]... FILE...
```
常用选项：
-k keep，保留源文件，CentOS 8新特性
-d：解压缩，相当于gunzip
-c：结果输出至标准输出，保留原文件不
-#：指定压缩比，#取值为1-9，值越大压缩比越大（默认为9）

范例：

# 解压缩
gunzip file.gz
# 不显式解压缩的提前下查看文本文件的内容
zcat file.gz

范例：常用搭配

bzip2 -c messages > messages.bz2 = bzip2 -k messages
bunzip2 -c messages.bz2 > messages.bz2
bzcat messages.bz2
cat messages | bzip2 > messagesbak.bz2
cat messages | xz > messagebk.xz

2.3 bzip2 和 bunzip2

:::info Linux bzip2命令是.bz2文件的压缩程序。
bzip2采用新的压缩演算法，压缩效果比传统的LZ77/LZ78压缩演算法来得好。若没有加上任何参数，bzip2压缩完文件后会产生.bz2的压缩文件，并删除原始的文件。 ::: 来自 bzip2 包，对应的文件是 .bz2 后缀
格式：

bzip2 [OPTION]... FILE...

常用选项：

-k ：keep 保留原文件
-d ：解压缩，相当于bunzip2
-c：结果输出至标准输出，保留原文件不改变
-# ：指定压缩比，#取值为1-9，值越大压缩比越大（默认为9）

范例：

# 解压缩
bunzip2 file.bz2 
# 不显式解压缩的提前下查看文本文件的内容
bzcat file.bz2

范例：常用搭配

bzip2 -c messages > messages.bz2 = bzip2 -k messages
bunzip2 -c messages.bz2 > messages.bz2
bzcat messages.bz2
cat messages | bzip2 > messagesbak.bz2
cat messages | xz > messagebk.xz

2.4 xz 和 unxz

来自 xz 包，对应的文件是 .xz 后缀
格式：

xz [OPTION]... FILE...

常用选项：

-k ：keep 保留原文件
-d ：解压缩，相当于unxz
-c：结果输出至标准输出，保留原文件不改变
-# ：指定压缩比，#取值为1-9，值越大压缩比越大（默认为6）

范例：

# 解压缩
unxz file.xz
# 不显式解压缩的提前下查看文本文件的内容
xzcat file.xz

范例：常用搭配

xz -k messages
unxz -k messages.xz
xzcat messages.xz

2.5 zip 和 unzip

zip 可以实现打包目录并且压缩
zip 可以实现打包目录和多个文件成一个文件并压缩，但可能会丢失文件属性信息，如:所有者和组信息，一般建议使用tar代替
分别来自于zlip和unzip包
对应的文件是.zip后缀
范例：zip 的帮助

~ zip --help
Copyright (c) 1990-2008 Info-ZIP - Type 'zip "-L"' for software license.
Zip 3.0 (July 5th 2008). Usage:
zip [-options] [-b path] [-t mmddyyyy] [-n suffixes] [zipfile list] [-xi list]
  The default action is to add or replace zipfile entries from list, which
  can include the special name - to compress standard input.
  If zipfile and list are omitted, zip compresses stdin to stdout.
  -f   freshen: only changed files  -u   update: only changed or new files
  -d   delete entries in zipfile    -m   move into zipfile (delete OS files)
  -r   recurse into directories     -j   junk (don't record) directory names
  -0   store only                   -l   convert LF to CR LF (-ll CR LF to LF)
  -1   compress faster              -9   compress better
  -q   quiet operation              -v   verbose operation/print version info
  -c   add one-line comments        -z   add zipfile comment
  -@   read names from stdin        -o   make zipfile as old as latest entry
  -x   exclude the following names  -i   include only the following names
  -F   fix zipfile (-FF try harder) -D   do not add directory entries
  -A   adjust self-extracting exe   -J   junk zipfile prefix (unzipsfx)
  -T   test zipfile integrity       -X   eXclude eXtra file attributes
  -y   store symbolic links as the link instead of the referenced file
  -e   encrypt                      -n   don't compress these suffixes
  -h2  show more help
# 查看更多帮助  
~ zip -h2

Extended Help for Zip

See the Zip Manual for more detailed help


Zip stores files in zip archives.  The default action is to add or replace
zipfile entries.

Basic command line:
  zip options archive_name file file ...

Some examples:
  Add file.txt to z.zip (create z if needed):      zip z file.txt
  Zip all files in current dir:                    zip z *
  Zip files in current dir and subdirs also:       zip -r z .

范例：

#打包并压缩
zip –r /backup/sysconfig.zip /etc/sysconfig/

#默认解压缩至当前目录
unzip /backup/sysconfig.zip

#解压缩至指定目录
unzip /backup/sysconfig.zip -d /tmp

#解压缩至指定目录
cat /var/log/messages | zip messages - (-代表/var/log/messages)
unzip -p message.gz > message #-p 表示管道

范例：交互式加密和解密

~ zip -e kubesphere.zip *
Enter password:
Verify password:
  adding: etc.zip (stored 0%)
  adding: messages.bz2 (stored 0%)
  adding: messages.gz (stored 0%)
  adding: messages.xz (stored 0%)
  adding: messages.Z (stored 0%)

~ unzip kubesphere.zip
Archive:  kubesphere.zip
[kubesphere.zip] etc.zip password:
password incorrect--reenter:

范例：非交互式加密和解密

~ zip -P Admin@h3c kubesphere.zip *
  adding: etc.zip (stored 0%)
  adding: messages.bz2 (stored 0%)
  adding: messages.gz (stored 0%)
  adding: messages.xz (stored 0%)
  adding: messages.Z (stored 0%)

~ unzip -P Admin@h3c kubesphere.zip
Archive:  kubesphere.zip

3 打包和解包

3.1 tar

tar 即 Tape ARchive，磁带归档，经常用于备份。可以对目录和多个文件打包一个文件，并且可以压缩，保留文件属性不丢失，常用于备份功能，推荐使用。
tar 是用来建立，还原备份文件的工具程序，它可以加入，解开备份文件内的文件。
对应的文件是 .tar 后缀
格式： :::warning tar [-ABcdgGhiklmMoOpPrRsStuUvwWxzZ][-b <区块数目>][-C <目的目录>][-f <备份文件>][-F ][-K <文件>][-L <媒体容量>][-N <日期时间>][-T <范本文件>][-V <卷册名称>][-X <范本文件>][-<设备编号><存储密度>][—after-date=<日期时间>][—atime-preserve][—backuup=<备份方式>][—checkpoint][—concatenate][—confirmation][—delete][—exclude=<范本样式>][—force-local][—group=<群组名称>][—help][—ignore-failed-read][—new-volume-script=][—newer-mtime][—no-recursion][—null][—numeric-owner][—owner=<用户名称>][—posix][—erve][—preserve-order][—preserve-permissions][—record-size=<区块数目>][—recursive-unlink][—remove-files][—rsh-command=<执行指令>][—same-owner][—suffix=<备份字尾字符串>][—totals][—use-compress-program=<执行指令>][—version][—volno-file=<编号文件>][文件或目录…] ::: 选项： :::warning

-A或—catenate 新增文件到已存在的备份文件。
-b<区块数目>或—blocking-factor=<区块数目> 设置每笔记录的区块数目，每个区块大小为12Bytes。
-B或—read-full-records 读取数据时重设区块大小。
-c或—create 建立新的备份文件。
-C<目的目录>或—directory=<目的目录> 切换到指定的目录。
-d或—diff或—compare 对比备份文件内和文件系统上的文件的差异。
-f<备份文件>或—file=<备份文件> 指定备份文件。
-F或—info-script= 每次更换磁带时，就执行指定的Script文件。
-g或—listed-incremental 处理GNU格式的大量备份。
-G或—incremental 处理旧的GNU格式的大量备份。
-h或—dereference 不建立符号连接，直接复制该连接所指向的原始文件。
-i或—ignore-zeros 忽略备份文件中的0 Byte区块，也就是EOF。
-k或—keep-old-files 解开备份文件时，不覆盖已有的文件。
-K<文件>或—starting-file=<文件> 从指定的文件开始还原。
-l或—one-file-system 复制的文件或目录存放的文件系统，必须与tar指令执行时所处的文件系统相同，否则不予复制。
-L<媒体容量>或-tape-length=<媒体容量> 设置存放每体的容量，单位以1024 Bytes计算。
-m或—modification-time 还原文件时，不变更文件的更改时间。
-M或—multi-volume 在建立，还原备份文件或列出其中的内容时，采用多卷册模式。
-N<日期格式>或—newer=<日期时间> 只将较指定日期更新的文件保存到备份文件里。
-o或—old-archive或—portability 将资料写入备份文件时使用V7格式。
-O或—stdout 把从备份文件里还原的文件输出到标准输出设备。
-p或—same-permissions 用原来的文件权限还原文件。
-P或—absolute-names 文件名使用绝对名称，不移除文件名称前的”/“号。
-r或—append 新增文件到已存在的备份文件的结尾部分。
-R或—block-number 列出每个信息在备份文件中的区块编号。
-s或—same-order 还原文件的顺序和备份文件内的存放顺序相同。
-S或—sparse 倘若一个文件内含大量的连续0字节，则将此文件存成稀疏文件。
-t或—list 列出备份文件的内容。
-T<范本文件>或—files-from=<范本文件> 指定范本文件，其内含有一个或多个范本样式，让tar解开或建立符合设置条件的文件。
-u或—update 仅置换较备份文件内的文件更新的文件。
-U或—unlink-first 解开压缩文件还原文件之前，先解除文件的连接。
-v或—verbose 显示指令执行过程。
-V<卷册名称>或—label=<卷册名称> 建立使用指定的卷册名称的备份文件。
-w或—interactive 遭遇问题时先询问用户。
-W或—verify 写入备份文件后，确认文件正确无误。
-x或—extract或—get 从备份文件中还原文件。
-X<范本文件>或—exclude-from=<范本文件> 指定范本文件，其内含有一个或多个范本样式，让ar排除符合设置条件的文件。
-z或—gzip或—ungzip 通过gzip指令处理备份文件。
-Z或—compress或—uncompress 通过compress指令处理备份文件。
-<设备编号><存储密度> 设置备份用的外围设备编号及存放数据的密度。
—after-date=<日期时间> 此参数的效果和指定”-N”参数相同。
—atime-preserve 不变更文件的存取时间。
—backup=<备份方式>或—backup 移除文件前先进行备份。
—checkpoint 读取备份文件时列出目录名称。
—concatenate 此参数的效果和指定”-A”参数相同。
—confirmation 此参数的效果和指定”-w”参数相同。
—delete 从备份文件中删除指定的文件。
—exclude=<范本样式> 排除符合范本样式的文件。
—group=<群组名称> 把加入设备文件中的文件的所属群组设成指定的群组。
—help 在线帮助。
—ignore-failed-read 忽略数据读取错误，不中断程序的执行。
—new-volume-script= 此参数的效果和指定”-F”参数相同。
—newer-mtime 只保存更改过的文件。
—no-recursion 不做递归处理，也就是指定目录下的所有文件及子目录不予处理。
—null 从null设备读取文件名称。
—numeric-owner 以用户识别码及群组识别码取代用户名称和群组名称。
—owner=<用户名称> 把加入备份文件中的文件的拥有者设成指定的用户。
—posix 将数据写入备份文件时使用POSIX格式。
—preserve 此参数的效果和指定”-ps”参数相同。
—preserve-order 此参数的效果和指定”-A”参数相同。
—preserve-permissions 此参数的效果和指定”-p”参数相同。
—record-size=<区块数目> 此参数的效果和指定”-b”参数相同。
—recursive-unlink 解开压缩文件还原目录之前，先解除整个目录下所有文件的连接。
—remove-files 文件加入备份文件后，就将其删除。
—rsh-command=<执行指令> 设置要在远端主机上执行的指令，以取代rsh指令。
—same-owner 尝试以相同的文件拥有者还原文件。
—suffix=<备份字尾字符串> 移除文件前先行备份。
—totals 备份文件建立后，列出文件大小。
—use-compress-program=<执行指令> 通过指定的指令处理备份文件。
—version 显示版本信息。

—volno-file=<编号文件> 使用指定文件内的编号取代预设的卷册编号。 ::: （1）创建归档，保留权限

# c:创建打包文件，p:保留权限，v:查看过程，f:指定路径
tar -cpvf /PATH/FILE.tar FILE...

（2）追加文件至归档：注：不支持对压缩文件追加

# r:追加文件至归档，f:指定路径
tar -rf /PATH/FILE.tar FILE...

（3）查看归档文件中的文件列表

# t:查看归档文件中的文件列表，f:指定路径
tar -tf /PATH/FILE.tar

（4）展开归档

# x:解压缩，f:指定路径，-C:指定解压缩路径
tar xf /PATH/FILE.tar
tar xf /PATH/FILE.tar -C /PATH/

（5）结合压缩工具实现：归档并压缩

-z：相当于 gzip 压缩工具
-j：相当于bzip压缩工具
-J：相当于xz压缩工具

范例：

tar -zcpvf etc.tar.gz /etc/
tar -jcpvf etc.tar.bz /etc/
tar -Jcpvf etc.tar.xz /etc/

# 只打包目录内的文件，不包括目录本身
tar -zxvf /root/etc.tar.gz /etc/

# 利用 tar 进行文件复制
tar c /data/ | tar -x -C /backup

—exclude 排除文件

范例：

tar zcvf /root/a.tgz --exclude=/app/host1 --exclude=/app/host2 /app

-T 选项指定输入文件
-X 选项指定包含要排除的文件列表

范例：

tar zcvf mybackup.tgz -T /root/includefilelist -X /root/excludefilelist

3.2 split

split 命令可以分割一个文件为多个文件
格式： :::warning split [—help][—version][-<行数>][-b <字节>][-C <字节>][-l <行数>][要切割的文件][输出文件名] ::: 选项： :::warning

-<行数> : 指定每多少行切成一个小文件
-b<字节> : 指定每多少字节切成一个小文件
—help : 在线帮助
—version : 显示版本信息
-C<字节> : 与参数”-b”相似，但是在切割时将尽量维持每行的完整性
[输出文件名] : 设置切割后文件的前置文件名， split会自动在前置文件名后再加上编号 ::: 范例： ```bash
分割大的 tar 文件为多份小文件
split -b Size –d tar-file-name prefix-name

示例

split -b 1M mybackup.tgz mybackup-parts

切换成的多个小分文件使用数字后缀

split -b 1M –d mybackup.tgz mybackup-parts

将多个切割的小文件合并成一个大文件
```bash
cat mybackup-parts* > mybackup.tar.gz

范例：分割一个文件为多个文件

~ dd if=/dev/zero of=/data/test/big.img bs=1M count=30
~ ls -lh
total 41M
-rw-r--r-- 1 root root 30M May 22 16:11 big.img
~ split -b1m -d big.img bigfile
~ split -b 10m -d big.img bigile
~ ls -l
total 72660
-rw-r--r-- 1 root root 10485760 May 22 16:12 bigile00
-rw-r--r-- 1 root root 10485760 May 22 16:12 bigile01
-rw-r--r-- 1 root root 10485760 May 22 16:12 bigile02

范例：将多个切割的小文件合并成一个大文件

~ cat bigile0* > bigfile.tar
~ ls -lh bigfile.tar
-rw-r--r-- 1 root root 30M May 22 16:13 bigfile.tar

3.3 cpio

cpio 是历史悠久的打包和解压工具，不过目前也已经较少使用
cpio 命令是通过重定向的方式将文件进行打包备份，还原恢复的工具，它可以解压以 ”.cpio“ 或者 “.tar” 结尾的文件。
格式： :::warning cpio [-0aABckLovV][-C <输入/输出大小>][-F <备份档>][-H <备份格式>][-O <备份档>][—block-size=<区块大小>][—force-local][—help][—quiet][—version] 或 cpio [-bBcdfikmnrsStuvV][-C <输入/输出大小>][-E <范本文件>][-F <备份档>][-H <备份格式>][-I <备份档>][-M <回传信息>][-R <拥有者><:/.><所属群组>][—block-size=<区块大小>][—force-local][—help][—no-absolute-filenames][—no-preserve-owner][—only-verify-crc][—quiet][—sparse][—version][范本样式…] 或 cpio [-0adkiLmpuvV][-R <拥有者><:/.><所属群组>][—help][—no-preserve-owner][—quiet][—sparse][—version][目的目] ::: 范例：

cpio [选项] > 文件名或者设备名
cpio [选项] < 文件名或者设备名

常用选项： :::warning

-0或—null 接受新增列控制字符，通常配合find指令的”-print0”参数使用。
-a或—reset-access-time 重新设置文件的存取时间。
-A或—append 附加到已存在的备份档中，且这个备份档必须存放在磁盘上，而不能放置于磁带机里。
-b或—swap 此参数的效果和同时指定”-sS”参数相同。
-B 将输入/输出的区块大小改成5210 Bytes。
-c 使用旧ASCII备份格式。
-C<区块大小>或—io-size=<区块大小> 设置输入/输出的区块大小，单位是Byte。
-d或—make-directories 如有需要cpio会自行建立目录。
-E<范本文件>或—pattern-file=<范本文件> 指定范本文件，其内含有一个或多个范本样式，让cpio解开符合范本条件的文件，格式为每列一个范本样式。
-f或—nonmatching 让cpio解开所有不符合范本条件的文件。
-F<备份档>或—file=<备份档> 指定备份档的名称，用来取代标准输入或输出，也能借此通过网络使用另一台主机的保存设备存取备份档。
-H<备份格式> 指定备份时欲使用的文件格式。
-i或—extract 执行copy-in模式，还原备份档。
-l<备份档> 指定备份档的名称，用来取代标准输入，也能借此通过网络使用另一台主机的保存设备读取备份档。
-k 此参数将忽略不予处理，仅负责解决cpio不同版本间的兼容性问题。
-l或—link 以硬连接的方式取代复制文件，可在copy-pass模式下运用。
-L或—dereference 不建立符号连接，直接复制该连接所指向的原始文件。
-m或preserve-modification-time 不去更换文件的更改时间。
-M<回传信息>或—message=<回传信息> 设置更换保存媒体的信息。
-n或—numeric-uid-gid 使用”-tv”参数列出备份档的内容时，若再加上参数”-n”，则会以用户识别码和群组识别码替代拥有者和群组名称列出文件清单。
-o或—create 执行copy-out模式，建立备份档。
-O<备份档> 指定备份档的名称，用来取代标准输出，也能借此通过网络使用另一台主机的保存设备存放备份档。
-p或—pass-through 执行copy-pass模式，略过备份步骤，直接将文件复制到目的目录。
-r或—rename 当有文件名称需要更动时，采用互动模式。
-R<拥有者><:/.><所属群组>或
——owner<拥有者><:/.><所属群组> 在copy-in模式还原备份档，或copy-pass模式复制文件时，可指定这些备份，复制的文件的拥有者与所属群组。
-s或—swap-bytes 交换每对字节的内容。
-S或—swap-halfwords 交换每半个字节的内容。
-t或—list 将输入的内容呈现出来。
-u或—unconditional 置换所有文件，不论日期时间的新旧与否，皆不予询问而直接覆盖。
-v或—verbose 详细显示指令的执行过程。
-V或—dot 执行指令时，在每个文件的执行程序前面加上”.”号
—block-size=<区块大小> 设置输入/输出的区块大小，假如设置数值为5，则区块大小为2500，若设置成10，则区块大小为5120，依次类推。
—force-local 强制将备份档存放在本地主机。
—help 在线帮助。
—no-absolute-filenames 使用相对路径建立文件名称。
—no-preserve-owner 不保留文件的拥有者，谁解开了备份档，那些文件就归谁所有。
-only-verify-crc 当备份档采用CRC备份格式时，可使用这项参数检查备份档内的每个文件是否正确无误。
—quiet 不显示复制了多少区块。
—sparse 倘若一个文件内含大量的连续0字节，则将此文件存成稀疏文件。
—version 显示版本信息。 :::
-o ：output 模式，打包，将标准输入传入的文件名打包后发送到标准输出
-i ：input 模式，解包，将标准输入传入的文件名解包到当前目录
-t ：预览，查看标准输入传入的打包文件名解压到当前目录
-O filename：输出到指定的归档文件名
-A ：向已存在的归档文件中追加文件
-I filename：对指定的归档文件名解压
-F filename：使用指定的文件名替代标准输入或者输出
-d ：解包生成目录，在cpio还原时，自动的建立目录
-v ：显示打包过程中的文件名称

范例：

#将etc目录备份；需要使用相对路径
find ./etc -print | cpio -ov > bak.cpio

#将/data内容追加bak.cpio
find /data | cpio -oA -F bak.cpio

#内容预览
cpio –tv < etc.cpio

#解包文件
cpio –idv < etc.cpio

范例：

# 内容预览
~ cpio -tv < /boot/initramfs-0-rescue-cc2c86fe566741e6a2ff6d399c5d5daa.img
# 解包文件
~ cpio -idv < initramfs-0-rescue-cc2c86fe566741e6a2ff6d399c5d5daa.img

Linux云计算技术

7 文件查找和打包压缩

1 文件查找

1.1 locate

1.2 find

1.2.1 指定搜索目录层级

1.2.2 对每个目录先处理目录内的文件，再处理目录本身

1.2.3 根据文件名和inode查找

1.2.5 根据文件类型查找

1.2.6 空文件或者目录

1.2.7 组合条件

查找文件类型不是目录并且不为空的文件和目录

找出/tmp 目录下，属主不是root，并且文件名不以f开头的文件

1.2.9 根据文件大小来查找

UNIT: (#-1, #]，如：6k 表示(5k,6k]

搜索1k范围是在不包含0字节但是大于0字节，小于等于1字节的范围

搜索2k范围是在不包含1024字节但是大于1024，小于等于2048的范围

搜索0字节到5k的范围

搜索大于2k但是不包含2k，到无穷大

1.2.12 正则表达式

1.2.13 处理动作

备份配置文件，添加.orig这个扩展名

提示删除存在时间超过３天以上的joe的临时文件

在主目录中寻找可被其它用户写入的文件

查找/data下的权限为644，后缀为sh的普通文件，增加执行权限

1.4 练习

2 压缩和解压缩

2.1 compress 和 uncompress

2.2 gzip 和 gunzip

2.3 bzip2 和 bunzip2

2.4 xz 和 unxz

2.5 zip 和 unzip

3 打包和解包

3.1 tar

3.2 split

分割大的 tar 文件为多份小文件

示例

切换成的多个小分文件使用数字后缀

3.3 cpio