创建测试文件

  1. mkdir -p /home/admin/app/test_git_directory
  2. mkdir -p /home/admin/app/aaa
  3. mkdir -p /home/admin/app/bbb
  4. mkdir -p /home/admin/app/images
  5. mkdir -p /home/admin/app/test_git
  6. mkdir -p /home/admin/app/kim_test_git
  8. touch  /home/admin/app/aaa/1.txt
  9. touch /home/admin/app/aaa/2.txt
  10. mkdir -p /home/admin/app/images/1.txt
  11. mkdir -p /home/admin/app/images/2.txt
  12. mkdir -p /home/admin/app/images/3.txt
  13. mkdir -p /home/admin/app/images/32.txt
  14. mkdir -p /home/admin/app/images/log.txt
  15. mkdir -p /home/admin/app/images/test.jpg
  16. touch /home/admin/app/1.txt
  17. touch /home/admin/app/2.txt
  18. touch /home/admin/app/test1.jpg

rm+ls+find+grep 高级操作

  1. #【ls+grep】匹配文件或目录,比如像deep_xxx.xxx这样的文件
  2. ls | grep  "^deep_.*\..*"
  3. ls | grep  "^deep_.*\..*" 
  4. ls | grep  "^deep_[a-zA-Z_]*.*\..*"
  5. ls | grep  "^d[a-z]*_[a-zA-Z_]*.*\..*"
  6. ls | grep "^[1-9]*\.txt"
  7. ls | grep -v "^.*\.jpg$"
  8.     ls *.txt
  11. #【find+grep类】
  12. find . -name  "[0-9]*.txt"
  13. find . -name "*.txt" | egrep "log.txt|1.txt"
  14. find . -name "*.txt" | egrep -v "(log.txt|1.txt)"
  15. find . -name "*.txt" | egrep  "(log.txt|[0-9]{0,2}.txt)"
  18. #【rm+ls+grep+反引号`` 批量删除】
  19. rm -rf `ls |grep "^[1-9]*\.txt"`
  20.  #【rm+ls+grep 批量反向删除】
  21. rm -rf `ls | grep -v "^.*\.jpg$"`
  23. rm `find . -name *.txt | egrep -v '(test.jpg | 1.txt | 2.txt)'`
  28. #【rm+ls+grep+xargs 批量删除指定文件】
  29. cd /home/admin/app  && ls | grep "^.*\..*" | xargs rm -rf
  30. #【rm+ls+egrep+xargs 批量反向删除】（✅推荐）
  31. cd /home/admin/app && ls | egrep -v "^(deep|zbt).*[^\.]*" | xargs rm -rf
  37. #【rm+find+xargs批量删除】
  38. find / -type f -name "test[a-z1-9]*\.jpg"  | xargs rm -rf
  39. find / -type d -name "kim_test_*" | xargs rm -rf
  41. #【rm+find+ -exec 批量删除】
  42. find / -type d -name "kim_test_*" -exec rm -rf {} \;
  43. find /home/admin/app -maxdepth 1 -type d  -name "*test_*" -exec rm -rf {} \;

grpe

grep (global regular expression print) 是一种文本过滤程序，按照正则表达式的规则，筛选出含有指定模式字符串的文本行

作用 grep命令可以指定文件中搜索特定的内容，并将含有这些内容的行标准输出。grep全称是Global Regular Expression Print，表示全局正则表达式版本，它的使用权限是所有用户。
格式 grep [options] [PATTERN][FILE]
主要参数 grep [options]

  • [options]主要参数：
    • －c： 只输出匹配行的计数。
    • －i： 不区分大小写（只适用于单字符）。
    • －h： 查询多文件时不显示文件名。
    • －l： 查询多文件时只输出包含匹配字符的文件名。
    • －n：显示匹配行及行号。
    • －s：不显示不存在或无匹配文本的错误信息。
    • －v：显示不包含匹配文本的所有行。
  • pattern正则表达式主要参数：
    • \ 忽略正则表达式中特殊字符的原有含义。
    • ^ 匹配正则表达式的开始行。
    • $ 匹配正则表达式的结束行。
    • < 从匹配正则表达式的行开始。

    • 到匹配正则表达式的行结束。

    • 单个字符集合，如[ABCD]即A,B,C,D任一字符符合要求 。
    • [ - ] 范围，如[A-Z]，即A、B、C一直到Z都符合要求 。
    • . 所有的单个字符。
      • 重复字符，长度可以为0。

应用实例

  1. #在所有后缀为.c文件中查找含有正则表达式_DATE_的行，并打印行号
  2. grep -n _DATE_ *.c 
  4. #将文件device.stat中取消所有含有指定模式的行，生成新文件device.active
  5. grep -v '[Dd]isable' device.stat>device.active 
  7. #在文件telnos中检索字符串richard，不顾字母的大小写
  8. grep -i richard telnos
  10. #由于[0-9]*与空字符串匹配，上述命令打印出charpter1文件中所有行，而不是仅打印出含有数字的行
  11. grep '[0-9]*' chapter1
  12. #✅ 正确的用法是
  13. grep '[0-9][0-9]*' chapter1 
  14. egrep '[0-9]+' chapter1
  16. 查询DNS服务是日常工作之一，这意味着要维护覆盖不同网络的大量IP地址。
  17. 有时IP地址会超过2000个如果要查看nnn.nnn网络地址，但是却忘了第二部分中的其余部分，只知到有两个句点，
  18. 例如nnn nn..。要抽取其中所有nnn.nnn IP地址
  19. 使用[0－9 ]{3 }.[0－0{3}。含义是任意数字出现3次，后跟句点，接着是任意数字出现3次，后跟句点.
  20. grep '[0－9 ]{3 }.[0－0{3}].' ipfile
  21. grep '[0－9 ]{3 }.[0－9{3}.' -c ipfile
  22. grep '[0－9 ]{3 }.[0－9{3}.' -l ipfile
  23. grep '[0－9 ]{3 }.[0－9{3}.' -n ipfile

高级用例

  1. #普通的使用方式
  2. grep '字符串'
  4. #匹配文件中包含 MANPATH 的那一行：
  5. cat manpath.config | grep '字符串'
  7. #反向匹配
  8. grep -v '字符串'
  10. #匹配文件中不包含 MANPATH 的那一行
  11. cat manpath.config| grep -v '字符串'
  13. #grep -E 同时匹配多个关键字–或关系
  14. grep -E "word1|word2|word3" file.txt
  16. #同时匹配多个关键字–与关系
  17. #使用管道符连接多个 grep ，间接实现多个关键字的与关系匹配
  18. grep word1 file.txt | grep word2 | grep word3
  21. #查找当前目录下所有 *.txt文件，除了test.txt
  22. cd /home/admin/app/images && ls *.txt | egrep -v test.txt
  23. cd /home/admin/app/images && ls *.txt|awk '{if($0 != "test.txt") print $0}'
  25. #排除多个文件后进行查找
  26. cd /home/admin/app/images &&  ls *.txt| egrep -v '(test.txt|fff.txt|ppp.txt)

egrep

egrep是grep的扩展, egrep除了具备grep的基本功能外还可以使用附加的正则表示式元字符, 如

  • 范围，比如[a-zA-Z0-9_.*]
  • | 或
    • 匹配1个或多个前一字符
  • ? 匹配0个或1个前一字符
    • 匹配0个或0以上字符
  • () 字符组允许个字符相加，比如love(able|ly)(ov)+’ 匹配loveable或lovely加上ov的一次或多次出现,
  • egrep 不支持 grep 的标记匹配字符和\ {}重复的功能，强用会失效
  • 命令参数 该命令的各选项含义如下：
    • -E 每个模式作为一个扩展的正则表达式对待。
    • -F 每个模式作为一组固定字符串对待（以新行分隔），而不作为正则表达式。
    • -b 在输出的每一行前显示包含匹配字符串的行在文件中的字节偏移量。
    • -c 只显示匹配行的数量。
    • -i 比较时不区分大小写。
    • -h 在查找多个文件时，指示grep不要将文件名加入到输出之前。
    • -l 显示首次匹配串所在的文件名并用换行符将其隔开。当某文件中多次出现匹配串,不重复显示此文件名。
    • -n 在输出前加上匹配串所在行的行号（文件首行行号为1）。
    • -v 只显示不包含匹配串的行。
    • -x 只显示整行严格匹配的行。
    • -e expression 指定检索使用的模式。用于防止以“-”开头的模式被解释为命令选项。
    • -f expfile 从expfile文件中获取要搜索的模式，一个模式占一行。

grep、fgrep 和 egrep 命令对比

grep 命令一次只能搜索一个指定的模式； egrep 命令检索扩展的正则表达式（包括表达式组和可选项） fgrep 命令检索固定字符串，它不识别正则表达式，是快速搜索命令

这 组命令在搜索与定位文件中特定的主题方面非常有用。要搜索的模式可以被认为是一 些关键词，您可以用它们来搜索文件中包含的这些关键词。编写程序时，可以用它来寻 找某一个函数，或是相关的词组。grep 命令的搜索功能比 fgrep 强大，因为 grep 命令的搜索模式可以是正则表达式，而 fgrep 却不能
grep家族还包括 grep fgrep egrep。

  • fgrep 是fix grep，允许查找字符串而不是一个模式，运算速度快，适合于从大量数据中进行检索；
  • egrep 是扩展grep，支持基本及扩展的正则表达式，可用()及|等，但不支持q模式范围的应用及与之相对应的一些更加规范的模式。

find 查找文件/目录

find [-H] [-L] [-P] [-Olevel] [-D help|tree|search|stat|rates|opt|exec] [path…] [expression] find —help

  1. Usage: find [-H] [-L] [-P] [-Olevel] [-D help|tree|search|stat|rates|opt|exec] [path...] [expression]
  3. default path is the current directory; default expression is -print
  4. expression may consist of: operators, options, tests, and actions:
  6. operators (decreasing precedence; -and is implicit where no others are given):
  7.       ( EXPR )   ! EXPR   -not EXPR   EXPR1 -a EXPR2   EXPR1 -and EXPR2
  8.       EXPR1 -o EXPR2   EXPR1 -or EXPR2   EXPR1 , EXPR2
  10. positional options (always true): -daystart -follow -regextype
  12. normal options (always true, specified before other expressions):
  13.       -depth --help -maxdepth LEVELS -mindepth LEVELS -mount -noleaf
  14.       --version -xautofs -xdev -ignore_readdir_race -noignore_readdir_race
  16. tests (N can be +N or -N or N): -amin N -anewer FILE -atime N -cmin N
  17.       -cnewer FILE -ctime N -empty -false -fstype TYPE -gid N -group NAME
  18.       -ilname PATTERN -iname PATTERN -inum N -iwholename PATTERN -iregex PATTERN
  19.       -links N -lname PATTERN -mmin N -mtime N -name PATTERN -newer FILE
  20.       -nouser -nogroup -path PATTERN -perm [-/]MODE -regex PATTERN
  21.       -readable -writable -executable
  22.       -wholename PATTERN -size N[bcwkMG] -true -type [bcdpflsD] -uid N
  23.       -used N -user NAME -xtype [bcdpfls]
  24.       -context CONTEXT
  27. actions: -delete -print0 -printf FORMAT -fprintf FILE FORMAT -print 
  28.       -fprint0 FILE -fprint FILE -ls -fls FILE -prune -quit
  29.       -exec COMMAND ; -exec COMMAND {} + -ok COMMAND ;
  30.       -execdir COMMAND ; -execdir COMMAND {} + -okdir COMMAND ;
  32. Report (and track progress on fixing) bugs via the findutils bug-reporting
  33. page at http://savannah.gnu.org/ or, if you have no web access, by sending
  34. email to <bug-findutils@gnu.org>.

查找当前目录下某个文件

  1. #find [路径] -name []
  2. find ./ –name  [filename]

–iname 不区分大小写

  1. #find ./ –iname [filename]
  2. find ./ -type d -maxdepth 1 -iname "deep*"

-type 按类型进行查找，d查找目录，f查找文件

  1. find ./ -type d -maxdepth 1 -iname "deep*"
  2. find ./ -type f -maxdepth 3 -iname "deep*"

-user 按所有者查找文件/目录

  1. #find ./ –user  [username]
  2. find ./ –user root

-group 按用户组查找文件/目录

#find ./ –group  [groupname]
find ./ –group root

目录深度

#查找目录深度最大为1的目录
find /home/admin/app -maxdepth 1 -type d  -name "*test_*"

其他的查询

#查找1天前修改的文件
find ./ –type f –mtime 1 

#查找1小时内更改过的文件
find ./ –type f –cmin -60

#查找50MB到100MB的所有文件
find ./ –type  f –size +50MB –size -100MB

rm 递归删除目录下指定文件

# 语法：通过管道命令来操作，先find出主目录下想删除的文件，然后通过“xargs”这个构造参数列表并运行命令。
find /path -name "file-name" | xargs rm -f

# 用rm递归递归删除子目录下所有.o后缀文件：
find ./ -name  "*.pyc"  | xargs rm -f