• 实用程序
    • 文件和文件夹操作
    • 管道和重定向
    • 别名
    • 文本处理

    实用程序

    文件和文件夹操作

    1. 创建/删除空目录 - mkdir / rmdir。

      1. [root ~]# mkdir abc
      2. [root ~]# mkdir -p xyz/abc
      3. [root ~]# rmdir abc

    2. 创建/删除文件 - touch / rm。

      1. [root ~]# touch readme.txt
      2. [root ~]# touch error.txt
      3. [root ~]# rm error.txt
      4. rm: remove regular empty file ‘error.txt’? y
      5. [root ~]# rm -rf xyz
      • touch命令用于创建空白文件或修改文件时间。在Linux系统中一个文件有三种时间：
        • 更改内容的时间 - mtime。
        • 更改权限的时间 - ctime。
        • 最后访问时间 - atime。
      • rm的几个重要参数：
        • -i：交互式删除，每个删除项都会进行询问。
        • -r：删除目录并递归的删除目录中的文件和目录。
        • -f：强制删除，忽略不存在的文件，没有任何提示。

    3. 切换和查看当前工作目录 - cd / pwd。

      说明：cd命令后面可以跟相对路径（以当前路径作为参照）或绝对路径（以/开头）来切换到指定的目录，也可以用cd ..来返回上一级目录。请大家想一想，如果要返回到上上一级目录应该给cd命令加上什么样的参数呢？

    4. 查看目录内容 - ls。

      • -l：以长格式查看文件和目录。
      • -a：显示以点开头的文件和目录（隐藏文件）。
      • -R：遇到目录要进行递归展开（继续列出目录下面的文件和目录）。
      • -d：只列出目录，不列出其他内容。
      • -S / -t：按大小/时间排序。

    5. 查看文件内容 - cat / tac / head / tail / more / less / rev / od。

      1. [root ~]# wget http://www.sohu.com/ -O sohu.html
      2. --2018-06-20 18:42:34--  http://www.sohu.com/
      3. Resolving www.sohu.com (www.sohu.com)... 14.18.240.6
      4. Connecting to www.sohu.com (www.sohu.com)|14.18.240.6|:80... connected.
      5. HTTP request sent, awaiting response... 200 OK
      6. Length: 212527 (208K) [text/html]
      7. Saving to: ‘sohu.html’
      8. 100%[==================================================>] 212,527     --.-K/s   in 0.03s
      9. 2018-06-20 18:42:34 (7.48 MB/s) - ‘sohu.html’ saved [212527/212527]
      10. [root ~]# cat sohu.html
      11. ...
      12. [root ~]# head -10 sohu.html
      13. <!DOCTYPE html>
      14. <html>
      15. <head>
      16. <title>搜狐</title>
      17. <meta name="Keywords" content="搜狐,门户网站,新媒体,网络媒体,新闻,财经,体育,娱乐,时尚,汽车,房产,科技,图片,论坛,微博,博客,视频,电影,电视剧"/>
      18. <meta name="Description" content="搜狐网为用户提供24小时不间断的最新资讯，及搜索、邮件等网络服务。内容包括全球热点事件、突发新闻、时事评论、热播影视剧、体育赛事、行业动态、生活服务信息，以及论坛、博客、微博、我的搜狐等互动空间。" />
      19. <meta name="shenma-site-verification" content="1237e4d02a3d8d73e96cbd97b699e9c3_1504254750">
      20. <meta charset="utf-8"/>
      21. <meta http-equiv="X-UA-Compatible" content="IE=Edge,chrome=1"/>
      22. [root ~]# tail -2 sohu.html
      23. </body>
      24. </html>
      25. [root ~]# less sohu.html
      26. ...
      27. [root ~]# cat -n sohu.html | more
      28. ...

      说明：上面用到了一个名为wget的命令，它是一个网络下载器程序，可以从指定的URL下载资源。

    6. 拷贝/移动文件 - cp / mv。

      1. [root ~]# mkdir backup
      2. [root ~]# cp sohu.html backup/
      3. [root ~]# cd backup
      4. [root backup]# ls
      5. sohu.html
      6. [root backup]# mv sohu.html sohu_index.html
      7. [root backup]# ls
      8. sohu_index.html

    7. 文件重命名 - rename。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# rename .htm .html *.htm

    8. 查找文件和查找内容 - find / grep。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# find / -name "*.html"
      2. /root/sohu.html
      3. /root/backup/sohu_index.html
      4. [root@izwz97tbgo9lkabnat2lo8z ~]# find . -atime 7 -type f -print
      5. [root@izwz97tbgo9lkabnat2lo8z ~]# find . -type f -size +2k
      6. [root@izwz97tbgo9lkabnat2lo8z ~]# find . -type f -name "*.swp" -delete
      7. [root@iZwz97tbgo9lkabnat2lo8Z ~]# grep "<script>" sohu.html -n
      8. 20:<script>
      9. [root@iZwz97tbgo9lkabnat2lo8Z ~]# grep -E \<\/?script.*\> sohu.html -n
      10. 20:<script>
      11. 22:</script>
      12. 24:<script src="//statics.itc.cn/web/v3/static/js/es5-shim-08e41cfc3e.min.js"></script>
      13. 25:<script src="//statics.itc.cn/web/v3/static/js/es5-sham-1d5fa1124b.min.js"></script>
      14. 26:<script src="//statics.itc.cn/web/v3/static/js/html5shiv-21fc8c2ba6.js"></script>
      15. 29:<script type="text/javascript">
      16. 52:</script>
      17. ...

      说明：grep在搜索字符串时可以使用正则表达式，如果需要使用正则表达式可以用grep -E或者直接使用egrep。

    9. 创建链接和查看链接 - ln / readlink。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ls -l sohu.html
      2. -rw-r--r-- 1 root root 212131 Jun 20 19:15 sohu.html
      3. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ln /root/sohu.html /root/backup/sohu_backup
      4. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ls -l sohu.html
      5. -rw-r--r-- 2 root root 212131 Jun 20 19:15 sohu.html
      6. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ln /root/sohu.html /root/backup/sohu_backup2
      7. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ls -l sohu.html
      8. -rw-r--r-- 3 root root 212131 Jun 20 19:15 sohu.html
      9. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ln -s /etc/centos-release sysinfo
      10. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ls -l sysinfo
      11. lrwxrwxrwx 1 root root 19 Jun 20 19:21 sysinfo -> /etc/centos-release
      12. [root@iZwz97tbgo9lkabnat2lo8Z ~]# cat sysinfo
      13. CentOS Linux release 7.4.1708 (Core)
      14. [root@iZwz97tbgo9lkabnat2lo8Z ~]# cat /etc/centos-release
      15. CentOS Linux release 7.4.1708 (Core)

      说明：链接可以分为硬链接和软链接（符号链接）。硬链接可以认为是一个指向文件数据的指针，就像Python中对象的引用计数，每添加一个硬链接，文件的对应链接数就增加1，只有当文件的链接数为0时，文件所对应的存储空间才有可能被其他文件覆盖。我们平常删除文件时其实并没有删除硬盘上的数据，我们删除的只是一个指针，或者说是数据的一条使用记录，所以类似于“文件粉碎机”之类的软件在“粉碎”文件时除了删除文件指针，还会在文件对应的存储区域填入数据来保证文件无法再恢复。软链接类似于Windows系统下的快捷方式，当软链接链接的文件被删除时，软链接也就失效了。

    10. 压缩/解压缩和归档/解归档 - gzip / gunzip / xz。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# wget http://download.redis.io/releases/redis-4.0.10.tar.gz
      2. --2018-06-20 19:29:59--  http://download.redis.io/releases/redis-4.0.10.tar.gz
      3. Resolving download.redis.io (download.redis.io)... 109.74.203.151
      4. Connecting to download.redis.io (download.redis.io)|109.74.203.151|:80... connected.
      5. HTTP request sent, awaiting response... 200 OK
      6. Length: 1738465 (1.7M) [application/x-gzip]
      7. Saving to: ‘redis-4.0.10.tar.gz’
      8. 100%[==================================================>] 1,738,465   70.1KB/s   in 74s
      9. 2018-06-20 19:31:14 (22.9 KB/s) - ‘redis-4.0.10.tar.gz’ saved [1738465/1738465]
      10. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ls redis*
      11. redis-4.0.10.tar.gz
      12. [root@iZwz97tbgo9lkabnat2lo8Z ~]# gunzip redis-4.0.10.tar.gz
      13. [root@iZwz97tbgo9lkabnat2lo8Z ~]# ls redis*
      14. redis-4.0.10.tar

    11. 归档和解归档 - tar。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# tar -xvf redis-4.0.10.tar
      2. redis-4.0.10/
      3. redis-4.0.10/.gitignore
      4. redis-4.0.10/00-RELEASENOTES
      5. redis-4.0.10/BUGS
      6. redis-4.0.10/CONTRIBUTING
      7. redis-4.0.10/COPYING
      8. redis-4.0.10/INSTALL
      9. redis-4.0.10/MANIFESTO
      10. redis-4.0.10/Makefile
      11. redis-4.0.10/README.md
      12. redis-4.0.10/deps/
      13. redis-4.0.10/deps/Makefile
      14. redis-4.0.10/deps/README.md
      15. ...

      说明：归档（也称为创建归档）和解归档都使用tar命令，通常创建归档需要-cvf三个参数，其中c表示创建（create），v表示显示创建归档详情（verbose），f表示指定归档的文件（file）；解归档需要加上-xvf参数，其中x表示抽取（extract），其他两个参数跟创建归档相同。

    12. 将标准输入转成命令行参数 - xargs。

      下面的命令会将查找当前路径下的html文件，然后通过xargs将这些文件作为参数传给rm命令，实现查找并删除文件的操作。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# find . -type f -name "*.html" | xargs rm -f

      下面的命令将a.txt文件中的多行内容变成一行输出到b.txt文件中，其中<表示从a.txt中读取输入，>表示将命令的执行结果输出到b.txt中。

      1. [root@iZwz97tbgo9lkabnat2lo8Z ~]# xargs < a.txt > b.txt

      说明：这个命令就像上面演示的那样常在管道（实现进程间通信的一种方式）和重定向（重新指定输入输出的位置）操作中用到，后面的内容中会讲到管道操作和输入输出重定向操作。

    13. 显示文件或目录 - basename / dirname。

    14. 其他相关工具。

      • sort - 对内容排序
      • uniq - 去掉相邻重复内容
      • tr - 替换指定内容为新内容
      • cut / paste - 剪切/黏贴内容
      • split - 拆分文件
      • file - 判断文件类型
      • wc - 统计文件行数、单词数、字节数
      • iconv - 编码转换
      1. [root ~]# cat foo.txt
      2. grape
      3. apple
      4. pitaya
      5. [root ~]# cat bar.txt
      6. 100
      7. 200
      8. 300
      9. 400
      10. [root ~]# paste foo.txt bar.txt
      11. grape   100
      12. apple   200
      13. pitaya  300
      14.        400
      15. [root ~]# paste foo.txt bar.txt > hello.txt
      16. [root ~]# cut -b 4-8 hello.txt
      17. pe      10
      18. le      20
      19. aya     3
      20. 0
      21. [root ~]# cat hello.txt | tr '\t' ','
      22. grape,100
      23. apple,200
      24. pitaya,300
      25. ,400
      26. [root ~]# split -l 100 sohu.html hello
      27. [root ~]# wget https://www.baidu.com/img/bd_logo1.png
      28. [root ~]# file bd_logo1.png
      29. bd_logo1.png: PNG image data, 540 x 258, 8-bit colormap, non-interlaced
      30. [root ~]# wc sohu.html
      31.  2979   6355 212527 sohu.html
      32. [root ~]# wc -l sohu.html
      33. 2979 sohu.html
      34. [root ~]# wget http://www.qq.com -O qq.html
      35. [root ~]# iconv -f gb2312 -t utf-8 qq.html

    管道和重定向

    1. 管道的使用 - |。

      例子：查找当前目录下文件个数。

      1. [root ~]# find ./ | wc -l
      2. 6152

      例子：列出当前路径下的文件和文件夹，给每一项加一个编号。

      1. [root ~]# ls | cat -n
      2.      1  dump.rdb
      3.      2  mongodb-3.6.5
      4.      3  Python-3.6.5
      5.      4  redis-3.2.11
      6.      5  redis.conf

      例子：查找record.log中包含AAA，但不包含BBB的记录的总数

      1. [root ~]# cat record.log | grep AAA | grep -v BBB | wc -l

    2. 输出重定向和错误重定向 - > / >> / 2>。

      1. [root ~]# cat readme.txt
      2. banana
      3. apple
      4. grape
      5. apple
      6. grape
      7. watermelon
      8. pear
      9. pitaya
      10. [root ~]# cat readme.txt | sort | uniq > result.txt
      11. [root ~]# cat result.txt
      12. apple
      13. banana
      14. grape
      15. pear
      16. pitaya
      17. watermelon

    3. 输入重定向 - \<。

      1. [root ~]# echo 'hello, world!' > hello.txt
      2. [root ~]# wall < hello.txt
      3. [root ~]#
      4. Broadcast message from root (Wed Jun 20 19:43:05 2018):
      5. hello, world!
      6. [root ~]# echo 'I will show you some code.' >> hello.txt
      7. [root ~]# wall < hello.txt
      8. [root ~]#
      9. Broadcast message from root (Wed Jun 20 19:43:55 2018):
      10. hello, world!
      11. I will show you some code.

    4. 多重定向 - tee。

      下面的命令除了在终端显示命令ls的结果之外，还会追加输出到ls.txt文件中。

      1. [root ~]# ls | tee -a ls.txt

    别名

    1. alias

      1. [root ~]# alias ll='ls -l'
      2. [root ~]# alias frm='rm -rf'
      3. [root ~]# ll
      4. ...
      5. drwxr-xr-x  2 root       root   4096 Jun 20 12:52 abc
      6. ...
      7. [root ~]# frm abc

    2. unalias

      1. [root ~]# unalias frm
      2. [root ~]# frm sohu.html
      3. -bash: frm: command not found

    文本处理

    1. 字符流编辑器 - sed。

      sed是操作、过滤和转换文本内容的工具。假设有一个名为fruit.txt的文件，内容如下所示。

      1. [root ~]# cat -n fruit.txt 
      2.      1  banana
      3.      2  grape
      4.      3  apple
      5.      4  watermelon
      6.      5  orange

      接下来，我们在第2行后面添加一个pitaya。

      1. [root ~]# sed '2a pitaya' fruit.txt 
      2. banana
      3. grape
      4. pitaya
      5. apple
      6. watermelon
      7. orange

      注意：刚才的命令和之前我们讲过的很多命令一样并没有改变fruit.txt文件，而是将添加了新行的内容输出到终端中，如果想保存到fruit.txt中，可以使用输出重定向操作。

      在第2行前面插入一个waxberry。

      1. [root ~]# sed '2i waxberry' fruit.txt
      2. banana
      3. waxberry
      4. grape
      5. apple
      6. watermelon
      7. orange

      删除第3行。

      1. [root ~]# sed '3d' fruit.txt
      2. banana
      3. grape
      4. watermelon
      5. orange

      删除第2行到第4行。

      1. [root ~]# sed '2,4d' fruit.txt
      2. banana
      3. orange

      将文本中的字符a替换为@。

      1. [root ~]# sed 's#a#@#' fruit.txt 
      2. b@nana
      3. gr@pe
      4. @pple
      5. w@termelon
      6. or@nge

      将文本中的字符a替换为@，使用全局模式。

      1. [root ~]# sed 's#a#@#g' fruit.txt 
      2. b@n@n@
      3. gr@pe
      4. @pple
      5. w@termelon
      6. or@nge

    2. 模式匹配和处理语言 - awk。

      awk是一种编程语言，也是Linux系统中处理文本最为强大的工具，它的作者之一和现在的维护者就是之前提到过的Brian Kernighan（ken和dmr最亲密的伙伴）。通过该命令可以从文本中提取出指定的列、用正则表达式从文本中取出我们想要的内容、显示指定的行以及进行统计和运算，总之它非常强大。

      假设有一个名为fruit2.txt的文件，内容如下所示。

      1. [root ~]# cat fruit2.txt 
      2. 1       banana      120
      3. 2       grape       500
      4. 3       apple       1230
      5. 4       watermelon  80
      6. 5       orange      400

      显示文件的第3行。

      1. [root ~]# awk 'NR==3' fruit2.txt 
      2. 3       apple       1230

      显示文件的第2列。

      1. [root ~]# awk '{print $2}' fruit2.txt 
      2. banana
      3. grape
      4. apple
      5. watermelon
      6. orange

      显示文件的最后一列。

      1. [root ~]# awk '{print $NF}' fruit2.txt 
      2. 120
      3. 500
      4. 1230
      5. 80
      6. 400

      输出末尾数字大于等于300的行。

      1. [root ~]# awk '{if($3 >= 300) {print $0}}' fruit2.txt 
      2. 2       grape       500
      3. 3       apple       1230
      4. 5       orange      400

      上面展示的只是awk命令的冰山一角，更多的内容留给读者自己在实践中去探索。