Linux云计算集群架构师->第十一章 重定向和文件的查找

青衣

第十一章 重定向和文件的查找

　　(上课时间2021-07-01，笔记整理时间2021-07-04)
　　本节所讲内容：
　　11.1 文件描述符 0、1、2
　　11.2 重定向的含义-管道的使用-tee 命令
　　11.3 which-whereis-locate-grep-find 查找命令
　　11.4 命令判断
　　LINUX 下一切皆文件
　　文件又可分为：普通文件、目录文件、链接文件、设备文件
　　LINUX 系统使用文件来描述各种硬件设备资源，如：/dev/sda /dev/sdb /dev/sr0

11.1 文件描述符

　　用户通过操作系统处理信息的过程中,使用的交互设备文件（键盘，鼠标，显示器）
　　| Number | Channel name | Description    | Default connection | Usage             |
　　| ------ | ------------ | -------------- | ------------------ | ----------------- |
　　| 0      | stdin        | Standard input | keyboard           | read only         |
　　| 1      | stdout       | Standard input | Terminal           | Write only        |
　　| 2      | stderr       | Standard error | Terminal           | Write only        |
　　| 3+     | filename     | Other files    | none               | read and/or Write |

11.1.1 输入输出标准说明

　　STDIN 标准输入 默认的设备是键盘 文件编号为：0
　　STDOUT 标准输出 默认的设备是显示器 文件编号为：1 ，也可以重定向到文件
　　STDERR 标准错误 默认的设备是显示器 文件编号为：2 ，也可以重定向到文件


　　查看一个进程打开了哪些文件？
　　语法： ll /proc/进程 ID/fd

[root@Centos83 ~]# ps -aux | grep vim
root     18728  0.1  0.8  49588  8484 pts/1  S+   19:37   0:00 vim /etc/shadow
root     18738  0.0  0.1  12344  1072 pts/0  S+   19:37   0:00 grep --color=auto vim
[root@Centos83 ~]# ll /proc/18728/fd      #查看打开的文件
总用量 0
lrwx------ 1 root root 64 7月   3 19:37 0 -> /dev/pts/1        #0 文件描述符
lrwx------ 1 root root 64 7月   3 19:37 1 -> /dev/pts/1        #1 文件描述符
lrwx------ 1 root root 64 7月   3 19:37 2 -> /dev/pts/1        #2 文件描述符
lr-x------ 1 root root 64 7月   3 19:37 3 -> /var/lib/sss/mc/passwd
lrwx------ 1 root root 64 7月   3 19:37 4 -> 'socket:[197579]'

　　注： 这些 0,1,2,4 就是文件的描述符。一个进程启动时,都会打开 3 个文件:标准输入、标准输出和标准出错处理。
　　这 3 个文件分别对应文件描述符为 0、1 和 2 也就是宏替换 STDIN_FILENO、STDOUT_FILENO 和 STDERR_FILENO。
　　/proc/进程 ID/fd #这个 fd 目录下，专门存文件描述符
　　注：对文件描述符的操作就是对文件本身的操作。 我可以直接通过操作文件描述来修改文件。
　　例 2：查看和临时设置一个进程最多可以打开几个文件，即：一个进程可以打开的文件描述符限制

[root@Centos83 ~]# ulimit -n      # 查看一个进程最多可以同时打开的文件数
1024
[root@Centos83 ~]# ulimit -n 2048    # 修改一个进程最多可以同时打开的文件数为 2048
[root@Centos83 ~]# ulimit -n
2048

11.2 重定向的含义-管道的使用-tee 命令

11.2.1 输出重定向

　　定义：将命令的正常输出结果保存到指定的文件中,而不是直接显示在显示器的屏幕上重定向输出使用”>” “>>” 操作符号
　　语法： ＞ 文件名 #表示将标准输出的内容，写到后面的文件中，如果此文件名已经存在，将会覆盖原文件中的内容
　　＞＞ 文件名 #表示将标准输出的内容，追加到后面的文件中。若重定向的输出的文件不存在，则会新建该文件
　　查看当前主机的 CPU 的类型保存到 cpu.txt 文件中(而不是直接显示到屏幕上)

[root@Centos83 ~]# cat /proc/cpuinfo > cpu.txt    #将内核的版本信息追加到 cpu.txt
[root@Centos83 ~]# uname -a >> cpu.txt    #将计算机名和操作系统的信息追加到cpu.txt
[root@Centos83 ~]# cat cpu.txt
[root@Centos83 ~]# uname -a > cpu.txt    #清空cpu.txt 将uname 信息写入到cpu.txt

11.2.2 输入重定向

　　将命令中接收输入的途径由默认的键盘改为其他文件.而不是等待从键盘输入

[root@Centos83 ~]# grep root /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@Centos83 ~]# grep root < /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

11.2.3 EOF

　　EOF 本意是 End Of File，表明到了文件末尾。”EOF“通常与”&2 把标准输出重定向到标准错误
　　2>&1 把标准错误重定向到标准输出，如图:


　　例 2：把正确和错误的消息输入到相同的位置

[root@Centos83 ~]# ls /tmp abcd >1.txt 2>&1
[root@Centos83 ~]# ls /tmp abcd 2>1.txt 2>&1
[root@Centos83 ~]# cat /etc/passwd abc > /dev/null 2>&1    #将标准输出和错误输出全部重定向到/dev/null 中,也就是将产生的所有信息丢弃.

11.2.7 管道 | 的使用

　　语法：command-a | command-b | command-c | ......


　　上图可以简单理解为：管道符左边命令的结果作为管道符右边命令的标准输入
　　注意：
　　1、管道命令只处理前一个命令正确输出，不处理错误输出
　　2、管道右边的命令，必须能够接收标准输入的数据流命令才行
　　3、管道符可以把两条命令连起来，它可以链接多个命令使用

11.2.8 tee 命令

　　功能：读取标准输入的数据，并将其内容输出成文件。
语法：tee [-a][--help][--version][文件...]　　参数：
-a, --append 内容追加到给定的文件而非覆盖　　--help 在线帮助
tee 指令会从标准输入设备读取数据，将其内容输出到标准输出设备，同时保存成文件

[root@Centos83 ~]# df -h | tee disk.log      # 将磁盘使用的信息写入文件
[root@Centos83 ~]# df -h | tee -a disk.log    # 将文件系统使用的信息追加到文件

11.3 文件查找常用命令

11.3.2 which-whereis-locate-grep find 命令使用

　　查找文件一般有以下几个命令：
which 查看可执行文件的位置　　whereis 查看可执行文件的位置及相关文件
locate 配合数据库缓存，快速查看文件位置　　grep 过滤匹配，它是一个文件搜索工具
find 查找相关文件

[root@Centos83 ~]# which cd/usr/bin/cd
[root@Centos83 ~]# whereis cd
cd: /usr/bin/cd /usr/share/man/man1/cd.1.gz /usr/share/man/man1p/cd.1p.gz
[root@Centos83 ~]# whereis ls
ls: /usr/bin/ls /usr/share/man/man1/ls.1.gz /usr/share/man/man1p/ls.1p.gz

　　locate 命令和 find -name 功能差不多，是它的另外一种写法，但是这个要比 find 搜索快的多，因为 find 命令查找的是具体目录文件，而 locate 它搜索的是一个数据库
　　/var/lib/mlocate/mlocate.db，这个数据库中存有本地所有的文件信息；这个数据库是 Linux 自动创建并每天自动更新维护。相关的配置信息在/etc/updatedb.conf，查看定时任务信息在/etc/cron.daily/mlocate

[root@Centos83 ~]# yum -y install mlocate
[root@Centos83 ~]# touch /opt/xuegod.txt
[root@Centos83 ~]# locate mygod.txt    #发现找不到文件[root@Centos83 ~]# updatedb        #如果对当天文件查找，需要手动更新数据库updatedb
[root@Centos83 ~]# locate mygod      /opt/mygod.txt/opt/mygod_dump1/var/test/mygod/var/test/mygod/abc

　　grep 查找使用
作用：过滤,它能够使用正则表达式来搜索文本，并把结果打印出来　　参数：
-v 取反　　-i 忽略大小写
^# 以#开头　　#$ 以#结尾
^$ 空行　　-n 对过滤的内容加上行号
| 或者的意思

[root@Centos83 ~]# ps -aux | grep sshd | grep -v greproot 
1084  0.0  0.2  94436  2140 ?    Ss   7月02   0:00 /usr/
[root@Centos83 ~]# cat /etc/passwd | grep ^a          #以 a 开头
[root@Centos83 ~]# grep bash$ /etc/passwd            #以 bash 结尾
[root@Centos83 ~]# grep "nologin\|root" /etc/passwd | wc -l    #\ 表示转义符46
[root@Centos83 ~]# egrep "nologin|root" /etc/passwd | wc -l    #查看包括 nologin 或 root 的行46

egrep 是 grep 加强版本
11.3.3 find 命令使用

　　格式：find pathname -options [-print]
　　命令字 路径名称 选项 输出
　　参数：
　　pathname: find 命令所查找的目录路径，不输入代表当前目录例如用 . 来表示当前目录，用 / 来表示系统根目录。
　　find 命令选项:
　　-name 按照文件名查找文件。 “名称”
　　-perm 按照文件权限来查找文件。666 777 等
　　-user 按照文件属主来查找文件
　　-group 按照文件所属的组来查找文件
　　-mtime -n / +n 按照文件的更改时间来查找文件，

• n 表示文件更改时间距现在 n 天以内
  

• n表示文件更改时间距现在 n 天以前
  

• -type 查找某一类型的文件
  

• b - 块设备文件
  

• d - 目录
  

• c - 字符设备文件
  

• p - 管道文件
  

• l- 符号链接文件
  

• f - 普通文件
  

　　-size n 查找符合指定的文件大小的文件
　　-exec 对匹配的文件执行该参数所给出的其他 linux 命令， 相应命令的形式为' 命令 {} \;，注意{ }和 \；之间的空格，{}代表查到的内容

[root@Centos83 ~]# find . -name "*.txt"    #查看当前目录下所有的 TXT 格式的文件

　　2、按照更改时间或访问时间等查找文件
　　如果希望按照更改时间来查找文件，可以使用 mtime,atime 或 ctime 选项
　　mtime: 文件最后一次修改的时间
　　atime: 最后一次访问时间
　　ctime: 文件的最后一次变化时间，也就是修改时间

[root@Centos83 ~]# find /root/ -mtime -1  #查找更改时间在 1 天以内，被***修改的文件

　　对查找内容执行相应命令
　　-exec 这个选项参数后面可以跟自定义的 SHELL 命令，格式如下：

[root@Centos83 ~]# find /root -name "*.txt" -exec cp {} /opt/ \;  
#把查找到的文件复制到一个指定的目录

xargs 和 find 命令结合 复制文件 -i 表示 find 传递给 xargs 的结果 由{}来代替　　查找多个类型文件
　　比较符的使用：
　　-a and 并且
　　-o or 或者
　　+超过
　　-低于
按权限查找：-perm

[root@Centos83 ~]# find /bin/ -perm 755     # 等于 0755 权限的文件或目录
[root@Centos83 ~]# find /bin/ -perm -644   # -表示至少，至少有 644 权限的文件或目录
[root@Centos83 ~]# find /bin/ -perm -777   #至少有 777 权限
[root@Centos83 ~]# find / -type f -perm -777 #把系统中权限不低于 777 的危险文件查找出来

　　查找的目录深度：
　　-maxdepth 1 #只查找目录第一层的文件和目录
　　查找/bin 目录下权限等于 644 的文件

[root@Centos83 ~]# find /bin/ -maxdepth 1 -perm 755   #/bin 后面要有/
[root@Centos83 ~]# find /bin -maxdepth 1 -perm 755     #没加/无法满足我们的需求

11.4 命令判断

11.4.1 常用的三个特殊符号

　　1、 ；分号 不考虑指令的相关性，连续执行, 分号； 不保证命令全部执行成功的

[root@Centos83 ~]# ofc ; echo aa

　　&& 逻辑与====》它是只有在前面的命令执行成功后，后面的命令才会去执行
　　如果/opt 目录存在，则在/opt 下面新建一个文件test.txt

[root@Centos83 ~]# cd /opt/ && touch /opt/test.txt && ls

　　2、 || 逻辑或===》如果前面的命令执行成功，后面的命令就不去执行了；或者如果前面的执行不成功，才会去执行后面的命令

[root@Centos83 mnt]# ls /etc/passwd || cd /etc/etc/passwd

　　总结：
　　命令情况 说 明
　　命令 1 && 命令 2 如果命令 1 执行，且执行正确($? = 0)，然后执行命令 2
　　如果命令 1 执行完成，但是执行错误（$? ≠0），那么后面的命令是不会执行的
　　命令 1 || 命令 2如果命令 1 执行，且执行正确($? = 0)，那么命令 2 不执行
　　如果命令 1 执行，但执行错误($? ≠ 0)，那么命令 2 执行
　　运算顺序：LINUX 执行命令，是从左到右一个一个执行,从上到下执行
总结：　　11.1 文件描述符 0、1、2
　　11.2 重定向的含义-管道的使用-tee 命令
　　11.3 which-whereis-locate-grep-find 查找命令
11.4 命令判断