Shell高级命令

Shell脚本编程学习5--管道命令（pipe）
分类： Linux/Unix 2013-05-27 16:22 84人阅读 评论(0) 收藏 举报
一、管道命令的介绍

    1、管道命令“|”仅能处理经由前面一个命令传来的正确信息，也就是standard output的信息，对于standard error并没有直接处理能力。

    2、管道命令示意图：

          command1 | command2 | command3

          即：command1正确执行的数据传递给command2，command2正确执行的数据传递给command3。

    3、在每个管道后面接的第一个数据必须是命令，而且这个命令必须能够接收standard input的数据才行，这样的命令才是管道命令。

二、选取命令：cut、grep

    将一段数据以行为单位进行分析，取出我们所想要的，或者经分析关键字，取出我们所想要的那一行。

    1、cut

     （1）作用：在一行信息中取出某部分我们想要的。

     （2）语法：

               cut   -d  '分隔符'  -f  fields   用于分隔字符

               cut   -c   字符范围                用于排列整齐的信息

     （3）参数：

              -d：后面接分隔符，与-f一起使用

               -f：依据-d的分隔符将一段信息切割成数段，用-f取出第几段的意思

              -c：以字符为单位取出固定字符区间。

     （4）例子：



上面就是取出以：为分隔符的第一段数据。

    

上面是取出以：为分隔符的第一段和第三段数据。



以上例子，说明取出每一行12个字符以后的数据。

总结：

       cut的主要用途在于将同一行里面的数据进行分解，最常用的使用在分析一些数据或文字数据的时候。以某些字符当作切割的参数，然后来将数据加以切割，以取得我们所需要的数据。

    2、grep

    （1）作用：分析一行信息，若当中有我们所需要的信息，就将该行拿出来。

    （2）语法：grep [-acinv] [--color=auto] '查找字符串'  filename

    （3）参数：

                       -a：将binary文件以text文件的方式查找数据

                       -c：计算找到‘查找字符串’的次数

                        -i：忽略大小写的不同

                       -n：顺便输出行号

                        -v：反向选择，即显示出没有‘查找字符串’内容的一行

     --color=auto：可以将找到的关键字部分加上颜色显示

                       -A：后面可加数字，为after的意思，除了列出该行外，后续的n行也列出来

                       -B：后面可加数字，为befer的意思，除了列出该行外，前面的n行也列出来

    （4）例子：





三、排序命令：sort、wc、uniq

    1、sort：

     （1）作用：排序，可以按照不同的数据类型排序

     （2）语法：sort [-fbMnrtuk] [file or stdin]

     （3）参数：

                     -f：忽略大小写

                    -b：忽略最前面的空格符部分

                   -M：以月份的名字来排序，英文月份

                    -n：使用纯数字排序（默认是一文字类型来排序的）

                     -r：反向排序

                     -t：分隔符，默认是用TAB键来分割的

                    -u：uniq相同的数据中，仅出现一行代表

                    -k：以那个区间来进行排序

     （4）例子：

              默认以文字类型来排序：


             以：来分隔，以第三列来排序：


             以：来分隔，以第三列的数字排序：



    2、wc：
     （1）作用：统计一个文件里有多少字、多少行、多少字符

     （2）语法：wc [-lwm]

     （3）参数：

                     -l：仅列出行

                   -w：仅列出多少字（英文单字）

                  -m：多少字符

     （4）例子：  


使用last可以输出登录者，但是last最后两行并非帐号内容


那么用下面的一行命令即可取得这个月登录系统的总人次


    3、uniq：

     （1）作用：将重复的数据仅列出一个显示

     （2）语法：uniq  [-ic]

     （3）参数：

                     -i：忽略大小写字符的不同

                    -c：进行计数

     （4）例子：


四、双向重定向：tee

   1、作用：可以同时将数据流送与文件与屏幕

   2、语法：tee [-a] file

   3、参数：

             -a：以累加的方式，将数据加入file中

   4、例子：   


五、字符转换命令：tr、col、join、paste、expand

    1、tr：

    （1）作用：删除一段信息当中的文字，或者进行文字信息的替换。

    （2）语法：tr  [-ds]  SET1 ……

    （3）参数：

                     -d：删除信息中的SET1这个字符串

                     -s：替换掉重复的字符

    （4）例子：

      将last输出的信息中所有的小写字符变成大写字符


      将/etc/passwd输出信息中的冒号删除


    2、col：

    （1）作用：经常用于man page转存为纯文本文件以方便查阅的功能

    （2）语法：col  [-xb]

    （3）参数：

                   -x：将tab键转换成对等的空格键

                  -b：在文字内部有反斜杠时，仅保留反斜杠最后接的那个字符

    （4）例子：


^I 就是tab，替换后：


    3、join：

    （1）作用：将两个文件当中有相同数据的那一行加在一起

    （2）语法：join  [-ti12]  file1 file2

    （3）参数：

                    -t：默认以空格符分隔数据，并且对比第一个字段的数据，如果两个文件相同，则将两条数据连成一行，且第一个字段放在第一个

                    -i：忽略大小写

                    -1：代表第一个文件要用哪个字段来分析的意思

                   -2：代表第二个文件要用哪个字段来分析的意思

    （4）例子：


注意：在使用join之前，你所需要处理的文件应该要事先经过排序处理的。

    4、paste：

   （1）作用：直接将相同行的数据贴在一起，中间以tab键隔开

   （2）语法：paste [-d] file1 file2

   （3）参数：

                 -d：后面可接分隔符，默认是tab键来分隔的

                  - ：如果file部分习写成- ，表示来自standard input的数据意思。

   （4）例子：

    5、expand：

   （1）作用：将tab键转成空格键

   （2）语法：expand  [-t]  file

   （3）参数：

                   -t：后面可以接数字，一般来说一个tab键可以用8个空格键替换

   （4）例子：

六、切割命令：split

    1、作用：将一个大文件依据文件大小或行数来切割成为小文件，快速又有效

    2、语法：split [-bl] file PREFIX

    3、参数：

               -b：后面可以接切割成的文件大小，可以加单位，如：b、k、 m等

                -l：以行数来进行切割

    PREFIX：代表前导符，可以作为切割文件的前导文字。

    4、例子：

七、参数代换：xargs

    1、作用：产生某个命令的参数的意思，xargs可以读入stdin的数据，并且以空格符或断行字符进行分辨，将stdin的数据分隔成为arguments

    2、语法：xargs [-0epn] command

    3、参数：

               -0：如果输入的stdin有特殊字符，例如` 、\空格等，这个参数可以将它还原成一般字符。

               -e：EOF

               -p：在执行每个命令时都会询问用户

               -n：后面接次数，每次command命令执行时，要使用几个参数的意思。

              当xargs后面没有接任何的命令时，默认是echo来进行输出

    4、例子：

        

八、关于减号-的用途






     （1）作用：

     （2）语法：

     （3）参数：

     （4）例子：

     （1）作用：

     （2）语法：

     （3）参数：

     （4）例子：