第十七章:Linux之大数据定制篇 大数据定制篇-Shell编程
- 1、为什么要学习Shell编程
- 2、Shell是什么
- 3、Shell脚本的执行方式
- 4、Shell的变量
- 5、设置环境变量
- 6、位置参数变量
- 7、预定义变量
- 8、运算符
- 9、条件判断
- 10、流程控制
- 11、read读取控制台输入
- 12、函数
- 13、Shell编程综合案例
1、为什么要学习Shell编程
- Linux运维工程师在进行服务器集群管理时,需要编写Shell程序来进行服务器管理。
- 对于JavaEE和Python程序员来说,工作的需要,你的老大会要求你编写一些Shell脚本进行程序或者是服务器的维护,比如编写一个定时备份数据库的脚本。
- 对于大数据程序员来说,需要编写Shell程序来管理集群。
2、Shell是什么
Shell是一个命令行解释器,它为用户提供了一个向Linux内核发送请求以便运行程序的界面系统级程序,用户可以用Shell来启动、挂起、停止甚至是编写一些程序。

3、Shell脚本的执行方式
1) 脚本以
2) 脚本需要有可执行权限
- 编写第一个Shell脚本
• 需求说明
创建一个Shell脚本,输出hello world!

脚本的常用执行方式
• 方式1(输入脚本的绝对路径或相对路径)
1)首先要赋予helloworld.sh 脚本的+x权限
2)执行脚本

• 方式2(sh+脚本)
说明:不用赋予脚本+x权限,直接执行即可。

4、Shell的变量
Shell的变量的介绍
- Linux Shell中的变量分为,系统变量和用户自定义变量。
- 系统变量:
$HOME、$PWD、$SHELL、$USER等等
比如: echo $HOME 等等

3. 显示当前shell中所有变量:set\
Shell变量的定义
- 定义变量:变量=值
- 撤销变量:unset 变量
- 声明静态变量:readonly变量,注意:不能unset
- 快速入门
案例1:定义变量A
案例2:撤销变量A

案例3:声明静态的变量B=2,不能unset

案例4:可把变量提升为全局环境变量,可供其他shell程序使用
定义变量的规则
- 变量名称可以由字母、数字和下划线组成,但是不能以数字开头。
- 等号两侧不能有空格
- 变量名称一般习惯为大写
将命令的返回值赋给变量
- A=
ls -la
反引号,运行里面的命令,并把结果返回给变量A
- A=$(ls -la) 等价于反引号

5、设置环境变量
基本语法
- export 变量名=变量值 (功能描述:将shell变量输出为环境变量)
- source 配置文件 (功能描述:让修改后的配置信息立即生效)
- echo $变量名 (功能描述:查询环境变量的值)

快速入门
- 在/etc/profile文件中定义TOMCAT_HOME环境变量

- 查看环境变量TOMCAT_HOME的值
echo $TOMCAT_HOME
- 在另外一个shell程序中使用 TOMCAT_HOME

注意:在输出JAVA_HOME 环境变量前,需要让其生效
source /etc/profile
6、位置参数变量
介绍
当我们执行一个shell脚本时,如果希望获取到命令行的参数信息,就可以使用到位置参数变量
比如 : ./myshell.sh 100 200 , 这个就是一个执行shell的命令行,可以在myshell 脚本中获取到参数信息
基本语法
$n (功能描述:n为数字,$0代表命令本身,$1-$9代表第一到第九个参数,十以上的参数需要用大括号包含,如${10})
$* (功能描述:这个变量代表命令行中所有的参数,$*把所有的参数看成一个整体)
$@(功能描述:这个变量也代表命令行中所有的参数,不过$@把每个参数区分对待)
$
应用实例
案例:编写一个shell脚本 positionPara.sh , 在脚本中获取到命令行的各个参数信息。

7、预定义变量
基本介绍
就是shell设计者事先已经定义好的变量,可以直接在shell脚本中使用
基本语法
$$ (功能描述:当前进程的进程号(PID))
$! (功能描述:后台运行的最后一个进程的进程号(PID))
$? (功能描述:最后一次执行的命令的返回状态。如果这个变量的值为0,证明上一个命令正确执行;如果这个变量的值为非0(具体是哪个数,由命令自己来决定),则证明上一个命令执行不正确了。)
应用实例
在一个shell脚本中简单使用一下预定义变量

8、运算符
基本介绍
学习如何在shell中进行各种运算操作。
基本语法
1) “$((运算式))”或“$[运算式]”
2) expr m + n
注意expr运算符间要有空格
3) expr m - n
4) expr \*, /, % 乘,除,取余
应用实例
案例1:计算(2+3)X4的值
① $((运算式))

② $[运算式]

③ expr

案例2:请求出命令行的两个参数[整数]的和

9、条件判断
判断语句
- 基本语法
[ condition ](注意condition前后要有空格)
#非空返回true,可使用$?验证(0为true,>1为false)
- 应用实例
[ shell ] 返回true
[] 返回false
[condition] && echo OK || echo notok 条件满足,执行后面的语句
- 常用判断条件
- 两个整数的比较
= 字符串比较
-lt 小于
-le 小于等于
-eq 等于
-gt 大于
-ge 大于等于
-ne 不等于
- 按照文件权限进行判断 -r 有读的权限
-w 有写的权限
-x 有执行的权限
- 按照文件类型进行判断 -f 文件存在并且是一个常规的文件
-e 文件存在
-d 文件存在并是一个目录
- 应用实例
案例1:“ok"是否等于"ok”

案例2:23是否大于等于22

案例3:/root/shell/aaa.txt 目录中的文件是否存在

10、流程控制
if 判断
if [ 条件判断式 ];then
程序
fi
或者
if [ 条件判断式 ]
then
程序
elif [条件判断式]
then
程序
fi
注意事项:
1)[ 条件判断式 ],中括号和条件判断式之间必须有空格
2) 推荐使用第二种方式
• 应用实例
案例:请编写一个shell程序,如果输入的参数,大于等于60,则输出 “及格了”,如果小于60,则输出 “不及格”

case语句
case $变量名 in
"值1")
如果变量的值等于值1,则执行程序1
;;
"值2")
如果变量的值等于值2,则执行程序2
;;
…省略其他分支…
*)
如果变量的值都不是以上的值,则执行此程序
;;
esac
• 应用实例
案例1 :当命令行参数是 1 时,输出 “周一”, 是2 时,就输出"周二", 其它情况输出 “other”

for循环
for 变量 in 值1 值2 值3…
do
程序
done
- 应用实例
案例1 :打印命令行输入的参数

- 基本语法2
for (( 初始值;循环控制条件;变量变化 ))
do
程序
done
- 应用实例
案例1 :从1加到100的值输出显示 [这里可以看出$* 和 $@ 的区别]

while循环
- 基本语法1
while [ 条件判断式 ]
do
程序
done
• 应用实例
案例1 :从命令行输入一个数n,统计从 1+…+ n 的值是多少?

11、read读取控制台输入
- 基本语法
read(选项)(参数) 选项:
-p:指定读取值时的提示符;
-t:指定读取值时等待的时间(秒),如果没有在指定的时间内输入,就不再等待了。。
参数
变量:指定读取值的变量名
应用实例
案例1:读取控制台输入一个num值
案例2:读取控制台输入一个num值,在10秒内输入。

12、函数
函数介绍
shell编程和其它编程语言一样,有系统函数,也可以自定义函数。系统函数中,我们这里就介绍两个。
系统函数
- basename
基本语法
功能:返回完整路径最后 / 的部分,常用于获取文件名
basename [pathname] [suffix]
basename [string] [suffix] (功能描述:basename命令会删掉所有的前缀包括最后一个(‘/’)字符,然后将字符串显示出来。
选项:
suffix为后缀,如果suffix被指定了,basename会将pathname或string中的suffix去掉。
- 应用实例
案例1:请返回 /home/aaa/test.txt 的 “test.txt” 部分

- dirname基本语法
功能:返回完整路径最后 / 的前面的部分,常用于返回路径部分
dirname 文件绝对路径 (功能描述:从给定的包含绝对路径的文件名中去除文件名(非目录的部分),
然后返回剩下的路径(目录的部分))
- 应用实例
案例1:请返回 /home/aaa/test.txt 的 /home/aaa

自定义函数
- 基本语法
[ function ] funname[()]
{
Action;
[return int;]
}调用直接写函数名:funname [值]
- 应用实例
案例1:计算输入两个参数的和, getSum

13、Shell编程综合案例
需求分析
- 每天凌晨 2:10 备份 数据库 atguiguDB 到 /data/backup/db
- 备份开始和备份结束能够给出相应的提示信息
- 备份后的文件要求以备份时间为文件名,并打包成 .tar.gz 的形式,比如:
2018-03-12_230201.tar.gz
- 在备份的同时,检查是否有10天前备份的数据库文件,如果有就将其删除。


代码实现:

以上就是关于LinuxShell编程的介绍,如果有不当之处或者遇到什么问题,欢迎在文章下面留言~
如果你想了解更多关于Linux的内容,可以查看:Linux学习目录(超详细)