Linux运维必回的5个脚本示例

1. 自动备份脚本

自动备份脚本是一种非常常见的shell脚本，它可以帮助运维工程师自动备份重要的数据和配置文件。这个脚本通常会定期运行，比如每天或每周运行一次。它会将需要备份的文件打包成一个压缩文件，并将其保存到指定的目录下。这个脚本可以帮助运维工程师避免手动备份时忘记备份某些文件的情况，同时也可以保证备份的及时性和准确性。
例子：实现一个自动备份脚本，可以备份多个目录，并根据日期和时间创建备份文件夹。

#!/bin/bash

# 定义需要备份的目录
backup_dirs=(
    "/var/www/html"
    "/etc/nginx"
    "/etc/mysql"
)

# 定义备份文件保存的目录
backup_dir="/backup"

# 创建备份文件夹，以日期和时间命名
backup_folder=$(date +%Y%m%d_%H%M%S)
mkdir -p "$backup_dir/$backup_folder"

# 遍历需要备份的目录，将其压缩并保存到备份文件夹中
for dir in "${backup_dirs[@]}"
do
    # 获取目录名，作为备份文件名
    backup_file=$(basename "$dir").tar.gz
    # 压缩目录并保存到备份文件夹中
    tar -czf "$backup_dir/$backup_folder/$backup_file" "$dir"
done

# 删除过期备份文件夹，只保留最近7天的备份
find "$backup_dir" -type d -mtime +7 -exec rm -rf {} \;

这个脚本首先定义了需要备份的目录和备份文件保存的目录，然后通过当前日期和时间创建一个新的备份文件夹。接着，遍历需要备份的目录，将其压缩并保存到备份文件夹中。最后，使用find命令删除过期备份文件夹，只保留最近7天的备份。这个脚本可以帮助运维工程师自动备份重要的数据和配置文件，并保证备份的及时性和准确性。
2. 系统监控脚本

系统监控脚本是一种能够监控服务器性能和状态的脚本。它可以监控CPU、内存、磁盘、网络等各项指标，并将监控结果输出到日志文件中。运维工程师可以通过查看日志文件来了解服务器的运行状态，及时发现并解决问题。

例子：实现一个系统监控脚本，可以监控CPU、内存、磁盘和网络的使用情况，并将监控结果输出到日志文件中。

#!/bin/bash

# 定义日志文件路径
log_file="/var/log/system_monitor.log"

# 获取当前时间
time=$(date "+%Y-%m-%d %H:%M:%S")

# 监控CPU使用率
cpu_usage=$(top -b -n 1 | grep "Cpu(s)" | awk '{print $2}' | awk -F "." '{print $1}')
cpu_info="CPU使用率：$cpu_usage%"

# 监控内存使用率
mem_usage=$(free | grep Mem | awk '{print $3/$2 * 100.0}' | awk -F "." '{print $1}')
mem_info="内存使用率：$mem_usage%"

# 监控磁盘使用率
disk_usage=$(df -h | awk '$NF=="/"{printf "%s", $5}')
disk_info="磁盘使用率：$disk_usage"

# 监控网络连接数
net_connections=$(netstat -an | grep ESTABLISHED | wc -l)
net_info="网络连接数：$net_connections"

# 将监控结果输出到日志文件中
echo "$time $cpu_info $mem_info $disk_info $net_info" >> "$log_file"

这个脚本首先定义了日志文件路径，并获取当前时间。然后，通过top命令获取CPU使用率，通过free命令获取内存使用率，通过df命令获取磁盘使用率，通过netstat命令获取网络连接数。最后，将监控结果输出到日志文件中。运维工程师可以通过定期查看日志文件来了解服务器的运行状态，及时发现并解决问题。

3. 日志分析脚本

日志分析脚本是一种能够对服务器日志进行分析和统计的脚本。它可以分析各种类型的日志，包括系统日志、应用程序日志、数据库日志等。运维工程师可以通过这个脚本来了解服务器的运行情况，比如访问量、错误率、响应时间等，从而优化服务器的性能和稳定性。
假设我们有一个web服务器，需要分析其访问日志，以了解用户访问行为和网站性能。下面是一个复杂的Shell脚本示例：

#!/bin/bash

# 定义日志文件路径
log_file="/var/log/nginx/access.log"

# 定义分析结果输出文件路径
result_file="/var/log/nginx/access_analysis.log"

# 定义时间范围
start_time=$(date -d "yesterday 00:00:00" +%s)
end_time=$(date -d "yesterday 23:59:59" +%s)

# 定义正则表达式，用于匹配日志文件中的信息
ip_regex='([0-9]{1,3}\.){3}[0-9]{1,3}'
date_regex='\[.*\]'
request_regex='\"[A-Z]{3,7} .* HTTP\/[0-9]\.[0-9]\"'
status_regex='[0-9]{3}'
size_regex='[0-9]+'

# 统计访问量
total_requests=$(grep -c "" $log_file)

# 统计访问量最多的IP地址
most_requests_ip=$(grep -oE "$ip_regex" $log_file | sort | uniq -c | sort -nr | head -n 1 | awk '{print $2}')

# 统计访问量最多的URL
most_requests_url=$(grep -oE "$request_regex" $log_file | sort | uniq -c | sort -nr | head -n 1 | awk '{print $2}')

# 统计访问状态码分布
status_codes=$(grep -oE "$status_regex" $log_file | sort | uniq -c)

# 统计访问量和流量
requests_and_traffic=$(awk -v start="$start_time" -v end="$end_time" '$4 >= start && $4 <= end {requests += 1; bytes += $10} END {print requests, bytes}' $log_file)

# 输出结果
echo "Total Requests: $total_requests" >> $result_file
echo "Most Requests IP: $most_requests_ip" >> $result_file
echo "Most Requests URL: $most_requests_url" >> $result_file
echo "Status Code Distribution: $status_codes" >> $result_file
echo "Requests and Traffic: $requests_and_traffic" >> $result_file

该脚本首先定义了日志文件路径和分析结果输出文件路径，然后使用正则表达式匹配日志文件中的信息，例如IP地址、时间、请求URL、状态码和流量等。接着，使用grep和awk等命令来统计各种信息，例如访问量、访问量最多的IP地址、访问量最多的URL、访问状态码分布和访问量和流量等。最后，将结果输出到分析结果输出文件中。

这个脚本可以定期运行，例如每天一次，以便及时了解服务器的运行情况，并及时优化服务器的性能和稳定性。
4. 自动部署脚本

自动部署脚本是一种能够自动部署应用程序的脚本。它可以自动下载最新的代码、编译打包、上传到服务器、安装依赖、启动应用程序等操作。运维工程师可以通过这个脚本来快速、准确地部署应用程序，提高部署效率和准确性。

假设我们有一个Java Web应用程序，需要部署到Tomcat服务器上。下面是一个简单的自动部署脚本示例：

#!/bin/bash

# 定义变量
app_name="myapp"
app_version="1.0.0"
tomcat_home="/opt/tomcat"
deploy_dir="/var/www/$app_name"

# 下载最新代码
git clone https://github.com/username/repo.git

# 切换到指定版本
cd repo
git checkout $app_version

# 编译打包
mvn clean package -DskipTests

# 备份旧版本
if [ -d $deploy_dir ]; then
  backup_dir="$deploy_dir-$(date +%Y%m%d%H%M%S)"
  mv $deploy_dir $backup_dir
fi

# 创建部署目录
mkdir $deploy_dir

# 复制文件到部署目录
cp target/$app_name.war $deploy_dir

# 安装依赖
apt-get install -y openjdk-8-jdk

# 启动Tomcat
$tomcat_home/bin/startup.sh

该脚本首先定义了应用程序名称、版本号、Tomcat服务器路径和部署目录路径等变量。然后，使用git命令从代码库中下载最新代码，并切换到指定版本。接着，使用maven命令编译打包应用程序。然后，备份旧版本，创建部署目录，将打包好的应用程序复制到部署目录中。接着，安装Java开发环境，启动Tomcat服务器。最后，使用Tomcat的启动脚本启动应用程序。

这个脚本可以根据实际需求进行修改，例如修改应用程序名称、版本号、Tomcat服务器路径和部署目录路径等变量，以及修改编译打包命令、安装依赖命令和启动Tomcat命令等。该脚本可以自动化地部署应用程序，节省运维工程师的时间和精力。
5. 自动化运维脚本

自动化运维脚本是一种能够自动化管理服务器的脚本。它可以自动化执行各种管理操作，比如安装软件、更新系统、配置网络、管理用户等。运维工程师可以通过这个脚本来快速、准确地管理服务器，提高管理效率和准确性。
以下是一个简单的shell脚本示例，它可以在Linux系统中自动安装和配置Nginx服务器：

#!/bin/bash

# 安装Nginx
sudo apt-get update
sudo apt-get install nginx -y

# 配置Nginx
sudo rm /etc/nginx/sites-enabled/default
sudo touch /etc/nginx/sites-available/my_site
sudo ln -s /etc/nginx/sites-available/my_site /etc/nginx/sites-enabled/my_site

# 写入Nginx配置文件
echo "server {
    listen 80;
    server_name my_server.com;
    root /var/www/my_site;
    index index.html;
}" | sudo tee /etc/nginx/sites-available/my_site > /dev/null

# 重启Nginx
sudo service nginx restart

echo "Nginx安装和配置完成。"

以上脚本首先更新系统，然后使用apt-get安装Nginx。接下来，它删除默认的Nginx配置文件，并创建一个新的配置文件。最后，它写入Nginx配置文件，重启Nginx服务器。在执行过程中，脚本会输出一些信息，以便用户了解脚本的执行情况。

这个脚本只是一个简单的示例，实际的自动化运维脚本需要根据具体的需求进行定制。同时，脚本中的命令需要经过充分测试和验证，以确保它们能够正确地执行操作。