虽说现在这世道有些爱情是有价的,但是数据是无价的,数据备份是尤为的重要,可以在你未来的某一天不小心删库了,不用着急跑路。
本片文章介绍的方案是利用Linux自身的crontab定时任务功能,定时执行备份数据库的脚本。
技术要点:
- 数据库备份dump命令
- shell脚本
- Linux定时任务crontab
数据备份dump
数据库都有一个导出数据库内数据和结构的命令,就是备份。
将备份的数据还原会将原来的数据中的表删了重建,再插入备份中的数据,这是恢复。
这一点需要注意,如果恢复之前的数据比备份的多,恢复后多的数据就没有了。
列出我常用的两种数据库的备份和恢复命令
postgresql:
备份 pg_dump -h [ip] -U [用户名] [库名] >[导出的.sql 文件]
恢复 psql -s [库名] -f [导出.sql 文件]
mysql:
备份 mysqldump -h -u [用户名] -p [库名] > [导出的.sql 文件]
恢复 mysql -u [用户名] -p [库名] < [导出的.sql 文件]
shell脚本
要完成一个功能完善的备份方案,就需要shell脚本。
我们要让这个脚本备份到指定路径,并压缩存放,最多30个,超过30个删除最早的,并记录操作日志。
啥也不说了,话都在脚本里,干了!
#用户名
username=root
#密码
password=nicai
#将要备份的数据库
database_name=l_love_you
#保存备份文件最多个数
count=30
#备份保存路径
backup_path=/app/mysql_backup
#日期
date_time=`date +%Y-%m-%d-%H-%M`
#如果文件夹不存在则创建
if [ ! -d $backup_path ];
then
mkdir -p $backup_path;
fi
#开始备份
mysqldump -u $username -p$password $database_name > $backup_path/$database_name-$date_time.sql
#开始压缩
cd $backup_path
tar -zcvf $database_name-$date_time.tar.gz $database_name-$date_time.sql
#删除源文件
rm -rf $backup_path/$database_name-$date_time.sql
#更新备份日志
echo "create $backup_path/$database_name-$date_time.tar.gz" >> $backup_path/dump.log
#找出需要删除的备份
delfile=`ls -l -crt $backup_path/*.tar.gz | awk '{print $9 }' | head -1`
#判断现在的备份数量是否大于阈值
number=`ls -l -crt $backup_path/*.tar.gz | awk '{print $9 }' | wc -l`
if [ $number -gt $count ]
then
#删除最早生成的备份,只保留count数量的备份
rm $delfile
#更新删除文件日志
echo "delete $delfile" >> $backup_path/dump.log
fi
给脚本起个顾名思义的漂亮名字 dump_mysql.sh
给脚本赋予可执行权限 chmod +x dump_mysql.sh
, 执行后脚本变绿了就是可实行文件
执行方法:./加脚本名称
chmod命令参数含义--
+ 代表添加某些权限
x 代表可执行权限
定时任务crontab
crontab是Linux自带的一个定时任务功能,我们可以利用它每天凌晨执行一次dump_mysql.sh
脚本。
crontab用法:
- crontab -l 查看定时任务列表
- crontab -e 编辑(新增/删除)定时任务
运行crontab -e命令,打开一个可编辑的文本,输入00 01 * * * /app/dump_mysql.sh
保本并退出即添加完成。
内容解释:
00 01 * * * /app/dump_mysql.sh
分两部分看,
第一部分00 01 * * *
是定时任务的周期,第二部分/app/dump_mysql.sh
到时间做的事情。
周期表达式是五个占位符,分别代表:分钟、小时、日、月、星期
占位符用*
表示每
,用在第一位就是每分钟,第二位每小时,依此类推
占位符用具体数字
表示具体时间
,10用在第一位就是10分,用在第三位表示10号,依此类推
占位符用-
表示区间
,5-7用在第一位就是5分到7分,用在第五位表示周5到周日,依此类推
占位符用/
表示间隔
,5-10/2用在第一位就是5分到10分间隔2分钟,用在第二位表示5点到10点间隔2小时,依此类推
占位符用,
表示列表
,5,10用在第一位就是5分和10分,用在第四位表示5月和10月,依此类推
2020年7月20日更新
脚本中密码安全性问题
多谢思友hack的提醒,脚本里面直接放数据库密码是不安全的。
我们脚本执行后msyql也会打印一行警告:mysqldump: [Warning] Using a password on the command line interface can be insecure
译:在命令行界面上使用密码可能不安全
关于这个问题网上的处理方法也比较一致,mysqldump命令去掉-u用户名-p密码参数,使用--defaults-file
参数读取配置的用户名密码。
在命令行上指定密码应该被认为是不安全的。为了避免在命令行上给出密码,请使用选项文件。参见 第6.1.2.1节: 用户密码安全指南。
编辑my.cnf
编辑数据库家目录的my.cnf,我的路径是/etc/my.cnf。在[client]下面添加密码,如果没有[client],就编写一个,不然下面的password 会无效。
[client]
password="nicai"
默认使用当前登录Linux服务器的账号作为连接数据库的账号,我刚好都是root ,用户名就可以不配,如果不一致,需要加一条
user=xxx
编辑完了最好给my.cnf 设置600的权限,600代表只有拥有者有读写权限。
shell> chmod 600 my.cnf
如果密码中含有特殊字符,一定要用双引号引起来,不然运行mysqldump命令会报错mysqldump: Got error: 1045: Access denied for user 'root'@'localhost' (using password: YES) when trying to connect
修改参数
运行mysqldump命令时,使用--defaults-file=/etc/my.cnf
参数代替-uroot -ppassword
的参数即可。
脚本中去掉用户名和密码,mysqldump命令按照下面修改:
mysqldump --defaults-file=/etc/my.cnf $database_name >$backup_path/$database_name-$date_time.sql
使用SHC对脚本加密:
Linux下脚本加密工具SHC对shell脚本进行加密,SHC可以将shell脚本转换为一个可执行的二进制文件,这也是一个办法。
对备份的文件也需要加密:
tar配合openssl完成加密压缩:tar -czvf - 源文件 | openssl des3 -salt -k 密码 -out 压加密文件.tar.gz
解密:openssl des3 -d -k 密码 -salt -in 加密文件.tar.gz | tar xvf -