mysql的分库分表脚本

一.分库分表优点

1，提高系统的可扩展性和性能：通过分库分表，可以将数据分布在多个节点上，从而提高系统的负载能力和处理性能。
2，精确备份和恢复：分库分表备份可以确保每个数据库和表的数据都得到备份，同时也可以针对需要恢复的具体数据进行恢复操作，提高了备份和恢复的精确性。
3，部分故障隔离：当某个库或表发生故障时，只需恢复受影响的库或表，而不需要恢复整个数据库系统。

二.过程思路

使用mysqldump实现分库分表备份的基本思路如下：

1,确定要备份的数据库列表：首先确定要备份的数据库列表，这些数据库可能是分布在不同的库中。
2,遍历数据库：对于每个数据库，遍历其中的表。
3,备份表：对于每个表，使用mysqldump命令备份表结构和数据到指定的备份文件中。
重复以上步骤：对其他数据库中的表重复执行步骤3，直到所有的数据库和表都备份完成。

脚本实现

# MySQL连接信息
db_user="root"
db_password="[email protected]"
db_cmd="-u${db_user} -p${db_password}"
#要备份的库
exclude_db="information_schema|mysql|performance_schema|sys|Database"
bak_dir=/backup/db/mysqldump_test/
# 判断备份路径是否存在
[ -d ${bak_dir} ] || mkdir ${bak_dir}
 
# 查找出需要备份的数据库
 mysql \${db_cmd} -e"show databases" -N 2>/dev/null | egrep -v "$exclude_db" > dbtmp
# 循环遍历数据库列表
while read db
do
        #对数据库进行备份
    mysqldump ${db_cmd} --set-gtid-purged=off $db 2>/dev/null | gzip > ${bak_dir}/`date +%F`-$db.sql.gz
        #判断是否备份成功
    if [ $? -eq 0 ]
    then
        echo "database $db is being backed up ... success!"
    else
        echo "database $db is being backed up ... failure!"
    fi
        #根据数据库进行分表备份 
    [ -d ${bak_dir}/$db ] || mkdir -p ${bak_dir}/$db
               # 获取数据库中的表名列表
    mysql ${db_cmd}  $db -e "SHOW TABLES;" | grep -v "Tables_in" > tbtmp
 
    # 循环遍历表名列表
    while read tb
    do
        # 对表进行备份
        mysqldump ${db_cmd} --set-gtid-purged=off $db $tb 2>/dev/null | gzip > ${bak_dir}/$db/`date +%F`-$db-$tb.sql.gz
 
        # 判断是否备份成功
        if [ "$?" -eq 0 ]; then
            echo "Backup of $db.$tb successful!"
        else
            echo "Backup of $db.$tb failed!"
        fi
    done < tbtmp
done < dbtmp

验证

最后，可以用tree命令看看数据库及表对应的结构关系