原址如下:
http://vavahe.blog.51cto.com/3749305/929795
mater上面有数据 slave不同步 但是没有任何报错信息
问题 症状
mysql 5.1 做master slave slave状态正常,提示信息正常 用脚本导入数据后 mater上面有数据 slave不同步 但是没有任何报错信息。。。。
脚本是这样的
LOAD DATA INFILE '/tmp/kpi_daily_user_data' REPLACE
INTO TABLE `:statistics_database`.`user_data`;
人工 create database 同步没有问题
插入数据也没问题
脚本就不行了
解决方法一
mysql 下
>show variables like 'binlog_format';
先执行以下看看是不是statement
我估计100%是statement
设置成ROW才能使用LOAD DATA INFILE
statement这种模式load data infile这种非语句级的插入是不会生效的
修改my.cnf
查找
binlog_format配置项
如果没有,则增加在mysqld下
如果有,就直接改成row
binlog_format="ROW"
然后重启mysql
master修改就可以了
slave不care这个问题
解决方法二
将脚本:
LOAD DATA INFILE '/tmp/kpi_daily_user_data' REPLACE
INTO TABLE `:statistics_database`.`user_data`;
改成:
use statistics_database;LOAD DATA INFILE '/tmp/kpi_daily_user_data' REPLACE
INTO TABLE `:statistics_database`.`user_data`;
/////先要use 数据库在load 才能实现同步
附:mysql同步模式
mysql的三种复制方式:① statement base replication SBR
② row base replication RBR
③
mixed-based replication MBR
现在来比较以下 SBR 和 RBR 2中模式各自的优缺点:
SBR 的优点:
- 历史悠久,技术成熟
- binlog文件较小
- binlog中包含了所有数据库更改信息,可以据此来审核数据库的安全等情况
- binlog可以用于实时的还原,而不仅仅用于复制
- 主从版本可以不一样,从服务器版本可以比主服务器版本高
SBR 的缺点:
- 不是所有的UPDATE语句都能被复制,尤其是包含不确定操作的时候。
- 调用具有不确定因素的 UDF 时复制也可能出问题
- 使用以下函数的语句也无法被复制:
* LOAD_FILE()
* UUID()
* USER()
* FOUND_ROWS()
* SYSDATE() (除非启动时启用了 --sysdate-is-now 选项)
- INSERT ... SELECT 会产生比 RBR 更多的行级锁
- 复制需要进行全表扫描(WHERE 语句中没有使用到索引)的 UPDATE 时,需要比 RBR 请求更多的行级锁
- 对于有 AUTO_INCREMENT 字段的 InnoDB表而言,INSERT 语句会阻塞其他 INSERT 语句
- 对于一些复杂的语句,在从服务器上的耗资源情况会更严重,而 RBR 模式下,只会对那个发生变化的记录产生影响
- 存储函数(不是存储过程)在被调用的同时也会执行一次 NOW() 函数,这个可以说是坏事也可能是好事
- 确定了的 UDF 也需要在从服务器上执行
- 数据表必须几乎和主服务器保持一致才行,否则可能会导致复制出错
- 执行复杂语句如果出错的话,会消耗更多资源
RBR 的优点:
- 任何情况都可以被复制,这对复制来说是最安全可靠的
- 和其他大多数数据库系统的复制技术一样
- 多数情况下,从服务器上的表如果有主键的话,复制就会快了很多
- 复制以下几种语句时的行锁更少:
* INSERT ... SELECT
* 包含 AUTO_INCREMENT 字段的 INSERT
* 没有附带条件或者并没有修改很多记录的 UPDATE 或 DELETE 语句
- 执行 INSERT,UPDATE,DELETE 语句时锁更少
- 从服务器上采用多线程来执行复制成为可能
RBR 的缺点:
- binlog 大了很多
- 复杂的回滚时 binlog 中会包含大量的数据
- 主服务器上执行 UPDATE 语句时,所有发生变化的记录都会写到 binlog 中,而 SBR 只会写一次,这会导致频繁发生 binlog 的并发写问题
- UDF 产生的大 BLOB 值会导致复制变慢
- 无法从 binlog 中看到都复制了写什么语句
- 当在非事务表上执行一段堆积的SQL语句时,最好采用 SBR 模式,否则很容易导致主从服务器的数据不一致情况发生
另外,针对系统库 mysql 里面的表发生变化时的处理规则如下:
- 如果是采用 INSERT,UPDATE,DELETE 直接操作表的情况,则日志格式根据 binlog_format 的设定而记录
- 如果是采用 GRANT,REVOKE,SET PASSWORD 等管理语句来做的话,那么无论如何都采用 SBR 模式记录
注:采用 RBR 模式后,能解决很多原先出现的主键重复问题。