【maxwell】企业级生产maxwell配置与排坑指南

本篇不讨论 canal和maxwell的区别,github上面可以看到源码,并且查看项目的基本背景。

 

首先说报错吧,第一次遇到权限不够的情况:无法找到某某某不用的数据库

 

这是因为maxwell给予binlog级别,且需要采集mysql实例创建maxwell数据库,所以,需要有全库的 *.* 赋权

 

 

其次是及时全库表可读,也会需要       one of  super replication 

这里要注意,super肯定是不能给的。可以赋 replication权限

 

然后就彻底可以了。

 

 

nohup /opt/maxwell/maxwell-1.22.1/bin/maxwell  --host='xxx'  --port=3306  --user='xxx'  --password='xxx'  --filter='exclude: *.*,include:xxx.xxx'  --producer=kafka  --kafka_version='1.0.0'  --kafka.bootstrap.servers='pro-app-174:9092,pro-app-175:9092,pro-app-176:9092'  --kafka_topic=xxx  --metrics_type=http  --metrics_jvm=true  --http_bind_address=pro-app-174  --http_port=8090  --http_path_prefix=xxx >> xxx-nohup.log 2>&1 &

 

你可能感兴趣的:(大数据,maxwell)