mq管理平台功能小记

MQ集群

管理

元数据

增删查改

巡检

sdk版本、稳定性等,本质是对采集好的数据重新查询,整理生成excel

失效数据清理

删zk、删mq集群

告警规则

监控

共有

总tps

日消息量

rt

通过发送测试消息实现

Rocketmq

节点级putTps、getTotalTps

kafka

更多指标,暂略

资源

管理

申请、审批topic、consumergroup

写库、写zk、写mq集群、同步到测试环境

操作幂等?

消费拉入拉出

服务名、机房、节点级操作

消息检索

rocketmq

msgid、key、时间段

kafka

offset、时间段

延迟消息轨迹

发送时msgid作为串联链路唯一key

元数据

增删查改

(容灾)迁移

本质是修改资源元数据中的集群字段,触发监听器重启

告警规则

默认生成

消息回溯

根据timestamp重置消费位点

监控

主题

重要指标:发送tps、日消息量、节点级发送耗时、对应消费组

Broker name QID MinOffset MaxOffset LastUpdate
xxx_a1 0 1234 12345 2022-05-28 18:36:03
xxx_a1 1 1134 11345 2022-05-28 18:36:03
xxx_b1 0 1234 12345 2022-05-28 18:36:03
xxx_b1 1 1134 11345 2022-05-28 18:36:03

消费

关注消费tps(图表上和发送tps同时展示作对比)、消费(总、分)积压、消费(总、分)延迟、节点级消费耗时

Partition Latency consumerOffset Host lasttime
0 123 123143 ip1 2022-05-28 18:36:03
1 321 1231241 ip1 2022-05-28 18:36:03
2 111 312412 ip2 2022-05-28 18:36:03
3 333 23213 Ip2 2022-05-28 18:36:03

自有服务

管理

集群指标采集

开关

访问鉴权

操作记录审计

你可能感兴趣的:(工作积累,java,rocketmq,kafka)