分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警

传送门

分布式定时任务系列1:XXL-job安装

分布式定时任务系列2:XXL-job使用

分布式定时任务系列3:任务执行引擎设计

分布式定时任务系列4:任务执行引擎设计续

分布式定时任务系列5:XXL-job中blockingQueue的应用

 Java并发编程实战1:java中的阻塞队列

问题出现 

前几天上班的时候,收到运维的告警通知,安装XXL-job的服务器CPU飙高告警,让看一下。

查了下xxl-job-admin的日志文件,目录在logback.xml:

分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警_第1张图片

发现在告警时间点之前报了一个db事物超时的错误。

通过讯问得知,有人手动清理过任务,即将无效的任务手动删除了:在xxl-job控制台创建了几个任务,后来业务变更,把代码里面的任务删除了,但是控制台任务没有删除,所以做任务清理。以前面的例子来进行说明

场景说明

开发第一个jobHandler
@Component
public class JobHandler {
 
    @XxlJob("first_job")
    public void firstJob() {
        System.out.println("========================= first job========================= ");
    }
}

 若以上配置成功,则可以在控制台看到注册的客户端机器

分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警_第2张图片

新建任务

测试任务

经过以上设置,在平台手动触发一次任务,并且可以查看执行日志

分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警_第3张图片

删除代码中的任务

执行一段时间后,代码中删除first_job,但是控制台任务不删除,执行一段时间后现删除。

但是这个正常的变更操作为什么会引起db出错呢?因为很有可能由于业务变动,先将代码中对应的任务删除的,而后再来清理XXL-job控制台的任务。

问题重现

要解决这个问题,首先还是要定位到原因。

结合报错日志,翻看了一下源码,发现从XXL-job控制台删除任务的逻辑:

  1. 界面删除选中的任务,发起URL请求:xxl-job-admin/jobinfo/remove分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警_第4张图片
  2. 后端接口,开始同步处理,代码如下分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警_第5张图片
  3. 跟踪代码,会发现问题代码出在清理任务对应的触发日志那个步骤分布式定时任务系列6:XXL-job触发日志过大引发的CPU告警_第6张图片

 

你可能感兴趣的:(#,分布式调度,java,xxl-job)