Quartz重复执行问题记录

现象:在项目维护过程中,使用了Quartz框架,也就是定时执行任务的功能。但是,在多节点多并发的过程中,出现了一个问题,同一个trigger被多个机器重复的触发了。

Quartz的运行流程:
当任务达到触发条件的时候(当这条任务满足qrtz_cron_triggers表中定义的相关的时间表达式的时候)
qrtz_triggers表对应的这条记录的状态发生改变,同时下次触发时间根据时间表达式做出改变,同时根据sched_name找到qrtz_job_details
表中的具体job去执行

网上的解决办法:

  1. 使用 zooKeeper的注册机制.
    当任务进入job之后用job id(同时触发的这几个job的id是一样的)去向zookeeper完成注册,由于id是一样的那么只能有一个注册成功,只要在注册成功的条件下我才允许task。这样就保证了不做重复的运算。
public class PlatformQuartzJobBean extends QuartzJobBean {
    private String path = "/zk_triggerID";
    private String lock = "/zk_lock";
    private static ZooKeeper zk = null;
    static{
        try {
            zk = new ZooKeeper(PropsUtil.get("zooKeeperUrl")+":"+PropsUtil.get("zooKeeperPort"), 50000,new ZKWatcher());
        } catch (IOException e) {
            logger.error(e.getMessage(),e);
        }
    }
    //任务执行的具体逻辑
    protected void executeInternal(JobExecutionContext jobexecutioncontext)
        throws JobExecutionException {
        Trigger trigger = jobexecutioncontext.getTrigger();
        String triggerName = trigger.getKey().getName();//triggername是唯一的
        boolean createSuccess = false;
        boolean doTask = false; //不对zookeeper注册执行任务
        int childrens = 0;
        List<String> children = null;
        boolean onDelete = false;//是否获取删除节点的权限
        try {
            zk.create(path+"/"+triggerName, triggerName.getBytes(),
                    Ids.OPEN_ACL_UNSAFE, CreateMode.EPHEMERAL);//如果注册出现问题说明节点存在是重复的任务
            createSuccess = true;
            children = zk.getChildren(path, false);
            if(children != null){
                childrens = children.size();
            }
            if(childrens>99){//节点个数达到100个就执行删除操作
                try {
                    zk.create(lock+"/dodelete", "dodelete".getBytes(),
                            Ids.OPEN_ACL_UNSAFE, CreateMode.EPHEMERAL);
                    onDelete = true;
                } catch (KeeperException e1) {
                    if(e1 instanceof NodeExistsException){
                        logger.info("already on delete!");
                    }else{
                        logger.error(e1.getMessage(),e1);
                    }
                } catch (InterruptedException e1) {
                    logger.error(e1.getMessage(),e1);
                }
                 
            }
            //执行具体的任务
            execuTask(trigger,triggerName,jobexecutioncontext,af);
        } catch (KeeperException e) {
            if(e instanceof NodeExistsException){
                logger.info("already on do");
            }else if(e instanceof ConnectionLossException){
                logger.info("ConnectionLoss ,do task without registered!!");
                doTask = true;
            }else if(e instanceof SessionExpiredException){
                logger.info("session expired ,do task without registered!!");
                doTask = true;
                try {
                    zk = new ZooKeeper(PropsUtil.get("zooKeeperUrl")+":"+PropsUtil.get("zooKeeperPort"), 50000,new ZKWatcher());
                } catch (IOException e1) {
                    logger.error(e1.getMessage(),e1);
                }
            }else{
                logger.error(e.getMessage(),e);
            }
        } catch (InterruptedException e) {
            logger.error(e.getMessage(),e);
        }
        if(createSuccess && onDelete){//如果创建成功并且root下有执行删除的权利
            try {
                for(String str:children){
                    zk.delete(path+"/"+str, -1);
                }
            } catch (KeeperException e1) {
                logger.error(e1.getMessage(),e1);
            } catch (InterruptedException e1) {
                logger.error(e1.getMessage(),e1);
            }finally{
                if(onDelete){
                    try {
                        zk.delete(lock+"/dodelete", -1);
                    } catch (InterruptedException e) {
                        logger.error(e.getMessage(),e);
                    } catch (KeeperException e) {
                        if(e instanceof ConnectionLossException){
                            logger.info("ConnectionLoss ,reconnect zk!!");
                            try {
                                zk.close();//人为失效,删除dodelete节点
                                zk = new ZooKeeper(PropsUtil.get("zooKeeperUrl")+":"+PropsUtil.get("zooKeeperPort"), 50000,new ZKWatcher());
                            } catch (InterruptedException e1) {
                                e1.printStackTrace();
                            } catch (IOException e1) {
                                e1.printStackTrace();
                            }
                             
                        }else{
                            logger.error(e.getMessage(),e);
                        }
                         
                    }
                }
            }
             
        }
        //如果出现connectloss和sessionexpired 可能是网络有点问题找不到zookeeper就不管重复问题了完成任务为最重要的
        if(doTask){//如果出现connectloss和sessionexpired 就直接执行任务
            execuTask(trigger,triggerName,jobexecutioncontext,af);
        }
     
    }
     
}

整个过程就是:当job开始的时候去向zookeeper申请注册,只有当注册成功的时候才执行业务,失败则退出job。同时由于我这里是每天循环的
定时任务所以当zookeeper下的节点数目达到一定的个数的时候加一个删除锁(就是向zookeeper create一个ondetele节点),同时删除之前
的triggername节点,这样保证了明天这些任务可以继续完成。至此,任务重复执行的问题就解决了。

2.网上有网友解释:如果我在10:00:00执行了一个任务,下次就是15s,但是如果服务器挂掉,我在10:00:50重新启动服务器,由于任务间隔是15s,所以从00-50s中间会有三个任务超时没有执行(本来应该分别是在15s,30s,45s执行),而超时的时间均小于1min,所以服务器启动以后会立即开启三个quartz线程来执行超时的任务。
方法1、通过改TOMCAT的配置文件server.xml配置
方法2、先把quartz配置信息提取出来,单独存成一个文件,比如applicationContext-quartz.xml 然后修改web.xml,让web容器启动时,可以加载该文件 。(此文没对此方法进行深入探究)
参考链接:https://my.oschina.net/EugeneQiu/blog/265040?p=1

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,348评论 6 491
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,122评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,936评论 0 347
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,427评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,467评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,785评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,931评论 3 406
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,696评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,141评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,483评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,625评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,291评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,892评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,741评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,977评论 1 265
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,324评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,492评论 2 348

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,629评论 18 139
  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 10,926评论 6 13
  • ** 版本:2.2.1 ** Hello world: 调度器: 任务详情:任务体实现Job接口 触发器: 执行调...
    Coselding阅读 10,141评论 12 38
  • 当传递了皮肤的温度 那表面上的 被赋予意义的色彩 在最终的成品上 ...
    付宛柒阅读 156评论 0 3
  • 人生的路途很短,几十载就可以走完。那么,这世界孕育了如此多的人,这些人究竟怕不怕死呢?或者说有没有不怕...
    冬也有温暖阅读 111评论 0 0