温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

如何在storm应用中实现定时调度

发布时间:2021-11-15 23:35:25 来源:亿速云 阅读:161 作者:柒染 栏目:云计算

这篇文章给大家介绍如何在storm应用中实现定时调度,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。

    在storm中实时定时调度, 较好的方式是利用spout的nextTuple()不断循环触发你的定时任务。

    首先, 把需要定时调度的逻辑用一个bolt实现,其execute方法的伪代码如下:

    // 从topology的全局对象 backtype.storm.Config取得上次调度时间
    Date 上次调度时间 = config.get("上次调度时间");

    if ( 如果当前时间 - 上次调度时间 >= 调度间隔 ) {
	 
        // 执行具体业务逻辑
        doTask();
              
        // 将本次执行时间存入全局对象 backtype.storm.Config
        config.put("上次调度时间", 当前时间);
    } 	

    然后, 定义一个专门的定时发送消息的spout,如以下每隔8秒发送一条消息:

    @Override
    public void nextTuple() {
        try {
            Thread.sleep(8 * 1000);
            collector.emit(new Values("Let's go!"));
        } catch (Exception e) {
            log.error("", e);
        }
    }

     这个spout发出的消息没有任何业务意义,只是为了触发上面的bolt。

 补充说明,如果以上代码在执行 config.put() 时抛出异常 “storm Async loop died!” , 那就改为用redis保存最近一次的执行时间。

关于如何在storm应用中实现定时调度就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI