V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
heavyrainn
V2EX  ›  程序员

咨询一下各位,大家都用什么调度工具

  •  1
     
  •   heavyrainn · 2021-03-30 09:51:58 +08:00 · 3556 次点击
    这是一个创建于 1334 天前的主题,其中的信息可能已经有所发展或是发生改变。
    最近在做数据平台的项目,作业很多,作业之间的依赖也很复杂,所以需要一款好用且开源的调度工具,烦请各位推荐一下,有什么好用的作业调度工具,谢谢大家
    9 条回复    2021-03-31 08:33:21 +08:00
    cco
        1
    cco  
       2021-03-30 10:34:18 +08:00
    Oozie,或者自研。当然也有开源的,多少都得二次开发。
    resurgamforever
        2
    resurgamforever  
       2021-03-30 10:36:41 +08:00
    Dolphin Scheduler (国产)
    Azkaban
    Schedulis (国产)
    liprais
        3
    liprais  
       2021-03-30 10:40:18 +08:00 via iPhone
    airflow
    v218ex
        4
    v218ex  
       2021-03-30 11:03:12 +08:00
    airflow
    jiezhi
        5
    jiezhi  
       2021-03-30 11:05:16 +08:00
    Oozie+Hue

    不过最近准备切到 Dolphin 了
    hantsy
        6
    hantsy  
       2021-03-30 11:36:33 +08:00
    看不懂,只在国内看到过作业调度这个词。

    从描述看,如果是我,一些任务,之类的,肯定用 Spring Batch 或者 Java EE/JakartaEE Batch 规范( Spring Batch 也支持这个规范)去定义任务了。
    zuston
        7
    zuston  
       2021-03-30 13:29:36 +08:00
    Azkaban 吧 ,社区还挺活跃的。且是大数据相关的
    forbxy
        8
    forbxy  
       2021-03-30 14:25:47 +08:00
    airflow+1
    tedzhou1221
        9
    tedzhou1221  
       2021-03-31 08:33:21 +08:00 via iPhone
    前公司用 azkaban


    @hantsy 你说的是代码层面的,他们说的是组件层面的。但我看很多项目都直接用任务调度框架,例如 XXL-job
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2486 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 20ms · UTC 15:50 · PVG 23:50 · LAX 07:50 · JFK 10:50
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.