• 请不要在回答技术问题时复制粘贴 AI 生成的内容
heavyrainn
V2EX  ›  程序员

咨询一下各位,大家都用什么调度工具

  •  1
     
  •   heavyrainn · Mar 30, 2021 · 4726 views
    This topic created in 2058 days ago, the information mentioned may be changed or developed.
    最近在做数据平台的项目,作业很多,作业之间的依赖也很复杂,所以需要一款好用且开源的调度工具,烦请各位推荐一下,有什么好用的作业调度工具,谢谢大家
    9 replies  •  2021-03-31 08:33:21 +08:00
    cco
    cco
    Mar 30, 2021
    1
    Oozie,或者自研。当然也有开源的,多少都得二次开发。
    resurgamforever
    resurgamforever
    Mar 30, 2021
    2
    Dolphin Scheduler (国产)
    Azkaban
    Schedulis (国产)
    F281M6Dh8DXpD1g2
    F281M6Dh8DXpD1g2
    Mar 30, 2021 via iPhone
    3
    airflow
    v218ex
    v218ex
    Mar 30, 2021
    4
    airflow
    jiezhi
    jiezhi
    Mar 30, 2021
    5
    Oozie+Hue

    不过最近准备切到 Dolphin 了
    hantsy
    hantsy
    Mar 30, 2021
    6
    看不懂,只在国内看到过作业调度这个词。

    从描述看,如果是我,一些任务,之类的,肯定用 Spring Batch 或者 Java EE/JakartaEE Batch 规范( Spring Batch 也支持这个规范)去定义任务了。
    zuston
    zuston
    Mar 30, 2021
    7
    Azkaban 吧 ,社区还挺活跃的。且是大数据相关的
    forbxy
    forbxy
    Mar 30, 2021
    8
    airflow+1
    tedzhou1221
    tedzhou1221
    Mar 31, 2021 via iPhone
    9
    前公司用 azkaban


    @hantsy 你说的是代码层面的,他们说的是组件层面的。但我看很多项目都直接用任务调度框架,例如 XXL-job
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   953 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 37ms · UTC 20:31 · PVG 04:31 · LAX 12:31 · JFK 15:31
    ♥ Do have faith in what you're doing.