选择你喜欢的标签
我们会为你匹配适合你的网址导航

    确认 跳过

    跳过将删除所有初始化信息

    0XU.CN
    发布于2023-06-30 10:51
    233

    如何看待Apache DolphinScheduler?

    看Apache DolphinScheduler的公众号-海豚调度,已经有很多用户在用,对比Oozie、Azkaban等,大家如何看待这个由国人主导并进入顶级项目的?

    我要回答 分享 举报
    海彤
    海彤
    2023-06-30 10:51

    目前世界上最流行的两款任务调度系统是 Apache DolphinScheduler 和 Apache Airflow。什么是任务调度系统呢?它类似于平时工作与生活中使用的日程表,可以让某一类型的任务在某一特定时刻执行,并且在这个任务执行完后,执行下一个类似的任务。以大部分人都要经历的上班为例,按照流程执行的一系列任务就是一个简单的任务调度系统,只不过这个系统是人本身而已。

    Apache DolphinScheduler 和 Apache Airflow 只不过是将上班这个流程里的“听音乐”、“整理着装”这些任务变成了数据处理领域里面常用的 Sql、Spark、Shell 等任务,这个流程有一个官方名称叫做:DAG 工作流。


    分享 举报