DolphinScheduler(可视化工作流任务调度系统)v1.3.5官方版

ApacheDolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统，致力于解决数据处理过程中错综复杂的依赖关系，使调度系统在数据处理过程中开箱即用。

Apache DolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统，致力于解决数据处理过程中错综复杂的依赖关系，使调度系统在数据处理过程中开箱即用。

软件特点

高可靠性

去中心化的多Master、多Worker，支持HA功能，使用任务队列避免过载，不会导致机器卡顿。

简单易用

DAG监控界面，所有流程定义可视化，DAG可通过拖放任务进行定制，通过API连接第三方系统，一键部署

丰富的使用场景

支持暂停和恢复操作。支持多租户，更好应对大数据使用场景。支持更多任务类型，如spark、hive、mr、python、sub_process、shell

高扩展性

支持自定义任务类型。调度器采用分布式调度。调度能力随集群线性增长。 Master和Worker支持动态的线上和线下操作。

特征

1.使用DAG图根据任务依赖关系关联任务，可以直观地实时监控任务的运行状态。

2.支持多种任务类型：Shell、MR、Spark、SQL（mysql、postgresql、hive、sparksql）、Python、Sub_Process、Procedure等。

3.支持工作流定时调度、依赖调度、手动调度、手动暂停/停止/恢复，还支持失败重试/报警、指定节点失败恢复、Kill任务等操作。

4.支持工作流优先级、任务优先级、任务故障转移和任务超时报警/失败

5.支持工作流全局参数和节点自定义参数设置

6.支持资源文件在线上传/下载和管理，支持在线文件创建和编辑。

7.支持任务日志在线查看和滚动、日志在线下载等。

8、实现集群HA，通过Zookeeper实现Master集群和Worker集群的去中心化

9.支持在线查看Master/Worker cpu负载、内存、cpu

10.支持工作流运行历史树/甘特图显示、任务状态统计、流程状态统计。

11. 支持补数

12.支持多租户

13.支持国际化

14.还有更多等待伙伴探索