DolphinScheduler(可视化工作流任务调度系统)v1.3.5官方版
ApacheDolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统,致力于解决数据处理过程中错综复杂的依赖关系,使调度系统在数据处理过程中开箱即用。 Apache DolphinScheduler是一个分布式、去中...
- 版本:v1.0.0
- 平台:WinAll
- 类型:编程开发
- 发布:2025-05-12
- 大小:3.5M
- 星级:
ApacheDolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统,致力于解决数据处理过程中错综复杂的依赖关系,使调度系统在数据处理过程中开箱即用。
Apache DolphinScheduler是一个分布式、去中心化、易于扩展的可视化DAG工作流任务调度系统,致力于解决数据处理过程中错综复杂的依赖关系,使调度系统在数据处理过程中开箱即用。
软件特点
高可靠性
去中心化的多Master、多Worker,支持HA功能,使用任务队列避免过载,不会导致机器卡顿。
简单易用
DAG监控界面,所有流程定义可视化,DAG可通过拖放任务进行定制,通过API连接第三方系统,一键部署
丰富的使用场景
支持暂停和恢复操作。支持多租户,更好应对大数据使用场景。支持更多任务类型,如spark、hive、mr、python、sub_process、shell
高扩展性
支持自定义任务类型。调度器采用分布式调度。调度能力随集群线性增长。 Master和Worker支持动态的线上和线下操作。
特征
1.使用DAG图根据任务依赖关系关联任务,可以直观地实时监控任务的运行状态。
2.支持多种任务类型:Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql)、Python、Sub_Process、Procedure等。
3.支持工作流定时调度、依赖调度、手动调度、手动暂停/停止/恢复,还支持失败重试/报警、指定节点失败恢复、Kill任务等操作。
4.支持工作流优先级、任务优先级、任务故障转移和任务超时报警/失败
5.支持工作流全局参数和节点自定义参数设置
6.支持资源文件在线上传/下载和管理,支持在线文件创建和编辑。
7.支持任务日志在线查看和滚动、日志在线下载等。
8、实现集群HA,通过Zookeeper实现Master集群和Worker集群的去中心化
9.支持在线查看Master/Worker cpu负载、内存、cpu
10.支持工作流运行历史树/甘特图显示、任务状态统计、流程状态统计。
11. 支持补数
12.支持多租户
13.支持国际化
14.还有更多等待伙伴探索
相关下载
更多
游戏攻略
更多
- 《人间诡视》游戏攻略全结局分享 04.15
- 《洛克王国:世界》PVP精灵选择推荐 04.15
- 《原神》琉鳞石全收集位置图文介绍 04.15
- 《无期迷途》黎莎洛培养建议 04.15
- 《艾塔纪元》终末原罪技能介绍 04.15
- 《原神》瓦雷莎雷火队搭配推荐 04.15