源码属性
授权 | 开源 |
大小 | 70.54MB |
语言 | Java |
数据库 | MySQL |
运行环境 | Java |
源码简介
Apache DolphinScheduler(incubator,原EasyScheduler)是一个大数据分布式工作流任务调度系统,主要解决大数据研发过程中ETL处理错综复杂的依赖关系,而不能直观监控任务健康状态等问题。DolphinScheduler以DAG流式的方式将Task组装起来,可实时监控任务的运行状态,同时支持重试、从指定节点恢复失败、暂停及Kill任务等操作。
设计特点:一个分布式易扩展的可视化DAG工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。 其主要目标如下:1、以DAG图的方式将Task按照任务的依赖关系关联起来,可实时可视化监控任务的运行状态2、支持丰富的任务类型:Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql),Python,Sub_Process、Procedure等3、支持工作流定时调度、依赖调度、手动调度、手动暂停/停止/恢复,同时支持失败重试/告警、从指定节点恢复失败、Kill任务等操作4、支持工作流优先级、任务优先级及任务的故障转移及任务超时告警/失败5、支持工作流全局参数及节点自定义参数设置6、支持资源文件的在线上传/下载,管理等,支持在线文件创建、编辑7、支持任务日志在线查看及滚动、在线下载日志等8、实现集群HA,通过Zookeeper实现Master集群和Worker集群去中心化9、支持对Master/Worker cpu load,memory,cpu在线查看10、支持工作流运行历史树形/甘特图展示、支持任务状态统计、流程状态统计11、支持补数12、支持多租户13、支持国际化14、还有更多等待伙伴们探索
转载请注明来源:DolphinScheduler任务调度系统 v3.2.0
本文永久链接地址:https://www.ymkuzhan.com/65033.html
本文永久链接地址:https://www.ymkuzhan.com/65033.html
下载声明:
本站资源如无特殊说明默认解压密码为www.ymkuzhan.com建议使用WinRAR解压; 本站资源来源于用户分享、互换、购买以及网络收集等渠道,本站不提供任何技术服务及有偿服务,资源仅提供给大家学习研究请勿作它用。 赞助本站仅为维持服务器日常运行并非购买程序及源码费用因此不提供任何技术支持,如果你喜欢该程序,请购买正版! 版权声明:
下载本站资源学习研究的默认同意本站【版权声明】若本站提供的资源侵犯到你的权益,请提交版权证明文件至邮箱ymkuzhan#126.com(将#替换为@)站长将会在三个工作日内为您删除。 免责声明:
您好,本站所有资源(包括但不限于:源码、素材、工具、字体、图像、模板等)均为用户分享、互换、购买以及网络收集而来,并未取得原始权利人授权,因此禁止一切商用行为,仅可用于个人研究学习使用。请务必于下载后24小时内彻底删除,一切因下载人使用所引起的法律相关责任,包括但不限于:侵权,索赔,法律责任,刑事责任等相关责任,全部由下载人/使用人,全部承担。以上说明,一经发布视为您已全部阅读,理解、同意以上内容,如对以上内容持有异议,请勿下载,谢谢配合!支持正版,人人有责,如不慎对您的合法权益构成侵犯,请联系我们对相应内容进行删除,谢谢!