开源分布式工做流任务调度系统Easy Scheduler Release 1.0.2发布

Easy Scheduler Release 1.0.2

Easy Scheduler 1.0.2是1.x系列中的第三个版本。此版本增长了调度开放接口、worker分组(指定任务运行的机器组)、任务流程及服务监控以及对oracle、clickhouse等支持，具体以下：

新特性：

• [EasyScheduler-79] 调度经过token方式对外开放接口，能够经过api进行操做
• [EasyScheduler-138] 能够指定任务运行的机器(组)
• [EasyScheduler-139] 任务流程监控及Master、Worker、Zookeeper运行状态监控
• [EasyScheduler-140] 工做流定义—增长流程超时报警
• [EasyScheduler-134] 任务类型支持Oracle、CLICKHOUSE、SQLSERVER、IMPALA
• [EasyScheduler-136] Sql任务节点能够独立选取抄送邮件用户
• [EasyScheduler-141] 用户管理—用户能够绑定队列,用户队列级别高于租户队列级别，若是用户队列为空，则寻找租户队列

加强：

• [EasyScheduler-154] 租户编码容许纯数字或者下划线这种的编码

修复：

• [EasyScheduler-135] Python任务能够指定python版本

• [EasyScheduler-125] 用户帐号中手机号没法识别联通最新号码166开头

• [EasyScheduler-178] 修复ProcessDao里细微的拼写错误

• [EasyScheduler-129] 租户管理中，租户编码带下划线等特殊字符没法经过校验

感谢：

最后但最重要的是，没有如下伙伴的贡献就没有新版本的诞生：

Baoqi , chubbyjiang , coreychen , chgxtony, cmdares , datuzi , dingchao, fanguanqun , 风清扬, gaojun416 , googlechorme, hyperknob , hujiang75277381 , huanzui , kinssun, ivivi727 ,jimmy, jiangzhx , kevin5210 , lidongdai , lshmouse , lenboo, lyf198972 , lgcareer , lzy305 , moranrr , millionfor , mazhong8808, programlief, qiaozhanwei , roy110 , swxchappy , sherlock111 , samz406 , swxchappy, qq389401879 , lzy305, vkingnew, William-GuoWei , woniulinux, yyl861, zhangxin1988, yangjiajun2014, yangqinlong, yangjiajun2014, zhzhenqin, zhangluck, zhanghaicheng1, zhuyizhizhi

以及微信群里众多的热心伙伴！在此很是感谢！

---

Easy Scheduler介绍

Easy Scheduler是一个分布式工做流任务调度系统，主要解决数据研发ETL错综复杂的依赖关系所带来的各类问题。 其主要目标以下：

• 以DAG图的方式将Task按照任务的依赖关系关联起来，可实时可视化监控任务的运行状态
• 支持丰富的任务类型：Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql),Python,Sub_Process、Procedure等
• 支持工做流定时调度、依赖调度、手动调度、手动暂停/中止/恢复，同时支持失败重试/告警、从指定节点恢复失败、Kill任务等操做
• 支持工做流优先级、任务优先级及任务的故障转移及任务超时告警/失败
• 支持工做流全局参数及节点自定义参数设置
• 支持资源文件的在线上传/下载，管理等，支持在线文件建立、编辑
• 支持任务日志在线查看及滚动、在线下载日志等
• 实现集群HA，经过Zookeeper实现Master集群和Worker集群去中心化
• 支持对Master/Worker cpu load，memory，cpu在线查看
• 支持工做流运行历史树形/甘特图展现、支持任务状态统计、流程状态统计
• 支持补数
• 支持多租户
• 支持国际化
• 还有更多等待伙伴们探索

与同类调度系统的对比

系统部分截图

文档

• 后端部署文档

• 前端部署文档

• 使用手册

• 我要体验 普通用户登陆：demo/demo123

更多文档请参考 easyscheduler中文在线文档

近期研发计划

EasyScheduler的工做计划：研发计划 ，其中 In Develop卡片下是1.0.2版本的功能，TODO卡片是待作事项(包括 feature ideas)

贡献代码

很是欢迎你们来参与贡献代码，提交代码流程请参考： github.com/analysys/Ea…

感谢

Easy Scheduler使用了不少优秀的开源项目，好比google的guava、guice、grpc，netty，ali的bonecp，quartz，以及apache的众多开源项目等等， 正是因为站在这些开源项目的肩膀上，才有Easy Scheduler的诞生的可能。对此咱们对使用的全部开源软件表示很是的感谢！咱们也但愿本身不只是开源的受益者，也能成为开源的 贡献者，因而咱们决定把易调度贡献出来，并承诺长期维护。也但愿对开源有一样热情和信念的伙伴加入进来，一块儿为开源献出一份力！

帮助

The fastest way to get response from our developers is to submit issues, or add our wechat : 510570367

另外咱们部署了一个单机版本的小demo，想体验的伙伴，请访问 http://52.82.13.76:8888 欢迎联系体验(wechat : 510570367)， 涉及多人修改的问题，管理员登陆暂不开放！欢迎提建议！