Azkaban学习(一)Azkaban的基础介绍

一、为何须要工做流调度器 (1)一个完整的数据分析系统一般都是由大量任务单元组成: shell 脚本程序,java 程序,mapreduce 程序、hive 脚本等java (2)各任务单元之间存在时间前后及先后依赖关系python (3)为了很好地组织起这样的复杂执行计划,须要一个工做流调度系统来调度执行linux 例如,咱们可能有这样一个需求,某个业务系统天天产生 20G 原始数据,咱们天天都
相关文章
相关标签/搜索