本文共 467 字,大约阅读时间需要 1 分钟。
一个完整的大数据分析系统,必然由很多任务单元 (如数据收集、数据清洗、数据存储、数据分析等) 组成,所有的任务单元及其之间的依赖关系组成了复杂的工作流。复杂的工作流管理涉及到很多问题:
面对这些问题,工作流调度系统应运而生。Azkaban 就是其中之一。
Azkaban 产生于 LinkedIn,并经过多年生产环境的检验,它具备以下功能:
Azkaban 的设计理念是在保证功能实现的基础上兼顾易用性,其页面风格清晰明朗,下面是其 WEB UI 界面:
转载地址:http://ikxv.baihongyu.com/