Azkaban 大数据任务调度器
实际当中经常有这些场景：每天有一个大任务，这个大任务可以分成A,B,C,D四个小任务，A,B任务之间没有依赖关系，C任务依赖A,B任务的结果，D任务依赖C任务的结果。一般的做法是，开两个终端同时执行A,B，两个都执行完了再执行C，最后再执行D。这样的话，整个的执行过程都需要人工参加，并且得盯着各任务的进度。但是我们的很多任务都是在深更半夜执行的，通过写脚本设置crontab执行。其实，整个过程类似于一个有向无环图（DAG）。每个子任务相当于大任务中的一个流，任务的起点可以从没有度的节点开始执行，任何没有通路的节点之间可以同时执行，比如上述的A,B。总结起来的话，我们需要的就是一个工作流的调度器，而azkaban就是能解决上述问题的一个调度器。
文件下载
评论信息
其他资源
- 汉王ESP系列驱动及demo下载.rar
- PROFIBUS调试助手ProfiAssistV2.40
- 计算机网络课设
- 算法设计与分析课后习题答案（李春保）
- 最小二乘匹配算法、matlab版
- SQL学生成绩管理系统
- C语言通讯录管理系统实现添加，查询，修改，删除等功能。
- 天津大学图形学考试资料
- adrc自抗扰程序（仿真成功）
- 5G时代下的智能网联汽车
- TB6612电机驱动模块TB6612模块ALTIUM设计硬件原理图+PCB+封装库文件.zip
- 基于神经网络集成的单个飞行事件噪声预测模型
- T24_华为SD-WAN解决方案，构建云时代的企业互联_.pdf
- osgOcean update
- 各章知识点整理.xmind
- gem5-bbr：用于死锁自由方案的gem5存储库：Brownian Bubble Router-源码
- Server Side Swift with Kitura_Xcode 11 - Swift 5.1 - iOS13-V2.0.zip
- 北京科技大学《矩阵理论》历年期末试卷（03-18部分含答案）.pdf
- asp.net MVC 增删改查基础
- 深搜+宽搜+剪枝 配合POJ题目
- verilog uart串行接收发送程序
- 数独破解（软件）
- 蓝牙通讯文字、语音聊天demo
- Android Dalvik虚拟机结构及机制剖析 第2卷
- java网络编程代码
免责申明
【只为小站】的资源来自网友分享，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论 【只为小站】 经营者是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明