Oozie 工作流
2015-12-06 17:03:39 2 举报
Oozie是一个基于Hadoop的工作流调度系统,它能够管理和协调在Hadoop集群上运行的各种任务和服务。Oozie工作流由一组动作组成,这些动作按照预定的顺序执行,以完成特定的任务。每个动作都可以是一个MapReduce作业、Pig脚本、Sqoop数据传输、Shell脚本等。Oozie工作流可以定义依赖关系,以确保只有当一个动作成功完成后,下一个动作才会开始执行。此外,Oozie还提供了错误处理和恢复机制,以及用于监控工作流执行情况的Web界面。总之,Oozie是一个强大而灵活的工作流调度工具,能够帮助用户高效地管理和执行在Hadoop集群上的复杂任务。
作者其他创作
大纲/内容
在 Oozie 中,工作流是一个由动作(action)节点和多个控制流程节点组成的 DAG(有向无环图)
error
每个工作流都必须有个一个 start 节点和一个 end 节点
kill(控制流节点)
end(控制流节点)
max-temp-mr(action动作节点)
start(控制流节点)
ok
0 条评论
下一页