Oozie安装的说明

简介:

Oozie相当于Hadoop的一个客户端,因此集群中要有一台机器部署Oozie server端即可,由于可以有任意多个客户端连接Oozie,故每个客户端都必须部署Oozie client

 

  

比如我的机器有hadoopmaster、hadoopslave1、hadoopslave2。

比如我的机器有sparkmaster、sparkslave1、sparkslave2。

比如我的机器有master、slave1、slave2。

比如我的机器有bigdatamaster、bigdataslave1、bigdataslave2

 

 

 

 

建议:

  一般,我们在master上部署Oozie server,在slave1或者slave2上部署Oozie client。

  

 

 

 

 

 

Oozie支持手工和工具两种部署方式

  (1)手工部署Oozie呢,需配置太多参数,但是,好理解其原理,建议初学这样做,能学到很多。该方式啊,均得由用户执行,细节太多,切当设计多个组件时,用户须自己解决组件间版本兼容问题。(这里,我就不赘述了,可以见Azkaban)。

  因为,现在都是用这个优秀的第三方工作流引擎。

 

  (2)工具部署Oozie呢,比如Ambari或Cloudera Manger。(当前两大最主流的集群管理工具,前者是Hortonworks公司,后者是Cloudera公司)使用工具来,可以说是一键操作,难点都在工具Ambari或Cloudera Manger本身部署上。


本文转自大数据躺过的坑博客园博客,原文链接:http://www.cnblogs.com/zlslch/p/6118020.html,如需转载请自行联系原作者

相关文章
|
6月前
|
SQL HIVE
71 Azkaban HIVE脚本任务
71 Azkaban HIVE脚本任务
27 0
|
2月前
|
SQL XML 分布式计算
Oozie功能
Oozie是一个基于Hadoop的调度器,它可以用来管理和协调Hadoop作业、Pig作业、Hive作业、Shell脚本等。【2月更文挑战第21天】
18 2
|
3月前
|
分布式计算 Hadoop 数据挖掘
Azkaban
Azkaban
27 0
|
6月前
|
分布式计算 Java Hadoop
70 Azkaban MAPREDUCE任务
70 Azkaban MAPREDUCE任务
21 0
|
10月前
|
监控 大数据 物联网
在CDH7.1.1中安装NiFi
在CDH7.1.1中安装NiFi
101 0
|
12月前
|
分布式计算 JavaScript Java
Oozie的安装和使用
Oozie的安装和使用
|
测试技术 数据安全/隐私保护
CDH Oozie 邮件配置
CDH Oozie 邮件配置
|
SQL 关系型数据库 MySQL
Ambari部署Hive
Ambari部署Hive
133 0
Ambari部署Hive
|
分布式计算 Hadoop
使用 Ambari 安装 Hadoop 集群
转自:使用 Ambari 安装 Hadoop 集群
914 0
|
分布式计算 关系型数据库 MySQL
oozie
应用场景 Apache Oozie 是用于 Hadoop 平台的一种工作流调度引擎。该框架使用 Oozie 协调器促进了相互依赖的重复工作之间的协调,您可以使用预定的时间或数据可用性来触发 Apache Oozie。
2673 0

相关实验场景

更多