Hadoop设置任务执行队列及优先级

简介:

Hive设置方法:

SET mapreduce.job.queuename=root.up;

SET mapreduce.job.priority=HIGH;

 

set tez.queue.name=cmbi;

----

 设置引擎

set hive.execution.engine=mr;  

set hive.execution.engine=spark;  

set hive.execution.engine=tez;  

---- 

 

Pig设置方法:

SET mapreduce.job.queuename root.up;

SET mapreduce.job.priority HIGH;

 

MapReduce设置方法:

Hadoop jar app.jar -D mapreduce.job.queuename=root.up -D mapreduce.job.priority=HIGH


本文转自茄子_2008博客园博客,原文链接:http://www.cnblogs.com/xd502djj/p/6958946.html,如需转载请自行联系原作者。



目录
相关文章
|
3月前
|
数据采集 分布式计算 资源调度
|
5月前
|
分布式计算 Hadoop 调度
Hadoop节点的任务重试机制
【5月更文挑战第15天】
47 4
|
3月前
|
分布式计算 Hadoop Java
hadoop环境变量设置问题
【7月更文挑战第15天】
64 11
|
3月前
|
分布式计算 监控 Hadoop
Hadoop任务执行失败
【7月更文挑战第12天】
88 10
|
3月前
|
分布式计算 Java Hadoop
Hadoop找到JAVA_HOME变量,并设置其值
【7月更文挑战第19天】
57 3
|
3月前
|
数据采集 分布式计算 Hadoop
|
4月前
|
存储 分布式计算 Hadoop
|
4月前
|
数据采集 SQL 分布式计算
|
5月前
|
存储 分布式计算 监控
Hadoop节点设置考虑因素
【5月更文挑战第21天】
43 1
|
5月前
|
SQL 分布式计算 资源调度
Hadoop Yarn 配置多队列的容量调度器
配置Hadoop多队列容量调度器,编辑`capacity-scheduler.xml`,新增`hive`队列,`default`队列占总内存40%,最大60%;`hive`队列占60%,最大80%。配置包括队列容量、用户权限和应用生存时间等,配置后使用`yarn rmadmin -refreshQueues`刷新队列,无需重启集群。多队列配置可在Yarn WEB界面查看。

相关实验场景

更多
下一篇
无影云桌面