开发者社区> 问答> 正文

mapreduce如何指定运行时memory的大小呢?

mapreduce如何指定运行时memory的大小呢?

展开
收起
游客ydhxr2xydmgpo 2021-12-12 21:16:23 885 0
1 条回答
写回答
取消 提交回答
  • hadoop jar hadoop-core-0.1.0-SNAPSHOT.jar cn.hadoop.mapreduce.WordCount -D mapreduce.map.memory.mb=2048 /home/input/ /home/output/

    mapreduce.map.memory.mb=2048 :指定这个mapreduce任务运行时内存的大小

    /home/input :指定的输入hdfs路径

    /home/output:指定的输出hdfs路径

    2021-12-12 21:16:49
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
ALLUXIO (FORMERLY TACHYON): UNIFY DATA AT MEMORY SPEED - EFFECTIVE USING SPARK WITH ALLUXIO 立即下载
Elastic Streaming Spark Streaming + Dynamic Provisioning + Dynamic Allocation 立即下载
Monitoring the Dynamic Resource Usage of Scala and Python Spark Jobs in Yarn 立即下载