开发者社区> 问答> 正文

MapReduce程序没输出日志

爵霸 2016-06-06 08:46:06 1436
  1. 服务器上:hadoop-2.3.0-cdh5.1.3 、centos

    本地eclipse远程连接的hadoop,运行mapreduce程序成功,但是控制台没有日志(就是map跑了X%,reduce跑了X%这样的日志木有)。我看到别人的都是这样的,华丽丽的一大堆日志啊: 
    

screenshot
而我的却是这样的:

screenshot

我的控制台就这样无疾而终了,它就是这么干净利落!

我表示不能接受啊,要不是我跑到hdfs下看了一下结果,我都不知道它这是肿么了。

为神马我和别人的差距就这么大,就输出这两行就表示结束了。

虽然我很懒,但是程序你这样学习我也不行啊,这样让我往后如何判断你是否跑成功了。

不可能每次都跑到服务器上瞅瞅,也不可能每次都打开一个网页找结果日志吧。

分布式计算 Hadoop Linux Android开发
分享到
取消 提交回答
全部回答(1)
  • 爵霸
    2019-07-17 19:27:29

    可能是插件版本问题和那些地方的配置问题, 手动输出吧

    1.             //hadoop 在eclipse中输出日志    
    2.             org.apache.hadoop.mapreduce.Counter count = context.getCounter(   
    3.                     "map 中的值value", value.toString());   
    4.             count.increment(1); 
    
    1. org.apache.hadoop.mapreduce.Counter count= context.getCounter("reduce中的值key",   
    2.                     key.toString());   
    3.             count.increment(1); 
    0 0
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题