hadoop 使用eclipse远程调试-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

hadoop 使用eclipse远程调试

爵霸 2016-05-31 09:21:01 1252

使用eclipse远程调试服务器上的hadoop程序的时候出现一个问题:

INFO hdfs.DFSClient: Exception in createBlockOutputStream .168.113.181:50010 java.net.ConnectException: Connection timed out: no further information

服务器在机房托管的,可以通过内网访问,namenode与datanode是通过内网链接的,现在通过namenode的外网ip测试,总是报datanode链接超时,不知道hadoop用eclipse调试工具的机制

分布式计算 Hadoop Android开发
分享到
取消 提交回答
全部回答(1)
  • 爵霸
    2019-07-17 19:21:17

    貌似是这样的》

    Cient会和名称节点达成协议(通常是TCP 9000协议)然后得到将要拷贝数据的3个数据节点列表。然后Client将会把每块数据直接写入数据节点中(通常是TCP 50010协议)。收到数据的数据节点将会把数据复制到其他数据节点中,循环只到所有数据节点都完成拷贝为止。名称节点只负责提供数据的位置和数据在族群中的去处(文件系统元数据)。

    0 0
大数据
使用钉钉扫一扫加入圈子
+ 订阅

大数据计算实践乐园,近距离学习前沿技术

推荐文章
相似问题