备案控制台

开发者社区开发与运维文章正文

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

2019-06-01 675

版权

版权声明：

本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

本文涉及的产品

转发路由器TR，750小时连接 100GB跨地域

简介： 从hadoop移除机器把需要移除的机器增加到exclueds文件中，强制刷新datanode列表，等待decommission 状态正常后，即可停机下架，如有必要在namenode执行balancer操作。

从hadoop移除机器

把需要移除的机器增加到exclueds文件中，强制刷新datanode列表，等待decommission 状态正常后，即可停机下架，如有必要在namenode执行balancer操作。

操作命令：

在master的conf/hdfs-site.xml中加入

   <property>
       <name>dfs.hosts.exclude</name>
       <value>excludes文件路径</value>
   </property>

创建exclueds文件

文件内容增加你想删除的节点的机器名，一行一个

${HADOOP_HOME}/bin/hdfs dfsadmin -refreshNodes命令刷新datanode例表
${HADOOP_HOME}/bin/hdfs dfsadmin -report查看结果

向hadoop添加机器

启动datanode和jobtracker进程，当新添加的机器向namenode发送心跳信息后，namenode会自动感知新加入的机器，如果有必要可以做balancer操作。

操作命令：

1.在新机器上
   ${HADOOP_HOME}/sbin/hadoop-daemon.sh start datanode
   ${HADOOP_HOME}/sbin/yarn-daemon.sh start nodemanager

2.为防新数据大量写到新添加的机器上，在namenode上 ${HADOOP_HOME}/bin/hdfs balancer

文章标签：

转发路由器

前端开发

Web App开发

@dailidong@

目录

相关文章

@dailidong@

|

Web App开发前端开发 Android开发

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

使用MAT分析内存泄露对于大型服务端应用程序来说，有些内存泄露问题很难在测试阶段发现，此时就需要分析JVM Heap Dump文件来找出问题。

@dailidong@

772 0 0

@dailidong@

|

Web App开发前端开发 Java

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

2014-08-24 22:15:21,714 WARN org.apache.hadoop.hdfs.server.datanode.

@dailidong@

501 0 0

@dailidong@

|

Web App开发前端开发 Java

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

Connection reset by peer的常见原因： 1）服务器的并发连接数超过了其承载量，服务器会将其中一些连接关闭；如果知道实际连接服务器的并发客户数没有超过服务器的承载量，看下有没有网络流量异常。

@dailidong@

852 0 0

@dailidong@

|

Web App开发存储前端开发

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

NoSuchObjectException(message:There is no database named cloudera_manager_metastore_canary_test_db_hive_hivemetastore_df61080e04cd7eb36c4336f71b5a8bc4) at org.

@dailidong@

1072 0 0

@dailidong@

|

Web App开发前端开发数据库

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

cloudera manager的数据库配置文件位置： /etc/cloudera-scm-server/db.properties

@dailidong@

672 0 0

@dailidong@

|

Web App开发前端开发程序员

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

Facebook 内部分享：不论你如何富有，你都赚不到更多的时间，你也回不到过去。没有那么多的假如，只有指针滴答的时光飞逝和你应该好好把握的现在，以下25张PPT的分享将为您带来时间价值管理的技巧。

@dailidong@

607 0 0

@dailidong@

|

Web App开发前端开发关系型数据库

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

mysql修改表、字段、库的字符集修改数据库字符集： ALTER DATABASE db_name DEFAULT CHARACTER SET character_name [COLLATE .

@dailidong@

704 0 0

@dailidong@

|

Web App开发前端开发大数据

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

一、概述　　多维数据模型是最流行的数据仓库的数据模型，多维数据模型最典型的数据模式包括星型模式、雪花模式和事实星座模式，本文以实例方式展示三者的模式和区别。

@dailidong@

753 0 0

@dailidong@

|

Web App开发前端开发

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

This article explains how to configure the following settings in Hive:hive.

@dailidong@

871 0 0

@dailidong@

|

Web App开发监控前端开发

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

Spark Streaming 的一些问题，做选型前关注这些问题可以有效的降低使用风险。 checkpoint checkpoint 是个很好的恢复机制。

@dailidong@

929 0 0

热门文章

最新文章

HTTP协议状态码详解（HTTP Status Code）

《cowboy 源代码分析第一部（Erlang实现的http服务器）》

WebSocket的原理，以及和Http的关系

Detecting HTTP Load Balancers using Halberd

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

[原创]对于运行ASP.NET程序时，提示：无法启动程序“http://localhost:3532/Default.aspx”。的解决办法

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd"> <html><head><meta http-equiv="Cont

使用 http://heade-1节点IP:port 方式访问8088以及8443端口异常

http://www.cnblogs.com/jikey/archive/2009/12/07/1618772.html

RESTful接口与http协议状态表述

HTTP 原理和面试题

供应链投毒预警：恶意Py包伪装HTTP组件开展CStealer窃密后门攻击

Spring Cloud Feign 使用Apache的HTTP Client替换Feign原生httpclient

Cannot access repo1 (http://repo1.maven.org/maven2) in offline mode and the

【Go语言专栏】使用Go语言编写HTTP服务器

【亮剑】一次完整的HTTP请求的重要性和详细过程

DataWorks产品使用合集之DataWorks创建HTTP触发器节点背景信息的步骤如何解决

【计算机网络】http协议的原理与应用，https是如何保证安全传输的

使用阿里云语音通知http批量推送模式获取用户回执短信内容

相关课程

更多

Java Web开发-Web应用、Tomcat、HTTP请求与响应

云安全基础课- HTTP协议基础

相关电子书

更多

阿里巴巴HTTP 2.0实践及无线通信协议的演进之路

低代码开发师（初级）实战教程

阿里巴巴DevOps 最佳实践手册

下一篇

使用OSS上传下载文件