版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/Davis_Dxs/article/details/79494622
Hadoop 1.x/2.x DataNode 下架 详解
Hadoop 1.x/2.x DataNode 下架操作没有区别。
一、修改 hdfs-site.xml
在 hdfs-site.xml 配置文件中增加以下内容(NameNode 节点的配置文件)
<property>
<name>dfs.hosts.exclude</name>
<value>$HADOOP_HOME/etc/hadoop/exclude</value>
</property>
# 本地文件系统创建一个文件(命名随意)(exclude),Value的值就是该文件的路径
二、在 exclude 文件中 添加下架节点主机名
例如:需要下架的 DataNode节点的主机名分别为:slave5、slave6
则在 exclude 文件中添加需要下架的节点主机名,一个主机名一行。
slave5
slave6
三、重新载入 NameNode 配置,启动下架过程
下架的过程可能需要相当一段时间,因为他需要确保数据块的复制操作没有影响集群的其他任务。
hadooop dfsadmin -refreshNodes
四、监控命令
使用一下命令来监控下架进度,不管关闭这些下架中节点,知道下架完成。
hadoop dfsadmin -report
五、重新添加下架节点
当想要把这些节点重新添加回集群时,可以从 exclude 文件中删除节点,执行:
hadoop dfsadmin -refreshNodes