hdoop(2)——hdfs一些常用的配置文件

(1)core-site xml

此文件在etc/hadoop/下,此目录下写入了外部访问hdfs的端口信息:
在这里插入图片描述

默认端口号为9000

(2)hdfs-site xml

此文件位置同(1),用cat命令查看该文件:
<1>
在这里插入图片描述
此处内容表示的是副本数,在这里可以设置副本数为几个
<2>
在这里插入图片描述
<3>
在这里插入图片描述
此处可以看到datanode数据存放在哪
此处可以设置我们的namenode的文件放置在哪

(3)mapred-site xml

文件位置同上
<1>
在这里插入图片描述
此处指定了mapreduce执行的端口号为9001
<2>
在这里插入图片描述
此处指定了调度工具为yarn

(4)yarn-site xml

文件位置同上
<1>
在这里插入图片描述
我们在shuffle阶段处理所用到的工具
<2>
在这里插入图片描述

yarn跑起来后的hostname的设定
<3>
在这里插入图片描述
配置虚拟内存是否检查

猜你喜欢

转载自blog.csdn.net/weixin_48445640/article/details/108952800