Hadoop知识学习安排

Hadoop
序号 学习内容
1 Hadoop安装部署及常用配置(HDFS+YARN)
2 HDFS的基本架构,工作原理
3 HDFS读写流程及一致性模型
4 HDFS的HA机制(ZKFC,QJM)
5 HDFS常用管理命令的使用(FSCK、安全模式、配额、权限、节点上下线、balancer、disk balancer等)
6 HDFS联邦(viewfs、RBF)
7 HDFS纠删码
8 HDFS的短路读机制
9 HDFS的存储策略
10 YARN的基本架构,工作原理(作业提交及执行过程)
11 YARN的RM HA机制
12 YARN常用管理命令的使用(rmadmin)
13 YARN资源调度器的使用(容量和公平)
14 RM和NM的RESTART特性
15 MapReduce的工作流程(shuffle)、编程模型、输入输出格式
16 MapReduce常用命令的使用
17 Hadoop benchmarks的使用及性能测试
18 Hadoop的常用优化参数(HDFS、YARN、MR)
19 Hadoop的安全机制(Kerberos+Ranger)

猜你喜欢

转载自blog.csdn.net/nothair/article/details/110873825