- MapReduce:负责数据的map规整与reduce的计算
- Hdfs:分布式文件系统
- Yarn:负责资源的调度与管理
- Combiner:在map的时候根据应用场景进行事先的reduce
- Partitioner:根据不同的的应用场景进行分区的计算,多个task任务
Hadoop各个组件的功能
猜你喜欢
转载自blog.csdn.net/suubyy/article/details/79964333
今日推荐
周排行