Hadoop MapReduce原理笔记

分类: 文章 • 2023-11-14 22:05:46

1：Hadoop的核心组件–MR（MapReduce）
是一套分布式计算框架，是移动计算（而非移动数据）
MapReduce计算框架
Hadoop MapReduce原理笔记 MapReduce的split大小划分原理

例如：block为64M,则不用划分block，因为block就是64M
如果block为200M，则max(min.split,min(max.split,block))=100M
所以split=100M，则200M的block需要划分为两个split。