本文详细介绍了Hadoop系统的三大核心组件：Mapper区域负责数据的解析与处理；Reduce区域完成数据的远程拷贝、排序及最终的数据处理；Client区域则涉及用户交互等内容。通过本文可以深入了解Hadoop的工作原理。
三大区域
1） Mapper区域
2） Reduce区域
3） Client区域
1）.Map阶段
a.数据数据格式的解析：InputFormat
b.处理输入数据mapper
c.数据分组（map函数处理以后的结果数据）partitioner
2）.Reduce阶段
a.数据远程拷贝
b.数据按照key排序
c.数据处理Reduce
d.数据输出格式（Reduce函数处理的结果数据），OutputFormat
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
