Hadoop源码详解之FileOutputFormat 类

最新推荐文章于 2022-05-10 17:01:53 发布

说文科技

最新推荐文章于 2022-05-10 17:01:53 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏： # Hadoop

喜欢文章？请私信联系作者。

本文链接：https://blog.csdn.net/liu16659/article/details/85205528

Hadoop 专栏收录该内容

52 篇文章

订阅专栏

本文深入剖析Hadoop中FileOutputFormat类的功能与实现细节，重点介绍了如何为MapReduce作业设置输出目录，以及该类与FileSystems交互的方式，对比了其与文件输入路径的处理差异。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

`Hadoop` 源码详解之`FileOutputFormat` 类

1. 类释义

A base class for OutputFormats that read from FileSystems.
一个类从FileSystems读取用于OutputFormats 【实在翻译不好 _ 】

2. 类源码

3. 方法详解

3.1 `setOutputPath()`

Set the Path of the output directory for the map-reduce job.
为map-reducejob设置输出目录。

  public static void setOutputPath(Job job, Path outputDir) {
    try {
      outputDir = outputDir.getFileSystem(job.getConfiguration()).makeQualified(
          outputDir);
    } catch (IOException e) {
        // Throw the IOException as a RuntimeException to be compatible with MR1
        throw new RuntimeException(e);
    }
    job.getConfiguration().set(FileOutputFormat.OUTDIR, outputDir.toString());
  }