HDFS文件的创建、上传、下载、删除（基于本机API调用）

最新推荐文章于 2025-05-13 09:46:01 发布

原创

最新推荐文章于 2025-05-13 09:46:01 发布 · 1.1k 阅读

8 ·

CC 4.0 BY-SA版权

文章标签：

#hdfs #hadoop #大数据 #java

本文介绍了如何基于本机API调用来进行HDFS文件系统的操作，包括在完整的Hadoop环境中配置、创建maven工程，并详细阐述了文件的创建、上传、下载和删除过程，特别提到了Windows环境下与Linux的不同以及可能出现的问题和解决方案。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

HDFS文件的创建、上传、下载、删除（基于本机API调用）

一、完整的一个Hadoop环境

安装参考
启动hadoop程序

二、新建maven工程

新建参考

三、文件操作

ps:针对文件的操作与Linux虚拟机的操作略有不同
Linux虚拟机的操作

文件的创建

 @Test
    public  void create() throws Exception{
   
   
        Configuration cfg = new Configuration(); //创建配置文件
         FileSystem fs = FileSystem.get(new URI(hdfs的地址),cfg,"root");//获取文件系统
         //注意，这边如果在电脑本机没有配置hosts的化，地址只能使用ip地址 ,要写用户
        fs.mkdirs(new