
hadoop
文章平均质量分 90
原来丨
一无所有
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hadoop分布式文件系统(HDFS)常用API学习
1、org.apache.hadoop.fs.FileSystem 范围 方法 返回值 描述 addDelegationTokens(String renewer, Credentials credentials) Token<?>[] 添加新的token,返回所有的token append(Path f) FSData...原创 2018-04-16 20:29:05 · 2429 阅读 · 1 评论 -
hadoop分布式文件系统(HDFS)常用操作
使用命令hadoop fs可以查看所有的命令,基本上和linux系统命令类似 1、创建文件夹(默认用户根目录)hadoop fs -mkdir peom2、查看文件(可以看到权限,文件所属,以及组属性)hadoop fs -ls /user/lhy 3、将本地文件复制到HDFS中(相对路径也可以)hadoop fs -copyFromLocal ~/Desk...原创 2018-04-11 23:26:12 · 680 阅读 · 0 评论 -
hadoop伪分布式环境搭建
一、下载hadoop并解压官方下载页面地址:http://hadoop.apache.org/releases.html 下载2.7.5版本,并解压,我的解压路径为下图 二、配置hadoop运行环境注意:必须要有java环境 1、编辑环境变量文件 vi ~/.bash_profile 2、文件中添加hadoop环境变量 export HADOOP_HOME=/Users...原创 2018-04-11 18:23:51 · 218 阅读 · 0 评论 -
hadoop版本3.1.0分布式环境下执行mapreduce作业
一、环境配置1、hdfs-site.xml<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property&原创 2018-05-02 19:14:35 · 934 阅读 · 0 评论