hadoop集群加密问题汇总

原创

已于 2022-03-13 23:43:53 修改 · 2.4k 阅读

CC 4.0 BY-SA版权

文章标签：

于 2022-03-13 23:43:08 首次发布

hdfs dfs -put xxxx.txt /user/root

报错消息：0 datanode 2 datanode running but exclude。。。

1、检查防火墙

2、检查以下datanode启动日志，确认是不是blk pool id （数据块id）不一致

删除datanode上的文件系统，重新格式namenode

启动日志的位置：/opt/hadoop-2.8.5/logs/hadoop-root-datanode-hadoop02.log

cat /opt/hadoop-2.8.5/logs/hadoop-root-datanode-hadoop02.log

看最新的报错信息，进行解决

解决方法：

防火墙没关闭：

关闭防火墙

各个节点的防火墙都应关闭，运行如下命令：
systemctl stop firewalld
systemctl disable firewalld

第二个问题：

step 1 删除每个datanode节点上数据块 rm -rf current/ 路径：/opt/hadoop-2.8.5/tmp/dfs/data

step 2 格式化namenode

hdfs namenode -format

在实际中没有遇到这个问题，只是身边发现有这样的问题！可以借助参考

集群正在启动中，会有一个短暂的安全模式时期，不接受作业，稍后即可

或者输入命令：

hdfs dfsadmin -safemode leave

200万优质内容无限畅学