hadoop集群配置入坑问题汇总(centos7, hadoop2.6.5-3.1.2)

这篇博客总结了在CentOS7上配置Hadoop2.6.5-3.1.2集群时遇到的问题,包括网络配置、版本选择、hostname设置、hadoop命令使用、iptables服务、端口打开、配置文件修改等,并提供了详细的解决方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

持续更新问题

写在前面

纯小白一个,从前痴迷理论,如今幡然悔悟,宁愿半死不活在坑里,爬出来再幡然悔悟,也不愿脚踩空地,软软踏踏的。尤其是大数据开发,组件众多,没有对操作系统和编程的基础,能理解也依然前途漫漫。作为一个java和python的半吊子,自确定了入这个坑,觉得多踩踩坑吧,什么时候爬出来坑,幡然悔悟了,也就融会贯通了吧。
坑是数不清的,更不能瞎踩,再小的问题没踩过都不能轻视,具体问题具体分析,因为只有你清楚你自己做了什么。
As it is your cluster, only you can find out and track down the problem.

特别说明

我觉的坑分两种:简单的,复杂的
简单的就是没有搞清楚版本就往坑里跳的。
复杂的就是没有搞清楚原理卡在坑里一条腿的。

问题初汇

1. 问题:在/etc/sysconfig/network-scripts/目录下进行网络配置后,重启network服务失败。
原因
1.配置文件名和网络适配器名称要一致,比如配置文件名为ifcfg-ens33,则NAME=ens33
2.找不到需要启动的网卡MAC地址
3.其他参数配置问题
解决:先通过systemctl status network.service查看启动状态,再执行journal -xe或者cat /var/log/messages | grep network 查找问题原因。如果是不适配问题比如dispatched等单词出现,分别stop和disable掉NetworkManager。

2.问题:hadoop下载时有source版本和binary版本,区别是什么?

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值