yangqin@1225的博客

背景公司需要搭建一套大数据集群环境用于测试，本文记录其详细过程，方便后面参考环境信息一主两从，均为ubuntu18.04主：192.168.10.203(mufengcn)从：192.168.10.202(mufengcn)，192.168.10.200(tsroot)注：假定括号内为ssh用户名，均为非root用户名（真实服务器，文中涉及到的用户名图文是不对应的，我只是把文案中涉及到的用户名批量替换了下~）准备设置主机名及配置hosts依次设置主机名，如：sudo hostname b

在学习hadoop课程中，讲师介绍了hadoop的单机以及集群部署方式，由于本地资源限制，只有一台虚拟机，所以考虑使用docker的方式实现分布式集群搭建。如上图：需要在主节点启动NameNode,Secondary namenode,Resource Manager从节点启动：DataNode，Node Manager准备下载centos镜像: docker pull centos启动一个容器：docker run -td --name base -i centos bash进入容器，