Spark独立模式http://localhost:8080访问不了

原创于 2020-02-02 11:34:26 发布 · 4.3k 阅读

9 ·

CC 4.0 BY-SA版权

文章标签：

#Spark #独立模式 #http #8080 #访问不了

本文详细介绍了当Spark独立模式下集群无法通过http://localhost:8080访问时的解决方案，包括检查环境变量配置，如Java、Hadoop、Scala、Spark的路径设置，以及通过关闭Linux防火墙来解决问题。

问题描述：

Spark独立模式

手动启动集群

./sbin/start-master.sh

http://localhost:8080访问不了

解决办法：

1、检查环境安装配置是否正确

vi /etc/profile

# Java
export JAVA_HOME=/usr/java/jdk1.8.0_212
export PATH=$PATH:$JAVA_HOME/bin

# Hadoop
export HADOOP_HOME=/usr/hadoop/hadoop-3.2.1
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

# Scala
export SCALA_HOME=/usr/scala/scala-2.13.1
export PATH=$PATH:$SCALA_HOME/bin

# Spark
export SPARK_HOME=/usr/spark/spark-3.0.0
export PATH=$PATH:$SPARK_HOME/bin
export PATH=$PATH:$SPARK_HOME/sbin

2、关闭Linux防火墙