2301_77324100的博客

原创 如何在本机上安装spark？教程来喽~

本文介绍了如何在本机上配置Spark和Hadoop环境，以简化分布式计算的学习过程。首先，从官网或清华源下载Spark和Hadoop的压缩包，并解压两次。接着，配置系统环境变量，确保路径指向解压后的目录。然后，将hadoop.dll文件复制到C盘的System32目录，并将winutils.exe放入Hadoop的bin目录，以支持Windows系统上的运行。最后，通过终端输入spark-shell验证配置是否成功。此方法避免了使用虚拟机的复杂性，适合初学者快速搭建分布式计算环境。