Win 10 安装Spark

本文详细指导了如何配置Java 1.8,避免空格;安装Hadoop并将其工具放入系统和bin目录;以及Spark的下载和环境变量设置,包括可能遇到的问题及解决方案。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

  1. 配置Jdk
    安装java1.8
    配置路径
    CLASSPATH
    .;%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar;
    在这里插入图片描述

JAVA_HOME
D:\java\jdk1.8.0_181
这个路径中一定不要包含空格
在这里插入图片描述

Path
%JAVA_HOME%\bin
在这里插入图片描述
2. 配置Hadoop
下载版本
https://download.csdn.net/download/hljczm/85293508
将包中的文件winutils.exe和hadoop.dll放到以下两个目录下
C:\Windows\System32
D:\work\tools\hadoop-2.7.7\bin —为你解压后的bin目录

配置环境变量
HADOOP_HOME
D:\work\tools\hadoop-2.7.7
在这里插入图片描述
配置path
包括bin和sbin
![在这里插入图片描述](https://i-blog.csdnimg.cn/blog_migrate/d4b76c73bc42ae9aa23881e798973fda.png在这里插入图片描述

  1. 配置Spark
    下载版本
    https://mirrors.bfsu.edu.cn/apache/spark/spark-3.1.3/spark-3.1.3-bin-hadoop2.7.tgz

配置环境变量
在这里插入图片描述在这里插入图片描述
可能会出现的问题
1、null\bin\winutils.exe
把包中对应的文件放到系统目录中,以及hadoop的bin目录下
在这里插入图片描述

2、版本不一致导致的问题,使用文档中的对应的版本,就不会出现该问题
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值