win10 spark+scala+eclipse+sbt 安装配置

已于 2022-11-18 14:58:58 修改
阅读量2.2k 收藏 5
点赞数 1
CC 4.0 BY-SA版权
分类专栏： Spark 文章标签： eclipse spark scala win10
于 2018-05-07 12:37:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dkl12/article/details/80224035
本文档详述了在Windows 10系统上安装和配置Spark、Scala、Hadoop、Eclipse及其相应插件的步骤。包括下载安装JDK1.8、Spark和Hadoop，配置环境变量，安装Scala并验证，安装Eclipse Scala插件和sbt，以及解决Hadoop的temp/hive权限问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。点击跳转到网站：https://www.captainai.net/dongkelun

1、首先安装配置jdk1.8以上,建议全部的安装路径不要有空格

2、安装spark

2.1 下载

下载地址：http://spark.apache.org/downloads.html，我下载的是 spark-2.2.1-bin-hadoop2.7.tgz

2.2 安装

解压到指定路径下即可，比如 D:\Company\bigdata\spark-2.2.1-bin-hadoop2.7

2.3 配置环境变量

在系统变量Path添加一条：D:\Company\bigdata\spark-2.2.1-bin-hadoop2.7\bin 即可

3、安装hadoop

3.1 下载

下载地址：

了解本专栏 订阅专栏 解锁全文 超级会员免费看
IDEA中scala实现word_count，sbt打jar包，并发送linux中spark运行(sbt打包详细)
weixin_41512727的博客
04-24 1705
文章目录0-背景1-spark安装2-IDEA开发3-参考 0-背景 最近因为业务需求，开始鼓捣下kafka和spark。因为也是第一次做这方面的内容，而且没玩过java和scala。所以这个word count的例子，鼓捣了近两天才出结果。 整个流程如下：首先搭建虚拟机，安装ubuntu。然后在linux中安装spark。最后再本地的IDEA中开发scala，并打包jar包，发送到spark系统...
详细过程图解——win10下idea使用sbt方式编译scala源码
Zhongsigen的博客
11-01 1078
win10下idea使用sbt方式编译scala源码 虽然集群使用Linux，Ubuntu的桌面版也有非常好的体验感受，但是windows下写码编译打包成jar文件然后再提交到集群运行也是不错的，故本文记录win10下如何搭建环境 准备工作 idea官网下载 https://www.jetbrains.com/idea/ sbt官网下载 https://www.scala-sbt.org/do...
windows安装sbt
04-09
NULL 博文链接：https://javaloverlover.iteye.com/blog/1630821
Windows 安装 sbt
Solin的博客
12-04 4128
1、下载sbt的window版本对应的msi文件：https://www.scala-sbt.org/download.html 2、安装配置  运行安装文件直接下一步下一步直至安装完成 检查环境变量是否自动添加，没有添加自己手动添加下 如果需要自定义配置，则到此路径下按需求配置文件 在sbt\conf\sbtconfig.txt中末尾添加 -Dsbt.boot.di...
【Sbt安装教程笔记】
最新发布
weixin_47036445的博客
06-26 350
sbt（Simple Build Tool）是Scala的构建工具，用于自动化编译、测试、打包和依赖管理等任务。它通过配置文件（build.sbt）定义项目结构和依赖关系，支持增量编译、插件扩展，能与Java生态系统无缝集成，是Scala项目开发中主流的构建工具之一。点击自己想要的版本进行下载，我下载的是1.10.3的最新稳定版，然后点击Windows对应的后缀为.msi的版本进行下载。新建一个有 build.sbt 项目的目录下运行 sbt，否则它不知道该运行哪个 Scala 项目。
Windows下sbt安装配置
weixin_30462049的博客
02-07 1070
1.下载sbt 官网：http://www.scala-sbt.org/download.html CSDN：http://download.csdn.net/download/u014532217/10187174 2.配置环境 #SBT_HOME设置为sbt解压目录，例如： SBT_HOME=C:\Programs\sbt; #在path中添加： Path=%SBT_...
Win10 Spark&Scala
myepicure的专栏
06-25 680
Spark&Scala&IntelliJ
Windows下SBT的安装
weixin_39363116的博客
03-06 361
Windows下SBT的安装
SparkScala开发在Eclipse中的依赖包配置
要使用Eclipse这个集成开发环境（IDE）进行SparkScala开发，首先需要配置一系列的依赖包。这里的依赖包主要指那些Spark在编译、运行时需要依赖的库文件以及Scala的运行时环境。虽然Apache Spark本身是用Scala语言...
VS Code下的Spark(Scala)开发
lyd882的博客
12-24 8603
VS Code下的Spark(Scala)开发 IntelliJ IDEA下开发Scala应用很智能，体验很好，但正版费用极高，为了避免版权收费问题，考虑使用开源免费的IDE,比如Eclipse,VS Code，而且VS Code小而美、功能全、执行快、跨平台，所以使用VS Code 安装Java JDK 8 很简单，不做啰嗦 安装Scala 官网下载Scala 2.12或2.11,Spark 3.0使用Scala2.12,，Spark3.0之前使用Scala2.11 下载安装msi安装包，傻瓜式安装，环境
win10下安装sbt
Leo063的博客
08-08 2315
一· 载安装包(msi或者zip文件) http://www.scala-sbt.org/release/tutorial/zh-cn/Installing-sbt-on-Windows.html 1.如果是msi安装包，直接安装到指定目录(我的是C:\Program Files\sbt). 2.如果是zip包，解压到C:\Program Files\sbt . 二. 配置环境变量
sbt-1.2.7windows最新安装包
12-01
sbt-1.2.7windows最新安装包，Scala编译插件
sbt设置
weixin_30430169的博客
05-30 288
配置中央仓库 vim ~/.sbt/repositories [repositories] local osc: http://maven.oschina.net/content/groups/public/ typesafe: http://repo.typesafe.com/typesafe/ivy-releases/, [organization]/[module]/(scala_[sc...
【学习记录】win10下，sbt搭建。
m0_54097568的博客
03-15 891
在build.sbt所在目录下→右键找到git bash（得电脑提前安装过git程序哈！双击打开无脑装即可，最好不要改安装目录，默认就好，因为sbt不是很成熟。新建一个文件夹FirstSbt→新建空白文本文档并更名为build.sbt。）→输入 ‘sbt’【第一次会比较慢，因为要下载包】下载sbt 1.8.2.msi。安装完check一下版本。（下方仅为该视频笔记）
Windows平台下sbt的安装设置
BeautyGao的专栏
06-13 1788
首先到http://www.scala-sbt.org/release/docs/Getting-Started/Setup.html下载windows的sbt包，zip,tar.gz都行。 将下载的包解压到你指定的目录，我一般是解压到d:\dev\sbt目录，d:\dev下是日常工作中所用到的开发工具软件，比如eclipse、jdk、maven等等。 Windows的sbt包解压后，已经
sbt配置
vic868的专栏
09-29 1092
1. 下载sbt安装包 下载地址点这里。 2. 解压文件 tar zxvf sbt-0.13.9.tgz 3. 建立启动sbt的脚本文件 在./sbt目录下面新建文件名为sbt的文本文件 $ cd ./sbt $ vim sbt # 在sbt文本文件中添加如下信息： BT_OPTS="-Xms512M -Xmx1536M -Xss1M -XX:+CMSClassUnloadi
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

董可伦

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值