简易安装scala和spark

一、安装scala

1、安装scala

scala下载注意和jdk的版本号

下载地址:https://www.scala-lang.org/download/

2、上传到linux虚拟机里

可通过rz方式上传,上传完成后解压 (可以下载个工具zenTermLite)

3、配置环境变量

打开/etc/profile

export SCALA_HOME=/usr/local/scala-2.12.8

export PATH=$PATH:$SCALA_HOME/bin

之后使其生效

4、验证

输入scala 如果出现

5、退出

:q

二、安装spark

1、下载spark的文件

spark-2.4.5-bin-hadoop2.7.tgz

2、 上传到虚拟机,进行解压

tar -zxvf spark-2.4.5-bin-hadoop2.7.tgz -C /usr/local

3、配置环境变量

vi /etc/profile

配置:

export SPARK_HOME=/usr/local

export PATH=$PATH:$SPARK_HOME/bin

刷新 source /etc/profile

4、验证spark

版本:spark-submit --version

5、输入spark-shell进入命令行

6、退出

:q

推荐阅读

评论可见,请评论后查看内容,谢谢!!!
 您阅读本篇文章共花了: