Spark单机模式的安装步骤

单机模式的安装

环境:先安装配置好JDK

1.下载安装包

Spark单机模式的安装步骤

2.解压安装包

tar -xvf spark-2.0.1-bin-hadoop2.7.tgz

3.进入conf目录

Spark单机模式的安装步骤

4.修改文件名

mv spark-env.sh.template spark-env.sh

5.编辑文件

vim spark-env.sh

6.放开注释,添加当前主机名,保存退出

Spark单机模式的安装步骤

7.启动

进入bin

执行命令:sh spark-shell --master=local

Spark单机模式的安装步骤

 可以看到是用scala语言,操作的spark

Spark单机模式的安装步骤

退出:ctrl+c

清屏 ctrl+l

测试:创建数组,获取最大值

Spark单机模式的安装步骤