美文网首页
spark之旅-1.spark的安装与启动

spark之旅-1.spark的安装与启动

作者: 笨鸡 | 来源:发表于2019-04-15 19:48 被阅读0次

1.spark集群的安装

  • spark-2.4.1-bin-hadoop2.7.tgz

tar -zxvf spark-2.4.1-bin-hadoop2.7.tgz
mv spark-2.4.1-bin-hadoop2.7 spark
cd conf
mv slaves.template slaves
mv spark-env.sh-template spark-env.sh

vim slaves
slave1
slave2
slave3

vim spark-env.sh
export JAVA_HOME=/usr/default/java

scp -r spark salve1:/usr/local
...

vim /etc/profile

export SPARK_HOME=/usr/local/spark
export  PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin

2.启动spark

start-all.sh
输入地址:http://192.168.0.100:8080

spark.png

相关文章

网友评论

      本文标题:spark之旅-1.spark的安装与启动

      本文链接:https://www.haomeiwen.com/subject/ftfpwqtx.html