Spark 全布式安装

      Spark 全布式安装已关闭评论

在伪分布式的基础上,重新编辑slaves文件

vi slaves

内容如下

192.168.101.11
192.168.101.12
192.168.101.13
192.168.101.14

执行以下命令

scp -r /etc/spark/ root@bigdata11:/etc/
scp -r /etc/spark/ root@bigdata12:/etc/
scp -r /etc/spark/ root@bigdata13:/etc/
scp -r /etc/spark/ root@bigdata14:/etc/

scp 参见这篇文章

hadoop 免密码登陆

主要更改防火墙 允许Spark的端口 7077 8000-8100左右

进入Spark sbin目录,启动服务

cd /etc/spark/sbin/
./start-all.sh 

通过 http://192.168.101.15:8080/ 访问管理站点

© 2018, RuiJi 社区. 版权所有.转载请注明出处