CentOS6.8_Spark单机部署

Albert陈凯

发布于 2018-04-04 15:38:15

6450

发布于 2018-04-04 15:38:15

下载安装JDK

wget https://d3kbcqa49mib13.cloudfront.net/spark-1.6.3-bin-hadoop2.6.tgz

mkdir /software

mv ./spark-1.6.3-bin-hadoop2.6.tgz /sortware/

cd /software

tar xzvf spark-1.6.3-bin-hadoop2.6.tgz
cd spark-1.6.3-bin-hadoop2.6.tgz
pwd
复制打印出来的地址

mv spark-env.sh.template spark-env.sh

我们默认安装不用修改目录

export SPARK_HOME=/software/spark-1.6.3-bin-hadoop2.6
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin

source /etc/profile

spark-submit --master spark://node1:7077 --deploy-mode client --class org.apache.spark.examples.SparkPi ../lib/spark-examples-1.6.3-hadoop2.6.0.jar

本文参与腾讯云自媒体分享计划，分享自作者个人站点/博客。

原始发表：2017.06.27 ，如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体分享计划，欢迎热爱写作的你一起参与！

登录后参与评论

0 条评论

热度