在裝spark之前先裝Scala  Scala 的安裝在hadoop安裝配置中已經介紹了

成都創新互聯專注于巴林左旗網站建設服務及定制，我們擁有豐富的企業做網站經驗。 熱誠為您提供巴林左旗營銷型網站建設，巴林左旗網站制作、巴林左旗網頁設計、巴林左旗網站官網定制、重慶小程序開發公司服務，打造巴林左旗網絡公司原創品牌,更為您提供巴林左旗網站排名全網營銷落地服務。

1、下載spark安裝包 下載地址如下

http://spark.apache.org/downloads.html

我選擇的是

 spark-1.4.1-bin-hadoop2.6.tgz  放在/root/software

解壓

tar zxvf  spark-1.4.1-bin-hadoop2.6.tgz

2、配置系統環境變量

vim /etc/profile

export SPARK_HOME=/root/sherry/spark-1.4.1

export PATH=$SPARK_HOME/bin:$PATH

source /etc/profile

3、配置spark文件

1）[root@HBMS-DKXD-DEV sherry]# cd spark-1.4.1-bin-hadoop2.6/

  [root@HBMS-DKXD-DEV spark-1.4.1-bin-hadoop2.6]# cd conf

  [root@HBMS-DKXD-DEV conf]# vim spark-env.sh

  添加如下內容

export SCALA_HOME=/root/sherry/scala-2.10.4

export JAVA_HOME=/usr/java/jdk1.7.0_45

export SPARK_WORKER_MEMORY=1g

export SPARK_MASTER_IP=10.118.46.22

2）配置slave

我自己沒有配置

4、啟動集群

[root@HBMS-DKXD-DEV spark-1.4.1-bin-hadoop2.6]# ./sbin/start-all.sh

關閉

[root@HBMS-DKXD-DEV spark-1.4.1-bin-hadoop2.6]# ./sbin/stop-all.sh

檢查是否安裝成功

jps

另外有需要云服務器可以了解下創新互聯scvps.cn，海內外云服務器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業上云的綜合解決方案，具有“安全穩定、簡單易用、服務可用性高、性價比高”等特點與優勢，專為企業上云打造定制，能夠滿足用戶豐富、多元化的應用場景需求。

網站標題：spark安裝配置-創新互聯
URL分享：http://vcdvsql.cn/article16/dsdggg.html

成都網站建設公司_創新互聯，為您提供品牌網站制作、軟件開發、云服務器、服務器托管、App設計、網站營銷

廣告

聲明：本網站發布的內容（圖片、視頻和文字）以用戶投稿、用戶轉載內容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網站立場，如需處理請聯系客服。電話：028-86922220；郵箱：631063699@qq.com。內容未經允許不得轉載，或轉載時需注明來源： 創新互聯