Spark單機模式安裝

實現步驟：

1）安裝和配置好JDK

2）上傳和解壓Spark安裝包

3）進入Spark安裝目錄下的conf目錄

復制conf spark-env.sh.template 文件為 spark-env.sh

在其中修改，增加如下內容：

SPARK_LOCAL_IP=服務器IP地址

   

Spark單機模式啟動

在bin目錄下執行：sh spark-shell --master=local

   

啟動后 發現打印消息

Spark context Web UI available at http://192.168.242.101:4040//Spark的瀏覽器界面

Spark context available as 'sc' (master = local, app id = local-1490336686508).//Spark提供了環境對象 sc

Spark session available as 'spark'.//Spark提供了會話獨享spark