Spark启动程序:Master
生活随笔
收集整理的這篇文章主要介紹了
Spark启动程序:Master
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
臨時筆記
def?main(argStrings:?Array[String])?{????//?讀取以spark.開頭的配置屬性
????val?conf?=?new?SparkConf
????//?檢查環境變量:SPARK_MASTER_HOST、SPARK_MASTER_PORT、SPARK_MASTER_WEBUI_PORT
????//?再檢查配置屬性:master.ui.port
????//?檢查其他master配置,如命令行屬性
????val?args?=?new?MasterArguments(argStrings,?conf)
????//?配置akka,創建spark?master?actor
????val?(actorSystem,?_,?_)?=?startSystemAndActor(args.host,?args.port,?args.webUiPort,?conf)
????actorSystem.awaitTermination()
??}
?
轉載于:https://www.cnblogs.com/hujunfei/p/3640324.html
創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎總結
以上是生活随笔為你收集整理的Spark启动程序:Master的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Nvue/Weex
- 下一篇: 利用有道翻译实现英汉互译