spark.yarn.archive 的設置方法有很多，下面三種

①spark.yarn.jars hdfs://Desktop:9000/spark/jars/*

②spark.yarn.jars hdfs://Desktop:9000/spark/jars/*.jar

③spark.yarn.jars hdfs://Desktop:9000/spark/jars/

上述配置真的正確嗎？我們測試下

pyspark --master yarn

其中③會出現報錯:

?

Error: Could not find or load main class org.apache.spark.deploy.yarn.ExecutorLauncher

?

結論：

可行的方式只有①②

?

?

總結

以上是生活随笔為你收集整理的spark.yarn.archive 的正确设置方法的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。