spark on yarn 部署報:java.io.IOException: Resource file:/usr/local/spark-1.6.3-bin-hadoop2.6/lib/spark-assembly-1.6.3-hadoop2.6.0.jar changed on src filesystem (expected 1530607524000, was 1478125561000

解決：spark-env.sh 之前配置

export HADOOP_CONF_DIR=/usr/local/hadoop-2.6.4

export YARN_CONF_DIR=/usr/local/hadoop-2.6.4

發現 HADOOP_CONF_DIR???YARN_CONF_DIR 配置路徑問題，修改后執行成功如下

export HADOOP_CONF_DIR=/usr/local/hadoop-2.6.4/etc/hadoop

export YARN_CONF_DIR=/usr/local/hadoop-2.6.4/etc/hadoop

總結

以上是生活随笔為你收集整理的spark on yarn 部署问题的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。