spark on k8s配置日志存储路径:spark-defaults.conf
生活随笔
收集整理的這篇文章主要介紹了
spark on k8s配置日志存储路径:spark-defaults.conf
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
3.1.1的spark-defaults.conf中的配置:
spark.eventLog.enabled true
spark.eventLog.dir hdfs://192.168.145.28:8020/sparkhistory
spark.history.fs.logDirectory hdfs://192.168.145.28:8020/sparkhistory
與50位技術專家面對面20年技術見證,附贈技術全景圖
總結
以上是生活随笔為你收集整理的spark on k8s配置日志存储路径:spark-defaults.conf的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Spark on k8s提交测试任务失败
- 下一篇: 【收藏】hdfs参数配置详解