簡(jiǎn)述

先簡(jiǎn)單把流程過(guò)一遍，大家根據(jù)自己水平來(lái)看就好了。

java的版本一定要安裝到java8，高版本也不行，低版本也不行。

安裝Hadoop：http://www.apache.org/dyn/closer.cgi/hadoop/common

安裝Apach Spark：http://spark.apache.org/downloads.html

安裝pyspark：pip install pyspark

理論上這個(gè)流程已經(jīng)可以了，我相信搜索到這篇文章的話，就有可能是下面的這幾個(gè)細(xì)節(jié)沒(méi)有注意：

細(xì)節(jié)一

java的版本號(hào)不是1.8 :https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

細(xì)節(jié)二

java所在目錄中出現(xiàn)空格

這個(gè)直接替換下目錄就好了

細(xì)節(jié)三

添加進(jìn)環(huán)境變量時(shí)，所有的相關(guān)的目錄都需要添加新的變量_home，如*，這樣的模式
（很難說(shuō)為什么，但是就是這樣）不然會(huì)出現(xiàn)找不到目錄的情況。

總結(jié)

以上是生活随笔為你收集整理的PySpark安装和测试的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。