【Hadoop】MAC下hadoop2.6安装以及执行wordcount
生活随笔
收集整理的這篇文章主要介紹了
【Hadoop】MAC下hadoop2.6安装以及执行wordcount
小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
首先簡單介紹下博主的配置環(huán)境
- MAC 10.10.0
- hadoop 2.6
- JDK 1.6(可以在shell里用jdk -version查詢)
hadoop安裝
安裝的話推薦使用mac下面的brew,理由就是用brew安裝的話,它會(huì)自動(dòng)給幫你配置好相應(yīng)的路徑。當(dāng)然也可以到官網(wǎng)下載,注意jdk和hadoop版本要對(duì)應(yīng)。
brew install hadoop安裝好了之后,可以使用brew list hadoop 來查看。
位置應(yīng)該是在:/usr/local/Cellar/hadoop/
這時(shí)候就可以直接在shell里執(zhí)行hadoop命令,是不是很方便。
執(zhí)行wordcount
首先說一下,現(xiàn)在要執(zhí)行的wordcount只是簡單試驗(yàn)下hadoop是否能工作,并不是多線程的偽分布式,因?yàn)檫€沒有配置,這個(gè)下一節(jié)會(huì)講。
1.首先我們先建立以下數(shù)據(jù)源3.執(zhí)行命令
hadoop jar /usr/local/Cellar/hadoop/2.6.0/libexec/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0.jar wordcount input output 4.效果本文來自博客 “李博Garvin“
轉(zhuǎn)載請(qǐng)標(biāo)明出處:http://blog.csdn.net/buptgshengod
總結(jié)
以上是生活随笔為你收集整理的【Hadoop】MAC下hadoop2.6安装以及执行wordcount的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: shell启动sublime
- 下一篇: 【LeetCode从零单排】No221.