hadoop編程程序員需要完成三個類。

map類，reduce類和主類。

map和reduce類自然是分別完成map和reduce。而主類則負責對這兩個類設(shè)置job。完成這三個類之后，我們生成一個jar文件。利用這個jar文件完成剩下的工作。

首先，執(zhí)行?? bin/hdfs dfs -put /home/hadoop/test input
這里對意思是將文件/home/hadoop/test文件放入input中。這個input是提前建立好的，指令如下：

bin/hadoop fs –mkdir input

放入input之后，我們執(zhí)行指令：

bin/hadoop jar /home/hadoop/workspace/test.jar InvertedIndexer input output
/home/hadoop/workspace/test.jar是先前生成的jar文件的地址，input中包含了待處理文件。至于output還有待考察。

需要注意的是，這里的InvertedIndexer就是程序員編寫的三個類中的主類的名稱。

轉(zhuǎn)載于:https://www.cnblogs.com/elnino/p/4428598.html

總結(jié)

以上是生活随笔為你收集整理的hadoop浅尝 第一个hadoop程序的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。