Hadoop本地运行模式了解~
生活随笔
收集整理的這篇文章主要介紹了
Hadoop本地运行模式了解~
小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
本地運(yùn)行模式:單機(jī)運(yùn)行,生產(chǎn)環(huán)境不用;
偽分布式模式:單機(jī)運(yùn)行,但是具備Hadoop集群的所有功能,一臺(tái)服務(wù)器模擬一個(gè)分布式環(huán)境,生產(chǎn)環(huán)境不用;
完全分布式模式:多臺(tái)服務(wù)器組成分布式環(huán)境,生產(chǎn)環(huán)境使用。
本地運(yùn)行模式(了解):
1.在hadoop-3.2.2文件下創(chuàng)建一個(gè)wcinput文件夾:
2.在wcinput文件夾下創(chuàng)建一個(gè)word.txt文件:
[xiaobai@hadoop102 hadoop-3.2.2]$ cd wcinput3.編輯word.txt文件:
[xiaobai@hadoop102 hadoop-3.2.2]$ vim word.txt4.回到Hadoop目錄/opt/module/hadoop-3.2.2:
執(zhí)行程序:
5.查看結(jié)果:
[xiaobai@hadoop102 wcoutput]$ cat part-r-00000 hello 1 welcome 1 world 1tips:要求輸出路徑wcoutput不存在,否則報(bào)異常:org.apache.hadoop.mapred.FileAlreadyExistsException;
總結(jié)
以上是生活随笔為你收集整理的Hadoop本地运行模式了解~的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 【技术贴】解决 myeclipse打不开
- 下一篇: GCD多线程的使用