hadoop本地模式部署_hadoop启动模式、基本配置、启动方式
生活随笔
收集整理的這篇文章主要介紹了
hadoop本地模式部署_hadoop启动模式、基本配置、启动方式
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
Local?(Standalone)?Mode
MapReduce
程序運行在本地,啟動
jvm
啟動本地模式:
1
、配置
hadoop-env.sh
配置文件中的
java_home
路徑
2
、在
hadoop
安裝目錄下:
mkdir?input
3
、在
input
目錄下創建任意文件
4
、統計
input
文件夾下所有文件中的單詞的數量:
bin/hadoop?jar
share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.0-cdh5.3.6.jar
wordcount?input?output
Pseudo-Distributed?Mode
1
、配置
etc/hadoop/core-site.xml:
##
配置
namenode
所在主機
fs.defaultFS
hdfs://bxp:8020
##
配置文件臨時目錄
hadoop.tmp.dir
/usr/lib/hadoop-2.5.0-cdh5.3.6/data/tmp
2
、配置
etc/hadoop/hdfs-site.xml:
##
配置文件備份數量
dfs.replication
1
3
、格式化文件系統
bin/hdfsnamenode?-format
與50位技術專家面對面20年技術見證,附贈技術全景圖總結
以上是生活随笔為你收集整理的hadoop本地模式部署_hadoop启动模式、基本配置、启动方式的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: ddd架构 无法重构_漫谈分层架构:为什
- 下一篇: 米莱狄机器人怎么那么多_王者荣耀排位遇到