hadoop配置流程
第一步:重新新建一個虛擬機,命名為hadoop[內存不能太小了]
第二步:添加鏡像文件(ISO文件)
第三步:root用戶登錄
第四步:
第五步:修改主機名為master
執行:vim /etc/sysconfig/network
第六步:配置靜態IP地址
執行:vim /etc/sysconfig/network-scripts/ifcfg-eth0
執行:ifconfig
第七步:修改主機映射文件
執行:vim /etc/hosts
第八步:關閉防火墻
執行:service iptables stop
第九步:啟動ssh服務
執行:service sshd start
第十步:生成ssh公鑰
執行:ssh-keygen -t rsa
第十一步:拷貝公鑰到本機
第十二步:驗證無密碼登錄
執行:ssh master
第十三步:xshell遠程連接
打開xshell軟件
第十四步:查看并卸載jdk安裝包
執行:rpm -qa | grep jdk
第十五步:改變/opt目錄的權限
執行:chown -R hadoop:hadoop /opt
第十六步:登錄filezilla,連接虛擬機(關閉Windows防火墻)
第十七步:上傳jdk和hadoop壓縮包至/opt目錄下
找到壓縮包的位置,右鍵點擊壓縮包,選擇上傳
第十八步:解壓jdk
執行:cd /opt
執行:tar -zxvf jdk-7u80-linux-x64.tar.gz
第十九步:配置全局環境變量
執行:vim /etc/profile
在該文件的最下面追加以下內容:
第二十步:環境變量生效
執行:source /etc/profile
第二十一步:驗證Java環境
執行:java -version
第二十二步:解壓hadoop壓縮包
執行:cd /opt
執行:tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz
第二十三步:打開hadoop的配置文件目錄
執行:cd /opt/hadoop-2.6.0-cdh5.7.0/etc/hadoop
第二十四步:修改hadoop-env.sh配置文件
在該文件的最下方追加以下內容:第二十五步:修改core-site.xml配置文件
執行:sudo vim ./core-site.xml
在該文件中追加以下內容:
第二十六步:修改hdfs-site.xml配置文件
在該文件中追加以下內容:
第二十七步:修改slaves配置文件
第二十八步:配置全局環境變量
執行:vim /etc/profile
在該文件最下方追加以下內容:
第二十九步:環境變量生效
執行:source /etc/profile
第三十步:格式化HDFS
執行:hadoop namenode -format
第三十一步:進去sbin目錄
執行:cd /opt/hadoop-2.6.0-cdh5.7.0/sbin
第三十二步:執行開始腳本
./start-all.sh 啟動的
如果沒有出來完關閉了再啟動一次
./stop-all.sh
第三十三步:檢驗是否成功
總結
以上是生活随笔為你收集整理的hadoop配置流程的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: [病毒木马] 什么是LSP劫持
- 下一篇: 关于渗透测试以及网络安全法