hadoop扩充磁盘操作记录
記錄cloudera擴充磁盤
1、4臺主機,每臺主機增加一塊2TB的硬盤
2、首先簡單說明步驟
???????A、分區,掛載(掛載目錄(名稱,路徑)要一致)
???????B、在掛載的分區內,建立對應的文件夾,并授權
???????C、在cdh的hdfs配置界面,配置新增hdfs的目錄,然后部署客戶端配置,滾動重啟
3、操作步驟
分區(LVM邏輯卷):
???????# pvcreate /dev/sdc
???????# vgcreage Vgroup03 /dev/sdc
???????# lvcreate –n cdh01 –L +1.8T Vgroup03
???????# mkfs.ext4 /dev/mapper/Vgroup03-cdh01
掛載(一定要按照這個順序輸入):
???????# mkdir /cdh01
???????#mount /dev/mapper/Vgroup01-cdh01 /cdh01
開機自動掛載
#vim /etc/fstab
???????插入?/dev/mapper/Vgroup03-cdh01 /cdh01 ext4 defaults 0 1
???????保存,退出
建文件夾:
???????# mkdir /cdh01/dfs
???????#mdkir /cdh01/dfs/dn
授權:
???????# chown -R hdfs:hadoop /cdh01/dfs/
----------4臺主機做同樣的操作,分區掛載目錄要一致-----------
登陸cdh,從集群中,選擇HDFS
在中間的部分選擇配置選項
在左側的菜單欄中,選擇DataNode Default Group
在已經有的目錄后面的“+”號點新增一個目錄,然后輸入我們已經掛載好的目錄,保存。
選擇實例選項
選中DataNode的實例,選擇滾動重啟
重啟完畢后,到HDFS集群的界面去看下,應該已經成功了
Datanode group“高級”,在右邊的datanode卷選擇策略中,選擇“可用空間”,這樣,后面的兩個屬性(“10G字節”和“0.75”)就會發揮作用,用于平衡各個卷中空間使用。
轉載于:https://blog.51cto.com/agent/1672573
總結
以上是生活随笔為你收集整理的hadoop扩充磁盘操作记录的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: SCVMM 2012 R2运维管理九之:
- 下一篇: 利用“多说”制作留言板、评论系统