HDFS修改副本数并生效
生活随笔
收集整理的這篇文章主要介紹了
HDFS修改副本数并生效
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
1、hadoop集群使用的ucloud的uahdoop
2、是公司集群配置小,只有兩臺core節(jié)點,實際就是兩臺的datanode。 容量占用超過了80%,需要縮減副本以空出容量。
3、查看
hadoop fs -du -h /user/hive/warehouse/xxwarehouse.db/xx_datasourceraw/partitiondate=2019-10-31
可以看到,每個文件三個副本。
4、執(zhí)行
hdfs dfs -setrep -R 2 /
將所有的已經(jīng)上傳的副本從3個變成了兩個
5、再執(zhí)行第三步腳本確認(rèn)。
6、最后修改hdfs-site.xml的dfs.replication值為2,這個參數(shù)直接通過uhadoop管理后臺可以直接修改。
修改后自動重啟了服務(wù)并生效。
總結(jié)
以上是生活随笔為你收集整理的HDFS修改副本数并生效的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 解决prometheus k8s.gcr
- 下一篇: 【收藏】Chrome 错误代码:ERR_