HDFS的架構(gòu)

?

?

NameNode 是一個(gè)中心服務(wù)器, 單一節(jié)點(diǎn)(簡化系統(tǒng)的設(shè)計(jì)和實(shí)現(xiàn)), 負(fù)責(zé)管理文件系統(tǒng)的名字空間(NameSpace)以及客戶端對文件的訪問

文件操作, NameNode 是負(fù)責(zé)文件元數(shù)據(jù)的操作, DataNode 負(fù)責(zé)處理文件內(nèi)容的讀寫請求, 跟文件內(nèi)容相關(guān)的數(shù)據(jù)流不經(jīng)過 NameNode, 只詢問它跟哪個(gè) DataNode聯(lián)系, 否則 NameNode 會(huì)成為系統(tǒng)的瓶頸

副本存放在哪些 DataNode 上由 NameNode 來控制, 根據(jù)全局情況作出塊放置決定, 讀取文件時(shí) NameNode 盡量讓用戶先讀取最近的副本, 降低讀取網(wǎng)絡(luò)開銷和讀取延時(shí)

NameNode 全權(quán)管理數(shù)據(jù)庫的復(fù)制, 它周期性的從集群中的每個(gè) DataNode 接收心跳信合和狀態(tài)報(bào)告, 接收到心跳信號意味著 DataNode 節(jié)點(diǎn)工作正常, 塊狀態(tài)報(bào)告包含了一個(gè)該 DataNode 上所有的數(shù)據(jù)列表

NameNodeDataNode

存儲(chǔ)元數(shù)據(jù)	存儲(chǔ)文件內(nèi)容
元數(shù)據(jù)保存在內(nèi)存中	文件內(nèi)容保存在磁盤
保存文件, block, DataNode 之間的關(guān)系	維護(hù)了 block id 到 DataNode 文件之間的關(guān)系

?

總結(jié)

以上是生活随笔為你收集整理的HDFS的namenode和datanode的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。