1.大数据处理架构Hadoop
生活随笔
收集整理的這篇文章主要介紹了
1.大数据处理架构Hadoop
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
一、Hadoop簡潔
二、Hadoop特性
三、Hadoop版本演變
豐富的Hadoop生態系統
上面中組件以及對應的功能
一、Hadoop集群中節點類型以及作用
Hadoop框架兩大核心設計: (1)HDFS:讀取數據I/O操作 (2)MapReduce:計算數據兩大類核心節點:namenode:負責整個源數據存儲的協調數據存儲的功能datanode:存儲被拆分后的一塊一塊的數據jobTracker:拆分大作業TaskTracker:執行小作業SecondaryNameNode:冷備份,一旦namenode出故障,SecondaryNameNode不會立刻頂上去。二、集群硬件配置:各個節點分別使用什么樣的機器配置
三、討論:集群規模要多大?
四、集群的網絡拓撲
五、集群的建立與安裝
總結
以上是生活随笔為你收集整理的1.大数据处理架构Hadoop的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 【查看hadoop镜像】
- 下一篇: 2.分布式文件系统HDFS之一