本地配置_Hadoop本地模式的安装配置
生活随笔
收集整理的這篇文章主要介紹了
本地配置_Hadoop本地模式的安装配置
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
Hadoop 是一個由 Apache 基金會所開發(fā)的分布式系統(tǒng)基礎(chǔ)架構(gòu),它可以使用戶在不了解分布式底層細節(jié)的情況下開發(fā)分布式程序,充分利用集群的威力進行高速運算和存儲。從其定義就可以發(fā)現(xiàn),它解決了兩大問題:大數(shù)據(jù)存儲、大數(shù)據(jù)分析。也就是Hadoop的兩大核心:HDFS和 MapReduce。
Hadoop三種安裝模式:本地模式,偽分布式,真正分布式
本地模式
本地模式是Hadoop的默認模式。當首次解壓Hadoop的源碼包時,Hadoop無法了解硬件安裝環(huán)境,便保守地選擇了最小配置。在這種默認模式下所有3個XML文件均為空。當配置文件為空時,Hadoop會完全運行在本地。因為不需要與其他節(jié)點交互,本地模式就不使用HDFS,也不加載任何Hadoop的守護進程。該模式主要用于開發(fā)調(diào)試MapReduce程序的應(yīng)用邏輯。
偽分布式模式
Hadoop守護進程運行在本地機器上,模擬一個小規(guī)模的集群,換句話說,可以配置一臺機器的Hadoop集群,偽分布式是完全分布式的一個特例。
完全分布式模式
Hadoop守護進程運行在一個集群上,用于正在的生產(chǎn)環(huán)境。
總結(jié)
以上是生活随笔為你收集整理的本地配置_Hadoop本地模式的安装配置的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: oracle 修改sgamaxsize_
- 下一篇: 找不到r低版本_R 语言与数据挖掘直播班