hadoop组件及各自的功能
生活随笔
收集整理的這篇文章主要介紹了
hadoop组件及各自的功能
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
Hadoop = HDFS+Yarn+MapReduce+Hbase+Hive+Pig+…
1.HDFS:分布式文件系統(tǒng)
2.Yarn:分布式資源管理系統(tǒng),
3.MapReduce:Hadoop的編程框架
4.Pig:基于hadoop的一門數(shù)據(jù)處理語言
5.Zookeeper:分布式協(xié)調(diào)服務(wù)
6.Hbase:Hadoop下的分布式數(shù)據(jù)庫
7.Hive:分布式數(shù)據(jù)倉庫
8.Sqoop:用于將傳統(tǒng)數(shù)據(jù)庫中數(shù)據(jù)導(dǎo)入到hbase中一個工具
9.Spark:基于內(nèi)存的分布式處理框架
總結(jié)
以上是生活随笔為你收集整理的hadoop组件及各自的功能的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 使用正则表达式大写SQL关键字
- 下一篇: 【开发常识】手机号为什么要隐藏中间的四位