javascript
适用于Apache Hadoop 2.0 M5的Spring
Spring高興地宣布了Spring for Apache Hadoop 2.0 M5里程碑版本,同時它們也越來越接近候選版本。 在Spring博客中 ,新版本2.0與1.0版本之間有很好的比較。 根據它:
用于Apache Hadoop的Spring 1.0版本將HDFS和MapReduce與MapReduce v1或MapReduce v2(YARN)結合使用。 默認發行版是具有其他功能的Apache Hadoop 1.2.1,例如Hadoop 2.2.0,Pivotal HD 1.1,Cloudera CDH4 MR1或MR2 YARN和Hortonworks HDP 1.3。
另一方面,Spring for Apache Hadoop 2.0除了繼續提供對HDFS和MapReduce支持的改進外,還著重于添加YARN應用程序開發支持。 2.0版本的默認發行版是Apache Hadoop 2.2.0。
在下面,您可以在Spring IO里程碑存儲庫中看到特定的工件及其各自的傳遞依賴項:
- 2.0.0.M5(默認– Apache Hadoop穩定版2.2.0)
- 2.0.0.M5-hadoop12(Apache Hadoop穩定版1.2.1)
- 2.0.0.M5-phd1(Pivotal HD 1.1)
- 2.0.0.M5-cdh4(Cloudera CDH4 MR1)
- 2.0.0.M5-cdh5(Cloudera CDH5 YARN beta)
- 2.0.0.M5-hdp20(Hortonworks HDP 2.0)
Spring for Apache Hadoop 2.0版本還提供:
- 新的Spring紗子項目中對YARN功能的支持。 借助spring-yarn框架,可以開發基于Spring的應用程序,并可以使用YARN將其部署為在Hadoop v2上運行。
- Spring Boot對YARN的支持。 現在,Spring Boot應用程序可以部署在YARN上。
- Hadoop YARN功能的基于注釋的編程模型和基于注釋的配置。
YARN示例中包含所有新的YARN功能,因此您可以在此處檢查它們。
Spring Data-hadoop-store子項目也可以在這里提供更好的支持,以使用DataWriter和DataReader實現將數據寫入HDFS的方式,支持文本文件和SequenceFiles格式(帶有或不帶有壓縮)。 新的子項目還與Kite SDK的數據集支持集成在一起。
有關特定項目的更多信息,請參見項目頁面 。
翻譯自: https://www.javacodegeeks.com/2014/02/spring-for-apache-hadoop-2-0-m5.html
總結
以上是生活随笔為你收集整理的适用于Apache Hadoop 2.0 M5的Spring的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Java事实让您大吃一惊! (信息图)
- 下一篇: 蓝廋香菇是啥意思 蓝廋香菇的意思