本文檔將介紹如何將老集群的EMR-Core升級到最新版本

什么是EMR-Core

EMR-Core是E-MapReduce集群上支持Hadoop生態(tài)組件讀寫OSS的依賴包。它提供一種高效地讀寫OSS數(shù)據(jù)的實現(xiàn)，并不斷地在優(yōu)化。所以，隨著E-MapReduce版本的迭代，我們就有必要升級老集群上的EMR-Core以獲得更好的性能，當(dāng)然也包括修復(fù)很多BUG。

使用說明

升級工具下載地址

注意：

• 本工具暫時只支持EMR-3.x系列，即支持EMR-3.0.0以上版本升級到最新EMR-Core。EMR-2.x系列的工具近期也會上線。
• 本工具在升級過程中需要重啟相關(guān)服務(wù)，切記判斷服務(wù)重啟風(fēng)險，選在升級窗口停服進行升級。需要重啟的服務(wù)包括Yarn和Hive。

1. SSH 登錄到集群emr-header-1節(jié)點 2. 切換到hadoop賬戶下：su hadoop; cd 3. 下載升級工具包：wget http://emr-agent-pack.oss-cn-hangzhou.aliyuncs.com/upgrade/upgrade.tgz 4. 解壓: tar zxvf upgrade.tgz 5. 開始升級，由于EMR集群分為HA和非HA集群兩種，所以在執(zhí)行腳本時需要傳入集群類型參數(shù)，接受“ha”和“normal”兩個參數(shù)，例如./upgrade.sh normal 6. 等待腳本執(zhí)行完，檢查相關(guān)服務(wù)是否正常，包括YARN和Hive服務(wù) 創(chuàng)作挑戰(zhàn)賽新人創(chuàng)作獎勵來咯，堅持創(chuàng)作打卡瓜分現(xiàn)金大獎

總結(jié)

以上是生活随笔為你收集整理的E-MapReduce上如何升级EMR-Core的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。