當前位置：首頁 > 编程资源 > 编程问答 >内容正文

编程问答

2020双11，Dubbo3.0 在考拉的超大规模实践

發(fā)布時間：2025/3/20 编程问答 27 豆豆

生活随笔收集整理的這篇文章主要介紹了 2020双11，Dubbo3.0 在考拉的超大规模实践小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

很多開發(fā)者一直以來好奇：阿里自己有沒有在用Dubbo，會不會用Dubbo？在剛剛結束的雙11，我們了解到阿里云今年提出了“三位一體”的理念，即將“自研技術”、“開源項目”、“商業(yè)產(chǎn)品”形成統(tǒng)一的技術體系，最大化技術的價值。終于，在2020的雙11，阿里巴巴經(jīng)濟體也用上了Dubbo！本文是阿里雙十一在考拉大規(guī)模落地 Dubbo3.0 的技術分享，系統(tǒng)介紹了 Dubbo3.0 在性能、穩(wěn)定性上對考拉業(yè)務的支撐。

覃柳杰（花名：未宇）Github ID: qinliujie，Apache Dubbo PMC；阿里巴巴微服務框架 HSF 負責人，負責 HSF 研發(fā)及 Dubbo 在阿里的落地。

HSF 是阿里內(nèi)部的分布式的服務框架，作為集團中間件最重要的中間件之一，歷經(jīng)十多屆雙十一大促，接受萬億級別流量的錘煉，十分的穩(wěn)定與高效。另外一方面，Dubbo 是由阿里中間件開源出來的另一個服務框架，并且在 2019 年 5 月以頂級項目身份從 Apache 畢業(yè)，坐穩(wěn)國內(nèi)第一開源服務框架寶座，擁有非常廣泛的用戶群體。

在集團業(yè)務整體上云的大背景下，首要挑戰(zhàn)是完成 HSF 與 Dubbo 的融合，以統(tǒng)一的服務框架支持云上業(yè)務，同時在此基礎上衍生出適應用下一代云原生的服務框架 Dubbo 3.0,最終實現(xiàn)自研、開源、商業(yè)三位一體的目標。今年作為 HSF&Dubbo 融合之后的 Dubbo 3.0 在集團雙十一落地的第一年，在兼容性、性能、穩(wěn)定性上面都面臨著不少的挑戰(zhàn)。可喜的是，在今年雙十一在考拉上面大規(guī)模使用，表現(xiàn)穩(wěn)定，為今后在集團大規(guī)模上線提供了支撐。

Dubbo 3.0 總體方案

在上面的方案中，可以看出來我們是以 Dubbo 為核心，HSF 作為功能擴展點嵌入到其中，同時保留 HSF 原有的編程 API，以保證兼容性。為什么我們選址以 Dubbo 為核心基礎進行融合，主要這兩點的考量：

1.Dubbo 在外部擁有非常廣泛的群眾基礎，以 Dubbo 為核心，符合開源、商業(yè)化的目標；

2.HSF 也經(jīng)歷過核心升級的情況，我們擁有比較豐富的處理經(jīng)驗，對于 Dubbo 3.0 新核心內(nèi)部落地也是處于可控的范圍之內(nèi)。

選定這個方案之后，我們開始朝著這個方向努力，由于 Dubbo 開源已久，不像 HSF 這樣經(jīng)歷過超大規(guī)模集群的考驗驗證，那么我們是如何去保證它的穩(wěn)定性呢？

穩(wěn)定性

為了保證新核心的穩(wěn)定，我們從各個方面進行鞏固，保證萬無一失

1.功能測試

HSF3 共有集成用例數(shù)百個， 100% 覆蓋到了 HSF 的核心功能；HSF3 的單測共有上千個，行覆蓋率達到了 51.26%

2.混沌測試

為了面對突發(fā)的異常情況，我們也做了相應的演練測試，例如 CS 注冊中心地址停推空保護測試、異常注入、斷網(wǎng)等情況，以此驗證我們的健壯性；例如，我們通過對部份機器進行斷網(wǎng)，結果我們發(fā)現(xiàn)有比較多的異常拋多。

原因是 Dubbo 對異常服務端剔除不夠及時，導致還會調(diào)用到異常服務器，出現(xiàn)大量報錯。

同時，我們也構建了突發(fā)高并發(fā)情況下的場景，發(fā)現(xiàn)了一些瓶頸，例如：

瞬間大并發(fā)消耗掉絕大部分 CPU 。

3.性能優(yōu)化

Dubbo 核心之前未經(jīng)歷過超大規(guī)模集團的考驗，性能上面必將面臨著巨大的挑戰(zhàn)；對于 Dubbo 來說，優(yōu)化主要從地址推送鏈路和調(diào)用服務鏈路兩個鏈路來進行。對于地址推送鏈路，主要是減少內(nèi)存的分配，優(yōu)化數(shù)據(jù)結構，減少靜態(tài)時地址占用內(nèi)存對應用的影響，從而減少 ygc/fgc 造成的抖動問題。我們利用測試同學提供的風暴程序，模擬了反復推送海量地址的場景，通過優(yōu)化，120萬個 Dubbo 服務地址常態(tài)內(nèi)存占用從 8.5G 下降到 1.5G，有效降低 GC 頻率

另外一方面，在調(diào)用鏈路上，我們主要對選址過程、LoadBalancer、Filter 等進行優(yōu)化，總體 CPU 下降達到 20%，RT 也有一個比較明顯的下降。

成果

在雙十一考拉零點高峰，某個 Dubbo 接口，總的流量達到了數(shù)百萬次/每分鐘 ,全程穩(wěn)定順滑，達到了預定的目標，Dubbo 3.0 是至重啟開源以來，首次在這么大規(guī)模的場景進行驗證，充分證明了 Dubbo 3.0 的穩(wěn)定性。

結語

在本次雙11考拉落地 Dubbo 3.0 只是在阿里內(nèi)部全面落地 Dubbo3.0 的第一步，現(xiàn)在 Dubbo 3.0 云原生的新特性也如火如荼的進行開發(fā)與驗證，如應用級服務發(fā)現(xiàn)、新一代云原生通信協(xié)議 Triple 等已經(jīng)開始在集團電商應用開始進行 Beta 試點。

阿里微服務體系完成了通過開源構建生態(tài)和標準，通過云產(chǎn)品 MSE、EDAS 等完成產(chǎn)品化和能力輸出，通過阿里內(nèi)部場景鍛煉高性能和高可用的核心競爭力。從而完成了三位一體的正向循環(huán)，通過標準持續(xù)輸出阿里巴巴的核心競爭力，讓外部企業(yè)快速享有阿里微服務能力，加速企業(yè)數(shù)字化轉型！

Dubbo 3.0 sample @GitHub：https://github.com/apache/incubator-dubbo-samples/tree/3.x

總結

以上是生活随笔為你收集整理的2020双11，Dubbo3.0 在考拉的超大规模实践的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。

考拉

上一篇：高德最佳实践：Serverless 规模
下一篇： Aliyun Java Initiali