双十一流量洪峰 支撑阿里核心业务的云数据库揭秘
背景介紹
今年雙十一又有新紀錄刷新,21秒成交額超10億,數據瞬間膨脹到PB級,包裹數億級,嚴苛的指標對數據庫產品提出了更嚴格的需求。HybridDB作為阿里云自研的HTAP數據庫經受住了流量洪峰的考驗,順利的完成了2019年雙十一的保障工作。
HybridDB在阿里集團內廣泛應用。比如為幾十萬商家提供數據驅動的店鋪智能服務,也為幾千小二提供了高效的數據化服務產品,大大提高生產效率。同時盒馬實時交易大盤使用HybridDB實現盒馬全鏈路的數據實時閉環,支撐1000多張表的復雜查詢,平均查詢延遲1秒以內,大大提高了新零售的數據化能力。菜鳥倉儲實時在線數倉,基于HybridDB for MySQL構建了容納核心的訂單、包裹、庫存及時效等全鏈路數據,目前已經成長為菜鳥倉儲業務的數據化產品基石。HybridDB承接ECS、RDS、CDN、SLB等阿里云核心業務提供實時監控數據的存儲、計算服務,支撐了四大件產品雙十一實時監控大屏,為阿里云雙十一保駕護航。
目前HybridDB for MySQL支持高性能事務存儲規格和高性能分析計算規格,融合了在線OLTP和實時OLAP業務,實現了HTAP能力的統一。以視頻云相關場景為例,簡要介紹,在高吞吐中心場景中的應用,實際業務場景會比本文復雜。
阿里云視頻云業務
阿里云視頻云典型場景如下:
視頻用戶的在線類業務,如作業提交、轉碼工作流控制、推流索引等,直接坐落在HybridDB for MySQL上,實時事務tps高達5萬,歷史作業數據可保存5年以上;
視頻云技術架構的在線實時分析和離線分析類業務,如監控數據采集與實時分析、資源調度、監控告警燈,也采用HybridDB for MySQL解決存儲計算問題,實時寫入tps高達200萬,數據實時可見并支持包括oracle開窗函數等在內的OLAP分析SQL;
視頻云業務的核心基于CDN技術,CDN是多地分發的內容緩存服務,其本身的性能和穩定性需要強大的監控調度能力來保障,HybridDB存儲了CDN集群運轉的實時負載狀態,以及基于負載狀態產生的各類分析結果以供集群的服務狀態修正。一般數據庫無法承載海量監控數據的存儲和計算,大數據生態無法做到實時數據寫入實時可見。CDN監控調度借助HybridDB for MySQL每秒百萬行數據寫入、PB級數據存儲、毫秒級在線分析能力,解決十萬級服務器的實時監控預警-調度反饋閉環處理問題,保障了阿里云CDN天量數據流量的安全運轉。
其他場景持續更新中,敬請期待....
原文鏈接
本文為云棲社區原創內容,未經允許不得轉載。
總結
以上是生活随笔為你收集整理的双十一流量洪峰 支撑阿里核心业务的云数据库揭秘的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 阿里开发者招聘节 | 面试题01:如何实
- 下一篇: 序列模型简介——RNN, Bidirec