必须建筑师附体!像盖大楼那样打造数据即服务
近兩年產業界總用“數據洪流”來形容數據的大爆發,但如果我們真把它視作洪水,那么它只會帶來沖擊;如能積極發掘其潛藏的價值,它則可能變成一條流金之河,正如麥肯錫在研究中發現的那樣:與競爭對手相比,能使用數據識別客戶行為的企業,在銷售增長率方面要高出85%,在毛利率方面會高出25%[1]。
這個道理,其實大多數企業都清楚,但要構建完善的數據處理和分析平臺,難度并不比構建AI應用平臺低,對他們而言,通過公有云服務獲得這種能力反而更現實。
那么,云服務提供商應該怎樣做,才能打造出一個高效、全面和可靠的數據即服務呢?根據先行者們的經驗,導入“建筑師”思維是必需的,也就是說,要用蓋大樓那樣的思路來構建數據即服務。
?
就像起高樓必須先挖地基一樣,云服務提供商首先要考慮數據即服務的“地基”,也就是數據存儲的問題。在各行各業全面擁抱數字化趨勢的今天,存儲服務的要求更多地體現為:容量和性能要實現高效擴展,相關資源可進行靈活調配和快速交付。
?
接下來,在數據存儲的“地基”之上,要筑起堅實的“樓體”,也就是提供數據庫即服務,將繁瑣的數據庫預置、配置、優化、備份、安全、監控、聯網、自動化、升級及維護等操作,全部交給自動化數據庫管理系統來處理。
?
最后一步,就是要在“樓體”上加裝頂層,也就是大數據或數據分析即服務,海量數據將通過它的清洗、挖掘、分析和可視化等操作,提煉出高價值、易理解和檢索的關鍵信息,或者說是洞察。
?
云服務提供商還需要確保上述不同層級間各模塊和功能之間能形成協作,而非各自為政。如金山云的數據即分析服務KMR(Kingsoft MapReduce),就與其對象存儲KS3、表格數據庫服務和關系型數據庫服務(KRDS)實現了集成。其用例之一,就是用戶可在得到分析結果后將其存入KS3,然后釋放按時計費的KMR集群,以節省成本[2]。
有了設計思路,云服務提供商就要操心“鋼筋水泥”,即基礎設施的選擇了。由于這個體系自下而上,對硬件的需求從重存儲,漸漸過渡到重計算,所以這兩點就是考量的重點。
?
先談存儲,數據即服務應優先考慮軟件定義存儲,它利于創建跨服務產品使用,且易于管理和調配的共享存儲資源池。
?
英特爾平臺+Ceph技術是實施軟件定義存儲的理想之選。Ceph是目前唯一能提供開源存儲、軟件定義存儲、企業級存儲和統一存儲(對象、塊和文件)的解決方案。它與至強處理器搭配,再輔以英特爾智能存儲加速庫(讓應用能使用至強加速與數據保護、完整性和安全性相關的任務)、高速緩存加速軟件(讓Ceph可通過智能緩存提高性能),以及高性能、低延遲、高穩定和耐用的英特爾固態盤和傲騰固態盤等技術,可輸出令人滿意的性能和總擁有成本。
再談計算,英特爾的優勢更加明顯:不僅有新一代至強可擴展處理器憑借全新微架構帶來的加成,還有諸多開源和商業版本數據庫及數據處理和分析技術,如Apache Hadoop、Spark、SAPHANA帶來的“眾星捧月”效果。兩者融合就產出了一串更誘人的數據,如SAP HANA每小時執行的查詢量可提高至1.5倍[3],IBM DB2批量分析的平均速度提高至1.4倍[4]。
這些英特爾新技術帶來的功效可不是紙上談兵,拋兩個身邊的真實“戰例”:
?
-????? 騰訊金融云TDSQL服務升級采用至強可擴展處理器、英特爾Omni-Path架構和傲騰固態盤,寫性能提高至原來的3倍,讀性能提升到原來的4倍,整體性能提升至原來的1.7倍[5]。
-????? 用友分析云平臺在升級使用至強鉑金8180處理器后,性能歸一化指標比使用至強E7-8890 v4時提升42%,搭配傲騰固態盤后,性能更是提升達92%[6]。
?
數據與信息來源:
[1]: 麥肯錫,2017年,《利用您的客戶數據獲取價值》,https://www.mckinsey.com/business-functions/mckinsey-analytics/our-insights/capturing-value-from-your-customer-data
[2]: 白皮書《金山云助力實現云端數據分析》,https://www.intel.cn/content/www/cn/zh/cloud-computing/kingsoft-cloud-enables-data-analytics-in-the-cloud.html
[3]、[4]:白皮書《數據分析:面向云服務提供商的指南》, https://connect.intel.com/analytics_eguide_reg
[5]: 白皮書《鑄就智慧金融的“芯”動力——英特爾助力騰訊云提供基于TDSQL的高效、安全金融云服務》,https://www.intel.cn/content/www/cn/zh/cloud-computing/tencent-financial-cloud-case-study.html
[6]: 白皮書《英特爾技術助力用友分析云向用戶提供全分析服務解決方案》,即將上傳。
?
并發、時延、成本等各方面,都對云平臺的基礎設施提出了更高的要求。點擊閱讀原文,登上至強特快專列,了解成功的云服務提供商如何高效打造差異化的云服務。
↓↓↓詳情請查看【閱讀原文】
總結
以上是生活随笔為你收集整理的必须建筑师附体!像盖大楼那样打造数据即服务的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 宝龙花苑的开发商是谁?宝龙花苑谁开发的?
- 下一篇: 索菲亚全屋定制平方价格人工费安装一平方多