華為全閃存第二次日本專家認(rèn)可并獲得展會金獎

6 月 4 號，2020 年日本最大的 ICT 展會 Interop 東京展傳來消息：華為新一代 OceanStor 存儲 Dorado 系列贏得日本評委一致青睞，喜獲 2020 Interop 服務(wù)器與存儲類產(chǎn)品 Best of Show Award 金獎，在組委會官方給出的評語中提到：“華為 OceanStor 存儲 Dorado 系列，具有壓倒性的性能和穩(wěn)定低時延，內(nèi)嵌 AI 自我優(yōu)化 I/O 能力”。

這也是華為全閃存第二次斬獲該獎項。

回顧 2017 年 Interop 東京盛會，華為在全球率先發(fā)布支持 NVMe 技術(shù)的 OceanStor 存儲 Dorado 系列，它以業(yè)界最快的全閃存，最優(yōu)的 0.3ms 時延第一次獲得日本專家認(rèn)可并獲得展會金獎。

而在 2019 年，華為最新發(fā)布的全新一代 OceanStor 存儲 Dorado 系列，作為一款由華為存儲全球研發(fā)團(tuán)隊歷時近 12 年沉淀打造的全新存儲產(chǎn)品，其在存儲架構(gòu)層面有著巨大的突破與創(chuàng)新，并且首次融入了華為多款自主創(chuàng)新的芯片，基于 AI 算法實現(xiàn)了全生命周期的智能運(yùn)維，可謂是給全閃存樹立了新標(biāo)桿。這個新標(biāo)桿，也再一次徹底征服日本專家，獲得所有參展存儲廠商唯一的金獎。

華為 OceanStor 存儲 Dorado 系列脫穎而出絕非偶然，其根基是華為在產(chǎn)品設(shè)計和核心技術(shù)方面的持續(xù)創(chuàng)新。在全球范圍內(nèi)，華為直接投入到存儲產(chǎn)業(yè)的研發(fā)工程師超過 3600 名，分布到全球的 12 個存儲研發(fā)中心，是業(yè)內(nèi)唯一具備存儲操作系統(tǒng)、控制器、SSD 盤(固態(tài)硬盤)全自主創(chuàng)新的供應(yīng)商，并能夠針對閃存存儲進(jìn)行端到端的深度優(yōu)化。“早在 2008 年，華為就開始研究閃存技術(shù)，我們在閃存領(lǐng)域擁有超過 12 年的持續(xù)積累。”華為全閃存首席架構(gòu)師林宇介紹道，“這一路走來，我們的研發(fā)過程經(jīng)歷了從無到有，從弱到強(qiáng)，從最開始在普通應(yīng)用部署，到將閃存應(yīng)用于高端存儲滿足核心應(yīng)用批量商用的過程。”

堅定方向，牛刀小試

“現(xiàn)在回想起來，2008 年是華為全閃存起步的關(guān)鍵之年，由此華為開始了 12 年在全閃存領(lǐng)域的技術(shù)研發(fā)。”林宇感慨道。就在這一年，華為存儲團(tuán)隊經(jīng)過激烈的內(nèi)部研討，決定利用閃存興起彎道超車、打破老牌存儲廠商基于 HDD 構(gòu)筑的壟斷地位。“2008 年作為 IT 領(lǐng)域風(fēng)向標(biāo)的硅谷涌現(xiàn)出了很多 startup 公司開始在企業(yè)級應(yīng)用中使用閃存，SSD 與 HDD 相比，其在性能、功耗、可靠性上的巨大優(yōu)勢讓大家非常震撼，公司領(lǐng)導(dǎo)對閃存的發(fā)展趨勢進(jìn)行了一個總結(jié)，讓我印象最深刻的是 “彎道超車”四個字，這四個字體現(xiàn)出了華為在存儲上的戰(zhàn)略思路以及打破老牌廠商的重要機(jī)會點，當(dāng)年就是這四個字激勵了無數(shù)研發(fā)團(tuán)隊的兄弟投入閃存領(lǐng)域。我也是其中的一員”

在統(tǒng)一戰(zhàn)略思想后，人才成為最為緊迫的事。包括林宇本人在內(nèi)的多位存儲專家領(lǐng)著任務(wù)親赴海外組建研發(fā)團(tuán)隊，從海外招聘來了業(yè)界頂級的 SSD 專家，從零開始打造華為 SSD 研發(fā)團(tuán)隊。“能與當(dāng)時業(yè)界頂尖的技術(shù)專家一起合作，我們整個團(tuán)隊都備受鼓舞，在之后的研發(fā)過程中我們克服不少困難，同時收獲滿滿。”林宇表示。在華為存儲研發(fā)團(tuán)隊的共同努力下，團(tuán)隊在 SSD 硬盤的磨損均衡、垃圾回收、ECC 校驗等技術(shù)上輸出多篇高價值技術(shù)專利。當(dāng)年首款 SATA SSD 盤發(fā)布，性能和可靠性達(dá)到業(yè)界先進(jìn)水平。“記得當(dāng)時華為自主創(chuàng)新的首款 SATA SSD，在性能測試上是超過業(yè)界標(biāo)桿 Intel 的同類產(chǎn)品，具有劃時代的意義，這更加堅定了我們在全閃存研發(fā)上走自主創(chuàng)新的道路。”

自主創(chuàng)新，初露鋒芒

2011 年，閃存應(yīng)用迎來商用化興起的時代，各家存儲廠商紛紛推出零級存儲方案。Violin 等新興存儲廠商通過超高性能在主流數(shù)據(jù)庫存儲加速領(lǐng)域撕開了一條口子。

“這個時候我們在 SSD 和存儲陣列上已經(jīng)有了一定的商用積累，基于對閃存介質(zhì)的深刻理解，以及成熟的企業(yè)存儲產(chǎn)品交付經(jīng)驗，我們將自主創(chuàng)新存儲陣列和 SSD 結(jié)合在一起，基于閃存的特性優(yōu)化存儲陣列系統(tǒng)的緩存、調(diào)度等關(guān)鍵技術(shù)，去除掉很多為 HDD 架構(gòu)設(shè)計的流程和特性，把存儲系統(tǒng)的時延開銷做到最低。”林宇介紹道。

得益于存儲團(tuán)隊對全閃存架構(gòu)的全新設(shè)計，成功使得第一代 OceanStor 存儲 Dorado 系列面世，并搭載自主開發(fā) 6 Gbit/s SAS SSD 盤，這是業(yè)界首批商用的全閃存產(chǎn)品。2012 年，第二代 OceanStor 存儲 Dorado 系列也順利發(fā)布。“Dorado 的含義是一種劍魚，海里游得最快的魚，這也是我們自主研發(fā)全閃存的初衷，為用戶帶來極致的性能體現(xiàn)。”OceanStor 存儲 Dorado 系列這條華為傾力打造的劍魚，第一次游入了數(shù)據(jù)的海洋。

融合閃存，漸入佳境

2014 年，五大融合的商業(yè)理念將融合存儲成功的推向了市場，其中 SSD 和 HDD 的融合是混合存儲一個非常重要的特性。林宇深有感觸的說道，“由于這個時候 SSD 的價格還是很高，存儲廠商從一開始的零級存儲策略逐漸轉(zhuǎn)向混合存儲策略。在針對閃存的優(yōu)化應(yīng)用上，我們此時已經(jīng)比較深刻的掌握了 SSD 內(nèi)部原理以及在什么樣的訪問模式下可以達(dá)到最佳的性能和較好的壽命，但是在分級存儲和 SSD cache 上技術(shù)積累還很薄弱。”

為了不在這項技術(shù)上面落后于友商，被友商形成控標(biāo)點，存儲研發(fā)團(tuán)隊內(nèi)部挑選精兵強(qiáng)將成立了技術(shù)攻關(guān)團(tuán)隊，研究冷熱識別和淘汰算法，利用一年時間先后完成 SSD cache 和分級存儲的特性交付，這標(biāo)志著華為存儲能為客戶提供業(yè)界領(lǐng)先的 SSD 和 HDD 混合使用方案，使得客戶在享受 SSD 帶來的高性能低時延優(yōu)勢的同時，降低 OPEX 投入。

2014 年 5 月，第三代 OceanStor 混合閃存存儲正式發(fā)布，率先開啟全融合數(shù)據(jù)架構(gòu)時代。2015 年 5 月，OceanStor 18000 高端融合存儲正式發(fā)布，在極致穩(wěn)定、極致性能、面向未來三個方面實現(xiàn)了高端存儲新標(biāo)桿。

技術(shù)革新，引領(lǐng)業(yè)界

2016 年 9 月， 第四代 OceanStor 存儲 Dorado 系列震撼上市，具備極致性能，同時具備免網(wǎng)關(guān)存儲雙活解決方案，并搭載自主創(chuàng)新的 12Gbit/s SAS SSD 盤。林宇直言 “第四代 OceanStor 存儲 Dorado 系列在整個 IO 端到端處理上進(jìn)行了大的架構(gòu)變革”，經(jīng)過華為團(tuán)隊的不懈努力，這一代 OceanStor 存儲 Dorado 系列將 IO 寫入模式全面切換為 ROW 方式并結(jié)合大塊順序?qū)懀_啟快照、克隆的特性仍能保持平穩(wěn)性能。SSD 的可靠性是提升 SSD 的使用壽命減少寫放大，這與 HDD 的可靠性要求差異非常大，華為團(tuán)隊在設(shè)計之初就充分了考慮了這一點，不僅通過日志型寫入方式聚合小 IO 請求，規(guī)避 RAID 寫放大，還基于磨損均衡、專利的反磨損均衡以及創(chuàng)新的盤控配合算法深度優(yōu)化，這使得第四代 OceanStor 存儲 Dorado 系列成為業(yè)界頂級產(chǎn)品。

“調(diào)整寫入模式意味著存儲池的所有特性都會受到相應(yīng)的設(shè)計修改，在整個交付過程中，存儲團(tuán)隊經(jīng)歷了困難的垃圾回收性能調(diào)優(yōu)過程、盤控配合算法不斷升級的過程、以及在各種故障下保持穩(wěn)定性能的攻關(guān)過程”林宇回想艱辛的研發(fā)過程不由感慨，2016 年 5 月，第四代 OceanStor 存儲 Dorado 系列主要功能開發(fā)完成，經(jīng)用戶現(xiàn)網(wǎng)大壓力真實測試，性能波動控制在 5% 以內(nèi)，達(dá)到業(yè)界最優(yōu)水平。

第四代 OceanStor 存儲 Dorado 系列是業(yè)界唯一同時具備極致高性能和極致穩(wěn)定性的全閃存陣列產(chǎn)品，奠定了閃存業(yè)界的標(biāo)桿地位。

NVMe 急先鋒，再次領(lǐng)先一步

“2016-2017 年全閃存技術(shù)越發(fā)成熟，全閃存已經(jīng)是整個存儲業(yè)界的發(fā)展趨勢，為有效發(fā)揮全閃存能力，NVMe 技術(shù)得到空前發(fā)展。而這個方面，我們早在 3 年期開始做技術(shù)儲備，存儲技術(shù)團(tuán)隊繼承第四代 OceanStor 存儲 Dorado 系列穩(wěn)定性架構(gòu)的同時，兼顧 NVMe 技術(shù)的領(lǐng)先性和擴(kuò)展性，2017 年 3 月，全球率先發(fā)布支持 NVMe 技術(shù)的第五代 OceanStor 存儲 Dorado 系列，它是業(yè)界最快的全閃存，時延達(dá)到最優(yōu)的 0.3ms;同時基于 HyperMetro 免網(wǎng)關(guān)雙活方案，保障用戶核心應(yīng)用又快又穩(wěn)。”林宇介紹道。

永快永穩(wěn) “芯”存儲，樹立全閃存新標(biāo)桿

歷經(jīng) 12 年的技術(shù)積累，2019 年底，第六代 OceanStor 存儲 Dorado 系列正式發(fā)布，“項目技術(shù)難度大、規(guī)模大，全新的硬件設(shè)計、全新的軟件和操作系統(tǒng)，從設(shè)計到交付都面臨巨大的挑戰(zhàn)”林宇說，“這幾年來我們整個團(tuán)隊在加班加點中度過了不知道多少個日日夜夜，在 OceanStor 存儲 Dorado 系列，我們從架構(gòu)穩(wěn)定性、業(yè)務(wù)高性能、運(yùn)維智能化方面，都進(jìn)行了成果顯著的技術(shù)創(chuàng)新和升級。”

金獎也能“梅開二度” 華為OceanStor 存儲Dorado系列又雙叒叕獲得國際大獎

“性能上，我們基于端到端加速平臺、創(chuàng)新的 NOF + 方案和華為獨(dú)有的 Flashlink® 智能算法，實現(xiàn) 2000 萬 IOPS，0.1ms 時延的極致性能，性能值超越友商 2 倍，樹立了存儲業(yè)界性能的新標(biāo)桿。”

“5G 時代以來，為了應(yīng)對未來數(shù)據(jù)發(fā)展可能帶來的極致可靠星挑戰(zhàn)，我們設(shè)計了 SmartMatrix 全互聯(lián)架構(gòu)，它能實現(xiàn)業(yè)界可靠性等級最高的容忍控制器 8 壞 7，業(yè)務(wù) 0 中斷;容忍引擎 2 壞 1，業(yè)務(wù) 0 中斷;樹立了存儲業(yè)界可靠性的新標(biāo)桿，真正做到企業(yè)核心業(yè)務(wù)永遠(yuǎn)在線。”

“我們在新一代智能全閃存上加入了很多 AI 智能技術(shù)，如：基于智能硬件平臺和智能緩存算法，主動分析并掌握多個應(yīng)用模型的 IO 規(guī)律，讓存儲越用越快;打造了智能盤框，從存儲控制器下載部分工作負(fù)載，把數(shù)據(jù)重構(gòu)的工作卸載到智能硬盤框上;運(yùn)用云上通用智能 + 邊緣個性化智能協(xié)同技術(shù)，做到產(chǎn)品全生命周期智能管理。創(chuàng)新的智能硬件平臺 + 邊緣協(xié)同的智能算法，樹立了存儲業(yè)界智能化的新標(biāo)桿。”

性能永快一步，業(yè)務(wù)永遠(yuǎn)在線，AI 使能永智高效，華為存儲團(tuán)隊真正意義上把第六代 OceanStor 存儲 Dorado 系列打造成了業(yè)界新標(biāo)桿，各方面能力全面領(lǐng)先業(yè)界友商，能帶給用戶最佳的使用體驗。

寫在最后

華為 OceanStor 全閃存能夠在一年一度的日本最大 ICT 盛會上 “梅開二度”，再次獲得金獎，除了專業(yè)評委的慧眼識珠外，這與華為公司在數(shù)據(jù)存儲領(lǐng)域長期堅定的重點投入以及華為數(shù)據(jù)存儲團(tuán)隊多年以來持續(xù)不懈的努力分不開。