科技改變生活 · 科技引領(lǐng)未來(lái)
6 月 4 號(hào),2020 年日本最大的 ICT 展會(huì) Interop 東京展傳來(lái)消息:華為新一代 OceanStor 存儲(chǔ) Dorado 系列贏得日本評(píng)委一致青睞,喜獲 2020 Interop 服務(wù)器與存儲(chǔ)類(lèi)產(chǎn)品 Best of Show Award 金獎(jiǎng),在組委會(huì)官方給出的評(píng)語(yǔ)中提到:“華為 OceanStor 存儲(chǔ) Dorado 系列,具有壓倒性的性能和穩(wěn)定低時(shí)延,內(nèi)嵌 AI 自我優(yōu)化 I/O 能力”。
這也是華為全閃存第二次斬獲該獎(jiǎng)項(xiàng)。
回顧 2017 年 Interop 東京盛會(huì),華為在全球率先發(fā)布支持 NVMe 技術(shù)的 OceanStor 存儲(chǔ) Dorado 系列,它以業(yè)界最快的全閃存,最優(yōu)的 0.3ms 時(shí)延第一次獲得日本專(zhuān)家認(rèn)可并獲得展會(huì)金獎(jiǎng)。
而在 2019 年,華為最新發(fā)布的全新一代 OceanStor 存儲(chǔ) Dorado 系列,作為一款由華為存儲(chǔ)全球研發(fā)團(tuán)隊(duì)歷時(shí)近 12 年沉淀打造的全新存儲(chǔ)產(chǎn)品,其在存儲(chǔ)架構(gòu)層面有著巨大的突破與創(chuàng)新,并且首次融入了華為多款自主創(chuàng)新的芯片,基于 AI 算法實(shí)現(xiàn)了全生命周期的智能運(yùn)維,可謂是給全閃存樹(shù)立了新標(biāo)桿。這個(gè)新標(biāo)桿,也再一次徹底征服日本專(zhuān)家,獲得所有參展存儲(chǔ)廠商唯一的金獎(jiǎng)。
華為 OceanStor 存儲(chǔ) Dorado 系列脫穎而出絕非偶然,其根基是華為在產(chǎn)品設(shè)計(jì)和核心技術(shù)方面的持續(xù)創(chuàng)新。在全球范圍內(nèi),華為直接投入到存儲(chǔ)產(chǎn)業(yè)的研發(fā)工程師超過(guò) 3600 名,分布到全球的 12 個(gè)存儲(chǔ)研發(fā)中心,是業(yè)內(nèi)唯一具備存儲(chǔ)操作系統(tǒng)、控制器、SSD 盤(pán)(固態(tài)硬盤(pán))全自主創(chuàng)新的供應(yīng)商,并能夠針對(duì)閃存存儲(chǔ)進(jìn)行端到端的深度優(yōu)化。“早在 2008 年,華為就開(kāi)始研究閃存技術(shù),我們?cè)陂W存領(lǐng)域擁有超過(guò) 12 年的持續(xù)積累。”華為全閃存首席架構(gòu)師林宇介紹道,“這一路走來(lái),我們的研發(fā)過(guò)程經(jīng)歷了從無(wú)到有,從弱到強(qiáng),從最開(kāi)始在普通應(yīng)用部署,到將閃存應(yīng)用于高端存儲(chǔ)滿足核心應(yīng)用批量商用的過(guò)程。”
堅(jiān)定方向,牛刀小試
“現(xiàn)在回想起來(lái),2008 年是華為全閃存起步的關(guān)鍵之年,由此華為開(kāi)始了 12 年在全閃存領(lǐng)域的技術(shù)研發(fā)。”林宇感慨道。就在這一年,華為存儲(chǔ)團(tuán)隊(duì)經(jīng)過(guò)激烈的內(nèi)部研討,決定利用閃存興起彎道超車(chē)、打破老牌存儲(chǔ)廠商基于 HDD 構(gòu)筑的壟斷地位。“2008 年作為 IT 領(lǐng)域風(fēng)向標(biāo)的硅谷涌現(xiàn)出了很多 startup 公司開(kāi)始在企業(yè)級(jí)應(yīng)用中使用閃存,SSD 與 HDD 相比,其在性能、功耗、可靠性上的巨大優(yōu)勢(shì)讓大家非常震撼,公司領(lǐng)導(dǎo)對(duì)閃存的發(fā)展趨勢(shì)進(jìn)行了一個(gè)總結(jié),讓我印象最深刻的是 “彎道超車(chē)”四個(gè)字,這四個(gè)字體現(xiàn)出了華為在存儲(chǔ)上的戰(zhàn)略思路以及打破老牌廠商的重要機(jī)會(huì)點(diǎn),當(dāng)年就是這四個(gè)字激勵(lì)了無(wú)數(shù)研發(fā)團(tuán)隊(duì)的兄弟投入閃存領(lǐng)域。我也是其中的一員”
在統(tǒng)一戰(zhàn)略思想后,人才成為最為緊迫的事。包括林宇本人在內(nèi)的多位存儲(chǔ)專(zhuān)家領(lǐng)著任務(wù)親赴海外組建研發(fā)團(tuán)隊(duì),從海外招聘來(lái)了業(yè)界頂級(jí)的 SSD 專(zhuān)家,從零開(kāi)始打造華為 SSD 研發(fā)團(tuán)隊(duì)。“能與當(dāng)時(shí)業(yè)界頂尖的技術(shù)專(zhuān)家一起合作,我們整個(gè)團(tuán)隊(duì)都備受鼓舞,在之后的研發(fā)過(guò)程中我們克服不少困難,同時(shí)收獲滿滿。”林宇表示。在華為存儲(chǔ)研發(fā)團(tuán)隊(duì)的共同努力下,團(tuán)隊(duì)在 SSD 硬盤(pán)的磨損均衡、垃圾回收、ECC 校驗(yàn)等技術(shù)上輸出多篇高價(jià)值技術(shù)專(zhuān)利。當(dāng)年首款 SATA SSD 盤(pán)發(fā)布,性能和可靠性達(dá)到業(yè)界先進(jìn)水平。“記得當(dāng)時(shí)華為自主創(chuàng)新的首款 SATA SSD,在性能測(cè)試上是超過(guò)業(yè)界標(biāo)桿 Intel 的同類(lèi)產(chǎn)品,具有劃時(shí)代的意義,這更加堅(jiān)定了我們?cè)谌W存研發(fā)上走自主創(chuàng)新的道路。”
自主創(chuàng)新,初露鋒芒
2011 年,閃存應(yīng)用迎來(lái)商用化興起的時(shí)代,各家存儲(chǔ)廠商紛紛推出零級(jí)存儲(chǔ)方案。Violin 等新興存儲(chǔ)廠商通過(guò)超高性能在主流數(shù)據(jù)庫(kù)存儲(chǔ)加速領(lǐng)域撕開(kāi)了一條口子。
“這個(gè)時(shí)候我們?cè)?SSD 和存儲(chǔ)陣列上已經(jīng)有了一定的商用積累,基于對(duì)閃存介質(zhì)的深刻理解,以及成熟的企業(yè)存儲(chǔ)產(chǎn)品交付經(jīng)驗(yàn),我們將自主創(chuàng)新存儲(chǔ)陣列和 SSD 結(jié)合在一起,基于閃存的特性優(yōu)化存儲(chǔ)陣列系統(tǒng)的緩存、調(diào)度等關(guān)鍵技術(shù),去除掉很多為 HDD 架構(gòu)設(shè)計(jì)的流程和特性,把存儲(chǔ)系統(tǒng)的時(shí)延開(kāi)銷(xiāo)做到最低。”林宇介紹道。
得益于存儲(chǔ)團(tuán)隊(duì)對(duì)全閃存架構(gòu)的全新設(shè)計(jì),成功使得第一代 OceanStor 存儲(chǔ) Dorado 系列面世,并搭載自主開(kāi)發(fā) 6 Gbit/s SAS SSD 盤(pán),這是業(yè)界首批商用的全閃存產(chǎn)品。2012 年,第二代 OceanStor 存儲(chǔ) Dorado 系列也順利發(fā)布。“Dorado 的含義是一種劍魚(yú),海里游得最快的魚(yú),這也是我們自主研發(fā)全閃存的初衷,為用戶帶來(lái)極致的性能體現(xiàn)。”OceanStor 存儲(chǔ) Dorado 系列這條華為傾力打造的劍魚(yú),第一次游入了數(shù)據(jù)的海洋。
融合閃存,漸入佳境
2014 年,五大融合的商業(yè)理念將融合存儲(chǔ)成功的推向了市場(chǎng),其中 SSD 和 HDD 的融合是混合存儲(chǔ)一個(gè)非常重要的特性。林宇深有感觸的說(shuō)道,“由于這個(gè)時(shí)候 SSD 的價(jià)格還是很高,存儲(chǔ)廠商從一開(kāi)始的零級(jí)存儲(chǔ)策略逐漸轉(zhuǎn)向混合存儲(chǔ)策略。在針對(duì)閃存的優(yōu)化應(yīng)用上,我們此時(shí)已經(jīng)比較深刻的掌握了 SSD 內(nèi)部原理以及在什么樣的訪問(wèn)模式下可以達(dá)到最佳的性能和較好的壽命,但是在分級(jí)存儲(chǔ)和 SSD cache 上技術(shù)積累還很薄弱。”
為了不在這項(xiàng)技術(shù)上面落后于友商,被友商形成控標(biāo)點(diǎn),存儲(chǔ)研發(fā)團(tuán)隊(duì)內(nèi)部挑選精兵強(qiáng)將成立了技術(shù)攻關(guān)團(tuán)隊(duì),研究冷熱識(shí)別和淘汰算法,利用一年時(shí)間先后完成 SSD cache 和分級(jí)存儲(chǔ)的特性交付,這標(biāo)志著華為存儲(chǔ)能為客戶提供業(yè)界領(lǐng)先的 SSD 和 HDD 混合使用方案,使得客戶在享受 SSD 帶來(lái)的高性能低時(shí)延優(yōu)勢(shì)的同時(shí),降低 OPEX 投入。
2014 年 5 月,第三代 OceanStor 混合閃存存儲(chǔ)正式發(fā)布,率先開(kāi)啟全融合數(shù)據(jù)架構(gòu)時(shí)代。2015 年 5 月,OceanStor 18000 高端融合存儲(chǔ)正式發(fā)布,在極致穩(wěn)定、極致性能、面向未來(lái)三個(gè)方面實(shí)現(xiàn)了高端存儲(chǔ)新標(biāo)桿。
技術(shù)革新,引領(lǐng)業(yè)界
2016 年 9 月, 第四代 OceanStor 存儲(chǔ) Dorado 系列震撼上市,具備極致性能,同時(shí)具備免網(wǎng)關(guān)存儲(chǔ)雙活解決方案,并搭載自主創(chuàng)新的 12Gbit/s SAS SSD 盤(pán)。林宇直言 “第四代 OceanStor 存儲(chǔ) Dorado 系列在整個(gè) IO 端到端處理上進(jìn)行了大的架構(gòu)變革”,經(jīng)過(guò)華為團(tuán)隊(duì)的不懈努力,這一代 OceanStor 存儲(chǔ) Dorado 系列將 IO 寫(xiě)入模式全面切換為 ROW 方式并結(jié)合大塊順序?qū)懀_(kāi)啟快照、克隆的特性仍能保持平穩(wěn)性能。SSD 的可靠性是提升 SSD 的使用壽命減少寫(xiě)放大,這與 HDD 的可靠性要求差異非常大,華為團(tuán)隊(duì)在設(shè)計(jì)之初就充分了考慮了這一點(diǎn),不僅通過(guò)日志型寫(xiě)入方式聚合小 IO 請(qǐng)求,規(guī)避 RAID 寫(xiě)放大,還基于磨損均衡、專(zhuān)利的反磨損均衡以及創(chuàng)新的盤(pán)控配合算法深度優(yōu)化,這使得第四代 OceanStor 存儲(chǔ) Dorado 系列成為業(yè)界頂級(jí)產(chǎn)品。
“調(diào)整寫(xiě)入模式意味著存儲(chǔ)池的所有特性都會(huì)受到相應(yīng)的設(shè)計(jì)修改,在整個(gè)交付過(guò)程中,存儲(chǔ)團(tuán)隊(duì)經(jīng)歷了困難的垃圾回收性能調(diào)優(yōu)過(guò)程、盤(pán)控配合算法不斷升級(jí)的過(guò)程、以及在各種故障下保持穩(wěn)定性能的攻關(guān)過(guò)程”林宇回想艱辛的研發(fā)過(guò)程不由感慨,2016 年 5 月,第四代 OceanStor 存儲(chǔ) Dorado 系列主要功能開(kāi)發(fā)完成,經(jīng)用戶現(xiàn)網(wǎng)大壓力真實(shí)測(cè)試,性能波動(dòng)控制在 5% 以內(nèi),達(dá)到業(yè)界最優(yōu)水平。
第四代 OceanStor 存儲(chǔ) Dorado 系列是業(yè)界唯一同時(shí)具備極致高性能和極致穩(wěn)定性的全閃存陣列產(chǎn)品,奠定了閃存業(yè)界的標(biāo)桿地位。
NVMe 急先鋒,再次領(lǐng)先一步
“2016-2017 年全閃存技術(shù)越發(fā)成熟,全閃存已經(jīng)是整個(gè)存儲(chǔ)業(yè)界的發(fā)展趨勢(shì),為有效發(fā)揮全閃存能力,NVMe 技術(shù)得到空前發(fā)展。而這個(gè)方面,我們?cè)缭?3 年期開(kāi)始做技術(shù)儲(chǔ)備,存儲(chǔ)技術(shù)團(tuán)隊(duì)繼承第四代 OceanStor 存儲(chǔ) Dorado 系列穩(wěn)定性架構(gòu)的同時(shí),兼顧 NVMe 技術(shù)的領(lǐng)先性和擴(kuò)展性,2017 年 3 月,全球率先發(fā)布支持 NVMe 技術(shù)的第五代 OceanStor 存儲(chǔ) Dorado 系列,它是業(yè)界最快的全閃存,時(shí)延達(dá)到最優(yōu)的 0.3ms;同時(shí)基于 HyperMetro 免網(wǎng)關(guān)雙活方案,保障用戶核心應(yīng)用又快又穩(wěn)。”林宇介紹道。
永快永穩(wěn) “芯”存儲(chǔ),樹(shù)立全閃存新標(biāo)桿
歷經(jīng) 12 年的技術(shù)積累,2019 年底,第六代 OceanStor 存儲(chǔ) Dorado 系列正式發(fā)布,“項(xiàng)目技術(shù)難度大、規(guī)模大,全新的硬件設(shè)計(jì)、全新的軟件和操作系統(tǒng),從設(shè)計(jì)到交付都面臨巨大的挑戰(zhàn)”林宇說(shuō),“這幾年來(lái)我們整個(gè)團(tuán)隊(duì)在加班加點(diǎn)中度過(guò)了不知道多少個(gè)日日夜夜,在 OceanStor 存儲(chǔ) Dorado 系列,我們從架構(gòu)穩(wěn)定性、業(yè)務(wù)高性能、運(yùn)維智能化方面,都進(jìn)行了成果顯著的技術(shù)創(chuàng)新和升級(jí)。”
金獎(jiǎng)也能“梅開(kāi)二度” 華為OceanStor 存儲(chǔ)Dorado系列又雙叒叕獲得國(guó)際大獎(jiǎng)
“性能上,我們基于端到端加速平臺(tái)、創(chuàng)新的 NOF + 方案和華為獨(dú)有的 Flashlink® 智能算法,實(shí)現(xiàn) 2000 萬(wàn) IOPS,0.1ms 時(shí)延的極致性能,性能值超越友商 2 倍,樹(shù)立了存儲(chǔ)業(yè)界性能的新標(biāo)桿。”
“5G 時(shí)代以來(lái),為了應(yīng)對(duì)未來(lái)數(shù)據(jù)發(fā)展可能帶來(lái)的極致可靠星挑戰(zhàn),我們?cè)O(shè)計(jì)了 SmartMatrix 全互聯(lián)架構(gòu),它能實(shí)現(xiàn)業(yè)界可靠性等級(jí)最高的容忍控制器 8 壞 7,業(yè)務(wù) 0 中斷;容忍引擎 2 壞 1,業(yè)務(wù) 0 中斷;樹(shù)立了存儲(chǔ)業(yè)界可靠性的新標(biāo)桿,真正做到企業(yè)核心業(yè)務(wù)永遠(yuǎn)在線。”
“我們?cè)谛乱淮悄苋W存上加入了很多 AI 智能技術(shù),如:基于智能硬件平臺(tái)和智能緩存算法,主動(dòng)分析并掌握多個(gè)應(yīng)用模型的 IO 規(guī)律,讓存儲(chǔ)越用越快;打造了智能盤(pán)框,從存儲(chǔ)控制器下載部分工作負(fù)載,把數(shù)據(jù)重構(gòu)的工作卸載到智能硬盤(pán)框上;運(yùn)用云上通用智能 + 邊緣個(gè)性化智能協(xié)同技術(shù),做到產(chǎn)品全生命周期智能管理。創(chuàng)新的智能硬件平臺(tái) + 邊緣協(xié)同的智能算法,樹(shù)立了存儲(chǔ)業(yè)界智能化的新標(biāo)桿。”
性能永快一步,業(yè)務(wù)永遠(yuǎn)在線,AI 使能永智高效,華為存儲(chǔ)團(tuán)隊(duì)真正意義上把第六代 OceanStor 存儲(chǔ) Dorado 系列打造成了業(yè)界新標(biāo)桿,各方面能力全面領(lǐng)先業(yè)界友商,能帶給用戶最佳的使用體驗(yàn)。
寫(xiě)在最后
華為 OceanStor 全閃存能夠在一年一度的日本最大 ICT 盛會(huì)上 “梅開(kāi)二度”,再次獲得金獎(jiǎng),除了專(zhuān)業(yè)評(píng)委的慧眼識(shí)珠外,這與華為公司在數(shù)據(jù)存儲(chǔ)領(lǐng)域長(zhǎng)期堅(jiān)定的重點(diǎn)投入以及華為數(shù)據(jù)存儲(chǔ)團(tuán)隊(duì)多年以來(lái)持續(xù)不懈的努力分不開(kāi)。
高夕華
版權(quán)所有 未經(jīng)許可不得轉(zhuǎn)載
增值電信業(yè)務(wù)經(jīng)營(yíng)許可證備案號(hào):遼ICP備14006349號(hào)
網(wǎng)站介紹 商務(wù)合作 免責(zé)聲明 - html - txt - xml