
這是一個(gè)頗為勵志的成長(cháng)故事。從三五個(gè)人的小團隊,到如今幾千人的團隊規模;從一臺預研機產(chǎn)品,到如今全面布局的存儲產(chǎn)品線(xiàn);從起步階段多年的凈投入,到如今連續八個(gè)季度全球全閃存增速第一;從過(guò)去的默默無(wú)聞,到如今Gartner魔力四象限領(lǐng)導者的常客……
做到這些,華為存儲花了18年。
18年風(fēng)雨歷程,華為存儲從蹣跚學(xué)步的孩童,摸著(zhù)河岸的石頭艱難前行,到仗劍走天涯、勇闖天下的少年,一路艱辛卻也收獲滿(mǎn)滿(mǎn)。今年是華為存儲18年,猶如一場(chǎng)「成人禮」,它既是致敬自己過(guò)去奮斗的青春,也意味著(zhù)未來(lái)要肩負起更大的責任。
重溫歷史,感受存儲產(chǎn)業(yè)奮斗者的溫度。
① 第一場(chǎng)自我證明
在科技領(lǐng)域,任何業(yè)務(wù)從0到1的過(guò)程都注定是艱難無(wú)比的,華為存儲也不例外。
華為進(jìn)入到存儲領(lǐng)域純屬偶然,2001年互聯(lián)網(wǎng)科技泡沫破裂之后,幾乎波及到所有科技公司,華為亦不能幸免。
置之死地而后生,華為當時(shí)認為只做通信產(chǎn)品未來(lái)會(huì )面臨很大的風(fēng)險,需要積極尋找新的產(chǎn)業(yè)機會(huì )點(diǎn)。于是,華為商業(yè)網(wǎng)絡(luò )部悄然成立,存儲恰恰是其中一個(gè)新業(yè)務(wù)。「當時(shí)有幾十個(gè)新業(yè)務(wù),存儲是到現在依然活著(zhù)的三個(gè)業(yè)務(wù)之一。」華為存儲資深專(zhuān)家張國彬如是說(shuō)。
張國彬2002年清華畢業(yè)后進(jìn)入華為,恰好分配到存儲研發(fā)團隊,從此開(kāi)啟了與存儲近二十年的緣分,見(jiàn)證了華為存儲從無(wú)到有,從追趕到逐步超越的全過(guò)程。
「公司是2002年正式對存儲業(yè)務(wù)進(jìn)行投入的。當時(shí),存儲產(chǎn)業(yè)的確是一個(gè)潛力無(wú)比巨大的朝陽(yáng)產(chǎn)業(yè)。不過(guò),公司剛開(kāi)始比較謹慎,當時(shí)團隊加起來(lái)也就十來(lái)個(gè)人」,張國彬回憶道,「華為存儲團隊首先需要證明有沒(méi)有能力把存儲這件事情干成。」
沒(méi)人、沒(méi)槍?zhuān)怯直仨氃谝荒曛畠劝杨A研的產(chǎn)品研發(fā)出來(lái),這就是華為存儲團隊當時(shí)所面臨的困難局面。為此,華為存儲率先想到的思路是與高校科研機構合作,攜手華中理工大學(xué)(之后改名為華中科技大學(xué))謝長(cháng)生教授團隊進(jìn)行合作,開(kāi)始基于標準服務(wù)器+商用FC卡+開(kāi)源RAID代碼+Cache/SCSI組件打造預研的存儲系統。
「經(jīng)過(guò)一年的努力,存儲原型機終于研發(fā)成功,將FC環(huán)境的I/O跑通。」張國彬介紹,「后來(lái)通過(guò)了管理層的驗收,華為存儲在2003年也順理成章地正式啟動(dòng)研發(fā)。」
借助開(kāi)源+創(chuàng )新的力量,華為存儲第一次證明了自己有能力活下去。不過(guò),接下來(lái)還有更多意想不到的困難等待著(zhù)。
② 一道決定終生的選擇題
輸入標題
在這個(gè)世界上,成功從來(lái)沒(méi)有捷徑可走,因為世上本來(lái)就沒(méi)有捷徑,科技領(lǐng)域尤甚。
正式開(kāi)啟研發(fā)的華為存儲,馬上面臨著(zhù)一道選擇題:走開(kāi)源路線(xiàn)還是走創(chuàng )新路線(xiàn)從頭開(kāi)始?
為此,華為存儲團隊內部發(fā)生了激烈的討論。采用開(kāi)源路線(xiàn),意味著(zhù)可以加速產(chǎn)品研發(fā)成功的速度,這對于初涉存儲領(lǐng)域的華為而言,不失為一條“捷徑”,但開(kāi)源也普遍存在著(zhù)代碼與功能相對簡(jiǎn)單、效率較低、Bug較多等情況;而從一開(kāi)始就走創(chuàng )新路線(xiàn)的話(huà),意味著(zhù)需要保持持續投入,對時(shí)間和成本上是一場(chǎng)考驗。
「從長(cháng)遠來(lái)看,選擇開(kāi)源在未來(lái)會(huì )帶來(lái)更多風(fēng)險。」張國彬解釋道,「經(jīng)過(guò)充分論證和權衡,團隊最后一致決定寧愿花費數年時(shí)間,也要為客戶(hù)、自己奠定堅實(shí)的基礎。」這個(gè)決定對華為存儲后來(lái)的研發(fā)體系打造、平臺級研發(fā)策略有著(zhù)決定性的影響,也是華為存儲后續能夠實(shí)現持續突破的關(guān)鍵。
不過(guò)一年下來(lái),研發(fā)團隊發(fā)現這條路遠沒(méi)想象中那么容易,頗有“一入存儲深似海”的感覺(jué)。
「干了一年發(fā)現不對勁,存儲對于研發(fā)投入實(shí)在太大了。」張國彬如是說(shuō),「當時(shí)光企業(yè)級硬盤(pán)的價(jià)格就非常昂貴,加上人力成本也較高。」實(shí)際上,企業(yè)級存儲的技術(shù)門(mén)檻極高,作為企業(yè)數據的最后歸屬地,企業(yè)級存儲產(chǎn)品對于可靠性以及數據一致性有著(zhù)極高的要求,這也直接決定了存儲研發(fā)需要高投入。
面臨著(zhù)如此高昂的成本,華為也開(kāi)始有一些猶豫。到底還要不要堅持投入?如果堅持下去,還需要持續高投入多久才能做出有市場(chǎng)競爭力的產(chǎn)品?做出產(chǎn)品之后,留給華為的市場(chǎng)窗口還有多大?
2004年,華為認為咬緊牙關(guān)也要上,但是需要靈活的方法去更加快速地了解市場(chǎng)變化和用戶(hù)需求,進(jìn)而加速存儲產(chǎn)品的研發(fā)。為此,華為決定開(kāi)始采用跟國外領(lǐng)先存儲廠(chǎng)商合作的方式,一方面滿(mǎn)足了內部業(yè)務(wù)需求,另外則可以通過(guò)成熟產(chǎn)品了解到用戶(hù)的實(shí)際需求。
之后,操作系統內存管理、消息通信、各種存儲協(xié)議、Cache、RAID軟件、集群管理、配置運維……團隊們把一個(gè)個(gè)功能都給實(shí)現了。在完成單控制器產(chǎn)品之后,華為存儲研發(fā)團隊又開(kāi)始著(zhù)手實(shí)現雙控存儲系統的研發(fā)。
在當時(shí),從單控制器存儲到雙控制器存儲意味著(zhù)研發(fā)能力有著(zhù)本質(zhì)的飛躍,對于存儲架構設計、軟件研發(fā)等都有著(zhù)極高的要求。單控制器存儲一旦控制器出現某個(gè)問(wèn)題,將會(huì )導致整個(gè)存儲的故障,這無(wú)疑會(huì )給用戶(hù)業(yè)務(wù)帶來(lái)致命的影響;而雙控制器則相當于給存儲買(mǎi)了一份保險,一個(gè)控制器出現故障,另一個(gè)控制器立馬跟上,確保客戶(hù)業(yè)務(wù)不會(huì )出現中斷。
到了2005年,華為花費三年多時(shí)間基本完成了對于雙控存儲系統的研發(fā)工作,這也意味著(zhù)華為存儲研發(fā)實(shí)現了階段性的勝利。
就在此時(shí),一次良機又出現在華為存儲面前,它有膽量去接受它么?
③ 獨自闖蕩江湖的少年
2006年,華為正式上市了F800存儲。此時(shí),華為開(kāi)始考慮大規模進(jìn)入到存儲產(chǎn)業(yè)之中。這時(shí),華為又面臨著(zhù)選擇:第一是自己完全做,無(wú)論是研發(fā)、市場(chǎng)、渠道、服務(wù)都是自己來(lái);第二是選擇與合作伙伴一起。
這一次,華為選擇了后者。
2005年,存儲與安全巨頭賽門(mén)鐵克拋來(lái)橄欖枝,華為與賽門(mén)鐵克有了第一次接觸。經(jīng)過(guò)不斷的接觸與談判,華為與賽門(mén)鐵克在2006年正式開(kāi)始運作合資公司——華為賽門(mén)鐵克(以下簡(jiǎn)稱(chēng):華賽):華為出人和研發(fā),賽門(mén)鐵克出資,主攻存儲與安全業(yè)務(wù)。
采用獨立合資公司的方式在當時(shí)對雙方都有最大利益,華為獲得了充足的資金,可以持續加大對存儲研發(fā)的投入,打造出更具市場(chǎng)競爭力的產(chǎn)品;賽門(mén)鐵克則規避了自己從頭開(kāi)始干的風(fēng)險。
經(jīng)過(guò)近兩年的籌備,華賽公司在2008年正式對外掛牌成立,存儲團隊規模達到了200人左右。華為存儲此時(shí)猶如一個(gè)獨自闖蕩江湖的少年,懷揣遠大夢(mèng)想,卻也心存忐忑。
2008年是存儲產(chǎn)業(yè)標志性的一年,存儲市場(chǎng)孕育著(zhù)巨大變革,高端存儲創(chuàng )新架構、重復數據刪除與壓縮技術(shù)、閃存技術(shù)、集群文件技術(shù)……幾乎所有存儲細分領(lǐng)域都涌現出一大批具有創(chuàng )新精神的創(chuàng )業(yè)公司,存儲產(chǎn)業(yè)的創(chuàng )新可謂是百花齊放。
「合資公司給了華為存儲獨立成長(cháng)的機會(huì )。」張國彬如是說(shuō)。
華賽猶如一個(gè)奔跑的少年,脫離了華為體系,運轉效率、決策效率就像創(chuàng )業(yè)公司那樣迅速,積極參與到存儲的創(chuàng )新之中。2009年華賽就開(kāi)發(fā)出了第一款SSD,要知道SSD在高端存儲中首次采用也僅僅是在2008年。
不僅如此,華賽作為一家獨立的合資公司,開(kāi)始走出去、引進(jìn)來(lái),在全球范圍招募了大量?jì)?yōu)秀人才,從而奠定了華為存儲全球研發(fā)體系的基礎。通過(guò)不斷見(jiàn)世面和引進(jìn)存儲大咖,華為存儲整體人才體系的視野和思路得到了大幅開(kāi)拓。
「賽門(mén)鐵克并沒(méi)有為華賽注入一行代碼。華賽沒(méi)有采用賽門(mén)鐵克任何技術(shù),但是研發(fā)團隊與賽門(mén)鐵克存儲專(zhuān)家們交流的確是受益匪淺。」張國彬澄清道。
不僅僅在研發(fā)體系、研發(fā)思路上突飛猛進(jìn),獨立運作的華賽意味著(zhù)沒(méi)有大公司的市場(chǎng)和銷(xiāo)售資源可用,必須自己建立專(zhuān)業(yè)的銷(xiāo)售與市場(chǎng)團隊,勇敢走出去見(jiàn)客戶(hù)、啃單子。張國彬回憶道,那幾年的獨立運營(yíng),的確給了銷(xiāo)售與市場(chǎng)團隊很大鍛煉,政府、金融、運營(yíng)商、大企業(yè)的頭部客戶(hù)都要挨個(gè)啃下來(lái)。「2009年,華賽存儲產(chǎn)品就用在了國有大銀行的票據影像歸檔上,并且在各個(gè)行業(yè)都開(kāi)始取得突破。」
然而,成長(cháng)的道路從來(lái)沒(méi)有一帆風(fēng)順。人們常說(shuō),成長(cháng)其實(shí)就是一種刻骨銘心的蛻變。華賽這位奔跑的存儲少年,一樣也有摔得刻骨銘心的時(shí)刻。
④ 學(xué)會(huì )敬畏數據
2009年,隨著(zhù)華賽產(chǎn)品在多個(gè)行業(yè)用戶(hù)中得到使用,一些問(wèn)題也開(kāi)始接踵而至:告警器聲音與旋轉磁盤(pán)聲音形成共振,造成硬盤(pán)批量次故障;空氣污染、環(huán)境中的硫化物腐蝕硬盤(pán),造成硬盤(pán)變慢;控制器短路;甚至傳說(shuō)中宇宙射線(xiàn)引起內存Bit位翻轉導致數據不一致的情況也出現了。
這讓華賽公司開(kāi)始重新審視存儲。張國彬表示:「老實(shí)說(shuō),這些問(wèn)題讓華為存儲真正學(xué)會(huì )了尊敬存儲、敬畏數據。」這個(gè)世界上從來(lái)沒(méi)有隨隨便便的成功,競爭友商之所以能夠在市場(chǎng)中占據領(lǐng)先,跟它們多年以來(lái)摸爬滾打分不開(kāi),此時(shí)的華為存儲還稍顯稚嫩,面對這些問(wèn)題顯得有點(diǎn)措手不及。
從摔倒的地方重新開(kāi)始,華賽公司痛定思痛,在時(shí)任華賽存儲業(yè)務(wù)總裁范瑞琦的帶領(lǐng)下,研發(fā)團隊在2009年干了一件事情,除了手頭上的研發(fā)工作之外,將底層所有存儲協(xié)議、硬件部件要搞得清清楚楚、明明白白。
之后,研發(fā)團隊硬是把厚厚的英文協(xié)議書(shū)全部啃了下來(lái),然后重新進(jìn)行抗振、防腐設計,并且與硬盤(pán)廠(chǎng)商進(jìn)行聯(lián)合設計,認真摸索每種、每塊硬盤(pán)故障參數,并且進(jìn)行軟硬件聯(lián)合處理,硬盤(pán)百萬(wàn)行代碼的固件(Firmware)必須經(jīng)過(guò)長(cháng)時(shí)間的實(shí)驗室驗證才能給用戶(hù)升級。
自此,華為存儲確定了堅不可動(dòng)的原則:存儲可靠性第一,數據絕對不能丟失,存儲產(chǎn)品只有做到數據不丟失才能上市。
「直到今天我依然清晰的記得,每個(gè)周末大家聚在一起做問(wèn)題根因分析的日子,針對每個(gè)出現的問(wèn)題大家刨根問(wèn)底,直到最終把它解決。」張國彬回憶道。
另外讓華賽這位存儲少年受益匪淺的,就是與世界一流人才的交流與學(xué)習。當時(shí)的華賽研發(fā)團隊,很多人都畢業(yè)于名校,并且已經(jīng)在存儲領(lǐng)域積累了好幾年的經(jīng)驗,對自己可謂是信心滿(mǎn)滿(mǎn)。但是世界一流人才的到來(lái),向華為注入的不僅僅是存儲領(lǐng)域各種領(lǐng)先的經(jīng)驗、技巧和方法,更是在思想層面對于華賽存儲研發(fā)團隊產(chǎn)生重要的影響。
比如,在存儲領(lǐng)域非常常見(jiàn)的時(shí)延控制方面,時(shí)延可謂是存儲領(lǐng)域一個(gè)關(guān)鍵指標,時(shí)延的波動(dòng)與異常可能會(huì )給存儲系統的性能帶來(lái)極大影響,進(jìn)而會(huì )直接影響到業(yè)務(wù)的性能。如何對于時(shí)延進(jìn)行精準的控制可謂是一門(mén)手藝活,一流存儲的大咖對于時(shí)延精準控制的專(zhuān)注猶如匠心精神,讓華賽研發(fā)團隊醍醐灌頂,明白了存儲技術(shù)的打磨沒(méi)有止境,需要有匠心精神對技術(shù)精益求精。
在這幾年的獨立運營(yíng)中,華賽存儲摔了很多跤、吃了很多苦,也獲得了很多回報,整個(gè)公司運營(yíng)狀況良好,連續兩次實(shí)現盈利;人才隊伍建設卓有成效,研發(fā)體系打造初步成型;產(chǎn)品研發(fā)上節節開(kāi)花,第二代中端系統、SSD硬盤(pán)等新品讓業(yè)界為之一亮。
就在這時(shí),華賽卻選擇了回歸華為大家庭,這個(gè)選擇會(huì )對存儲已經(jīng)構建起來(lái)的產(chǎn)品、研發(fā)、銷(xiāo)售體系產(chǎn)生什么樣的影響?
⑤ 回歸是為了更好地出發(fā)
2011年11月4日,華為和賽門(mén)鐵克宣布,雙方已就華為以5.3億美元收購賽門(mén)鐵克持有的華為賽門(mén)鐵克公司49%的股權達成協(xié)議。自此,華賽回歸成為定局。
如果按照5.3億美元的價(jià)格來(lái)計劃,華賽公司當年的估值已經(jīng)突破了10億美金,可謂是名副其實(shí)的存儲獨角獸。華賽公司也用自己親身經(jīng)歷證明了一個(gè)事實(shí):這批華為存儲人是有能力在市場(chǎng)中生存乃至干出一番事業(yè)。
此刻的回歸,是會(huì )重蹈過(guò)去創(chuàng )業(yè)公司被并購入大公司之后碌碌無(wú)為的覆轍,還是會(huì )讓整個(gè)存儲業(yè)務(wù)如虎添翼、再上一個(gè)新臺階?這不僅是外界的疑慮,也是存儲團隊熱切期盼知道的。
「正式回歸之后,公司馬上大力投入存儲,明顯感覺(jué)到公司希望做大、做強存儲業(yè)務(wù)。」一位經(jīng)歷過(guò)華為存儲離開(kāi)、獨立、回歸全過(guò)程的員工感嘆道,「如果依然保持獨立,出于營(yíng)收、盈利等方面的考慮,研發(fā)上不可能完全放開(kāi)手腳,尤其是在基礎技術(shù)領(lǐng)域的研發(fā)上。」
自此,華為存儲在研發(fā)體系和研發(fā)人才上正式步入了全球化、頂尖水平的建設階段,為日后的OceanStor存儲Dorado系列全閃存,Pacific系列海量存儲等重磅產(chǎn)品打下了堅實(shí)的基礎。
從國內來(lái)看,在成都、北京、深圳三地,華為存儲早已建立起完善和強大的研發(fā)中心。全球也建立了多所存儲領(lǐng)域的研究所。經(jīng)過(guò)幾年的打造,華為存儲的研發(fā)團隊已經(jīng)媲美世界任何頂尖存儲公司。
研發(fā)在回歸之后另外一個(gè)最大的變化就是:平臺化。隨著(zhù)全球研發(fā)體系的逐步建立與完善,華為存儲研發(fā)平臺化開(kāi)始踏上了日程。張國彬透露:「以前在華賽時(shí)期,公司其實(shí)非常希望研發(fā)平臺化。但是華賽畢竟在規模上還較小,平臺化需要較長(cháng)時(shí)間才會(huì )發(fā)揮作用。」但是,回歸華為之后,華為存儲研發(fā)平臺戰略所需要的條件非常完善,華為存儲抽調了大部分研發(fā)力量來(lái)對平臺化進(jìn)行建設。
華為數據存儲產(chǎn)品部部長(cháng)項飛介紹:「存儲平臺化其實(shí)是一個(gè)漸進(jìn)的過(guò)程,需要存儲關(guān)鍵技術(shù)能力、軟硬件研發(fā)能力、項目管理能力的不斷積累,然后通過(guò)一個(gè)組件化的思路,讓復雜的存儲系統由各種組件來(lái)構成,不同的存儲系統之間的組件構成也會(huì )有很大變化。」
毫無(wú)疑問(wèn),平臺化戰略就是先讓各項技術(shù)、功能逐步完成組件化,并且基于解耦的思路去構建存儲系統,最大限度的去復用各種技術(shù)與組件。這種平臺化戰略帶來(lái)最直接的好處就是:研發(fā)效率大幅提升,組件之間互融互通、產(chǎn)品更新迭代更加快速,可以更加快速地響應市場(chǎng)上靈活多變的需求。
華為存儲這種自成立第一天就基于平臺化戰略,與通過(guò)各種并購而來(lái)的平臺有著(zhù)天壤之別,雖然需要長(cháng)時(shí)間的積累,但是隨著(zhù)時(shí)間推移,研發(fā)布局與分工逐步完善,核心關(guān)鍵技術(shù)的不斷積累與沉淀,省去了日后各種產(chǎn)品與功能打通、兼容甚至未來(lái)規劃的種種麻煩,其所帶來(lái)的飛輪效應也會(huì )日漸突出。
還有一個(gè)顯著(zhù)改變就是,華為整個(gè)研發(fā)大體系中的研發(fā)成果能為存儲所用,比如華為2012實(shí)驗室研發(fā)成果、操作系統技術(shù)等等。項飛直言,存儲是一種極為復雜的產(chǎn)品,涉及到計算、網(wǎng)絡(luò )、介質(zhì)等多個(gè)領(lǐng)域,考慮到數據中心未來(lái)的發(fā)展趨勢,僅僅站在存儲研發(fā)團隊自身的視角是遠遠不夠的,需要充分利用華為內部不同的研發(fā)團隊,進(jìn)行協(xié)作,以更加寬廣的視角和開(kāi)發(fā)合作的方式來(lái)推動(dòng)存儲不斷向前發(fā)展。
自此,華為存儲的技術(shù)創(chuàng )新+用戶(hù)需求的雙輪創(chuàng )新機制開(kāi)始真正發(fā)揮威力。日后,華為存儲產(chǎn)品一次次的在各種測試中刷屏霸榜,產(chǎn)品開(kāi)創(chuàng )性創(chuàng )新也猶如芝麻開(kāi)花節節高,這與其他相對“沉寂”的競爭對手形成了鮮明對比。
不過(guò)建立平臺化是一個(gè)痛苦和長(cháng)期的過(guò)程。在這之前,華為存儲還遇到了更加富有挑戰的事情:如何讓自身產(chǎn)品線(xiàn)豐富和強大起來(lái),在高端存儲和分布式文件存儲這兩大領(lǐng)域實(shí)現突破。
⑥ 高端存儲這座山必須躍過(guò)
在存儲產(chǎn)業(yè)中,高端存儲猶如皇冠上的那顆明珠,它直接代表著(zhù)一家存儲廠(chǎng)商在業(yè)界的地位。如果說(shuō)不想當將軍的士兵不是好士兵,那么不想做高端存儲的廠(chǎng)商一定不是有遠大抱負的廠(chǎng)商。這也是為什么華為會(huì )孜孜不倦投入到高端存儲的研發(fā)之中。
眾所周知,高端存儲所擁有的高可靠、高性能、高一致性使得其技術(shù)門(mén)檻極高,從1990年以來(lái),在高端存儲市場(chǎng)真正擁有絕對實(shí)力的只有兩家公司,要想突破市場(chǎng)競爭壁壘談何容易。
「當時(shí)做決定還是非常艱難的,大家爭議與討論很多。」張國彬如是說(shuō),「畢竟一旦決定了,投入成本會(huì )非常巨大,也不允許失敗。」事實(shí)上,華為存儲要想進(jìn)一步突破市場(chǎng),攻克高端存儲也是必經(jīng)之路,「沒(méi)有高端存儲產(chǎn)品,中低端產(chǎn)品從長(cháng)期來(lái)看也可能會(huì )賣(mài)不好。」

當時(shí),云計算的趨勢剛開(kāi)始冒起,一些存儲廠(chǎng)商已經(jīng)看到了高端存儲的弊病,雖然能夠完美滿(mǎn)足傳統業(yè)務(wù)場(chǎng)景的需求,但擴展性弱、投入大的弊病開(kāi)始在云計算時(shí)代中逐步放大。張國彬透露:「當時(shí)的確有好幾家廠(chǎng)商看到了傳統高端存儲的弊病,大家都看到了未來(lái)的方向。」
為此,華為基于自身的技術(shù)基礎,以及業(yè)界的趨勢,開(kāi)始著(zhù)手投入到高端存儲的研發(fā)之中。當時(shí),張國彬帶領(lǐng)100來(lái)號人在山里封閉了幾個(gè)月,專(zhuān)攻華為高端存儲的新架構設計。整個(gè)過(guò)程就像修煉絕世武功一樣,日復一日的用功無(wú)法感知到武功的精進(jìn)程度,當打通任督二脈,捅破那層窗戶(hù)紙,猶如撥云見(jiàn)日、豁然開(kāi)朗。
經(jīng)過(guò)不斷的摸索和努力,華為存儲終于在2013年正式推出了基于SmartMatrix架構的第一代高端存儲產(chǎn)品。這是中國存儲廠(chǎng)商首次推出高端存儲產(chǎn)品,其意義和價(jià)值非凡。
它給華為存儲人注入了巨大的信心,也驅動(dòng)著(zhù)華為人主動(dòng)去思考未來(lái)存儲的變革,為日后Dorado系列高端全閃存等一系列開(kāi)創(chuàng )性的創(chuàng )新奠定了堅實(shí)基礎。其次,它為華為存儲打開(kāi)各個(gè)行業(yè)頭部客戶(hù)提供了產(chǎn)品利器,大大提升了華為存儲的市場(chǎng)拓展深度和廣度。
⑦ 有一個(gè)重要的任務(wù)交給你們
「項飛,有個(gè)重要的任務(wù)交給你們!帶領(lǐng)團隊把分布式文件存儲搞出來(lái)。」
接到領(lǐng)導的通知之后,項飛心中不禁有點(diǎn)忐忑,一直干通信軟件研發(fā)的他,這次要半路出家去搞存儲啦。
此時(shí)的華為存儲剛剛回歸,產(chǎn)品線(xiàn)主要還是以SAN存儲為主,之前華賽期間主要銷(xiāo)售賽門(mén)鐵克的文件存儲產(chǎn)品。如今回歸,要做大做強存儲業(yè)務(wù),屬于華為自己的分布式文件存儲產(chǎn)品必不可少。但在當時(shí),研發(fā)分布式文件存儲產(chǎn)品的確是一項重大考驗,以致于華為內部也有部分聲音認為很難研發(fā)來(lái)。
畢竟,在分布式文件存儲領(lǐng)域,市場(chǎng)上的大公司無(wú)論是產(chǎn)品技術(shù),還是市場(chǎng)銷(xiāo)售,都是當之無(wú)愧的翹楚。要想撬動(dòng)分布式文件存儲的蛋糕,華為需要付出比常人更多的努力才行。
「在華為就是什么事情都敢去試一試。不懂分布式存儲沒(méi)關(guān)系,我就當它是‘二次創(chuàng )業(yè)’,努力學(xué)習和堅持就是了!」項飛最終橫下心去攻克分布式存儲這道難關(guān)。
于是接下來(lái),項飛開(kāi)始忙著(zhù)招人、調整研發(fā)團隊結構。「最難的是人,我花了很多時(shí)間去面試全球各種人才,找到合適的骨干人才,才能帶領(lǐng)團隊不斷前進(jìn)。」項飛如是說(shuō),「整個(gè)團隊很多人讓我很感動(dòng),像設計部很多人都是搞電信軟件的專(zhuān)家,他們全都打散到各個(gè)新團隊之中,這次大家又重新開(kāi)始,全部回到編碼崗位,基本都是邊學(xué)邊干把分布式文件系統研發(fā)出來(lái)的。」
做出分布式文件存儲不算很難,但做出有市場(chǎng)競爭力的分布式文件存儲卻不是件容易的事情。因為市場(chǎng)上的標桿已經(jīng)足夠高,像I廠(chǎng)商的全分布式對稱(chēng)橫向擴展架構,元數據和數據均是分布在所有節點(diǎn)上,擁有極大的技術(shù)難度。華為的分布式存儲也采用的是全分布式對稱(chēng)橫向擴展架構,那它的成色到底如何呢?
全對稱(chēng)分布式架構非常具有挑戰性,因為元數據全部動(dòng)態(tài)分布式所有節點(diǎn)上,需要保證各種情況下元數據可用。在華為分布式存儲的研發(fā)過(guò)程中,最大的難點(diǎn)也就是跟元數據相關(guān)的問(wèn)題,「當時(shí)團隊專(zhuān)家不分日夜排查出各種問(wèn)題,保證了產(chǎn)品能夠順利推出。」
到了2014年,經(jīng)過(guò)兩年多努力,華為正式推出了采用全對稱(chēng)分布式架構的分布式文件存儲OceanStor 9000,成為業(yè)內為數不多能夠采用此架構的存儲公司。并且,OceanStor 9000無(wú)論是性能、擴展能力、穩定低時(shí)延、自動(dòng)分層能力都豎立了業(yè)界的新標桿。

接下來(lái)幾年中,華為OceanStor 9000就開(kāi)始了它在市場(chǎng)中的精彩表演。先是在國內市場(chǎng),OceanStor 9000大舉進(jìn)入到媒資、科研、石油能源勘探等領(lǐng)域,憑借出色的產(chǎn)品力捕獲了一大批客戶(hù)。不僅如此,OceanStor 9000還在海外市場(chǎng)展現出非凡的戰斗力,在亞太、歐洲、中東等地區市場(chǎng)迅速獲得認可。
⑧ 用戶(hù)永遠是最好的老師
用戶(hù)永遠是最好的老師,因為它能夠最直白地讓你洞悉出業(yè)務(wù)真實(shí)應用需求、自身的差距甚至競爭對手的優(yōu)缺點(diǎn)。
2014年,張國彬遠赴歐洲,成為華為存儲市場(chǎng)一線(xiàn)中的一員,每天穿梭于各種展會(huì )、演講之中。聽(tīng)說(shuō)德國一家知名的電信公司正在招標,需要采購一批存儲產(chǎn)品。張國彬決定和同事一起去接觸和拜訪(fǎng)該公司的架構師,爭取把這家大客戶(hù)一舉拿下。
見(jiàn)面之后,該公司架構師非常實(shí)在,還沒(méi)等張國彬口若懸河介紹華為存儲產(chǎn)品各種優(yōu)勢,拿出一份標書(shū)表格,要求華為存儲將產(chǎn)品性能能夠達到多少、各種工具生態(tài)對接情況、可靠性情況等一一列舉出來(lái),「第一次遇見(jiàn)如此嚴謹和專(zhuān)業(yè)的用戶(hù),一下明白了我們離用戶(hù)的差距還有點(diǎn)遠,需要改進(jìn)的地方還非常之多。」
2017年華為正式推出了OceanStor存儲Dorado系列 V3產(chǎn)品。此刻的張國彬再見(jiàn)到這家電信公司架構師時(shí),已經(jīng)是底氣十足、自信滿(mǎn)滿(mǎn),將V3產(chǎn)品的存儲特性、性能、可靠性、易用性、工具與功能一一講解,以極佳的專(zhuān)業(yè)性順利打動(dòng)客戶(hù)之后,華為存儲產(chǎn)品又順利通過(guò)了PoC測試,該家客戶(hù)也一次性采購了華為存儲多套高端存儲產(chǎn)品。
2015年,瑞典一家世界級的機械制造公司開(kāi)始加大自動(dòng)駕駛在產(chǎn)品中的應用,由于機器學(xué)習和深度學(xué)習需要不斷對數據進(jìn)行訓練,并且數據是千億級的海量小圖片、小視頻,傳統分布式存儲通常是大文件、大帶寬的,很難適合像自動(dòng)駕駛這種AI訓練場(chǎng)景,該公司架構師在與華為存儲團隊交流中吐槽,因為不同場(chǎng)景的需求,多套不同存儲來(lái)跑不同的應用,又開(kāi)始產(chǎn)生了數據煙囪。
對此,該公司架構師與華為存儲討論,能不能通過(guò)一套分布式存儲來(lái)支撐數據湖,除了自動(dòng)駕駛業(yè)務(wù)之外,還能滿(mǎn)足車(chē)聯(lián)網(wǎng)、傳統CAD與CAE等應用。于是,華為存儲決定與該客戶(hù)進(jìn)行聯(lián)合創(chuàng )新,研發(fā)一套分布式存儲支撐所有應用集成。
接下來(lái),華為存儲與該客戶(hù)緊密合作,跟客戶(hù)探討每一個(gè)功能如何設計、參數如何設計,并且在每個(gè)場(chǎng)景中進(jìn)行測試、部署與應用。瑞典這家公司直接讓華為理解了新業(yè)務(wù)場(chǎng)景所帶來(lái)的挑戰以及需求。「面向新的應用場(chǎng)景,華為存儲必須走的快,而且需要與用戶(hù)一起做,不能閉門(mén)造車(chē)。」
回歸華為之后,華為存儲在海內外與各個(gè)行業(yè)的頭部頂級客戶(hù)聯(lián)合創(chuàng )新日益增多,涉及到金融、電信、能源、媒資等多個(gè)領(lǐng)域,對于頭部客戶(hù)數據中心存儲需求和痛點(diǎn)有著(zhù)極為深入的理解,也為日后產(chǎn)品創(chuàng )新和產(chǎn)品力的大幅提升奠定了堅實(shí)基礎。
⑨ 簡(jiǎn)而不減的秘訣
從2015年開(kāi)始,海內外包括金融、運營(yíng)商、能源等多個(gè)行業(yè)的頭部客戶(hù)在與華為存儲交流的過(guò)程中,都提到了分布式,用戶(hù)們渴望在主數據中心的核心中部署分布式存儲,讓核心應用也能夠享受到分布式存儲的好處。
「像荷蘭的一家電信公司,數據量當時(shí)都超過(guò)300PB了,非常渴望向分布式的云架構轉型。」張國彬表示,「他們希望分布式可以承載數據庫、虛擬機這些核心業(yè)務(wù),也能夠承載大數據、AI這些新應用。」
這些客戶(hù)的需求直接促成了華為打造新一代智能分布式存儲——OceanStor分布式存儲。2016年,華為存儲迅速集結了集中式領(lǐng)域和分布式領(lǐng)域最優(yōu)秀的架構師,一起攻關(guān)如何將分布式存儲和集中存儲融合在一個(gè)產(chǎn)品之中。
「這時(shí)候華為存儲平臺化的戰略?xún)?yōu)勢就顯現出來(lái)了。華為研發(fā)的大部分力量都在平臺產(chǎn)品上,可以充分調動(dòng)資源進(jìn)行攻關(guān)。」張國彬透露,「這是其他公司很難去實(shí)現的,因為按照他們那種模式,投入的成本和時(shí)間極其大。」
同樣經(jīng)過(guò)兩年多的研發(fā),華為存儲在2019年正式發(fā)布了新一代智能分布式存儲——OceanStor分布式存儲。華為北京、上海、深圳、成都等地的存儲研發(fā)團隊跨地域緊密協(xié)同,設計出一套全新的存儲架構,進(jìn)行了數千萬(wàn)行代碼開(kāi)發(fā),并先后進(jìn)行了近十個(gè)版本的迭代,反復打磨、優(yōu)化的成果。
華為OceanStor分布式存儲產(chǎn)品不僅實(shí)現分布式存儲性能全球第一,單節點(diǎn)性能高端16.8萬(wàn) IOPS和1毫秒以?xún)葧r(shí)延,在業(yè)界標準SPC-1測試中排名第一;還首次在一套存儲中實(shí)現了同時(shí)支持塊、文件、對象、HDFS協(xié)議;并且,率先將人工智能技術(shù)融入到存儲全生命周期管理。
在OceanStor分布式存儲為用戶(hù)數據中心提供一套簡(jiǎn)單卻功能強大的存儲背后,其實(shí)是研發(fā)團隊反復打磨與優(yōu)化的成果。比如,為解決性能波動(dòng)的“隱形瓶頸”,華為存儲研發(fā)團隊動(dòng)用了全球研發(fā)體系內的操作系統調度專(zhuān)家、網(wǎng)絡(luò )專(zhuān)家,讓性能波動(dòng)徹底解決,實(shí)現了非ARM節點(diǎn)14萬(wàn)IOPS、ARM節點(diǎn)16.8萬(wàn)IOPS的穩定性能。
分布式存儲有三大難,其一是數據不一致情況如何解決,由于數據打散在各個(gè)節點(diǎn)上,很容易出現數據不一致的情況,尤其是在高性能、大并發(fā)的數據讀寫(xiě)情況下如何保持數據一致性。這需要華為存儲在并發(fā)機制上做到精準無(wú)比。為此,華為存儲研發(fā)團隊研發(fā)出一套新的日志機制與工具,在海量數據中去追蹤和查看IO異常,實(shí)現了上千個(gè)節點(diǎn)不同場(chǎng)景下的數據不一致情況檢驗。
其二是分布式存儲功能與性能如何平衡,像重復數據刪除功能對存儲性能影響很大。為此,華為存儲研發(fā)團隊專(zhuān)門(mén)開(kāi)發(fā)出一種加權算法,讓重刪功能實(shí)現自適應調整,為用戶(hù)減去了過(guò)去需要不斷手動(dòng)配置的復雜性,呈現出極為簡(jiǎn)單的易用性。
最后則是如何防范數據丟失。通常,分布式存儲所承載的應用場(chǎng)景是多樣化和復雜化,這也直接促使了數據丟失潛在因素的增多。針對這種情況OceanStor分布式存儲在只有64個(gè)字節的可靠性校驗空間容納了30多個(gè)場(chǎng)景的預防方案,每個(gè)預防方案的“植入”需要精準到每個(gè)比特位,堪稱(chēng)手術(shù)刀般精準。
⑩ 高端存儲該變革啦!
這是一個(gè)真實(shí)的用戶(hù)故事。
某家世界級的物流公司,一套高端存儲上跑了4000臺服務(wù)器,按照傳統高端存儲的架構,如果做系統軟件升級,為防止前端多路徑運行不正常,必須在升級之前將4000多臺服務(wù)器的多路徑檢查一遍。客戶(hù)每次做升級,都猶如面臨世界末日般,處于崩潰邊緣。
這家公司的情況真實(shí)反映出很多用戶(hù)的囧境:應用越來(lái)越多,業(yè)務(wù)越來(lái)越靈活,應用環(huán)境正在快速變化,高端存儲需要有能力在數據中心承載起更多的業(yè)務(wù),過(guò)去只承載幾種業(yè)務(wù)的情況已經(jīng)一去不復返。
如今,高端存儲該進(jìn)行變革啦。有人說(shuō),科技這個(gè)行業(yè)不尊重過(guò)去,只尊重創(chuàng )新,你不創(chuàng )新就只有等死。此時(shí),華為在全閃存技術(shù)、高端存儲架構上的積累已經(jīng)完成,是時(shí)候打造出一款面向未來(lái)、滿(mǎn)足用戶(hù)數據中心極致需求的產(chǎn)品,讓高端存儲重新煥發(fā)新生機。
眾所周知,閃存對于存儲產(chǎn)業(yè)有著(zhù)革命性的影響,全閃存存儲被認為是大勢所趨。而傳統高端存儲恰恰是基于傳統硬盤(pán)時(shí)代的產(chǎn)品,哪怕后來(lái)有廠(chǎng)商在高端存儲中加入閃存,也僅僅是一種優(yōu)化的妥協(xié)選擇。
全閃存,這是一條全新的賽道。在新賽道意味著(zhù)你有機會(huì )實(shí)現對競爭對手的追趕,尤其是高端全閃存領(lǐng)域,將會(huì )是一次軟硬件架構、功能堆棧的全面重塑。而華為在閃存領(lǐng)域已經(jīng)擁有深厚的積累。
其次,華為存儲在SmartMatrix高端存儲架構上的經(jīng)驗,推動(dòng)了下一代高端存儲在架構上的進(jìn)一步突破。華為存儲開(kāi)始將Scale-Up和Scale-Out進(jìn)行融合,采用了模塊化橫向擴展、所有關(guān)鍵部件全解耦全共享架構,并且融入了多項智能化技術(shù)。

2019年發(fā)布OceanStor Dorado V6新一代全閃存產(chǎn)品
2019年7月,歷時(shí)近三年的華為全新一代OceanStor Dorado V6系列產(chǎn)品正式亮相:擁有業(yè)界最高的2000萬(wàn)IOPS極致性能,業(yè)界最低0.1ms的穩定時(shí)延、控制器8壞7的極端情況依然工作、基于A(yíng)I算法的全生命周期智能運維,并且可以實(shí)現故障0感知、業(yè)務(wù)0影響、升級0影響,真正保障用戶(hù)業(yè)務(wù)永久在線(xiàn)。
如果說(shuō)華為存儲過(guò)去一直都算跟隨的話(huà),那么OceanStor Dorado V6產(chǎn)品的驚艷亮相則標志著(zhù)華為存儲開(kāi)始引領(lǐng),它是華為存儲多年技術(shù)積累與創(chuàng )新的一次爆發(fā),讓大家看到了華為存儲走出了一條不一樣、具有開(kāi)創(chuàng )性?xún)r(jià)值之路。
- 一抹丹青色,最是匠人心
存儲產(chǎn)品是數據的最終目的地,除了性能和效率之外,數據可用性和持久度、產(chǎn)品的可靠性等要求極為嚴格。做存儲的開(kāi)發(fā)有時(shí)候就像打造一件復雜的藝術(shù)品,需要技術(shù)研發(fā)人員不斷的雕琢與打磨,追求完美的狀態(tài)。
「存儲對于工程師的匠心文化要求很高。因為代碼一不小心,可能整個(gè)盒子就崩了,會(huì )給用戶(hù)帶來(lái)災難性的后果。」華為存儲首席架構師黃克驥如是說(shuō)。
經(jīng)過(guò)長(cháng)期積累,華為存儲軟件已經(jīng)達到幾千萬(wàn)行代碼的規模,存儲研發(fā)團隊依然對每一行代碼都是高標準的質(zhì)量要求。例如,在重復數據刪除與壓縮領(lǐng)域,作為降低存儲成本、提升存儲效率最為有效的技術(shù),重刪壓縮被認為是衡量存儲產(chǎn)品水平的重要標志,但是重刪壓縮功能一旦出現問(wèn)題,造成數據損壞或者丟失,其給用戶(hù)帶來(lái)的后果是極為嚴重。因此,華為對于重刪壓縮測試極為嚴格,嚴防有Bug遺漏,不斷打磨代碼,做到萬(wàn)無(wú)一失。
在硬件層面,華為存儲有專(zhuān)門(mén)的可靠性團隊和專(zhuān)業(yè)的可靠性實(shí)驗室對各種硬件組件進(jìn)行測試,尋找可能存在的漏洞,在可靠性方面不停的精益求精。
「華為存儲研發(fā)一線(xiàn)有很多低調、才華橫溢的人才。」黃克驥介紹到。
比如有這么一位癡迷于代碼的技術(shù)大咖,融合存儲文件系統是他編寫(xiě)的,復制核心模塊是他編寫(xiě)的,全閃存架構核心模塊是他編寫(xiě)的,重復數據刪除模塊也是他編寫(xiě)的,這位代碼大神從華為歷史上企業(yè)級到分布式核心模塊都寫(xiě)過(guò)。「他的表達方式就是代碼,我們都說(shuō)他是個(gè)掃地僧,普華務(wù)實(shí)的外表下藏著(zhù)萬(wàn)丈光芒。」
「除了專(zhuān)注之外,華為非常看重研發(fā)人才的全棧能力。何為全棧能力,就是技能全棧化和業(yè)務(wù)全棧化。」項飛介紹道。在技能全棧化方面,華為要求開(kāi)發(fā)必須懂測試,測試必須懂產(chǎn)品設計、后端維護,通過(guò)崗位輪換讓研發(fā)人員把這些技能拉通,從而變得更加全面;又比如,在產(chǎn)品架構內,華為會(huì )通過(guò)讓員工在不同子系統研發(fā)的方式讓員工盡可能多掌握技術(shù);此外,華為還會(huì )讓研發(fā)定期去前端支持銷(xiāo)售和后端支持服務(wù)等等。
以存儲架構師為例,在華為存儲有不成文的規定:架構師也需要寫(xiě)代碼。有些架構師,從RAID 2.0功能到華為OceanStor存儲Dorado系列V3、V6兩代產(chǎn)品都是自己做架構、寫(xiě)代碼,長(cháng)期保持這種狀態(tài)。以至于華為存儲內部人打趣道:「不會(huì )寫(xiě)代碼的存儲架構師不是好的存儲售前。」
一抹丹青色,最是匠人心——用來(lái)詮釋華為存儲的匠心精神再恰當不過(guò)。
- 未來(lái)征途似星辰大海
如今,存儲產(chǎn)業(yè)又站在下一個(gè)變革的十字路口。
人工智能技術(shù)的不斷成熟與應用,正在深刻影響著(zhù)存儲產(chǎn)業(yè)。融入人工智能技術(shù)的智能存儲被認為是重要的趨勢,它希望本質(zhì)上解決過(guò)去存儲操作、運維復雜化的情況,讓存儲變得更加簡(jiǎn)單化。
「智能會(huì )成為存儲的基礎能力。」華為數據存儲與機器視覺(jué)產(chǎn)品線(xiàn)總裁周躍峰表示:「未來(lái)的存儲首先需要Storage for AI,能夠幫助用戶(hù)更好地利用智能技術(shù),滿(mǎn)足像AI訓練、應用的需求;其次是AI in Storage,就是將AI技術(shù)融入到存儲全生命周期,讓存儲管理、性能、效率、維護更加出色。」
華為在智能存儲的探索上一直走在業(yè)界的最前沿。華為OceanStor存儲Dorado V6產(chǎn)品是業(yè)界首個(gè)AI加持的高端存儲系統,并且在重刪壓縮算法、智能存儲運維等方面大量運用了機器學(xué)習的方式,通過(guò)AI+智能算法實(shí)現了存儲系統的智能自調優(yōu),可以讓存儲可以越用越好。
但智能存儲依然有很長(cháng)的路要走,現階段智能存儲主要是解決了故障定位與業(yè)務(wù)管理等運維優(yōu)化工作,以及一些基于A(yíng)I的智能Cache算法、重刪壓縮算法等等,讓一些專(zhuān)業(yè)化的存儲操作變成自動(dòng)化。未來(lái),存儲也會(huì )類(lèi)似自動(dòng)駕駛那樣,會(huì )根據不同的負載情況和業(yè)務(wù)場(chǎng)景來(lái)智能化選擇相應的存儲功能與技術(shù)。
除此之外,在數據成為數字經(jīng)濟最關(guān)鍵的生產(chǎn)要素時(shí),存儲作為數據基礎設施重要的一環(huán),依然存在著(zhù)非常多的挑戰。幫助企業(yè)實(shí)現數據“存得下、流得動(dòng)、用得好”,需要包括華為存儲在內的所有存儲廠(chǎng)商繼續探索。
「我們的征途似星辰大海,從此只顧風(fēng)雨兼程。」——華為存儲一直在路上。