華為近日宣布旗下大數據存儲OceanStor 9000經(jīng)過(guò)全面的驗證可實(shí)現目前業(yè)界最大40PB文件系統,這是該存儲產(chǎn)品繼獲得500萬(wàn)OPS性能冠軍之后又一次領(lǐng)先業(yè)界的創(chuàng )舉。華為高性能、大容量的存儲系統將有效應對大數據時(shí)代海量數據的沖擊,幫助行業(yè)客戶(hù)實(shí)現業(yè)務(wù)快速增長(cháng)。
CTI論壇(ctiforum)5月8日消息(記者 李文杰):全球領(lǐng)先的信息與通信解決方案供應商華為,近日宣布旗下大數據存儲OceanStor 9000經(jīng)過(guò)全面的驗證可實(shí)現目前業(yè)界最大40PB文件系統,相當于4萬(wàn)塊1TB硬盤(pán)的超大容量空間可同時(shí)被一個(gè)文件系統進(jìn)行目錄管理,這是OceanStor 9000大數據存儲繼獲得500萬(wàn)OPS性能冠軍之后又一次領(lǐng)先業(yè)界的創(chuàng )舉。此次驗證同時(shí)得到了英特爾、希捷以及AgigA Tech等業(yè)內一流合作伙伴的大力支持。
隨著(zhù)企業(yè)的發(fā)展以及大數據時(shí)代的到來(lái),許多行業(yè)為了在多個(gè)獨立的應用和數據孤島中挖掘出更大的數據價(jià)值,希望將數據融合起來(lái)共享使用,因此對單一文件系統的容量提出了非常高的要求。比如,中國的智慧城市建設已經(jīng)大步邁進(jìn)8Mbps碼流的高清時(shí)代, 視頻存儲已經(jīng)達到10~20PB存儲容量;互聯(lián)網(wǎng)新媒體的數據量,也從TB級進(jìn)入幾十PB級集中存儲時(shí)代;目前我國正在推動(dòng)建設的國家級基因庫將建設一個(gè)能夠容納50PB容量基因數據存儲和分析倉庫。由此可見(jiàn),在大數據時(shí)代背景下,行業(yè)客戶(hù)對于PB級統一命名空間的高性能存儲已經(jīng)呈現出旺盛的需求態(tài)勢。華為OceanStor 9000大數據存儲系統40PB單一命名空間的實(shí)證正是在這樣的背景下,以客戶(hù)實(shí)際需求為導向的又一次扛鼎之作。
圖片說(shuō)明:華為OceanStor 9000 40PB超大容量實(shí)證集群系統
40PB超大容量的實(shí)現得益于多項創(chuàng )新技術(shù)的支撐:首先,華為自主研發(fā)的分布式文件系統WushanFS,采用創(chuàng )新的元數據管理方式,使得系統的性能、可靠性以及擴展能力三個(gè)方面可以并駕齊驅?zhuān)嬲龑?shí)現性能、容量線(xiàn)性增長(cháng),數據可靠存儲。其次,動(dòng)態(tài)哈希表技術(shù)、目錄動(dòng)態(tài)子樹(shù)分裂技術(shù)、全局一致性緩存、RDMA over TCP等互聯(lián)網(wǎng)技術(shù)的引入,為OceanStor 9000大規模橫向擴展后性能線(xiàn)性增長(cháng)提供了技術(shù)保證。另外,數據隔離技術(shù)將一個(gè)大規模的集群規劃為多個(gè)中等規模存儲空間,有效的解決了大數據存儲設備大規模擴展后故障域過(guò)大,故障概率高的可靠性問(wèn)題。集群任務(wù)拆分、并發(fā)、合并的MapReduce設計思想的引入,也最大限度的降低了大規模集群管理的系統壓力。
在40PB大規模集群的驗證過(guò)程中,OceanStor 9000展現了其優(yōu)越的易管理性和擴展性,288節點(diǎn)集群部署在60分鐘內完成,單節點(diǎn)擴容在1分鐘內完成,全過(guò)程圖形化界面操作,容量和性能線(xiàn)性擴展,最大可提供40PB容量,200GB/s帶寬。
華為存儲產(chǎn)品線(xiàn)總裁范瑞琦表示:“OceanStor 9000大數據存儲系統的40PB超大容量的實(shí)現,能夠真正應對大數據時(shí)代的數據量沖擊,可以更好的幫助行業(yè)客戶(hù)實(shí)現業(yè)務(wù)增長(cháng),例如可以支持媒體行業(yè)數千高清碼流的電視節目同時(shí)在線(xiàn)制作,滿(mǎn)足以央視為代表的全球性電視臺的所有節目制作需求;能夠支持上萬(wàn)路1080p攝像頭實(shí)時(shí)錄像和并行分析,滿(mǎn)足像上海、廣州、成都等大中型智慧城市全網(wǎng)視頻監控需求。”
英特爾通訊和存儲基礎設施事業(yè)部存儲部門(mén)總經(jīng)理Bev Clair對此次合作評價(jià)到:“大數據時(shí)代的到來(lái)為我們提供了變革性的機遇,提供幫助我們解決歷史性商業(yè)問(wèn)題的機遇。英特爾和華為強強聯(lián)合,通過(guò)研發(fā)大數據項目的技術(shù)和工具,不斷滿(mǎn)足客戶(hù)的需求。英特爾和華為已經(jīng)成功地完成對40PB的大數據存儲工作負載的分析,為應用方面的存儲解決方案的商業(yè)部署提供了參考。我們現在已經(jīng)具備了打破當今容量瓶頸且滿(mǎn)足客戶(hù)需求的能力。我們會(huì )加快產(chǎn)品上市的時(shí)間,提供靈活性強、性?xún)r(jià)比高的解決方案,滿(mǎn)足日益增長(cháng)的存儲需求。”
希捷科技全球副總裁暨中國區總裁孫丹女士表示:“大數據時(shí)代數據的快速增長(cháng),給客戶(hù)的存儲需求帶來(lái)極大的挑戰。從單點(diǎn)來(lái)看,客戶(hù)需要更大容量更穩定的存儲介質(zhì);從存儲系統整體來(lái)看,超大容量的單一文件系統對客戶(hù)將具有更實(shí)際的應用價(jià)值,和更廣泛的應用場(chǎng)景。此次華為與多家合作伙伴聯(lián)合驗證40PB單一文件系統正是在這樣的背景下開(kāi)展的。希捷愿意與華為共同聯(lián)手,推動(dòng)大數據存儲技術(shù)的研發(fā)創(chuàng )新和方案推廣。”
AgigA Tech首席執行官Ron Sartore先生如此評價(jià):“在與華為將近三年的合作中,AgigA Tech與華為在引入NVDIMM技術(shù)到華為服務(wù)器以及存儲產(chǎn)品的過(guò)程中保持了緊密的合作。在A(yíng)gigA Tech成都研發(fā)中心對華為進(jìn)行本地化技術(shù)支持的過(guò)程中,我們有幸第一時(shí)間看到華為海量存儲OceanStor 9000系列作為劃時(shí)代的產(chǎn)品所能提供的前所未有的I/O性能,這足以應對未來(lái)繁重的工作負荷。我們將繼續與華為保持緊密的合作伙伴關(guān)系,并對有機會(huì )將基于DDR4以及未來(lái)內存技術(shù)的NVDIMM產(chǎn)品更加廣泛應用于華為產(chǎn)品而感到興奮。”