云存儲:華為的創新與演進之路
物聯網、大數據、云計算及移動社交網絡……這些強大的信息產業狂潮正以無法忽視的態勢影響著現代企業的業務發展方向。
物聯網不僅讓信息通過網絡實現無處不在的傳遞,也使人們與身邊的萬物發生最直接的聯接;而移動化、社交化使這種全球性的聯接變得更加緊密,并滲透到人們的衣食住行;大數據分析與數據挖掘使海量信息的匯聚變得更有價值,支持企業更有針對性的創新發展。
而以平臺化、資源共享、彈性按需為特征的云計算,作為信息產業創新的關鍵支撐者,不僅能為萬物互聯提供必需的資源與平臺支持,更讓企業、個人能以更優的性價比,更方便地使用強大的計算能力、幾乎***的存儲空間、更敏捷的網絡資源以及更開放的生態環境兼容能力。
因此基于“全面云化”的應用創新,已然成為企業“數字化轉型”的必然選擇。在云計算時代,計算、存儲等能力以服務的方式按需提供給企業,企業只需關注自身業務應用,那么未來的企業基礎架構要如何演進,以快速響應云時代的需求?
在2013年,Gartner曾對企業基礎架構提出了“軟件定義一切”的未來趨勢,現在看來,這個預言正在成為現實。
從2002年投入存儲技術與產品研發以來,華為對于云架構下的分布式存儲系統構建早已形成自有思路,并在產品技術創新上不斷探索。
分布式文件存儲標桿
華為2009年發布***款分布式文件存儲,是較早使用分布式集群架構進行海量非結構化數據存取的產品之一,其文件系統CFS成為***個正式商用的日志文件系統,***支持24節點擴展,專門面向大規模文件數據處理需求。
2013年5月,在美國國際IT信息技術展覽會(Interop)上,華為發布新一代分布式文件存儲系統。產品不僅采用全對稱橫向擴展架構,實現了存儲性能與容量的跨越式提升;同時在數據存儲基礎上疊加了對大數據分析的支持,成為了業界***融合“存儲、分析和歸檔”的存儲產品。通過免除跨設備數據裝載、遷移,在提升大數據處理全流程效率的同時,降低整體擁有成本;同年9月,在標準性能評估機構SPEC的SPEC sfs2008基準測試中,產品以500萬OPS的成績再次刷新文件存儲性能紀錄,領先同類產品3倍多。
一直以來,“聚焦客戶業務場景的產品設計”成為***華為存儲產品創新設計的基準原則,華為在分布式存儲開發道路上不斷刷新成績。在2015年,華為分布式文件存儲憑借獨有的InfoTurbo性能優化技術,成為業內***滿足6層4K超高清視頻節目制作的NAS存儲系統。同年9月,華為聯合QLogic將25Gb以太網技術應用于其分布式文件存儲系統,率先實現這一技術從標準到產品的轉化,并為100Gb以太網技術的落地打下基礎。
華為分布式文件存儲
隨著云計算技術興起,華為分布式文件存儲的發展開始向軟件定義方向延伸,硬件平臺也從專有硬件向通用硬件方向發展。通過在平臺架構、性能、擴展性、大數據等方向持續的技術創新,華為分布式文件存儲在媒體廣電、高性能計算、視頻監控等場景不斷贏得客戶信賴,例如在深圳廣電部署的業界***媒體云融合新聞中心分布式文件存儲池,在韓國落地的業界***4層4K超高清視頻制作分布式存儲池,與權威基因研究機構華大基因構建的HPC分布式存儲池。
軟件定義塊存儲新勢力
基于在傳統SAN存儲領域數十年的雄厚技術積累,華為在2012年發布了***款基于軟件定義的分布式塊存儲系統,包含純軟件產品FusionStorage Block及超融合一體機產品FusionCube兩種形態,采用分布式哈希數據路由、分布式緩存、全局負載均衡及多重數據保護等諸多存儲技術,專門針對云計算基礎設施對塊數據存儲需求而設計。DHT分布式路由算法實現數據的高效尋址和存儲,消除了傳統集中式元數據管理方式帶來的系統性能瓶頸問題,使得在系統大規模橫向擴展的情況下,仍然能提供線性增長的強大數據吞吐能力。
2013年,華為支撐自身運營的全球化信息中心云存儲平臺開始切換到FusionStorage Block上,截至目前,已經部署超過1.4萬個標準x86服務器節點,超過600PB容量,高效支撐超過45萬虛擬機和數十套數據庫系統應用,覆蓋產品研發、財務、銷售運作等云開發、云運營場景。
2014年,浙江電信攜手華為實現基于FusionStorage Block的國內運營商***PB級SDS項目落地,2015年,華為FusionStorage Block在某全球500強商業銀行開發測試云環境中部署超過4PB容量的大規模SDS集群;同時,華為FusionStorage Block支撐香港Infocast證券交易機構、德國電信、西班牙電信等海內外客戶,構建基于云架構的分布式存儲平臺。截止目前,華為FusionStorage Block已獲得超過200家典型行業客戶的認可。
海量對象存儲利器
在對象存儲領域,華為在2012年云計算大會(HCC)上發布全分布式對象存儲系統,成為***支持EB級擴展的海量存儲解決方案,基于ARM架構的低功耗、高密存儲節點,領先的P2P分布式存儲引擎技術,以及業界首創面向海量數據存儲的SmartDisk智能硬盤技術支撐構建海量對象存儲平臺,對外提供S3、NFS和CIFS等多種訪問接口,支撐企業海量對象資源池、云網盤、云備份及公有云對象存儲應用服務。
憑借多項業界領先的創新技術,華為對象存儲獲得2014年東京Interop“數據中心和存儲類特別大獎”,目前,華為對象存儲已服務于歐洲核子研究中心CERN、Vodafone、西班牙電信、新加坡StarHub以及鳳凰衛視等行業客戶,支撐客戶全球化云運營與數字化轉型。
下一步 軟件定義云存儲
云計算的核心理念與***價值在于“軟件定義”,同樣,***的挑戰也在“軟件定義”,它強調企業以全新的模式管理數據中心存儲、計算與網絡等基礎架構資源。這種模式摒棄了傳統基礎架構煙囪式的系統構建方式,看重資源的集約共享、彈性按需使用,更強調以最經濟的投資***化應用和數據價值。
對于數據存取的載體——存儲系統而言,更是如此,可是企業上層應用紛繁復雜,往往導致數據存取問題與需求多種多樣:
數據類型的復雜多樣,例如結構化、非結構化數據、半結構化數據共存,傳統塊存儲、文件存儲和對象存儲煙囪式、孤島化構建方式導致資源利用不均衡;
數據存取效率需求多樣與不確定,例如熱數據、冷數據如何更有效管理;
數據的階段性存儲需求量不確定,需要存儲系統能在考慮經濟性的情況下,滿足數據爆發式增長的資源需求。
同時,不同企業的“云轉型”策略與演進步調也不盡相同,這體現在是該選擇私有云、混合云還是公有云架構,作為其起點平臺,實現企業“華麗轉身”,所謂“華麗轉身”,要由傳統基礎架構“平滑”演進到云。
存儲系統作為數據載體,如何支撐企業向云的演進呢?以滿足數據敏捷存儲需求為特征的軟件定義存儲,成為企業管理新型云應用以及龐大數據的不二之選。
軟件定義存儲是未來存儲的方向,“消除資源孤島、極簡化硬件平臺、自動化資源管理、業務驅動的彈性資源供給”——是“全面云化”基礎架構對敏捷存儲系統的新訴求,無疑也是華為存儲下一步的演進方向。
在基于分布式架構的塊存儲、文件存儲及對象存儲領域,華為存儲持續技術積累并保持創新能力,其天然具備的“海量、彈性”等云技術基因,為其產品解決方案下一步跨越式演進作好了充分準備。8月31日至9月2日,HUAWEI CONNECT 2016將正式召開,華為將在大會上發布云存儲領域的全新產品,讓我們一起拭目以待吧!