8000美元存儲(chǔ)135TB數(shù)據(jù):打造開(kāi)源的存儲(chǔ)硬件
首先要說(shuō)明的是,云存儲(chǔ)初創(chuàng)公司Backblaze率先提出了開(kāi)源存儲(chǔ)硬件的概念。接來(lái)下,它展示了如何把135TB的數(shù)據(jù)放到一個(gè)4U機(jī)架(Backblaze稱之為pod),而所花費(fèi)的成本少于8000美元(也就是說(shuō)每GB成本只有5美分左右)?,F(xiàn)在很多證據(jù)顯示,越來(lái)越多人喜歡這家公司所做的事情:Backblaze在本周三推出了第三代Storage Pod的技術(shù)參數(shù)。但是與此對(duì)比,數(shù)百家公司構(gòu)建并且通過(guò)銷售這些設(shè)計(jì)方案來(lái)牟利。
但是,是誰(shuí)使用了Backblaze的技術(shù)參數(shù)來(lái)構(gòu)建存儲(chǔ)系統(tǒng)呢?Netflix可能是最有名的一個(gè)(它使用Storage Pod作為CDN基礎(chǔ)設(shè)施的一部分),其他的還有Vanderbilt大學(xué),Crispin Porter + Bogusky, 倫斯勒理工學(xué)院以及NASA的噴氣推進(jìn)實(shí)驗(yàn)室,著名網(wǎng)上沖印公司Shutterfly(存儲(chǔ)PB級(jí)的數(shù)據(jù))也是使用的BackBlaze的Storage Pod架構(gòu)。
由于組織不同,具體的使用方式也是多種多樣。比如說(shuō),有像Netflix的CDN服務(wù),還有像Shutterstock這樣的面向消費(fèi)者的云存儲(chǔ),很多人都是把Pod作為一個(gè)巨大的網(wǎng)絡(luò)附加存儲(chǔ)設(shè)備,每個(gè)人都能進(jìn)行訪問(wèn)。“這里的數(shù)據(jù)比任何能想到的公司的數(shù)據(jù)都要龐大”Backblaze的創(chuàng)始人兼CEO Gleb Budman(左圖)告訴GigaOM的記者Derrick Harris,“它們使用了獨(dú)立磁盤冗余陣列。”
Backblaze擾亂了存儲(chǔ)行業(yè)!
Backblaze的設(shè)計(jì)發(fā)展的如此之快不應(yīng)該讓大家感到驚訝,Budman表示,存儲(chǔ)廠商一直努力地保護(hù)他們的利潤(rùn),通過(guò)加載“一次寫,很少讀”的系統(tǒng)提供企業(yè)級(jí)的功能,但是這些往往是沒(méi)有必要的。
所以,在大容量存儲(chǔ)的世界里,我們已經(jīng)進(jìn)入一個(gè)類似十年前的PC市場(chǎng),如果想要便宜,用戶就需要自己購(gòu)買零件進(jìn)行組裝,而不是直接購(gòu)買那些已經(jīng)組裝好的品牌機(jī)。“DELL已經(jīng)扼殺了那些自主開(kāi)發(fā)的電腦市場(chǎng),那是因?yàn)樗麄円呀?jīng)而且真正的專注于優(yōu)化成本”Budman解釋說(shuō),“沒(méi)有一家廠商為存儲(chǔ)設(shè)備會(huì)這樣去做。”而存儲(chǔ)供應(yīng)商卻認(rèn)為“我們賣的是價(jià)值100萬(wàn)美元的設(shè)計(jì),為什么我們要改變呢?”
圖:Backblaze的數(shù)據(jù)中心充滿了Storage Pod
非常感謝Backblaze的努力,這種局面正在發(fā)生改變。源源不斷的零件需求指引了Protocase,這是一家加拿大的金屬片制造商,雖然只是生產(chǎn)Backblaze Pod的外殼,也開(kāi)創(chuàng)了一個(gè)整體業(yè)務(wù)——很恰當(dāng)?shù)拿麨?5 Drives——圍繞銷售Pod零件或者已經(jīng)完全預(yù)裝好的Pod,他們已經(jīng)嘗試把業(yè)務(wù)做到加拿大以外的國(guó)家,現(xiàn)在Protocase已經(jīng)把Backblaze組件銷售到中國(guó),俄羅斯以及巴西這些國(guó)家。
有意思的是,你不會(huì)看到Backblaze的設(shè)計(jì),出現(xiàn)在其他著名的開(kāi)源硬件成果上——像由Facebook引導(dǎo)的開(kāi)源計(jì)算項(xiàng)目。Budman表示,他也和一些組織(那些試圖邀請(qǐng)Backblaze參與)的領(lǐng)導(dǎo)者進(jìn)行過(guò)會(huì)話,但是更多的是想讓幫助他們的開(kāi)源計(jì)算系統(tǒng)工作。他表示自己很喜歡做一些理論研究,會(huì)有很多像Backblaze這樣的小公司用大量的時(shí)間來(lái)進(jìn)行宣傳。

3.0版:180TB——更低的成本
第三代的Storage Pod設(shè)計(jì)對(duì)于開(kāi)源計(jì)算項(xiàng)目,45 Drives,數(shù)據(jù)媒體收集的愛(ài)好者以及任何想打造自己存儲(chǔ)裝置的家伙們來(lái)說(shuō),都是一個(gè)福音。由于4TB硬盤驅(qū)動(dòng)器的普及,總體的容量已經(jīng)提升到180TB。Backblaze已經(jīng)驗(yàn)證了很多種的硬盤驅(qū)動(dòng)器,這也源于在2010年由于依賴一種單一的模式得到的嚴(yán)厲教訓(xùn)。公司還更換了大量的過(guò)去使用的組件,涉及的領(lǐng)域從主板到內(nèi)存再到SATA線路。
Budman解釋了所有改變,以及產(chǎn)品開(kāi)發(fā)背后的故事,這些都發(fā)表在周三早上的一篇博客中,而最重要的主題就是提升了產(chǎn)品的可靠性,而且成本得到了大幅度的降低,最新的設(shè)計(jì)比第二代的設(shè)計(jì)節(jié)省了大量的成本。但是由于產(chǎn)品的短缺,目前的價(jià)格對(duì)比前幾年的來(lái)說(shuō),還是有一點(diǎn)高。
無(wú)論發(fā)生了什么事,存儲(chǔ)系統(tǒng)的設(shè)計(jì)都應(yīng)該是透明的。Budman希望這樣最少可以對(duì)實(shí)現(xiàn)廉價(jià)存儲(chǔ)存在持久的影響,他認(rèn)為未來(lái)不應(yīng)該因?yàn)榘嘿F的設(shè)備而無(wú)法進(jìn)行數(shù)據(jù)的存儲(chǔ)。