從1加到60000,咋計算?
今日tips
復(fù)工后防護(hù)提示
雖然現(xiàn)在疫情的發(fā)展逐漸趨于穩(wěn)定,但隨著全國各地開始恢復(fù)上班,人群的流動也將加大,安全防護(hù)依然不可掉以輕心,分享一張來自@央視新聞的復(fù)工后防護(hù)提示圖。
為響應(yīng)教育部“停課不停學(xué)”的號召,本家長已經(jīng)給娃當(dāng)了十幾天輔導(dǎo)員了,這兩天娃學(xué)到成語辨析部分,我溫習(xí)了一個常見的錯誤類型——“望文生義”。
比如“明日黃花”,不是明天的黃花,而是過時的事物;
比如“七月流火”,不是七月熱得像火球,而是指夏去秋來,天氣逐漸變涼。
每當(dāng)離校多年的本家長講錯意思的時候,兒子就跳出來提醒我:“望文生義是不對的!”
HPC是“H”起來的PC嗎?
下面站在一般人視角,用望文生義的思路解釋一下單詞:HPC。
PC很常見,HPC跟PC相比,多了個H,H常見的意思是high,那么HPC是指H起來,變得更高的PC嗎?
其實不算錯,有那么一丟丟接近。HPC是高性能計算(High Performance Computing)機群的簡稱,而PC則是Personal Computer的縮寫。
如果分析兩者聯(lián)系的話,PC實際上是服務(wù)器(Server)為了適應(yīng)家用需求,配置簡化、降低成本之后的產(chǎn)物;HPC則是因為單臺服務(wù)器無法滿足高性能要求,需要把多臺服務(wù)器一起堆起來干活的組合系統(tǒng)。
沒有HPC的時候:
▼一個月以后▼
有HPC的時候:
▼一天以后▼
有了HPC就是不一樣!
提到HPC,很多人覺得離我們非常遙遠(yuǎn),聽過某某國家實驗室,也知道我國的神威、銀河等,但這是多么高大上的東西,跟咱們普通人沒關(guān)系。
但實際上HPC已經(jīng)融入我們生活的方方面面。除了近期加緊分析的新型冠狀病毒,我們每天收看的氣象預(yù)報、電影院放映的大片、手機導(dǎo)航使用的衛(wèi)星地圖、石油公司尋找新油氣田,以及科學(xué)家的實驗研究等,都離不開HPC系統(tǒng)。
HPC存儲系統(tǒng):關(guān)鍵的小賬本
前面我們說到,HPC是把多臺服務(wù)器堆在一起干活的組合系統(tǒng),那是不是有多臺服務(wù)器就算HPC了呢?
顯然不是,一個壯漢是壯漢,但一群缺乏有效管理的壯漢只能是散兵游勇。
若要HPC系統(tǒng)好好工作,一套高速的內(nèi)部溝通機制必不可少,這套溝通機制既能讓組織者高速下達(dá)分解指令,也能迅速收集小弟們的反饋結(jié)果。
而HPC存儲,就是整個HPC系統(tǒng)里負(fù)責(zé)收集小弟反饋結(jié)果的記事本。
這個筆記本有多重要呢?
舉個栗子
從1一直加到60000(不使用高斯老爺爺?shù)墓剑?,完成這道計算題,首先需要老大將這個超長的加法算式分解成6個小單位的加法,其次找6個不太忙的小弟計算這六個算式并將結(jié)果寫到小賬本上,最后把六個小弟的結(jié)果匯總一下。
如果沒有人用小賬本記錄中間六個小弟算出來的這些數(shù)字,就無法在短時間內(nèi)得到結(jié)果。
但大多數(shù)情況下,由于難度太高任務(wù)量太大,任務(wù)分配并不是簡單幾次就ok,而是需要更多小弟多次去老大那里領(lǐng)取任務(wù)。
這個時候小賬本肯定鴨梨山大,每個小弟都會不停地用小賬本記錄數(shù)字,而且只有當(dāng)小賬本寫好數(shù)字之后,小弟們才能去找老大要新的任務(wù)。換句話說,整群人的干活速度取決于單個小賬本的記錄速度。
這里的小賬本就是HPC系統(tǒng)里十分關(guān)鍵的HPC存儲系統(tǒng),無論是寫入結(jié)果還是讀取原始計算素材,HPC存儲系統(tǒng)都發(fā)揮著不可替代的作用。
戴爾科技讓HPC存儲配置更簡單
可能有人要說了,既然HPC存儲系統(tǒng)如此重要,是不是要用各種宇宙黑科技來構(gòu)建?。?/p>
用量子糾纏、全息記錄打基礎(chǔ),時下流行的NVMe、SCM等也必不可少,如此下來,一套HPC存儲系統(tǒng)必定極其高端、極其昂貴吧。
然而理想豐滿,現(xiàn)實卻很骨感。從內(nèi)到外全用最貴的東西搭建一套HPC存儲系統(tǒng)固然可行,但錢畢竟不是大風(fēng)吹來的。即便預(yù)算非常充足,用戶也更愿意將資金配置在更高端的CPU、更強的GPU及更大的內(nèi)存上。
如何在合理有限的資金范圍內(nèi)搭建一套足夠快、足夠穩(wěn)定的HPC存儲系統(tǒng)呢?這是所有HPC用戶及潛在用戶共同面臨的難題。
這方面,戴爾科技集團(tuán)擁有大量成熟案例。無論是歐美各個國家實驗室、還是國內(nèi)研究院所及知名高校,都在需要HPC和HPC存儲的時候選擇戴爾科技集團(tuán)的解決方案。
科研單位在搭建HPC環(huán)境時,對整個集群的CPU算力、GPU算力、內(nèi)存、網(wǎng)絡(luò)、存儲容量、存儲帶寬等都有明確的要求。其中,CPU/GPU/內(nèi)存/網(wǎng)絡(luò)很容易衡量和選型,但由于存儲容量、帶寬、IOPS、延時等關(guān)鍵指標(biāo)往往相互影響,因而存儲方面的配置選型相對復(fù)雜些。
為了解決客戶HPC存儲的配置困擾,戴爾科技集團(tuán)利用自身龐大的研發(fā)測試團(tuán)隊進(jìn)行了大量的測試,得出一套可以量化的HPC存儲配置表:
只要明確容量和帶寬這兩個最基本的指標(biāo),我們就可以很清楚地為客戶計算出合適的配置,在滿足需求的情況下避免不必要的浪費。當(dāng)客戶對容量和性能有更高的要求時,整套系統(tǒng)還可以做到線性擴(kuò)容,滿足客戶未來潛在的性能需求。
看到這里你也許會問:究竟是什么產(chǎn)品這么厲害,既能提供大容量,又能提供高帶寬,還能線性擴(kuò)容呢?
它就是戴爾科技集團(tuán)大名鼎鼎的ME4系列存儲▼
ME4084/ME484
戴爾易安信ME4084/484系列采用英特爾®至強®可擴(kuò)展處理器,提供了較好的性能和效率,滿足用戶對于HPC嚴(yán)苛的性能需求。
作為大肚子容量池,ME4084/484系列可以在單個5U高的設(shè)備內(nèi)提供高達(dá)1PB的裸容量和超過5GB/s的帶寬,高帶寬和大容量為HPC系統(tǒng)大文件讀寫性能提供保障。
ME4024
面對幾百TB到幾十PB的海量數(shù)據(jù),需要一個超級快速的設(shè)備來處理查詢目錄。采用英特爾®至強®可擴(kuò)展處理器的戴爾易安信ME4024,作為HPC存儲目錄的存放區(qū),每秒鐘可處理數(shù)萬次目錄查詢更改請求,其低延時、高IOPS是保障HPC系統(tǒng)小文件讀寫入速度和大文件亂序?qū)懭胨俣鹊年P(guān)鍵。
當(dāng)然,除了這兩款存儲設(shè)備,HPC存儲系統(tǒng)還需要一層文件系統(tǒng)軟件,常用的有Lustre和BeeGFS。利用這些軟件,我們可將多臺存儲設(shè)備的容量和性能進(jìn)行堆疊,最終造就一個又大又快的巨型存儲空間。
題外話:
除了在HPC存儲系統(tǒng)上采用常用的文件系統(tǒng)軟件,戴爾科技集團(tuán)也在利用自身技術(shù)優(yōu)勢配合客戶做很多比較罕見的軟件聯(lián)調(diào)聯(lián)測。
前兩個月,筆者曾和國內(nèi)某知名研究院一起配合測試ME484+EOS文件系統(tǒng)(這個EOS可不是照相機的那個EOS哦?。?。經(jīng)過努力,系統(tǒng)里的每一塊硬盤都達(dá)到了150MB/s的性能,若非受制于當(dāng)前的PCI-E3.0總線技術(shù),每塊硬盤甚至可以達(dá)到250MB/s的理論性能!
測試結(jié)果出來后,客戶非常滿意,一口氣采購了多套ME484存儲。
用實力說話,ME4存儲就是這么可靠!
相關(guān)內(nèi)容推薦:從病毒研究談起,聊聊冷凍電鏡及背后的HPC
相關(guān)產(chǎn)品:全新 PowerEdge C6525 機架式服務(wù)器