京東布局自建數據中心,規模化增長火力全開
京東在華北、華東、華南三個地區各有主力機房,第一個自建的數據中心,就是位于宿遷的京東云華東數據中心。京東CTO張晨曾多次在業界大會上講到:京東每年的618,11.11電商大促,無論從數據分析還是秒殺交易,都需要強有力的數據中心支撐。宿遷自建數據中心作為京東的標桿項目,從整體的規劃設計,到各個模塊內機房的靈活配置,都能夠更好的支撐京東不斷增長的各項業務。
京東自建數據中心全貌
“我們宿遷的自建數據中心,整體由4個模塊和1棟綜合大樓組成,總占地面積將近6萬平方米,總投資30億元,可以提供20萬臺的服務器安裝和運營能力,13萬TB的存儲能力,24萬GHz的計算能力”,京東IDC建設部在宿遷駐場的工程項目負責人張碩在與記者的溝通中談到:“宿遷數據中心1期已經投產運行1年時間,使用率接近100%,為了滿足更多客戶的需求,目前2期正在加緊建設當中,估計在今年9月份就會投產使用。”
國內最先進的數據中心建設標準
“我們在宿遷建設的數據中心,從設計到施工,從散熱到供電都采用了當下最先進的技術。”京東IDC建設部負責人,首席技術專家張敬談到:“IT技術的迅速變化使得設備的迭代加快,三年我們就需要更換全新的服務器。但是對于機房來說,技術的迭代可能是三、四十年甚至更長的時間,因此我們將機房等級定位為國內最高的T4級別的水平,充分考慮了未來的擴展與升級等問題”。
談到數據中心在“綠色環保”方面的科技創新,張敬還談到:“打造一個綠色數據中心,不僅僅是機房、電力,還包括選址,建筑、散熱等很多方面的因素。比如我們選擇的宿遷,在這些方面也都有充分的考慮和論證。宿遷有京杭大運河穿境而過,北倚駱馬湖,南臨洪澤湖,水務資源極其豐富,這為大型數據中心散熱提供了便利條件。液冷散熱可以節省大量的空調成本,另一方面,相比風冷散熱造成的灰塵影響,液冷散熱在安全與靜音方面也更為突出。我們還自主研發了一套自適應的溫控算法,可以使整個機房始終保持在最適合的溫度環境當中。”
京東IDC建設部技術專家黃軼彪談到:“依靠這些全新的數據中心設計理念,目前京東在宿遷的數據中心一期模塊中,實現了運算能力不小于100萬億/秒,存儲能力不小于5000PB,能耗PUE<=1.3,比普通數據中心全年節電量和減少碳排放量,都有非常大的提升,遠遠領先于傳統的機房能力,將全力支撐京東商城、京東金融以及京東云重要客戶的業務增長需求。”
而對數據中心的要求,不僅僅是高效,穩定,靈活可擴展,還非常倚重于在數據中心現場,能有一支專業的、經驗豐富的運維管理團隊。
專業的數據中心運維管理團隊
京東在宿遷的自建數據中心里,擁有一支專業化的運維管理團隊。他們都在京東運維團隊服務5年以上,在數據中心運維管理方面有著豐富的經驗。宿遷數據中心運維管理的現場負責人楊元同記者談到:“在現場運維工作中,他的團隊會充分了解各個系統設備的特性,并針對不同設備的備用情況,分別制定詳細的設備輪循周期計劃,確保備用設備能夠做到定期啟停機始終處于功能完備狀態。”
針對數據中心的硬件設備管理,楊元的團隊編制了詳細的設備清單,明確設備的所有者、管理維護人員或部門、開始使用的日期、設備的重要等級等信息。編制設備年度維護計劃,數據中心的操作規范,規定具體設備的維護日期、維護操作事項、維護操作重要程度、維護人等信息,并由專人負責按照維護計劃進行維護或聯系、督促服務商執行維護。楊元談到“在運維管理過程中,我們準確識別相關功能組件,了解組件的設計能力,定義與該組件技術特點相匹配的監控指標,并通過主動管理,最大限度的保證數據中心各管理組件的可用性。”
“我們根據數據中心的運維特點,將設備按重要等級進行分類,并按不同的設備重要等級制定不同的管理策略,最大限度的確保重要設備的安全穩定運行。”京東基礎設施管理部負責人湯鑫也談到:“在數據中心的運維管理過程中,我們還會通過合理的能效管理,包括數據采集、分析評估以及系統的優化完善,現場運維數據的收集,并采用智能化系統的監控平臺工具,通過末端設備加裝的儀表、智能傳感器等,周期性對設備的歷史數據進行分析。”
根據這些記錄的歷史數據,按照數據中心各模塊、子系統、設備分別進行計量統計和分析,找出各系統運行過程中存在的能耗過度使用情況,針對分析出的問題制定有效的系統優化變更措施,使系統運行功能、能效最優化。通過對數據中心運行的設備進行專業化管理,對設備參數的優化設置,使設備運行在最佳工況,并達到高效節能的目的。
打造國內最強數據中心
京東IT資源服務部負責人呂科說:“京東在宿遷自建的數據中心,雖然是京東第一個自建的數據中心項目,但是從選址規劃到運營投產,運維管理的過程中,都體現了京東很多年在基礎設施構建和運維管理方面的豐富經驗”。
面對日新月異更新交替的新技術,呂科認為:“京東數據中心的技術演進,從租賃到自建的落地,從高密機房到微模塊的應用,每一點都有進步和驚喜,在技術風起云涌之時,京東也將會在新一代數據中心建設的路上一往無前。”