數啟創新 云觸未來!新一代云計算技術洞察
原創【51CTO.com原創稿件】2021年,是“十四五”規劃的開局之年,是向第二個100年奮斗目標進軍的起步之年,是我國現代化建設進程中具有特殊重要性的一年。在《十四五規劃綱要》當中,明確提出把科技自立自強作為國家發展的戰略支撐。為此,加快推動數字產業化,建設科技強國,具有十分重要的意義。
作為推動數字經濟深入發展的重要引擎,在《十四五規劃綱要》中赫然把云計算列在數字經濟重點產業中的第一位,足以見得其在數字產業化中的重要地位。
云計算的發展歷程:從倍受質疑到大放異彩
每一種新興技術從推出到成熟,其發展與演進過程都不會一帆風順,都會經歷諸多曲折的歷程,云計算也不例外。
早在1959年,牛津大學計算機教授Christopher Strachey就發表了名為《大型高速計算機中的時間共享》(”Time sharing in large fast computers”)的學術報告,并首次提出“虛擬化”的基本概念以及虛擬化技術,由此奠定了今日云計算基礎架構的基石。
2003 年至 2006 年間,Google陸續發布了 3 篇產品設計論文,從計算方式到存儲方式,開創性地提出了分布式計算架構,奠定了大數據計算技術的基礎。在此基礎上,Google 顛覆性地提出“Google 101”計劃,并正式創造“云”的概念。
2005年,Amazon宣布Amazon Web Services云計算平臺,并于2006年相繼推出在線存儲服務S3和彈性云EC2等云服務。同年,Google 推出 Process Containers,云計算由此進入公眾視野。
2007年,Google與IBM聯合在大學開設云計算課程。同年3月,戴爾成立數據中心解決方案部門。11月,IBM首次發布云計算商業解決方案,并推出“藍云”(BlueCloud)計劃。雖然,這一年各大廠商都在云計算領域積極布局,但是,受限于當時網絡帶寬等等諸多因素的影響,此時的云計算仍舊停留在概念階段。
2007-2008年期間,Salesforce發布Force.com,即PaaS服務;Google推出Google App Engine;云服務的形式正式出現。2008年中期,Gartner發布報告,正式將云計算列為未來計算的主流方向。同年底,Gartner披露數據中心十大突破性技術,云計算正式上榜。此后,云計算進入了飛速發展的時期。
2009-2016年期間,技術不斷成熟,云計算的功能也在日趨完善,眾多企業開始通過自身能力擴展、收購等模式,紛紛投入云計算服務中。2016-2019年期間,經過激烈的市場競爭,主流云平臺產品的功能已經比較健全,市場格局相對穩定,云計算正式進入成熟階段。
國內的云計算廠商,起步于2008年。這一年,阿里開始籌備云計算業務,一年之后,阿里云正式誕生了。此后,華為、騰訊、金山、百度等廠商在云計算領域發力,陸續推出了旗下的云計算產品。時至今日,中國云計算市場百花齊放,既有阿里云、騰訊云、華為云、金山云、百度智能云等一眾互聯網頭部廠商互相競爭,又有Ucloud、青云、紫光云等廠商在某些細分領域深耕細作,持續發展。
可以看到,云計算已經成為推動企業數字化轉型的主力軍。根據中國信息通信研究院云計算發展白皮書顯示,2020年我國云計算市場規模約為1781億元,未來幾年將保持快速增長,到2025年市場規模將超過7000億元。因此,以云計算為核心,融合人工智能、大數據等技術,實現企業信息技術軟硬件的改造升級,創新應用開發和部署工具,加速數據的流通、匯集、處理和價值挖掘,成為驅動企業加快數字化、智能化轉型的關鍵要素。
云計算的技術演進:去中心化云成為新趨勢
從虛擬化到云原生,從集中式部署到分布式架構,云計算技術在持續演進的過程中,不斷完善,持續更新跌代,以滿足不同時期不同場景應用的需求。
在Cloud 1.0時代,云計算通過虛擬化技術將底層資源池化,解決了物理資源上云的問題,并實現了敏捷、彈性、可控等目標。在這一階段,x86架構開始被廣泛采用,以阿里云、騰訊云等為主的云廠商,開始為企業提供計算、存儲、網絡等基礎架構的資源服務,一些互聯網應用開始向云端遷移。不過,由于大多數傳統應用并不是面向云環境來構建的,包括開發框架、類庫、后端服務等需求,這就導致了云端的強大能力沒有被完全發揮。
在Cloud 2.0 時代,云+AI+5G成為助推企業智能化轉型的新引擎。此時,面對公有云、私有云、混合云、多云等不同形態的云,云原生技術成為當前企業IT系統的最優模式。借助云原生技術和設計模式,企業在充分發揮云計算平臺優勢的同時,能夠最大限度地減少對開發效率的影響,實現穩定而高效的應用系統。在這一階段,包括阿里云、騰訊云等在內的大部分云廠商,開始為提供容器、Kubernetes、大數據、人工智能物聯網等多種服務。因此,很多企業開始將核心業務逐步遷移至云端。
在Cloud3.0時代,云將會走向一個新的階段,一個去中心化的服務模式。隨著物聯網、人工智能的不斷發展,現有的云計算基礎設備面臨著不斷上升的海量數據,這導致存儲成本、計算成本以及企業靈活擴展的能力逐漸走向瓶頸。去中心化云計算基于區塊鏈技術,使計算和存儲兩大核心資源可分布在鏈上的各個節點中,每一個節點都可以互相提供服務,而不再依托于某一個中心化的平臺。這帶來的是更低的成本,同時擁有更多可靈活擴展的資源。而數據的價值,也因為不受制于單一平臺,產生了更強的流動性,帶來了更高的數據資產價值,打破了資源孤島。目前各大云計算廠商都在探索這一領域的發展,據研究機構顯示去中心化云計算在未來5年的發展速度,將超越中心化云計算。
2020年10月19日,Gartner發布了2021年戰略技術趨勢。至此,分布式云連續兩年(2020-2021)被列入Gartner戰略技術趨勢榜單了。根據Gartner的預測,到2025年,超過50%的組織將在其選擇的地點使用分布式云,從而實現業務模式的轉型。
在51CTO主辦,中關村數智人工智能產業聯盟指導的主題為《數啟創新 云觸未來!Web3.0云響力新一代云計算大會》上,中關村數智人工智能產業聯盟秘書長賈昊、51CTO高級副總裁胡毅、騰飛資本投資總監盧尊、浪潮存儲資深架構師葉毓睿、華為云云計算架構師韓先超、安邁云首席戰略官于曉暉,就分布式云技術趨勢發表了自己的看法。
中關村數智人工智能產業聯盟秘書長賈昊指出,以云計算、大數據、人工智能技術為首的新興技術產業,快速推動企業創新與新一輪的技術革新。隨著技術的發展,企業更加重視數據安全和云安全,去中心化一定是云計算發展的主要趨勢。目前,有不少項目或企業已經進入實質性的應用階段,取得了不錯的市場成績。
51CTO高級副總裁胡毅表示,云計算經過十余年的發展,去中心化已經必然趨勢。分布式云計算憑借低成本、高效率、高可靠性、部署更加靈活、更符合法規要求、安全性更高等優勢,成為了產業快速發展的助推劑。
騰飛資本投資總監盧尊表示,云計算是帶動物聯網、工業互聯網產業快速發展的紐帶,為應用端數字化、智能化發展起到了支撐與推動的作用,是新一輪科技產業發展的關鍵之一。去中心化是云計算的主要發展趨勢,是在目前投資工作中已經有所嘗試、有所布局的關鍵新增賽道。
安邁云首席戰略官于曉暉表示,在Web3.0世界中,基礎設施將迎來重構。預計未來5年里,去中心化云計算的發展速度將超過中心化云計算。安邁云通過提供一站式去中心化云計算服務,滿足企業在智能時代對存儲與計算的巨大需求,助力企業以更低的IT成本,更高的效率實現數字化升級。
華為云云計算架構師韓先超同樣表示,去中心化云計算采用分布式的存儲與計算節點,具有低成本、靈活性高、安全可靠的特點,是對中心化云計算的有效補充,二者并存將成為未來常態,協同助力企業實現智能化轉型。
不難發現,隨著企業數字化轉型走向深水區,復雜計算、大規模計算、海量數據存儲等應用給企業帶來了越來越沉重的負擔,云計算從集中化、統一歸屬的遠程集群計算向“去中心化”演進已經成為大勢所趨,分布式云計算即將快速興起,成為不可替代的企業數字化轉型的新動能。
中國云計算廠商技術解讀:以去中心化產品賦能企業數字化轉型
前面提到,分布式云已經成為云計算未來發展的主流技術方向。面對這一趨勢,中國主流云計算廠商積極跟進,針對不同業務場景,推出了各自的明星產品,很好的滿足了用戶的數字化轉型需求。在《數啟創新 云觸未來!Web3.0云響力新一代云計算大會》上,來自浪潮信息、安邁云、騰訊云、京東云的嘉賓代表,詳細的分享了他們的產品特色和技術優勢。
浪潮信息:IPFS區塊鏈存儲
爆炸式增長的數據總量和大量非結構化數據的產生,給數據存儲帶來了巨大的挑戰,隨著技術的成熟,分布式存儲成為海量數據存儲的最佳解決方案。
作為業界最早提出新數據存儲戰略的存儲廠商,浪潮存儲基于二十年來在分布式存儲領域的技術投入與創新,推出“EB級彈性擴展、億萬IOPS、智能運維管理”的超大規模分布式存儲平臺——區塊鏈存儲,以分布式架構,滿足海量、多元的區塊鏈數據存儲需求,確保數據的安全可靠。
在海量數據存儲方面,浪潮存儲以“一套架構承載塊、文件、對象等多種數據服務”的超大規模分布式存儲平臺,“海納”多元數據;同時基于分布式架構,可以實現節點、容量隨業務發展在線彈性擴展,最大可擴展至EB級。
在性能方面,浪潮存儲基于iTurbo智能引擎技術,通過數據的智能IO感知、智能組織和調度,準確識別熱數據,并動態遷移到由高性能SSD組建的一級存儲中,從而提升了熱數據訪問速率10倍,提高了區塊鏈應用的數據訪問效率。
在數據運維方面,浪潮存儲基于智能統一存儲管理平臺InView,實現了數據中心“硬盤級”的性能、容量、故障智能預測。與傳統存儲運維相比,傳統運維在系統運維、管理中缺少精細化管理策略,僅僅對主機運行做管控,忽略了存儲最小物理單元硬盤運維。而浪潮存儲提供了統一資源存儲管理平臺,對存儲系統進行集中管理、智能監測和故障預測,其硬盤兩周時間預測準確率可以達到95%以上,增強了區塊鏈數據中心的健壯性 -- 從之前硬盤被動損壞之后進行搶救,變成了主動提前預測,確保有充足的時間對壞盤進行數據重構,讓EB存儲“巨無霸”穩健、連續運行。
浪潮存儲資深架構師葉毓睿表示,隨著新基建加速推進,5G、大數據、人工智能、工業互聯網等新興領域將迎來高速發展,帶動非結構化數據爆發式增長,具備彈性架構、多云融合優勢的分布式存儲將持續高速增長。浪潮存儲將持續以“云存智用運籌新數據”賦能智算中心,在分布式存儲領域加速創新,通過高密度存儲+擴容算法+管理軟件的組合,滿足用戶對于海量數據存儲的需求,簡化集群管理并降低存儲成本,釋放數據價值,驅動行業數字化轉型。
安邁云:Web 3.0 新型云計算平臺下的分布式存儲—矩陣存儲
在推動去中心化云計算技術發展的過程中,安邁云始終走在行業前列。從廣泛面向機構與個人的客戶端,到面向研發者的創新工具集,以及支撐企業分布式云計算的PaaS服務,安邁云致力于提供IPFS硬件算力機、IPFS軟件解決方案、OPEN API 和矩陣式存儲等產品和服務,為Web 3.0 數字時代提供穩定可靠的基礎設施,并通過產品和技術體系將其串聯起來,輸出到企業的業務場景應用當中,以解決海量數據存儲計算成本,隱私和安全挑戰,數字資產化及流動性的問題,真正推動分布式云計算技術落地。
目前,安邁云在分布式存儲全網可調用算力規模超10%市場份額,分布在歐洲、北美、澳洲等全球62個節點,具備了非常強大的存儲能力。此外,安邁云還在積極布局產業鏈,聯合了國內眾多的科研機構、知名廠商一起來推進產業發展,在全國和全球構建了眾多的數據中心。
去中心化存儲平臺——矩陣存儲是安邁云的核心產品之一,其基于IPFS分布式存儲網絡,為用戶提供簡單易用的PaaS服務、OpenAPI服務、存儲工具集套件等等,幫助用戶有效使用基于去中心化網絡的企業級存儲服務。
矩陣存儲一方面接入數據存儲需求客戶,一方面對接穩定可靠的存儲服務提供者,形成從數據生產、數據驗證到數據存儲的去中心化存儲網絡生態閉環。構建起可驗證存儲數據的匯集與分發服務平臺,為擁有大體量、多類型的數據密集型產業提供一站式數據分布式存儲解決方案,諸如:網絡視聽行業、制造業、科研行業等。基于IPFS存儲網絡,保證了整個數據的安全性、可得性、可靠性,同時可以實現輕松擴容。通過區塊鏈技術,安邁云還構建了很多專業的工具集,能夠很好地把Web2.0存儲需求和Web3.0的創新性需求整合到矩陣存儲中。
安邁云首席戰略官于曉暉表示,面對傳統成熟的云存儲產品體系中,矩陣存儲在數據可靠性、存儲成本、全鏈路校驗、支持彈性數據擴容等方面,具備相當的競爭力。
騰訊云:本地專用集群COS on CDC
雖然上云是大勢所趨,但考慮到數據合規問題,用戶并不會將所有的應用和數據都放到公有云上。此外,在諸如現代化智能工廠的業務場景當中,大量傳感器采集的數據,要在本地處理之后,才會上傳到公有云中。因此,企業仍然需要建立本地專用集群來存儲和處理數據。為此,騰訊云推出了本地專用集群COS on CDC,它部署在客戶機房中,是一款開箱即用的產品。
騰訊云本地專用集群(Cloud Dedicated Cluster,簡稱 CDC)是全新推出的基礎設施類產品,目的是將中心化的公有云服務,延伸為可在客戶機房落地的近場服務,融合公有云與本地 IDC 的雙重優勢,用戶可以以本地化的時延和數據安全來使用公有云的豐富能力。CDC 通過一體化機柜的形式在用戶機房部署本地化算力,資源就近接入臨近公有云地域實現統一管理,用戶可通過公有云現有工具(控制臺、API 等)來管理 CDC 資源。
騰訊云CDC涵蓋了騰訊云存儲能力,能夠為用戶在本地數據中心和公有云之間提供一套一致性的體驗,包括一致性管控、相同API和開發工具、一致性運維和鑒權等,確保公有云和本地數據中心架構完全一致。此外,騰訊云CDC打通了企業內部數據中心對象存儲和公有云對象存儲之間數據通道,實現了數據在本地和云端的自由流動。
同時,騰訊云CDC 完全同步騰訊云的新技術和服務,包含星星海服務器、黑石2.0(裸金屬)服務器及超高性能云盤。用戶可基于 CDC 快速搭建超級計算集群,也可以利用容器服務 TKE、彈性伸縮 AS 等云產品構建大規模 Web 服務后臺。另外,用戶可使用與公有云完全一致的方案管理在 CDC 上的資源,包括但不限于控制臺、API、SDK、云監控等,真正實現混合云的同構管理及無差別調度。
騰訊云CDC還具備快速標準化交付的能力,其采用與騰訊云自有數據中心相同的采購及交付標準,在交付速度、性價比及軟硬件可用性方面都做到了精益求精。在銷售模式上,騰訊云CDC不同于一般的設備售賣模式,為 CDC 設備和軟件提供運營、升級、保障等服務。通過清晰的責任共擔機制,既保證用戶的本地安全和隱私,也使用戶脫離繁瑣的維保工作。最后,騰訊云CDC支持按需定制服務,根據客戶的實際需求,提供40TB、60TB、100TB的存儲容量供不同用戶選擇。
騰訊云存儲首席解決方案架構師王登宇表示,基于數據安全合規和本地化處理等訴求,用戶需要將數據保存在本地的機房中,但考慮到業務創新等需求,用戶又需要快速部署云端應用。為此,騰訊云推出了本地專用集群CDC這一開箱即用的產品,不需要客戶一次性購買,且托管、運維完全有騰訊云后臺支撐,即滿足了數據合規的要求,且簡化了用戶上云的過程,降低了開發成本,加快了業務創新。
京東云:以應用為中心的云原生混合多云平臺—京東云云艦
京東云云艦是云原生混合多云平臺,為京東零售/物流/科技提供統一的容器運行環境(JDOS),PaaS能力(T-PaaS)和應用開發運行平臺(APaaS) 。
京東云云艦以云艦 JDOS云原生操作系統為底座,面向不同用戶的需求,提供了云艦TPaaS云原生技術中臺和云艦 APaaS云原生應用開發運行平臺兩大能力。在架構設計上,京東云云艦采用云原生架構,基于K8S平臺,融合容器、微服務、DevOps等先進技術理念;其支持混合多云底座,幫助業務充分利用多云部署優勢,并解鎖單云廠商技術綁定;積木式的按需搭建,輕量化起步,組件化擴展,避免了傳統技術中臺建設過度厚重的問題。
京東云云艦支持根據用戶的配置自動部署京東增強的Kubernetes集群;支持納管客戶已有標準Kubernetes集群:公有云托管集群、私有云平臺托管集群、基于物理機的非托管集群、基于虛擬機的非托管集群。
此外,京東云云艦實現了多集群管理、阿基米德調度、增強型運維能、超大規模集群、應用負載管理、網絡和存儲優化六大方面的K8S引擎增強。
借助京東云云艦,一是解決了私有云PaaS較云原生PaaS服務體驗有差距問題;二是提供了存量IT基礎設施利舊能力,讓存量和現代IT基礎設施并存,平滑演進,降低演進成本;三是降低了異構IT基礎設施和PaaS服務的管理運維成本。
京東云資深架構師李向輝表示,針對多年業務場景實踐,京東構建了以應用為中心的PaaS平臺-京東云混合多云平臺。京東云基于混合多云技術底座,覆蓋公有云、邊緣和各種基礎設施,將業務系統、數據庫中間件等PaaS平臺、大數據平臺進行容器化,實現了以應用為中心的混合多云平臺。
云計算技術未來展望:邁入以區塊鏈為核心Web3.0時代
隨著5G、AI、IoT等技術的快速發展,數據爆炸式增長將成為必然。根據IDC調研報告顯示,到2025年,全球數據圈將會達到175ZB。與此同時,邊緣計算發展勢頭相當迅猛,預計到2025年,邊緣產生的數據將達到全球數據總量的20%以上。那么,如何存好、用好數據,確保云邊數據的安全?為此,以web3.0為支撐的去中心化存儲,成為未來數據存儲重要的技術發展方向。
Web3.0是以數據為核心構建的新型網絡架構,讓數據價值回歸于企業本身而不再是集中于平臺上。而在去中心化存儲過程中,區塊鏈技術創造的數據傳輸加密方式,很好地解決了安全和信任問題。
技術上,以區塊鏈為核心的Web3.0時代,正在重塑存儲、網絡、計算等基礎設施,透過去中心化代表企業安邁云的矩陣存儲產品可以看到,其基于IPFS分布式存儲網絡,在數據可靠性、存儲成本、全鏈路校驗、支持彈性數據擴容等方面,具備相當的競爭力。目前,該產品已在廣電視頻、基因大數據、健康大數據、司法存證、AI智能體領域展開應用。
對于云計算技術未來發展的方向,中關村數智人工智能產業聯盟秘書長賈昊發表了自己的觀點。他表示,區塊鏈底層技術+云計算模式形成的“去中心化云計算”在產業政策導向下已經成為另一種云計算形態。在云計算步入第二個發展的10年,“去中心化云計算”可能將成為新的云計算形態。
騰飛資本投資總監盧尊指出,去中心化的分布式云計算一定是未來的大趨勢。他表示,分布式云計算未來有三大技術發展方向:一是以云計算為核心的數字化深度和廣度不斷加強,由此將會引發用戶對于數據安全的關注。二是在邊緣側,隨著應用的廣泛部署,將會影響到云生態發展。同時,也將給企業帶來更多更好的發展機會。三是隨著分布式云的快速發展,勢必將出現數據孤島,如何利用新技術解決這一問題,也是未來技術演進的主要方向與趨勢。
安邁云首席戰略官于曉暉表示,5G、云計算、AI和物聯網推動了數據存儲和計算需求爆炸性增長,智能時代對數據存儲成本、隱私安全保護、數據資產流動性等方面都提出了更高要求。因此,在Web3.0世界中,基礎設施將迎來重構。預計未來5年里,去中心化云計算的發展速度將超過中心化云計算。安邁云通過提供一站式去中心化云計算服務,滿足創新企業在智能時代對存儲與計算的巨大需求,助力企業以更低的IT成本,更高的效率實現數字化升級。
浪潮存儲資深架構師葉毓睿指出,新一代云計算誕生的根本原因是其能夠做到資源配置最大化、保護隱私數據,去中心化的云存儲即區塊鏈存儲和去中心化的云計算相輔相成,兩者為Web3.0快速發展助力。他表示,存儲和網絡是密不可分的,尤其是區塊鏈存儲,將是一個嶄新的賽道,具備無限商機。
寫在最后:以區塊鏈底層技術為支撐,構建去中心化的分布式云計算,重構信任與安全,重塑傳統集中式云計算的業務模型和資源分配結構,已經成為必然。可以預見,分布式云將成為云計算未來10年發展的主要趨勢,推動著中國企業更好、更快地朝著智能化邁進。
【51CTO原創稿件,合作站點轉載請注明原文作者和出處為51CTO.com】