解決世界級大數據難題,阿里云自研MaxCompute再獲科技大獎
5月14日,浙江省科學技術獎勵大會正式召開,阿里云自研大數據計算平臺MaxCompute榮獲浙江省科技進步一等獎。
MaxCompute是國內最早自研的大數據計算平臺之一。十年前,阿里云創始人王堅博士帶領團隊研發該平臺,主要應用于大規模數據處理,目前已擁有EB級別的數據存儲能力、百PB級的單日計算能力。
隨著企業的數據規模快速增長,數據種類變得豐富多樣,大數據計算的需求越來越高,然而諸如Hadoop、MapReduce等開源技術的大數據計算平臺集群規模有限,在大規模數據處理效率、安全性等方面較低。
MaxCompute在執行引擎、大數據語言、數據安全等方面采用了多項創新技術,例如創新的存儲計算技術,有效解決計算效率問題,它把不同的數據源用類似的方式存儲,用統一的方法計算,最終快速實現不同類型數據的計算。
十年來,該產品創造了多個世界記錄:2013年8月15日,***突破了單集群內5000臺服務器的規模,目前單集群規模已超過1萬臺;2015、2016年,刷新世界計算奧運會SortBenchmark的六項世界紀錄;2017年,完成全球***基于公共云的100TB BigBench大數據基準測試。
阿里巴巴技術委員會主席王堅表示:“MaxCompute大幅降低了企業使用大數據的門檻,國內近一半獨角獸公司的大數據計算平臺基于MaxCompute,為社會和消費者服務。”
目前,MaxCompute服務覆蓋全球16個國家和地區,廣泛應用于金融、互聯網、能源、交通、政務等行業。
例如,在“浙江最多跑一次”項目中,將與老百姓辦事最密切相關的100個事項70多億條數據實現共通共享共用。老百姓辦事不僅能最多跑一次,甚至有可能一次都不跑。
在百姓生活領域,支持墨跡天氣等應用為4億用戶提供氣象預報服務,每天的用戶查詢超過5億次;在工業制造領域,幫助制造企業尋找上千個參數中的***搭配,提升制造良品率。
在Forrester發布的《The Forrester WaveTM: CloudData Warehouse, Q4 2018》中,阿里云MaxCompute、DataWorks、ADB等三款產品入選,并在產品功能方面力壓微軟。
此外,阿里云城市大腦也同時榮獲浙江省科技進步一等獎。城市大腦首創于杭州,是國家首批人工智能開放創新平臺之一,也是城市治理與服務領域唯一的AI開放平臺。