賈揚清團隊攻克大數據計算性能瓶頸,阿里云連續兩年打破大數據最難紀錄
本文經AI新媒體量子位(公眾號ID:QbitAI)授權轉載,轉載請聯系出處。
4月26日,大數據領域權威競賽TPC-DS公布了最新結果,阿里云作為全球唯一入選的云計算公司獲得第一。值得一提的是,去年阿里云EMR首次打破該競賽紀錄,成為全球首個通過TPC認證的公共云產品。今年在這一基礎上,EMR的計算速度提升了2.2倍,連續兩年打破了這項大數據領域最難競賽的世界紀錄。
阿里云EMR成績連續兩年位居TPC-DS第一
TPC-DS是大數據領域門檻最高的競賽,也是評估大數據計算產品性能的權威標準之一。其需要參賽企業在十幾秒內時間內完成極高復雜度的SQL查詢以及超大規模數據量的計算處理,這對大數據計算產品的計算性能要求極高,過去十幾年,頂級科技企業都在嘗試沖擊榜單,但至今僅有兩家公司的大數據軟件通過認證,其中之一就是阿里云。
過去一年,阿里云EMR在原有開源技術架構之上,自研JindoFS等創新技術,在國內率先解決了計算、存儲分離架構下的性能損耗問題,可滿足大規模計算場景的性能需求。
目前,EMR已服務新零售、互聯網、教育、人工智能及政務等行業企業和機構,以國際知名營銷服務公司Yeahmobi為例,該公司通過使用阿里云EMR構建大數據計算平臺,實現了統一存儲、統一分析,整體成本下降超30%。
過去十年,阿里云大數據計算產品打破了多項世界紀錄,2015、2016年,自研MaxCompute刷新世界計算奧運會SortBenchmark的六項世界紀錄;2017年,MaxCompute完成全球首次基于公共云的100TB BigBench大數據基準測試;2019年MaxCompute以100TB的數據規模創造TPCx-BB競賽世界紀錄。
阿里云計算平臺事業群總裁賈揚清表示,“阿里云積極擁抱開源技術的同時,也在不斷投入自研創新技術,此次阿里云連續兩年刷新世界紀錄,是多年自研技術的必然成果,阿里云希望用這些創新技術服務更多的企業。”