洞悉數據價值 華為云EI大數據服務亮相技術私享會杭州站
近日,華為云技術私享會第二站在杭州舉行,來自金融、物流、教育、電子商務、物聯網、醫療等行業的信息部門主管、架構師、軟件開發人員、運維人員濟濟一堂,與華為云EI大數據產品的研發專家們,共同探討華為云的大數據服務如何方便快捷的存儲、處理和分析數據,幫助企業挖掘數據背后的價值,提升企業的運營能力。
華為云技術私享會是華為云面向企業CIO、技術骨干、開發者,分享云計算技術熱點、解讀華為云產品技術與實踐的技術盛會。2017年,華為云技術私享會在北京、上海、重慶、深圳等地舉辦了十余場活動,獲得了與會嘉賓的高度評價。2018年,華為云私享會將繼續秉承技術分享的理念,將私享會的范圍擴大到北京、上海、廣州、杭州、福州、成都、濟南、南京、西安、武漢、重慶、石家莊等城市。本次華為云技術私享會杭州站,是華為云EI大數據產品的一次整體亮相。多名華為專家為現場觀眾分享了華為云大數據服務的技術架構、服務能力、應用場景及成功實踐。
華為云開放式大數據服務MRS,是“源于開源,高于開源”的開放式大數據一站式服務。華為云MRS服務,是國內大數據領域***的FusionInsight大數據平臺的云服務形態,涵蓋Hadoop/Spark/Hive/Kafka等多種技術。并在可靠性、性能、安全等方面做了很多優化和增強,為企業的大數據應用保駕護航。
華為云專家分享華為云MRS服務技術與實踐
華為云大數據存儲技術創新代表產品—CarbonData,是全球***開源社區Apache的***項目,其***的索引加速技術填補了大數據開源存儲技術的空白,有效推動了大數據生態發展。CarbonData提供了一種新的融合數據存儲方案,以一份數據同時支持多種應用場景。CarbonData通過索引等加速技術讓存儲和計算物理上更接近,從而提升CPU和IO效率,實現萬億數據分析秒級響應。
華為云專家分享華為云CarbonData服務技術與實踐
目前CarbonData已在全球實現規模應用,其中***的單一集群數據規模達到PB級、10萬億條記錄以上。同時,研發專家在現場演示了首列過濾查詢場景,CarbonData性能比Parquet快近100倍,引起了現場開發者極大的轟動。
研發專家現場演示首列過濾查詢場景代碼截圖
華為云實時流計算功能Cloud Stream Service服務(簡稱CS)是華為云上的實時流式大數據分析服務,它是一個serverless的全托管服務,用戶無需感知具體的計算資源,只需編寫sql便可快速構建實時分析任務。華為云CS服務提供flink和spark streaming兩種引擎,支持共享和租戶隔離獨享集群兩種。同時,華為在Flink原生SQL上擴展了多種領域專用特性,包括CEP、地理位置函數和隨機森林算法函數。開發者基于這些擴展特性,通過簡單的代碼編寫,就可以非常方便的實現電子圍欄、車輛軌跡異常檢測等業務。
另外,華為云一直對Apache Spark 的技術進行增強,并把這些增強回饋給社區,比如CBO增強,多數據源聯邦分析,以及在元數據基礎上做的相關企業級特性增強等。活動當天,華為云專家分享了基于Apache Spark + Apache CarbonData構建的云上Serverless數據湖探索服務(DLI),面向客戶提供Serverless SQL 和 Serverless Spark的分析能力,在免數據搬遷的前提下實現多種分析范式統一,給用戶提供端到端數據分析、數據價值挖掘的能力。同時,專家還介紹了DLI在實際用戶場景下的多個實踐案例,重點剖析了DLI在BI分析場景和海量行為日志端到端分析場景的具體實踐方法,幫助客戶實現維護成本相比線下數據中心降低了70%,新業務上線周期相比線下縮短了50%。
華為云專家分享spark技術創新與實踐
在私享會的***環節,現場參會嘉賓們在華為云大數據專家們的指導下,完成云上大數據實戰,親自體驗了華為云大數據服務。并將自己企業遇到的大數據相關問題與專家們進行熱烈的討論交流,獲得了專家們解惑。
華為云技術私享會杭州站活動現場
后續,華為云技術私享會將很快在全國各地開始啟動,歡迎大家關注華為云私享會的公告,共同打造云上的技術盛宴。
點擊了解華為云EI:https://www.huaweicloud.com/ei/