恩墨學院孟碩:大數據分析下的數據學堂
原創【51CTO.com原創稿件】2016年11月25-26日,由51CTO.com主辦的WOT 2016大數據技術峰會在北京粵財JW萬豪酒店隆重召開。自2012年以來,WOT品牌大會秉承“專注技術、服務技術人員”的理念已經成功舉辦十二屆,不僅積累了大量的專家資源,更獲得廣大IT從業者和技術愛好者的認可和好評,已成為業界重要的技術分享及人脈拓展平臺。
在WOT2016大數據技術峰會的實時計算主題專場,51CTO學院認證講師,恩墨學院大數據培訓產品總監孟碩做了《實時計算》的演講,會后記者采訪了他,他為大家介紹了大數據相關的知識。
孟碩 51CTO學院認證講師,恩墨學院大數據培訓產品總監,前甲骨文Oracle BigData 一體機咨詢顧問。擅長利用MDB DTrace 剖析系統原理,解決系統數據庫與操作系統兼容性的諸多問題。在 Oracle 解決方案中心任職期間,接觸大量一線大數據應用案例,同時取得國際商業大數據領導公司 Cloudera 的 ACTP 認證講師資質。 同時還獲得:Oracle OCM 10g、Cloudera Certified Administrator for Apache Hadoop (CCAH)
孟碩老師本次大會上的演講主題主要是流式計算,是大數據整個知識體系里面的一個位置,演講主要對比他們的優缺點,對在生產過程中采用什么樣的架構給出了建議。
大數據時的數據分析
大數據分析涉及很多方面,如果要分析數據的話,包括從前端數據采集,到中間處理,到后面機器學習的部分。機器學習是最核心,也是最有意思的部分。如何快速有效去做?需要做到的是數據集成,可以針對數據從前端到***都有一個非常深刻了解。在此之前,在現代大數據平臺跟傳統數據分析中間是有一個鴻溝,很多現有的數據分析師,包括數據科學家不了解現在企業數據來源,應該學習整個架構而不是學習整個機器部分,現在很多企業整個的精力致力于這兩個鴻溝,把整個全產業鏈的知識體系都明確鋪開。
中國傳統企業數據的安全保障
其實中國的大數據主要的數據是綁在政府的手里,遲遲不敢放開,就是數據安全性的問題,現在目前有很多解決方案,比如說用kerbero,但是還沒有形成一個完整的體系,有時候技術上是成熟的,但是相對應的這種法律法規還沒有建立起來的時候,也是對大數據安全是個挑戰。
云計算與大數據
現在大數據的變化是于云計算本身有關系的,現在主流大數據的商業成品,都是支持在云環境下部署,比如說商業大數據龍頭企業clouder,它現在出了一個產品,簡化企業在亞馬遜平臺,還有其他云平臺甚至微軟的azur這種云平臺上面的部署,把部署過程做一個簡化。所以說未來云平臺對大數據的影響是,會有越來越的公司把自己數據平臺放在云上。
雙學院教大數據
恩墨學院和51CTO學院合作推出一個可能是唯一一個覆蓋整個大數據全軟件鏈知識體系的一套課程,恩墨學院提供了大量商用數據相當于在Linux里面的紅帽,恩墨學院同樣借鑒了了課程設計體系結合學院受眾的特點,量身訂作了整套的培訓課程。
【51CTO原創稿件,合作站點轉載請注明原文作者和出處為51CTO.com】