趙修湘:關系型數據庫替代者-Hive數據倉庫
2014年7月25日-26日,由51CTO傳媒主辦的2014 WOT全球軟件技術峰會在北京富力萬麗酒店召開。秉承專注技術、服務技術人員的理念,自2012年以來,WOT品牌峰會成功舉辦了三屆,積累了大量的技術專家資源,獲得了廣大IT從業(yè)者和技術愛好者的一致認可,成為了業(yè)界重要的技術分享交流平臺以及人脈拓展平臺。
本次會議分為8個技術主題,分別是:數據庫技術與應用,互聯(lián)網架構分析,高效的技術團隊,敏捷開發(fā),實時計算與數據分析,移動應用,自動化運維,開源技術。51CTO作為本次峰會的主辦方,將全程視頻、圖文直播報道這場數據的盛宴。
在WOT2014全球軟件技術峰會***一天的實時計算與數據分析專場,來自EasyHadoop的開源社區(qū)創(chuàng)始人之一趙修湘老師為我們帶來了主題為《Hive數據倉庫實戰(zhàn)》的主題演講。分享了大數據時代的挑戰(zhàn)以及Hive應用結構化/非結構化數據的數據倉庫優(yōu)勢。
Hadoop是一款運行在廉價商用服務器之上的,能夠對大量數據進行有效存儲和處理的軟件框架,主要由HDFS分布式文件系統(tǒng)和Mapreduce計算框架組成,而Hive分布式數據倉庫構建于hadoop的hdfs和mapred之上,用于管理和查詢結構化/非結構化數據的數據倉庫。
趙修湘老師表示雖然Hadoop的hdfs和mapred已經能夠很好的解決大數據的存儲和分析問題,但是對于傳統(tǒng)的數據分析人員來說,依然面臨著理解mapred計算模型、自行開發(fā)代碼實現(xiàn)業(yè)務邏輯等挑戰(zhàn)。Hive的出現(xiàn),***的解決了傳統(tǒng)數據分析人員所面臨的問題。Hive使用類SQL查詢語法,***限度的實現(xiàn)了和SQL標準的兼容,是關系型數據庫***的替代者。
以上是51CTO.com記者從一線為您帶來的精彩報道。后續(xù)我們還有更加精彩的獨家報道,敬請關注。