淘寶頊陽:Hbase系統運維實踐
2014年7月25-26日,由51CTO傳媒主辦的全球軟件技術峰會WOT(World Of Tech)在北京富力萬麗酒店召開。秉承專注技術、服務技術人員的理念,自2012年以來,WOT品牌峰會成功舉辦了三屆,積累了大量的技術專家資源,獲得了廣大IT從業者和技術愛好者的一致認可,成為了業界重要的技術分享交流平臺以及人脈拓展平臺。
本次會議分為8個技術主題,分別是:數據庫技術與應用,互聯網架構分析,高效的技術團隊,敏捷開發,實時計算與數據分析,移動應用,自動化運維,開源技術。51CTO作為本次峰會的主辦方,將全程視頻、圖文直播報道這場數據的盛宴。
在下午的數據庫技術與應用專場,淘寶資深數據庫工程師許飛飛(花名:頊陽)為來賓帶來題為《Hbase系統運維實踐》的精彩演講。
在演講中,頊陽首先介紹Hbase在切分表的原子性配置、水平線性擴展能力、強一致性 實時的讀寫方面有更好的優勢。
1.強一致性 比較mango
2.自動擴容
3.超高的寫入性能
4.低成本
目前阿里3大在線存儲MySQL,OceanBase和HBase。目前機器規模在線1000+,離線3000+,目前有超過200個集群。對于Hbase集群運維,頊陽老師提出:
1. 獨立小集群還是混合大集群?如何有效運維大規模機器?
2.HBase依賴HDFS和Zookeeper,出現問題很難排查
3.HBase監控指標非常多,提取有效信息比較困難
4.熱點的檢測和處理。。。。
1.什么樣的項目適合使用HBase?
2.HBase如何正確評估擴容?