Hadoop人才需求高漲 你準備好了嗎?
譯文【51CTO 11月15日外電頭條】企業對Hadoop以及大數據相關技術的興趣日益高漲,這同時也讓大數據技術方面的專家成為炙手可熱的人才。
在本周于紐約舉行的Hadoop全球大會上,眾多分析師與IT管理者一再強調目前企業所面臨的主要挑戰之一就是在部署Hadoop方面人才匱乏。他們甚至表示,只要技術嫻熟、堪當重任,企業愿意為這類員工繳納健康保險。
目前相關人才之短缺從以下事例中可見一斑:來自JP摩根大通公司以及eBay的IT高管們在會上發展主題演講,以借機匯集觀眾。
eBay公司體驗、搜索與平臺部門副總裁Hugh Williams向觀眾們表示,目前他們正在誠意招聘Hadoop專業人員,并熱情邀請感興趣的朋友與他面對面進行交流。
而JP摩根大通公司總經理Larry Feinsmith則半開玩笑地聲稱,他們不僅樂意雇用合格的專業人士,更會提供比eBay高出10%的優厚待遇。
在企業內部,“Hadoop可謂次世代的數據倉庫,應該被看作新型數據源,”Forrester研究公司分析師James Kobielus如是說。“能夠熟練使用Hadoop的人才理應獲得更理想的薪酬,”因為他們對企業的幫助極為巨大。
比起當下常用的傳統數據庫管理系統,Hadoop使得企業可以存儲并管理更為龐大的結構化與非結構化數據卷。
越來越多的企業開始試探性地摸索這一技術,旨在為像博客、點擊流數據以及社交媒體內容這樣數據量甚巨的服務提供存儲及分析功能,以期獲得更進一步的客戶及業務洞察能力。
Kobielus認為,隨著企業部署量的增加,此類分析技術人才的身份也必然要水漲船高。而且很多領域的專業人士都有潛力在Hadoop上大顯身手,例如具備多元統計分析、數據挖掘、預測建模、自然語言處理、內容分析、文本分析以及社交網絡分析等職業背景的技術人員。
“更加廣義的大數據——特別是在Hadoop當中——需要管理者具備高級分析領域的工作經驗,例如使用像MapReduce及R這樣的新生代方案處理預測及統計建模,”他說道。他同時補充說,以上這些正是數據分析師或數據科學家在Hadoop環境中經常要應對的結構化及非結構化數據,在它們的幫助下企業能夠顯著提升洞察力及商務智能性。
Hadoop贏得的廣泛關注也給企業帶來了對Hadoop平臺管理專家的剛性需求,Kobielus表示。他們工作是負責Hadoop集群、安全及管理,并對其進行優化以確保集群對企業的可用性。Hadoop應用程序之所以能夠順暢工作,靠的是“這些專家為其搭建及優先的運行平臺”,他說道。
“原先負責管理Teradata及甲骨文Exadata的數據庫管理員往往正是意圖向Hadoop集群管理進發的主要群體,”他說。“他們會意識到這是一片全然不同的天地。”此外,存儲管理專家也不可或缺,他們所做的工作能夠幫助Hadoop環境與現有傳統數據庫技術相結合。
目前對Hadoop專業人員的需求主要分三大類:數據分析師(又稱數據科學家)、數據工程師以及IT數據管理專家,Martin Hall如是說。他是Karmasphere公司總裁,該公司的主要經營項目正是為Hadoop環境開發軟件產品。
Hall認為,數據管理專家的職責在于選擇、安裝、管理、規范以及擴展Hadoop集群。正是這些專家決定了Hadoop是應該立足于云還是采取預置模式,包括供應商該如何選擇、使用哪一款Hadoop分布方案、集群規模以及被用于運行生產應用程序還是用于進行質量測試等。這一職位應該具備的技能,與負責傳統關系數據庫與數據庫環境類的任務頗為相似,他指出。
同時,Hadoop數據工程師還要負責創建數據處理工作以及建立分布式MapReduce算法,以供數據分析師使用。那些在Java和C++等領域技能水平較為突出的專業人士能夠在企業大規模部署Hadoop的浪潮中尋得更多機會,他說道。
第三類專業需求則是在SAS、SPSS以及以R為代表的編程語言等方面具備豐富經驗的數據科學家,Hall指出。此類專業人士能夠將建立、分析、共享以及智能整合加以集中,并存儲于Hadoop環境當中。
就目前來看,Hadoop領域的人才短缺意味著企業會更加依賴于服務供應商提供的部署技術。支撐這一論點的一大跡象是,在專業的咨詢及系統集成行業內,專攻Hadoop實際應用帶來的收入要遠遠大于Hadoop產品銷售所帶來的收入,Kobielus如是說。
像Cloudera、MapR、Hortonworks以及IBM這樣的企業如今已經在提供Hadoop的相關培訓課程,我們應該充分利用這些資源,通過建立Hadoop卓越中心使自己的企業獲得最大收益,他提醒道。
原文:Tech job-seekers: Hadoop skills are in high demand
【編輯推薦】