七問大數據: 企業真的準備好了嗎?
大數據技術無疑是目前最熱門的技術話題。 然而, 關于大數據的企業應用時代是否到來, 在技術和管理領域一直有不同的爭論。Andrew Brust給出了大數據進入企業應用階段的一些障礙。 希望這些觀點對于企業CEO/CIO進行大數據戰略的決策會有所幫助。以下是Andrew Brust的觀點的總結:
一、產品成熟度
無論從全球500強到中小企業, 圍繞著商業智能(BI)和關系型數據庫管理, 都積累了大量的人才和經驗, 這方面的產品也相當的成熟。 很多產品, 即使針對非技術人員, 也能提供友好的用戶界面和便捷的操作。
然而, 在大數據領域。 Hadoop卻多數采用命令行形式, MapReduce的代碼只能用Java來寫。 HDFS文件系統還是由單一域名節點來控制, 安全性得不到充分保障。 盡管, 目前出現了一些以瀏覽器方式和現有BI軟件交互的工具如Hive(以及支持實時SQL查詢的Impala)。 這些產品還遠遠達不到一個企業級產品所要求的程度。
二、數據的采集
如何把數據變成信息, 一直是商業智能(BI)實施和運行中最麻煩的一塊。 在數據采集,數據共享,以及數據的整理過程中, 企業內部的管理問題, 企業部門之間的利益問題會和具體實施的困難攪在一起。 這些方面的問題, 并不能因為大數據而發生改變。 相反, 數據量的增大, 只會增加企業在數據管理和數據分析方面的難度。
當然, 大數據分析的靈活性, 可以使得數據查詢變得更加簡單和靈活, 這有助于從技術和管理方面降低企業數據管理的復雜性。 不過, 對非結構化數據的分析工具還沒有完全成熟, 也還不是一般的企業數據分析人員所能夠輕松掌握的。
三、中小企業案例和戰略的缺乏
如果我是一個大網站的CEO, 或者銀行的高管, 或者大型零售企業。 現在有很多大數據的案例, 可以告訴我如何能夠利用大數據, 提高效率, 發現更多的目標用戶, 或者降低運營成本。 可是要是我是一個有5家“麥當勞”的加盟者呢。 誰能告訴我Hadoop和MapReduce能幫到我什么。(編者按:點餐牌的視覺熱力圖?店鋪區域設計優化?)
其實, 中小企業也應該認真考慮他們的大數據戰略了。 如果他們有網站, 他們也能夠產生大量的數據。 即使沒有網站, 其實,每天攝像頭里產生的數據,如果能利用好, 也有足夠的分析價值。此外,在社交網站的海量數據面前,中小企業與大企業面臨同樣的機遇,但問題是, 數據挖掘對于中小企業來說過于復雜。 這還需要類似的數據挖掘工具變得更加簡單才行。(ClearStory這樣的創業公司正致力于大數據的可視化和易用化,讓那些雇不起高水平數據科學家的企業,以及非IT部門的業務人員也能使用大數據。參考閱讀:二十大數據可視化工具點評)
四、大數據的投資回報
對于互聯網企業, 大數據能夠增加用戶數量和用戶粘性。 對于制造企業來說, 大數據分析可以優化生產流程。 對于金融業來說, 大數據可以幫助開發更好的算法交易。 對媒體公司來說, 大數據能幫助更好的銷售廣告, 對電子商務公司來說, 大數據能更好的定位目標客戶。
這些公司, 有一點是共同的, 那就是, 大數據所帶來的回報要大大高于大數據所需的人力,物力等方面的投資。 而對于其他很多行業來說, 為什么要花這么多錢, 請這么貴的數據科學家, 統計學家來, 如何衡量投資回報還是一個很難回答的問題。
根據Big Data Insight Group的大數據趨勢報告《解讀大數據的商業價值和戰略意義》,在早期階段,大多數企業(80%)沒有量化大數據項目的價值回報。
此外,現有的大數據產品和服務, 必須變得更加易用, 更加便宜才能吸引更多的行業用戶。
五、對企業IT戰略的影響
從更高的層面上來看, 大數據戰略不是僅僅指數據, 它將會給企業的整體IT戰略帶來影響。 比如說, Hadoop的分布式廉價的存儲方式, 會給企業目前普遍采用的中心式的昂貴的存儲服務器的方式帶來沖擊。 Hadoop也可能會使得企業對數據分析人員的Java能力的要求提高, 而相對SQL能力的要求則會降低。 大數據也將推動企業加快向云計算和云存儲方面的轉型。
所有這些, 都需要企業進行考慮和適應。 因此, 大數據的戰略需要和企業整體IT戰略一起考慮, 這樣也加大了大數據戰略推動的難度。
參考閱讀:IT部門迎戰大數據的五大策略,決勝大數據:企業成功的七大步驟
六、人才的缺乏
大數據人才的技能, 包括數學, 統計和數據模型的技能。 才剛剛有些大學提供數據分析的學位來培養這方面的人才。 而比如說Java編程的技能, 在大數據時代, 對于非編程人員的數據分析人員, 也成為了必備的技能了。 而最難的是, 需要既懂技術, 又理解企業所在行業的數據分析人員。 這樣的人才就幾乎如深海里的珍珠那么難找了。 即使從企業內部培養, 也很困難。 所以這些, 都成為了大數據在企業應用的障礙。
參考閱讀:2012年大數據商用的十大發展趨勢 ,大數據的人才荒
七、CEO和CFO
《哈佛商業評論》對財富1000強企業大數據應用現狀的調查顯示,大多數CEO, 從戰略高度, 都認識到大數據的重要性, 然而, 這還需要管理團隊從執行方面有更加深入和實際的理解才能真正實施大數據戰略。 而事實上, 很多企業的管理團隊還做不到。 大數據產品和服務, 必須變得更加簡單, 使得那些非大數據專家們也能夠充分理解, 這樣才能保證可實施性。
對很多企業來說, 商業智能(BI)是由CFO來主管的。 而現在的很多大數據產品, 作為BI的替代或者升級, 則是由技術部門或者業務部門來發起的。 這樣在大數據戰略的實施中, 對技術的掌握與對數據的掌握就被割裂開了。 (技術部門掌握技術, 而財務部門則掌握數據), 而CFO在大數據的實施戰略中, 將從過去的決策者被邊緣化了。 這往往也是大數據在企業中推動的一個阻力。
參考閱讀:CIO如何建設企業數據分析文化
結論:
很多“破壞性創新”都有類似的成長曲線。 剛出來的時候被爆炒, 然后逐漸完善成為主流技術。 大數據技術也一樣。 毫無疑問, 大數據技術在5年到10年內將會成為主流。 不過在這之前, 它還需要跨過各種技術和非技術的障礙,而形成數據導向的企業管理文化,則可能是企業決勝大數據最為重要的前提。
原文鏈接:http://www.ctocio.com/ccnews/10407.html