Wikibon:云將成為收獲大數據分析財富的催化劑
近年來,大數據分析已成為數字業務的核心,這是將數據轉化為推動差異化運營和客戶體驗的業務價值基礎。

盡管大數據分析(BDA)已經成為董事會會議討論的話題,但討論往往最終歸結到一個難題:"為什么我們不能產生預期的回報?"
科技行業終于在回答這個問題上取得了進展。全堆棧BDA架構上的用戶融合,是解決數字業務成功的關鍵。然而,單靠技術不足以推動分析應用,除非組織加速數字化轉型,轉型到能夠利用BDA顛覆性潛力的結構和流程。
同樣,組織也需要通過投資于人員、角色、技能、卓越組織中心、數據驅動的文化等支柱,來加強對數字勞動力的賦權。至少,越來越多的業務分析師和其他知識工作者將需要在機器學習、深度學習和人工智能計劃中發揮更多的作用,推動顛覆性商業應用。
2017年全球BDA市場與2016年相比增長了24.5%,高于分析機構Wikibon在去年報告中的預測,這主要是由于公有云的部署和采用高于預期,以及在融合工具方面取得的進展。企業正在從試驗和概念驗證階段,更快地轉移到通過大數據部署實現更高的業務價值。
展望未來,整個BDA市場的年復合增長率將達到11%,到2027年達到1030億美元(下圖)。邊緣計算--包括智能設備上的流媒體和及其職能應用部署--將在未來幾年推動市場發展。

趨勢概述
展望未來,以下數字業務趨勢將加速整個堆棧上下的解決方案融合,包括:
- 實現戰略成果。客戶將通過融合戰略BDA解決方案提供商來確保戰略業務成果,這些提供商提供的預置應用中包含了最佳實踐,可根據其獨特需求快速定制。
- 減少延遲。客戶將通過整合包含更少離散BDA產品的內部管道,越來越多地消除數據、應用、業務基礎設施中的延遲和瓶頸。
- 簡化流程。客戶將通過融合更少、更簡單、更一致和更自動化的BDA開發和運營流程,來降低復雜性,這些流程覆蓋了不同的管道、平臺、任務和角色。
- 加強控制和保障措施。客戶將通過融合統一治理工具來加強監督和合規性,這些統一治理工具在BDA堆棧上、不同管道、平臺和任務中實施安全、策略和其他防護。
根據Wikibon對這個年度BDA市場研究的更新,與去年保持不變的挑戰包括:
- 復雜度過高。BDA環境和應用仍然過于復雜,需要進行簡化才能被主流用戶和開發人員掌握,許多人缺乏具備必要專業技能的內部IT人員。
- 繁瑣的開銷。對許多IT專業人員來說,BDA管理和治理流程仍然過于孤立,成本高昂,效率低下。
- 延長管道。BDA應用開發、培訓和部署流程仍然過于耗時,需要手動且不一致,需要自動化、加速和最大程度的精簡。
- 定制應用。BDA專業服務對于開發、部署和管理跨越混合云的許多定制應用來說至關重要,這涉及不同的平臺和工具,以及合并難以處理的復雜數據流程。
Wikibon最新的BDA市場研究還發現,有幾個趨勢正在推動行業的競爭格局,其中包括:
公有云提供商正在擴大其在BDA市場的影響力。到2020年,BDA行業將圍繞三大主要公有云提供商--最有可能的是AWS、微軟Azure和Google Cloud Platform--并且大多數獨立軟件開發商將構建可在所有這些平臺上運行的解決方案。這些廠商和其他BDA公有云提供商(包括IBM和Oracle等老牌BDA供應商)提供受管理的IaaS和PaaS數據湖,鼓勵客戶和合作伙伴開發新的應用中,并將舊應用遷移到新應用中。因此,純粹的數據平臺/NoSQL廠商似乎表現平平,在被多元化的公有云提供商廠商占主導地位的BDA領域陷入邊緣化。同樣,舊業務分析廠商正在失去動力,隨著市場向多元化BDA的基于云的解決方案遷移以實現這些功能,這些廠商正在走下坡路。
針對BDA公有云相比對私有云的優勢在繼續擴大。到2021年,公有云將成為每個客戶群體(包括大型企業)的首選BDA方法。這是因為BDA公有云解決方案比內部部署堆棧的成熟速度更快,功能更豐富,擁有成本更具有競爭力。與本地部署的替代方案不同,公有云提供商可以提供例如Google Spanner、Microsoft Cosmos DB和AWS DynamoDB等BDA數據庫,這些數據庫提供全局一致性和可用性,這歸功于連接其數據中心的專有光纖網絡。
混合云正在成為企業BDA在公有云實現完整部署的一個"停靠點"。到2022年,混合云將被納入大多數大型企業的計劃中,但主要是作為一項臨時策略。這個平衡會逐漸向那些將更多BDA資產投入公有云的企業,從而提高混合公有/私有BDA云作為過渡架構的重要性。傳統BDA廠商正在為混合云使用場景開發他們的產品,為傳統工作負載打造新的選擇。同樣地,更多傳統的、基于本地的BDA平臺正在重新架構,主要部署在公有云中。
一些具有創新力的BDA初創公司正在將越來越精密的、面向云的解決方案推向市場。到2024年,主流BDA應用提供商將通過令人驚嘆的、基于AI的解決方案顛覆競爭格局。來自市場新星的威脅正在加速每個BDA細分市場的發展,其中大部分創新都是為公有云或混合云部署而設計的。過去幾年,有很多新興的分析和應用數據庫、流處理和數據科學初創公司進入BDA領域,其中許多廠商提供的解決方案都集成了復雜的機器學習/人工智能,并被打包以解決顛覆性業務應用。
顛覆性BDA方法正在成為可行的替代平臺。到2025年,新一代的"獨角獸"BDA解決方案提供商,將憑借前所未有的靈活性和復雜性的新技術方法脫穎而出,這些方法可能是基于物聯網、區塊鏈和流計算的某種混合。BDA市場中,替代產品和服務的威脅來自于那些與現有廠商競爭的新初創公司,而且還有那些通過引入源源不斷的創新解決方案、以新方式新技術方法處理現有的和新興業務需求的公司。
數據庫正在被解構,并重新組合成解決新需求的新方法。從架構的角度來看,到2028年,在這個流媒體、內存中、無服務器基礎設施占統治地位的世界,我們以前所了解的那些數據庫將成為古老的歷史。通過重新思考傳統數據庫架構來解決新的分析用例,BDA市場實現不斷的發展。
BDA打包的應用程序更加廣泛可用。到2030年,所有客戶--從大型企業到母嬰店--都將采用BDA解決方案,作為預構建、預訓練的模板化云產品,不斷自動調整和自我調優,以實現理想的業務成果。打包業務應用正在推動BDA解決方案的主流采用,就像交易業務應用那樣。在這方面,越來越多的打包BDA應用正在上市,利用AI、DL和ML作為其核心附加值。
行動措施
所有這些趨勢都表明企業應該采取行動了:
- 在未來的3-6個月內,BDA專業人員應該開始評估商業打包解決方案日益擴大的范圍,這些解決方案加快了特定行業或業務線分析以及交易應用實現價值的時間。
- 在未來的3-12個月中,你應該摸索著將更多BDA應用遷移到公有云環境中,以充分利用該領域中那些快速成熟、低成本的選擇。
- 在未來3到24個月內,你應該考慮構建混合公有/私有的多云環境,以確保向未來更完整的公有云BDA計算環境的長期平滑過渡。
- 當你制定長期公有云BDA體系結構(包括大規模處理所有這些工作負載所需的底層硬件平臺)時,你應該評估合作伙伴/獨立軟件開發商(ISV)的解決方案組合豐富性,合作伙伴/ISV解決方案針對這些環境的開發范圍,以及針對各種分析、交易和其他數據驅動型工作負載的開源解決方案和專有解決方案混合匹配的API。
- 立即開始著手,你應該聘請專業服務合作伙伴協助規劃和執行你在公有云中實現BDA的各項步驟。