大數據的生命周期分為幾個階段？

企業建立大數據的生命周期應該包括這些部分：大數據組織、評估現狀、制定大數據戰略、數據定義、數據收集、數據分析、數據治理、持續改進。如下圖：

[[72138]]

我們將從生命周期的每個階段來展開介紹：

一、 大數據的組織

沒有人，一切都是妄談。大數據生命周期的第一步應該是建立一個專門預算和獨立KPI的“大數據規劃、建設和運營組織”。包括高層的首席數據官，作為sponsor，然后是公司數據管理委員會或大數據執行籌劃指導委員會，再往下就是大數據的項目組或大數據項目組的前身：大數據項目預研究團隊或大數據項目籌備組。這個團隊是今后大數據戰略的制定和實施者的中堅力量。由于人數眾多，建議引入RACI模型來明確所有人的角色和職責。

[[72139]]

二、 大數據的現狀評估和差距分析

定戰略之前，先要做現狀評估，評估前的調研包括三個方面：一是對外調研：了解業界大數據有哪些最新的發展，行業頂尖企業的大數據應用水平如何？行業的平均尤其是主要競爭對手的大數據應用水準如何？二是對內客戶調研。管理層、業務部門、IT部門自身、我們的最終用戶，對我們的大數據業務有何期望？三是自身狀況摸底，了解自己的技術、人員儲備情況。最后對標，作差距分析，找出gap。 

[[72140]]

找出gap后，要給出成熟度現狀評估。一般而言，一個公司的大數據應用成熟度可以劃分為四個階段：初始期（僅有概念，沒有實踐）；探索期（已經了解基本概念，也有專人進行了探索和探討，有了基本的大數據技術儲備）；發展期（已經擁有或正在建設明確的戰略、團隊、工具、流程，交付了初步的成果）；成熟期（有了穩定且不斷成熟的戰略、團隊、工具、流程，不斷交付高質量成果）。

[[72141]]

三、 大數據的戰略

有了大數據組織、知道了本公司大數據現狀、差距和需求，我們就可以制定大數據的戰略目標了。大數據戰略的制定是整個大數據生命周期的靈魂和核心，它將成為整個組織大數據發展的指引。

大數據戰略的內容，沒有統一的模板，但有一些基本的要求：

1. 要簡潔，又要能涵蓋公司內外干系人的需求。

2. 要明確，以便清晰地告訴所有人我們的目標和愿景是什么。

3. 要現實，這個目標經過努力是能達成的。
 

 [[72142]]
  

四、 大數據的定義

我認為：“數據不去定義它，你就無法采集它；無法采集它，你就無法分析它；無法分析它，你就無法衡量它；無法衡量它，你就無法控制它；無法控制它，你就無法管理它；無法管理它，你就無法利用它”。所以“在需求和戰略明確之后，數據定義就是一切數據管理的前提”。

 [[72143]]

五、 數據采集

1. 大數據時代的數據源很廣泛，它們可能來自于三個主要方面：現有公司內部網各應用系統產生的數據（比如辦公、經營生產數據），也有來自公司外互聯網的數據（比如社交網絡數據）和物聯網等。

[[72144]]

2. 大數據種類很多，總的來講可以分為：傳統的結構化數據，大量的非結構化數據（比如音視頻等）。

3. 數據采集、挖掘工具很多。可以基于或集成hadoop的ETL平臺、以交互式探索及數據挖掘為代表的數據價值發掘類工具漸成趨勢。

4. 數據采集的原則：在數據源廣泛、數據量巨大、采集挖掘工具眾多的背景下，大數據決策者必須清楚地確定數據采集的原則：“能夠采集到的數據，并不意味著值得或需要去采集它。需要采集的數據和能夠采集到的數據的"交集"，才是我們確定要去采集的數據。”

[[72145]]

六、數據處理和分析

業界有很多工具能幫助企業構建一個集成的“數據處理和分析平臺”。對企業大數據管理者、規劃者來講，關鍵是“工具要滿足平臺要求，平臺要滿足業務需求，而不是業務要去適應平臺要求，平臺要去適應廠商的工具要求”。那么這個集成的平臺應該有怎樣的能力構成呢？它應該能檢索、分類、關聯、推送和方便地實施元數據管理等。見下圖：

[[72146]]

七、 數據呈現

大數據管理的價值，最終要通過多種形式的數據呈現，來幫助管理層和業務部門進行商業決策。大數據的決策者需要將大數據的系統與BI（商業智能）系統和KM（知識管理）系統集成。下圖就是大數據的各種呈現形式。

[[72147]]
 

八、 審計、治理與控制

1. 大數據的審計、治理和控制指的是大數據管理層，組建專門的治理控制團隊，制定一系列策略、流程、制度和考核指標體系，來監督、檢查、協調多個相關職能部門的目標，從而優化、保護和利用大數據，保障其作為一項企業戰略資產真正發揮價值。

2. 大數據的治理是IT治理的組成部分，大數據的審計是IT審計的組成部分，這個體系要統籌規劃和實施，而不是割裂的規劃和實施。

3. 大數據的審計、治理與控制的核心是數據安全、數據質量和數據效率。

九、 持續改進

基于不斷變化的業務需求和審計與治理中發現的大數據整個生命周期中暴露的問題，引入PDCA等方法論，去不斷優化策略、方法、流程、工具，不斷提升相關人員的技能，從而確保大數據戰略的持續成功！

原文鏈接：http://blog.sina.com.cn/s/blog_7ebc43250101afxg.html

【編輯推薦】