隨著數(shù)據(jù)量的不斷擴展，挑戰(zhàn)不僅在于全面利用數(shù)據(jù)，還在于確保這些數(shù)據(jù)的完整性和可靠性，這不僅僅是關于存儲，還在于確保可用數(shù)據(jù)的一致性和準確性。

這時，數(shù)據(jù)治理顯得尤為重要，它確保了企業(yè)內數(shù)據(jù)的有效和高效管理。數(shù)據(jù)治理的核心目標是確保數(shù)據(jù)在其生命周期內，從獲取到使用，都以支持企業(yè)業(yè)務目標的方式進行管理。

數(shù)據(jù)治理的起源

歷史上，數(shù)據(jù)治理主要被視為確保安全和遵守法規(guī)的一種手段，這些工作通常集中在特定部門，流程也是手動進行的。

隨著數(shù)字世界的復雜性增加，數(shù)據(jù)治理的范圍也顯著擴展并增加了新組件。以下是與數(shù)據(jù)管理相關的七個主要組件和過程：

1. 數(shù)據(jù)目錄：企業(yè)內所有數(shù)據(jù)資產(chǎn)的可搜索清單，使用戶能夠查找和理解數(shù)據(jù)。

2. 數(shù)據(jù)沿襲：追蹤數(shù)據(jù)從起源到消費的流動，提供透明性和問責性。

3. 數(shù)據(jù)剖析：評估數(shù)據(jù)以了解其結構、內容和關系。

4. 元數(shù)據(jù)管理：管理關于數(shù)據(jù)的數(shù)據(jù)，幫助企業(yè)在任何時候找到相關信息。

5. 數(shù)據(jù)質量：確保數(shù)據(jù)從技術(格式、唯一性)和業(yè)務(可用性、相關性)的角度來看都是準確、完整和可靠的。

6. 數(shù)據(jù)歸檔：將不再活躍使用的數(shù)據(jù)移至不同的存儲，以便長期保留。

7. 資產(chǎn)發(fā)現(xiàn)：識別企業(yè)內的數(shù)據(jù)資產(chǎn)，便于管理和保護數(shù)據(jù)。

數(shù)據(jù)可觀測性

在這一領域的最新發(fā)展是數(shù)據(jù)可觀測性，它超越了傳統(tǒng)治理，提供了對數(shù)據(jù)生態(tài)系統(tǒng)的整體視圖，這有助于企業(yè)監(jiān)控數(shù)據(jù)健康狀況，實時檢測問題，并在問題影響業(yè)務結果之前進行故障排除。數(shù)據(jù)可觀測性包括至少三個方面：

1. 監(jiān)控：跟蹤和監(jiān)控數(shù)據(jù)管道和系統(tǒng)，以確保其正常運行。

2. 異常檢測：識別數(shù)據(jù)中的異常模式，例如數(shù)據(jù)沿襲中的缺口或數(shù)據(jù)質量的突然下降。

3. 變更管理：管理數(shù)據(jù)環(huán)境中變更的工具和流程。

通過完全協(xié)同工作，使用這些組件創(chuàng)建一個強大的框架，確保數(shù)據(jù)的可靠性，這樣，你的企業(yè)可以自信地利用數(shù)據(jù)進行決策。

數(shù)據(jù)治理的三大關鍵支柱

然而，即使有了所有這些框架，Gartner預計，“到2025年，80%尋求擴大數(shù)字業(yè)務的企業(yè)將失敗，因為它們沒有采取現(xiàn)代的數(shù)據(jù)治理方法。”

那么，你的企業(yè)應該如何創(chuàng)建結構化的方法，并確保適當?shù)闹卫砼e措和框架到位呢?我認為可以通過關注以下三個關鍵支柱來實現(xiàn)。

1. 流程、政策、標準和程序

這一支柱重點在于定義一個明確的項目目標，使其與業(yè)務目標保持一致。首先對現(xiàn)有的數(shù)據(jù)環(huán)境進行全面評估，隨后建立嚴格的政策和標準，以奠定有效治理項目的基礎。通過有效溝通，吸引所有相關利益相關者的參與，將有助于推動項目的成功和持續(xù)改進。

2. 技術和工具能力

這是支持支柱，可以為企業(yè)提供運行和確保數(shù)據(jù)治理所需的工具和技術，這些工具必須能夠處理數(shù)據(jù)從收集到使用的全過程，并應優(yōu)先考慮可擴展性，以確保這些技術能夠適應企業(yè)不斷變化的需求。

作為這一部分，這些工具應該能夠實時識別錯誤和不一致。此外，隨著公司越來越多地將工作負載轉移到云端，我認為選擇云原生工具對于在動態(tài)云環(huán)境中優(yōu)化性能也變得至關重要。

3. 企業(yè)、角色和職責

應建立明確的層級結構，并為團隊中的每個成員定義角色和職責。我建議將團隊職責企業(yè)成兩大類：業(yè)務負責人(如數(shù)據(jù)管理者、數(shù)據(jù)所有者、合規(guī)官等)和技術負責人(如數(shù)據(jù)質量負責人、系統(tǒng)管理員、數(shù)據(jù)安全負責人等)。每個小組都應確保各自組件的完整性。

通過協(xié)同工作，我發(fā)現(xiàn)這些支柱結合了戰(zhàn)略、技術和企業(yè)元素，以使數(shù)據(jù)治理項目能夠成熟并迅速執(zhí)行，并根據(jù)企業(yè)的需求進行定制。

結論

重要的是要記住，在數(shù)據(jù)的世界里，我們不僅僅是在創(chuàng)建記錄，而是在建立業(yè)務立足和繁榮的基礎。因此，數(shù)據(jù)治理不僅是后臺任務，而是驅動業(yè)務并觸及企業(yè)每個部分的戰(zhàn)略要務。

盡管主要分析師預測大多數(shù)企業(yè)將無法使其數(shù)據(jù)治理計劃取得成功，但我相信那些接受這些支柱的企業(yè)更有可能引領和保持競爭優(yōu)勢。