聊聊數(shù)據(jù)治理的含義和驅(qū)動(dòng)因素是什么
?組織中存在哪些數(shù)據(jù)?存儲(chǔ)在哪里?最佳數(shù)據(jù)是什么?如何訪(fǎng)問(wèn)?可以相信它嗎?
一種數(shù)據(jù)目錄負(fù)責(zé)有效地查找和理解數(shù)據(jù)部分。提供和監(jiān)控?cái)?shù)據(jù)訪(fǎng)問(wèn),確保數(shù)據(jù)質(zhì)量和數(shù)據(jù)保護(hù)——所有這些都在數(shù)據(jù)治理之下。現(xiàn)在,數(shù)據(jù)目錄正在結(jié)合數(shù)據(jù)治理工具集,將數(shù)據(jù)編目和數(shù)據(jù)治理合并到一個(gè)工具集中是非常合適的。那是因?yàn)槠涔δ苁侨绱私豢椩谝黄稹?/p>
什么是數(shù)據(jù)治理
有人說(shuō)是一套程序和政策,有人說(shuō)是數(shù)據(jù)管理。隱私和編目領(lǐng)域的各種供應(yīng)商都試圖將他們的軟件作為數(shù)據(jù)治理軟件進(jìn)行銷(xiāo)售。
根據(jù) Lights on Data的說(shuō)法, “數(shù)據(jù)治理使組織能夠?qū)?shù)據(jù)資產(chǎn)的管理施加控制,包括確保數(shù)據(jù)適合其預(yù)期目的所需的人員、流程和技術(shù)。
簡(jiǎn)而言之,數(shù)據(jù)治理是提供和監(jiān)控?cái)?shù)據(jù)訪(fǎng)問(wèn)、確保數(shù)據(jù)質(zhì)量和數(shù)據(jù)保護(hù)的過(guò)程。
當(dāng)我們談?wù)摂?shù)據(jù)治理時(shí),談話(huà)中經(jīng)常會(huì)出現(xiàn)以下術(shù)語(yǔ)。為了更好地理解,簡(jiǎn)要定義。
- 數(shù)據(jù)發(fā)現(xiàn)——從組織現(xiàn)有的數(shù)據(jù)資產(chǎn)中找到相關(guān)數(shù)據(jù)并快速理解的行為。
- 數(shù)據(jù)沿襲——是數(shù)據(jù)起源方式和地點(diǎn)及其處理邏輯和目的地的圖形表示。
- Business Glossary – 是一個(gè)存儲(chǔ)庫(kù),使數(shù)據(jù)管理員能夠在整個(gè)公司內(nèi)構(gòu)建和管理通用業(yè)務(wù)詞匯。一個(gè)業(yè)務(wù)詞匯表可以包含許多數(shù)據(jù)字典。
- 數(shù)據(jù)字典——是一個(gè)定義數(shù)據(jù)元素、它們的含義和它們的允許值的存儲(chǔ)庫(kù)。雖然數(shù)據(jù)詞匯表是企業(yè)范圍的,并且應(yīng)該創(chuàng)建以提高對(duì)數(shù)據(jù)的業(yè)務(wù)理解,但數(shù)據(jù)詞典本質(zhì)上更具技術(shù)性,并且往往是特定于系統(tǒng)的。
- PII – 個(gè)人身份信息
- 數(shù)據(jù)隱私合規(guī)– 是公司遵守個(gè)人信息保護(hù)準(zhǔn)則或法規(guī)。
- 主數(shù)據(jù)管理
- 數(shù)據(jù)質(zhì)量——數(shù)據(jù)質(zhì)量是對(duì)數(shù)據(jù)在給定環(huán)境中服務(wù)其目的的適應(yīng)性的感知或評(píng)估。數(shù)據(jù)的質(zhì)量取決于準(zhǔn)確性、完整性、相關(guān)性和最新程度等因素。(來(lái)源:WhatIs.com)
- 數(shù)據(jù)管家——數(shù)據(jù)管家是一個(gè)角色,有助于為業(yè)務(wù)用戶(hù)提供高質(zhì)量的數(shù)據(jù),這些數(shù)據(jù)可以以一致的方式輕松訪(fǎng)問(wèn)。
每個(gè)組織都在從數(shù)據(jù)治理中尋找解決其數(shù)據(jù)相關(guān)問(wèn)題的方法。意味著,如果與來(lái)自不同公司的董事或CDO交談,他們對(duì)數(shù)據(jù)治理的理解會(huì)有所不同,因?yàn)樗麄兠媾R的挑戰(zhàn)不同。
為什么數(shù)據(jù)治理突然變得如此重要?
很多人都會(huì)在某個(gè)時(shí)候想到這個(gè)問(wèn)題。盡管電子形式的數(shù)據(jù)自計(jì)算機(jī)以來(lái)就已經(jīng)存在,但數(shù)據(jù)治理已成為近幾年的熱門(mén)話(huà)題。
這是因?yàn)檎趶姆爆嵉募惺綉?yīng)用程序轉(zhuǎn)向基于 SAAS 的、易于使用的應(yīng)用程序。
SAAS、數(shù)字營(yíng)銷(xiāo)和銷(xiāo)售應(yīng)用程序的出現(xiàn)創(chuàng)造了新一波孤立的應(yīng)用程序。當(dāng)您只有一個(gè)應(yīng)用程序來(lái)完成整個(gè)業(yè)務(wù)功能(即 SAP)時(shí),不會(huì)遇到任何治理問(wèn)題,因?yàn)?SAP 提供了解決方案。然而,當(dāng)有多個(gè)應(yīng)用程序時(shí),就會(huì)出現(xiàn)各種數(shù)據(jù)挑戰(zhàn)。
在以下部分中,將看到 BI/分析與合規(guī)性如何使自動(dòng)化和結(jié)構(gòu)化數(shù)據(jù)治理的需求變得復(fù)雜。
數(shù)據(jù)治理驅(qū)動(dòng)因素
對(duì)于有效的數(shù)據(jù)治理,了解哪些因素將數(shù)據(jù)治理推向緊迫點(diǎn)至關(guān)重要。
主數(shù)據(jù)管理
當(dāng)有多個(gè)應(yīng)用程序執(zhí)行不同的業(yè)務(wù)功能時(shí),總是需要通用數(shù)據(jù),例如客戶(hù)、員工、會(huì)計(jì)科目表和材料。為了克服企業(yè)中的挑戰(zhàn),IT 部門(mén)通常會(huì)確保一個(gè)應(yīng)用程序是特定數(shù)據(jù)元素的主控,而其他應(yīng)用程序僅用于處理潛在客戶(hù)。必須集成這些應(yīng)用程序并進(jìn)行單點(diǎn)登錄。
一個(gè)典型的組織有大約 100 多個(gè)執(zhí)行不同業(yè)務(wù)功能的應(yīng)用程序。在這些應(yīng)用程序的實(shí)施過(guò)程中,領(lǐng)導(dǎo)層對(duì)主數(shù)據(jù)記錄做出決策,然后將一個(gè)應(yīng)用程序與其他應(yīng)用程序集成。
購(gòu)買(mǎi)和實(shí)施新應(yīng)用程序通常是一項(xiàng)聯(lián)合(IT/業(yè)務(wù))功能。項(xiàng)目團(tuán)隊(duì)確保主數(shù)據(jù)僅保存在一個(gè)應(yīng)用程序中。但是,還有其他各種驅(qū)動(dòng)因素,例如并購(gòu)和快速增長(zhǎng),為主數(shù)據(jù)創(chuàng)建了多個(gè)源系統(tǒng)。
為了合并主記錄,需要?jiǎng)?chuàng)建一個(gè) IT 項(xiàng)目,并使用特定工具來(lái)管理它們。這些類(lèi)型的項(xiàng)目很昂貴。作為項(xiàng)目的一部分,進(jìn)行了整個(gè)治理活動(dòng)。在大多數(shù)情況下,所有利益相關(guān)者和咨詢(xún)公司都參與解決這一挑戰(zhàn)。
集成
由于多個(gè)應(yīng)用程序執(zhí)行許多業(yè)務(wù)功能,因此集成它們非常重要。例如,CRM系統(tǒng)可能需要與財(cái)務(wù)系統(tǒng)相結(jié)合才能完成采購(gòu)和開(kāi)票流程。
由于數(shù)據(jù)在集成過(guò)程中流動(dòng),因此需要進(jìn)行管理。這些集成大多是自定義編寫(xiě)的,需要 IT 人員的支持。這個(gè)問(wèn)題也可以稱(chēng)為關(guān)于業(yè)務(wù)規(guī)則的數(shù)據(jù)治理問(wèn)題。通常,會(huì)組建一個(gè)支持團(tuán)隊(duì)。它的工作是管理這些集成。
商業(yè)智能與分析
可以分兩部分提供商業(yè)智能和分析。第一個(gè)是為管理層持續(xù)提出的問(wèn)題提供答案,第二個(gè)是通過(guò)分析增強(qiáng)面向客戶(hù)或內(nèi)部的應(yīng)用程序。
一些問(wèn)題將包括。“本季度進(jìn)行了多少銷(xiāo)售?” “費(fèi)用或利潤(rùn)是多少?” 這種數(shù)據(jù)聚合稱(chēng)為 BI / Reporting。另一方面,當(dāng)客戶(hù)登錄時(shí),您根據(jù)他或她過(guò)去的行為向他提供有關(guān)新產(chǎn)品的信息。這是分析的結(jié)果。
分析的一個(gè)特殊示例是亞馬遜產(chǎn)品推薦過(guò)程。
隨著商業(yè)智能和分析變得越來(lái)越突出,每個(gè)業(yè)務(wù)部門(mén)都在招聘自己的數(shù)據(jù)科學(xué)家。隨著數(shù)據(jù)的日益豐富,他們提供對(duì)數(shù)據(jù)的訪(fǎng)問(wèn)和有關(guān)該數(shù)據(jù)的知識(shí)變得越來(lái)越具有挑戰(zhàn)性。因此,大多數(shù)業(yè)務(wù)部門(mén)都要求自動(dòng)化數(shù)據(jù)治理。
遵守?cái)?shù)據(jù)隱私和財(cái)務(wù)法規(guī)
法規(guī)有嚴(yán)格的規(guī)則來(lái)處理組織如何捕獲和存儲(chǔ)客戶(hù)數(shù)據(jù)。這些規(guī)定不僅涉及單個(gè)數(shù)據(jù)元素,還涉及 cookie-id 或任何可以跟蹤客戶(hù)行為的機(jī)制。
由于公司將各種數(shù)據(jù)存儲(chǔ)在不同的數(shù)據(jù)庫(kù)中,因此由于合規(guī)性,他們需要管理數(shù)據(jù)以及與之相關(guān)的所有問(wèn)題。
數(shù)據(jù)質(zhì)量保證
所有這些需求都將數(shù)據(jù)治理推向了迫切需要的地步。他們都有不同的業(yè)務(wù)需求,正在尋找解決方案。






