數(shù)據(jù)治理:管理數(shù)據(jù)資產(chǎn)的最佳實踐框架

Thor Olavsrud
數(shù)據(jù)治理是一個用于定義組織內(nèi)誰對數(shù)據(jù)資產(chǎn)具有權(quán)限和控制力,以及如何使用這些數(shù)據(jù)資產(chǎn)的系統(tǒng)。它包括管理和保護(hù)數(shù)據(jù)資產(chǎn)所需的人員、流程和技術(shù)。

數(shù)據(jù)治理定義了角色、責(zé)任和流程,以確保整個企業(yè)對數(shù)據(jù)資產(chǎn)的責(zé)任和所有權(quán)。

2345截圖20211028093243.png

01、數(shù)據(jù)治理定義

數(shù)據(jù)治理是一個用于定義組織內(nèi)誰對數(shù)據(jù)資產(chǎn)具有權(quán)限和控制力,以及如何使用這些數(shù)據(jù)資產(chǎn)的系統(tǒng)。它包括管理和保護(hù)數(shù)據(jù)資產(chǎn)所需的人員、流程和技術(shù)。

數(shù)據(jù)治理研究所將其定義為一個根據(jù)商定的模型執(zhí)行的"一個與信息相關(guān)的決策權(quán)利和責(zé)任系統(tǒng)"。而該模型描述了誰可以使用哪些信息,采取什么行動,以及何時,在什么情況下,使用什么方法。

國際數(shù)據(jù)管理協(xié)會(DAMA)將其定義為"對數(shù)據(jù)管理以及數(shù)據(jù)和數(shù)據(jù)相關(guān)來源的使用進(jìn)行規(guī)劃,監(jiān)督和控制"。

02、數(shù)據(jù)治理與數(shù)據(jù)管理

盡管數(shù)據(jù)管理是一個重要的部分,但是它只是數(shù)據(jù)管理整體學(xué)科的一部分。數(shù)據(jù)治理的內(nèi)容是和確保數(shù)據(jù)資產(chǎn)的責(zé)任和所有權(quán)的角色、責(zé)任和流程相關(guān)的,而DAMA將數(shù)據(jù)管理定義為一個總體術(shù)語,描述了用于規(guī)劃、指定、啟用、創(chuàng)建、獲取、維護(hù)、使用、歸檔、檢索、控制和清除數(shù)據(jù)的過程。

雖然數(shù)據(jù)管理已成為該學(xué)科的常用術(shù)語,但它有時還被稱為數(shù)據(jù)資源管理或企業(yè)信息管理(EIM)。Gartner將EIM描述為一種以提高效率、提高透明度并實現(xiàn)業(yè)務(wù)洞察力為目的,跨組織和技術(shù)邊界構(gòu)建、描述和管理信息資產(chǎn)的綜合性學(xué)科。

03、數(shù)據(jù)治理框架

數(shù)據(jù)治理多被看作支持組織總體數(shù)據(jù)管理策略的功能。這樣的框架為組織提供了一種收集、管理、保護(hù)和存儲數(shù)據(jù)的整體方法。為了幫助理解框架應(yīng)該涵蓋的內(nèi)容,DAMA將數(shù)據(jù)管理設(shè)想為一個輪子,以數(shù)據(jù)治理為中心,從中輻射出以下10個數(shù)據(jù)管理知識領(lǐng)域:

·數(shù)據(jù)構(gòu)架:作為企業(yè)架構(gòu)的一個組成部分,也是數(shù)據(jù)和數(shù)據(jù)相關(guān)資源的整體結(jié)構(gòu)

·數(shù)據(jù)建模和設(shè)計:分析、設(shè)計、構(gòu)建、測試和維護(hù)

·數(shù)據(jù)存儲和操作:結(jié)構(gòu)化物理數(shù)據(jù)資產(chǎn)存儲部署和管理

·數(shù)據(jù)安全:確保隱私、機(jī)密性和適當(dāng)?shù)脑L問

·數(shù)據(jù)集成和互操作性:采集、提取、轉(zhuǎn)換、移動、交付、復(fù)制、聯(lián)合、虛擬化和運營支持

·文檔和內(nèi)容:存儲、保護(hù)、索引和啟用對非結(jié)構(gòu)化源中的數(shù)據(jù)的訪問,并使這些數(shù)據(jù)可用于與結(jié)構(gòu)化數(shù)據(jù)的集成和互操作性

·參考和主數(shù)據(jù):管理共享數(shù)據(jù)以減少冗余,并通過標(biāo)準(zhǔn)化定義和使用數(shù)據(jù)值來確保更好的數(shù)據(jù)質(zhì)量

·數(shù)據(jù)倉庫和商業(yè)智能(BI):管理分析數(shù)據(jù)的處理,并使人們能夠獲得決策支持?jǐn)?shù)據(jù),以便進(jìn)行報告和分析

·元數(shù)據(jù):收集、分類、維護(hù)、集成、控制、管理和交付元數(shù)據(jù)

·數(shù)據(jù)質(zhì)量:定義、監(jiān)控、維護(hù)數(shù)據(jù)完整性和提高數(shù)據(jù)質(zhì)量

在制定戰(zhàn)略時,應(yīng)考慮數(shù)據(jù)收集、管理、存檔和使用的上述每個方面。

商業(yè)應(yīng)用研究中心(BARC)警告說,這不是一個"大爆炸計劃"。作為一個高度復(fù)雜、持續(xù)的計劃,數(shù)據(jù)治理存在參與者隨著時間的推移失去信任和興趣的風(fēng)險。為了解決這個問題,BARC建議這個計劃可以從可管理或特定于應(yīng)用程序的原型項目開始,然后根據(jù)經(jīng)驗教訓(xùn)在整個公司范圍內(nèi)進(jìn)行擴(kuò)展。

BARC建議執(zhí)行以下步驟:

·定義目標(biāo)并了解收益

·分析當(dāng)前狀態(tài)和增量分析

·派生路線圖

·說服利益相關(guān)者和預(yù)算項目

·制定和規(guī)劃數(shù)據(jù)治理計劃

·實施數(shù)據(jù)治理計劃

·監(jiān)視和控制

04、數(shù)據(jù)治理的目標(biāo)

其目的是建立一種方法、一套責(zé)任和相對應(yīng)流程,以規(guī)范、整合、保護(hù)和存儲企業(yè)數(shù)據(jù)。根據(jù)BARC的說法,組織的主要目標(biāo)應(yīng)該是:

·將風(fēng)險降至最低

·建立數(shù)據(jù)使用的內(nèi)部規(guī)則

·實施合規(guī)性要求

·改善內(nèi)部和外部溝通

·提高數(shù)據(jù)的價值

·便于上述內(nèi)容的管理

·降低成本

·通過風(fēng)險管理和優(yōu)化幫助確保公司的繼續(xù)存在

BARC指出,這些計劃始終跨越企業(yè)的戰(zhàn)略,戰(zhàn)術(shù)和運營層面,并且必須將其視為持續(xù)的迭代過程。

05、數(shù)據(jù)治理的優(yōu)勢

大多數(shù)公司已經(jīng)對單個應(yīng)用程序、業(yè)務(wù)部門或職能部門進(jìn)行了某種形式的治理,雖然這些流程和職責(zé)是非正式的。作為一種實踐,它是關(guān)于對這些過程和責(zé)任建立系統(tǒng)的、正式的控制。這樣做可以幫助公司保持響應(yīng)能力,特別是當(dāng)他們發(fā)展到一定規(guī)模,個人執(zhí)行跨職能的任務(wù)不再有效時。

數(shù)據(jù)管理的幾個整體好處只有在企業(yè)建立系統(tǒng)的數(shù)據(jù)治理后才能實現(xiàn)。其中一些好處包括:

·更好、更全面的決策支持,這些支持來自整個組織中一致、統(tǒng)一的數(shù)據(jù)

·為不斷變化的流程和數(shù)據(jù)制定明確的規(guī)則,幫助業(yè)務(wù)和IT變得更加敏捷和可擴(kuò)展

·通過提供中央控制機(jī)制,降低數(shù)據(jù)管理其他領(lǐng)域的成本

·通過重用流程和數(shù)據(jù)的能力提高效率

·提高對數(shù)據(jù)質(zhì)量和數(shù)據(jù)流程文檔的信心

·提高對數(shù)據(jù)法規(guī)的遵從性

06、數(shù)據(jù)治理原則

根據(jù)數(shù)據(jù)治理研究所的數(shù)據(jù),所有成功的數(shù)據(jù)治理和管理計劃的核心為以下八項原則:

·所有參與者在相互打交道時都必須保持誠信。在討論數(shù)據(jù)相關(guān)決策的驅(qū)動因素、限制因素、選項和影響時,他們必須誠實和坦率。

·數(shù)據(jù)治理和管理流程需要透明度。所有參與者和審計員都必須清楚,如何以及何時將與數(shù)據(jù)相關(guān)的決策和控制引入流程。

·受數(shù)據(jù)治理約束的相關(guān)決策、流程和控制必須是可審計的。它們必須附有文檔,以支持基于合規(guī)性和運營的審計要求。

·他們必須明確誰對跨職能數(shù)據(jù)相關(guān)的決策、流程和控制負(fù)責(zé)。

·它必須定義誰對管理活動負(fù)責(zé),這些活動是個人貢獻(xiàn)者和數(shù)據(jù)管理員組的責(zé)任。

·必須以一種在業(yè)務(wù)和技術(shù)團(tuán)隊之間,以及在創(chuàng)建/收集信息的人、管理信息的人、使用信息的人以及引入標(biāo)準(zhǔn)和合規(guī)性要求的人之間引入制衡的方式來定義問責(zé)制。

·該計劃必須引入并支持企業(yè)數(shù)據(jù)的標(biāo)準(zhǔn)化。

·程序必須支持對參考數(shù)據(jù)值以及主數(shù)據(jù)和元數(shù)據(jù)的結(jié)構(gòu)/使用進(jìn)行主動和被動的變更管理活動。

07、數(shù)據(jù)治理角色

每個企業(yè)的數(shù)據(jù)治理方式不同,但存在一些共同點。

指導(dǎo)委員會

治理計劃涵蓋整個企業(yè),通常從一個由高級管理層組成的指導(dǎo)委員會開始,通常是負(fù)責(zé)業(yè)務(wù)線的C級個人或副總裁。《Get Governance:Building World Class Data Governance Programs》一書的作者摩根·圣殿騎士(Morgan Templar)表示,指導(dǎo)委員會成員的責(zé)任包括制定具有特定成果的整體治理戰(zhàn)略,支持?jǐn)?shù)據(jù)管家的工作,以及讓治理組織對時間表和成果負(fù)責(zé)。

數(shù)據(jù)所有者

Templar表示,數(shù)據(jù)所有者是負(fù)責(zé)確保特定數(shù)據(jù)域中的信息跨系統(tǒng)和業(yè)務(wù)線進(jìn)行管理的個人。他們通常是指導(dǎo)委員會的成員,盡管可能不是有表決權(quán)的成員。數(shù)據(jù)所有者負(fù)責(zé):

·批準(zhǔn)數(shù)據(jù)詞匯表和其他數(shù)據(jù)定義

·確保整個企業(yè)信息的準(zhǔn)確性

·指導(dǎo)數(shù)據(jù)質(zhì)量活動

·審查和批準(zhǔn)主數(shù)據(jù)管理方法、結(jié)果和活動

·與其他數(shù)據(jù)所有者合作解決數(shù)據(jù)問題

·對數(shù)據(jù)管理員發(fā)現(xiàn)的問題進(jìn)行二級審查

·向指導(dǎo)委員會提供有關(guān)其數(shù)據(jù)域的軟件解決方案、策略或法規(guī)要求的意見

數(shù)據(jù)專員

數(shù)據(jù)管理員負(fù)責(zé)數(shù)據(jù)的日常管理。Templar說,他們是主題專家(SME),他們理解并傳達(dá)信息的含義和使用,他們與整個組織中的其他數(shù)據(jù)管理員合作,作為大多數(shù)數(shù)據(jù)決策的管理機(jī)構(gòu)。數(shù)據(jù)管理員負(fù)責(zé):

·成為其數(shù)據(jù)領(lǐng)域的中小企業(yè)

·識別數(shù)據(jù)問題并與其他數(shù)據(jù)專員合作解決這些問題

·擔(dān)任數(shù)據(jù)管家委員會的成員

·就數(shù)據(jù)政策和委員會活動提出建議、討論和投票

·向數(shù)據(jù)所有者和數(shù)據(jù)域內(nèi)的其他利益干系人報告

·跨職能部門工作,確保其域的數(shù)據(jù)得到管理和理解

08、數(shù)據(jù)治理工具

數(shù)據(jù)治理是一個持續(xù)的計劃,而不是一個技術(shù)解決方案,但有一些工具可以幫助支持該計劃。適合你企業(yè)的工具將取決于你的需求、數(shù)據(jù)量和預(yù)算。根據(jù)IT Central Station的說法,一些更受歡迎的解決方案包括:

·Collibra Governance:Collibra是一個企業(yè)范圍的解決方案,可自動執(zhí)行許多治理和管理任務(wù)。它包括策略管理器、數(shù)據(jù)幫助臺、數(shù)據(jù)字典和業(yè)務(wù)詞匯表。

·SAS數(shù)據(jù)管理:SAS數(shù)據(jù)管理基于SAS平臺構(gòu)建,提供用于管理流程的基于角色的GUI,包括集成的業(yè)務(wù)詞匯表、SAS和第三方元數(shù)據(jù)管理以及現(xiàn)狀圖的可視化。

·用于數(shù)據(jù)治理的erwin數(shù)據(jù)智能(DI):erwin DI結(jié)合了數(shù)據(jù)目錄和數(shù)據(jù)掃盲的能力,以提供對可用數(shù)據(jù)資產(chǎn)的認(rèn)識和訪問。它為這些數(shù)據(jù)資產(chǎn)的使用提供指導(dǎo),并確保數(shù)據(jù)政策和最佳實踐得到遵循。

·Informatica Axon:Informatica Axon是一個用于支持計劃的收集中心和數(shù)據(jù)市場。主要功能包括配備協(xié)作業(yè)務(wù)詞匯表、可視化數(shù)據(jù)脈絡(luò)的能力,以及根據(jù)業(yè)務(wù)定義生成數(shù)據(jù)質(zhì)量測量標(biāo)準(zhǔn)。

·SAP數(shù)據(jù)中心:SAP Data Hub是一種數(shù)據(jù)編排解決方案,旨在幫助你發(fā)現(xiàn)、優(yōu)化、豐富和管理數(shù)據(jù)環(huán)境中所有類型的數(shù)據(jù)、種類和數(shù)據(jù)量。它可幫助組織為用戶、群體和角色建立安全設(shè)置和身份控制策略,并簡化策略管理和安全日志記錄的最佳做法和過程。

·Alation:Alation是按源自動為數(shù)據(jù)編制索引的企業(yè)數(shù)據(jù)目錄。其關(guān)鍵功能之一TrustCheck為工作流程提供了實時"護(hù)欄"。特別是為了支持自助式分析,TrustCheck將準(zhǔn)則和規(guī)則附在數(shù)據(jù)資產(chǎn)上。

·Varonis Data Governance Suite:Varonis的解決方案利用可擴(kuò)展的元數(shù)據(jù)框架自動執(zhí)行數(shù)據(jù)保護(hù)和管理任務(wù),使組織能夠管理數(shù)據(jù)訪問,查看每個文件和電子郵件事件的審計跟蹤,確定不同業(yè)務(wù)部門的數(shù)據(jù)所有權(quán),以及查找和分類敏感數(shù)據(jù)和文檔。

·IBM數(shù)據(jù)治理:IBM數(shù)據(jù)治理利用機(jī)器學(xué)習(xí)來收集和整理數(shù)據(jù)資產(chǎn)。集成的數(shù)據(jù)目錄可幫助企業(yè)查找、整理、分析、準(zhǔn)備和共享數(shù)據(jù)。

09、數(shù)據(jù)治理認(rèn)證

數(shù)據(jù)治理是一個系統(tǒng),但有一些認(rèn)證可以幫助您的組織獲得優(yōu)勢,包括以下內(nèi)容:

·DAMA認(rèn)證數(shù)據(jù)管理專業(yè)人員(CDMP)

·數(shù)據(jù)治理和管理專業(yè)人員(DGSP)

·edX企業(yè)數(shù)據(jù)管理

·SAP認(rèn)證應(yīng)用程序助理–SAP主數(shù)據(jù)治理

作者:Thor Olavsrud

編譯:帆軟數(shù)據(jù)應(yīng)用研究院-grace

THEEND

最新評論(評論僅代表用戶觀點)

更多
暫無評論