如何看待數(shù)據(jù)模型在數(shù)據(jù)管理中的位置？

數(shù)據(jù)模型數(shù)據(jù)管理數(shù)據(jù)治理數(shù)據(jù)架構

龔菲 | 2020-06-19 09:08

【數(shù)據(jù)猿導讀】數(shù)據(jù)模型為數(shù)據(jù)質量管理提供關鍵元數(shù)據(jù)與業(yè)務規(guī)則輸入，以便人們可以針對性地根據(jù)企業(yè)現(xiàn)狀制定數(shù)據(jù)質量檢核標準與數(shù)據(jù)質量檢核規(guī)則。同時數(shù)據(jù)模型本身也需要符合數(shù)據(jù)質量管理標準，需要通過數(shù)據(jù)質量管理的檢核。

“國際數(shù)據(jù)管理協(xié)會DAMA在DMBOK2中定義了11個數(shù)據(jù)管理職能領域，數(shù)據(jù)建模與設計是其中的一個關鍵領域。數(shù)據(jù)模型作為數(shù)據(jù)建模與設計的核心產(chǎn)出物，勢必與其他各個領域都有著千絲萬縷的聯(lián)系。我嘗試著將這些關系總結整理成這篇文章，與大家一同分享。

數(shù)據(jù)模型_數(shù)據(jù)管理_數(shù)據(jù)治理_數(shù)據(jù)架構-1

如下圖，在DMBOK2中，數(shù)據(jù)管理包含了11個職能領域，這11個領域分別是數(shù)據(jù)治理、數(shù)據(jù)架構、數(shù)據(jù)建模與設計、數(shù)據(jù)存儲與操作、數(shù)據(jù)安全、數(shù)據(jù)集成與互操作、文檔與內(nèi)容管理、參考數(shù)據(jù)與主數(shù)據(jù)管理、數(shù)據(jù)倉庫與BI、元數(shù)據(jù)、數(shù)據(jù)質量。

數(shù)據(jù)模型_數(shù)據(jù)管理_數(shù)據(jù)治理_數(shù)據(jù)架構-2

圖1DAMA定義的11個數(shù)據(jù)管理職能領域

（DMBOK2, DAMA International）

各個領域的定義和作用書中已經(jīng)介紹得很清楚，所以我在這里就不贅述了，下圖是我從數(shù)據(jù)模型出發(fā)，總結出的數(shù)據(jù)模型與各領域產(chǎn)出物之間的關系圖：

數(shù)據(jù)模型_數(shù)據(jù)管理_數(shù)據(jù)治理_數(shù)據(jù)架構-3

圖2數(shù)據(jù)建模與數(shù)據(jù)管理各領域的輸入輸出關系

各領域之間的這些輸入輸出關系讓數(shù)據(jù)管理各個領域之間形成了一張關系復雜的網(wǎng)。其中數(shù)據(jù)模型處于一個關鍵位置。我將數(shù)據(jù)模型與各領域的關系總結成了以下9點：

數(shù)據(jù)模型是承載著數(shù)據(jù)需求的元數(shù)據(jù)集合

從一定程度上講，我個人認為數(shù)據(jù)模型是真正立足于企業(yè)數(shù)據(jù)需求創(chuàng)建出來的元數(shù)據(jù)集合。其中包括實體名、屬性名等豐富的技術元數(shù)據(jù)，還包括業(yè)務規(guī)則等業(yè)務元數(shù)據(jù)，主外鍵等關系是元數(shù)據(jù)血緣分析的主要來源之一。同時，數(shù)據(jù)模型也為元數(shù)據(jù)管理提供了元數(shù)據(jù)標準和元數(shù)據(jù)質量評分的指標參考。

數(shù)據(jù)模型是數(shù)據(jù)校驗的對象之一，是形成數(shù)據(jù)質量規(guī)則的基礎

數(shù)據(jù)模型為數(shù)據(jù)質量管理提供關鍵元數(shù)據(jù)與業(yè)務規(guī)則輸入，以便人們可以針對性地根據(jù)企業(yè)現(xiàn)狀制定數(shù)據(jù)質量檢核標準與數(shù)據(jù)質量檢核規(guī)則。同時數(shù)據(jù)模型本身也需要符合數(shù)據(jù)質量管理標準，需要通過數(shù)據(jù)質量管理的檢核。

數(shù)據(jù)模型是數(shù)據(jù)集成與互操作的起點

為了在數(shù)據(jù)集成時創(chuàng)建一個單一、一致的數(shù)據(jù)版本，在數(shù)據(jù)集成時充分分析現(xiàn)有數(shù)據(jù)模型就顯得尤為重要。保證數(shù)據(jù)模型中關鍵元素的一致是數(shù)據(jù)集成時需要首要考慮的問題。

數(shù)據(jù)模型是數(shù)據(jù)存儲與操作的結構保障

數(shù)據(jù)模型精確標準的定義為數(shù)據(jù)提供了一個規(guī)范的結構，這種比較精確化的結構和約束成為數(shù)據(jù)存儲和操作的一層基本結構保障，減少了數(shù)據(jù)存儲和操作時發(fā)生數(shù)據(jù)異常的可能性。

數(shù)據(jù)模型是數(shù)據(jù)安全管控的對象之一

數(shù)據(jù)模型是數(shù)據(jù)安全管控的對象之一，數(shù)據(jù)模型中往往需要根據(jù)具體的數(shù)據(jù)安全需求標注出敏感字段/表，企業(yè)也需要參考著數(shù)據(jù)模型來制定具體的數(shù)據(jù)安全技術實現(xiàn)需求與業(yè)務規(guī)則，判斷出那些字段可以被哪些人查看，哪些字段需要脫敏等。

數(shù)據(jù)模型通過文檔和內(nèi)容管理實現(xiàn)可復用

在初始數(shù)據(jù)建模階段，有效的文檔和內(nèi)容管理可以為數(shù)據(jù)建模提供以往數(shù)據(jù)建模過程的詳細參考。在建模完成時，數(shù)據(jù)建模過程中的各種模型設計文檔，可以通過文檔和內(nèi)容管理模塊實現(xiàn)合理存儲，形成企業(yè)數(shù)據(jù)模型記憶庫，供未來其他部分數(shù)據(jù)建模參考，或供數(shù)據(jù)模型維護階段參考，實現(xiàn)數(shù)據(jù)模型的復用。

數(shù)據(jù)模型是數(shù)據(jù)倉庫和BI的核心

數(shù)據(jù)模型能為數(shù)據(jù)倉庫建設提供全面的業(yè)務梳理和整體的數(shù)據(jù)視角，通過數(shù)據(jù)模型，業(yè)務人員、開發(fā)人員能夠很容易在數(shù)據(jù)倉庫需求、范圍以及長遠建設規(guī)劃上達成共識，真正形成業(yè)務到數(shù)據(jù)倉庫的映射。通過專門為BI數(shù)據(jù)分析而設計的維度模型，更好地分析立足于數(shù)據(jù)分析的數(shù)據(jù)需求?？梢哉f沒有數(shù)據(jù)模型，數(shù)據(jù)倉庫與BI就無從談起。

數(shù)據(jù)模型為參考數(shù)據(jù)與主數(shù)據(jù)管理提供

一致性指導

參考數(shù)據(jù)與主數(shù)據(jù)管理是通過管理共享數(shù)據(jù)，去滿足組織目標、減少數(shù)據(jù)冗余風險、保證更高的數(shù)據(jù)質量、減少數(shù)據(jù)集成成本的過程。（DMBOK2，DAMA International）。

在全面的MDM環(huán)境中，邏輯數(shù)據(jù)模型將在多個平臺中進行物理實例化，邏輯數(shù)據(jù)模型為主數(shù)據(jù)管理提供了清晰、一致的數(shù)據(jù)定義，它指導MDM解決方案的實施，并提供了數(shù)據(jù)集成服務的基礎。

數(shù)據(jù)模型為數(shù)據(jù)科學與AI提供數(shù)據(jù)保障

數(shù)據(jù)科學與AI離不開數(shù)據(jù)，而數(shù)據(jù)模型恰恰就是為數(shù)據(jù)科學與AI后續(xù)算法與分析過程提供數(shù)據(jù)的基本保障。數(shù)據(jù)模型的建立能夠讓各個數(shù)據(jù)管理領域有著力點，從而能夠為數(shù)據(jù)科學家們的業(yè)務分析工作提供更準確的數(shù)據(jù)，讓AI算法得出更準確的結果。

— 總結 —

可以說，數(shù)據(jù)模型在數(shù)據(jù)管理中處于向上承接業(yè)務，向下引導數(shù)據(jù)的關鍵位置。它是承載著數(shù)據(jù)需求的元數(shù)據(jù)、是數(shù)據(jù)質量校驗的對象、是形成數(shù)據(jù)質量規(guī)則的基礎、是數(shù)據(jù)集成與互操作的起點、是數(shù)據(jù)存儲和操作的結構保障、是數(shù)據(jù)安全管控的對象、是數(shù)據(jù)倉庫和BI的核心、是參考數(shù)據(jù)與主數(shù)據(jù)的一致性指導。做好數(shù)據(jù)模型的管理，企業(yè)數(shù)據(jù)管理將會事半功倍。

— 參考 —

[1]DAMA International.DAMA-DMBOK: DataManagement Body of Knowledge (2nd Edition)[M].Technics Publications:BASKINGRIDGE, NEW JERSEY,2017:123.

來源：DG數(shù)據(jù)治理

收藏分享

聲明：數(shù)據(jù)猿尊重媒體行業(yè)規(guī)范，相關內(nèi)容都會注明來源與作者；轉載我們原創(chuàng)內(nèi)容時，也請務必注明“來源：數(shù)據(jù)猿”與作者名稱，否則將會受到數(shù)據(jù)猿追責。