元資料,資料管理的三大終極問題

2022-10-11 18:39:10 字數 1171 閱讀 6030

要做好資料管理,就必須了解元資料。

元資料管的就是資料領域的三大終極問題。

1、這個資料是什麼?(我是誰)

2、它的資料來源在**?(我從**來)

3、哪個系統還需要這個資料?(我要到**去)

有關資料的「我是誰」的問題,其實就是資料標準,企業應該對每乙個關鍵資料都要制定相應的資料標準,資料標準的內容包括業務屬性、技術屬性和管理屬性。

資料標準的業務屬性包括:資料主題、資料分類、資料編碼、資料名稱、資料的業務定義、資料的業務規則、資料的同義詞,如果是統計類資料,還應該有計算公式和統計維度等相關資訊。

資料標準的技術屬性包括:資料型別、資料格式、編碼規則、取值範圍、資料來源資訊、計量單位、資料生成頻率、資料計算週期、資料取值精度等。

資料標準的管理屬性包括:資料的定義者、管理者、使用者和維護者,資料標準的版本、資料的業務應用領域等資訊。

通過資料標準,企業可以把這個資料是什麼資料解釋清楚。

有關資料的「我從**來」這個問題,其實就是資料來源的管理規範。

企業應該對關鍵資料的資料來源進行定義,關鍵資料的資料來源應該是唯一的,同乙個資料不應該在多個地方都有錄入,應該堅持乙個資料、乙個源頭、多點呼叫的原則。

企業需要對內部的所有關鍵資料進行資料來源的排查和認證,在資料應用時,只允許呼叫認證資料來源產生的資料。

這方面的內容,在企業內部的落地就是《資料資產目錄》,通過清晰明了的《資料資產目錄》,讓各單位、各部門十分方便地找到自己需要且準確的資料。

有關資料的「我要到**去」這個問題,其實就是對資料的應用,主要體現在主資料分發、資料分析和資料消費等等方面。

在企業內部的落地體現是《資料分布》,其內容主要包括:

1、資料在業務流程中的流轉

2、資料在it系統中的流轉

通過對「三大終極問題」的回答,元資料就清晰地展現在我們面前。元資料管理,可以讓我們很方便地理解資料,知道資料的來龍去脈和前世今生,對於資料管理領域,元資料是必不可少的基礎管理環節。

元資料管理

大資料倉儲越來越重視元資料的管理,但是元資料怎麼管理,還處於探索階段。這樣帶來的弊端顯而易見,就是1 及時性達不到,2 準確性達不到,3 同步性也達不到。它只是結項的必交的文件而已。二 越來越多的角色的人使用數倉,迫切需要乙個介面展示具體指的意思,業務統計口徑等,用乙個web介面展示,但是後端還是e...

元資料管理

元資料管理的核心功能如下 在操作方式上分為自動採集和手動採集兩種 同時,提供採集日誌資訊的檢視,檢查採集是否成功。檢視採集日誌可以查詢到採集任務的如下資訊 開始時間 任務狀態 結束時間 過程日誌,採集的數量等等。元資料採集完成後,儲存在資料庫中,支撐包括元資料統計 查詢 血緣分析 影響性分析 資料資...

資料管理之元資料

按照傳統的定義,元資料 metadata 是關於資料的資料。元資料打通了源資料 資料倉儲 資料應用,記錄了資料從產生到消費的全過程。元資料主要記錄資料倉儲中模型的定義 各層級間的對映關係 監控資料倉儲的資料狀態及 etl 的任務執行狀態。將元資料按用途的不同分為兩類 技術元資料 technical ...