資料資源的元資料

2021-10-03 01:57:18 字數 1598 閱讀 7978

元資料

元資料,為描述資料的資料(data about data),主要是描述資料屬性(property)的資訊,用來支援如指示儲存位置、歷史資料、資源查詢、檔案記錄等功能。在企業中,只要有資料存在的地方,就有其對應元資料。只有完整、準確的元資料存在,才能更好地理解資料,充分挖掘資料的價值。

元資料按大類可分為 技術元資料、管理元資料、業務元資料。

一、技術元資料

1、物理元資料

描述物理資源的元資料,包括但不限於伺服器、作業系統、機房位置等資訊。

2、資料來源元資料

3、儲存元資料

描述物件儲存的元資料,也是通常"狹義"上的元資料,包括幾大類

• 管理屬性(建立人、應用系統、業務線、業務負責人等)

• 生命週期(建立時間、ddl時間、版本資訊等)

• 儲存屬性(位置、物理大小等)

• 資料特徵(資料傾斜、平均長度等)

• 使用特徵(dml、重新整理率等)

• 資料結構

• 表/分割槽(名稱、型別、備註等)

• 列(名稱、型別、長度、精度等)

• 索引(名稱、型別、欄位等)

• 約束(型別、欄位等)

4、計算元資料

描述資料計算過程的元資料,通常可分為資料抽取(etl)或資料加工(job)兩類計算。每類計算又可以進一步細分

• 控制元資料(配置屬性、排程策略等)

• 過程元資料(依賴關係、執行狀態、執行日誌等)

5、質量元資料

描述資料質量的一類元資料。通常情況下,是通過定義一系列質量指標反映資料質量。

6、操作元資料

描述資料是如何進行使用的一類元資料。

• 資料產生(產生時間、作業資訊等)

• 表訪問(查詢、關聯、聚合等)

• 表關聯(關聯表、關聯字段、關聯型別、關聯次數)

• 字段訪問(查詢、關聯、聚合、過濾等)

7、運維元資料

描述系統運維層面的元資料,通常包括任務類、報警類及故障類。

8、標準元資料

描述資料標準化內容的元資料。

• **管理**換規則、對外介面等)

• 對映管理

• 資料展示(樣式、規則、語義、單位等)

9、採集元資料

10、共享元資料

描述資料是如何共享的部分,包括介面方式、格式、內容等。

二、管理元資料

描述資料內容的管理性資訊。例如:資料產生時間、資料審核時間、資料提交時間、操作人員、崗位、所屬部門、審核狀態、質量標識、計算機id、資料密級等。

三、業務元資料

1、模型元資料

資料建模,是一種對業務的描述,通過模型可更好地了解業務。

常見的建模方式有正規化模型、維度模型、多維建模等。下面以維度模型為例進行說明。

• 業務線、板塊、過程

• 資料域、主題域

• 維度、屬性

• 指標

• 事實、度量

• 集市與應用

2、應用元資料

描述資料應用類的元資料。

3、分析元資料

從資料分析角度,描述業務的元資料。

• 資料域、主題域

• 產品線、板塊、業務過程

• 業務流程

• 業務規則

資料治理 元資料 元資料的作用

元資料的主要作用 相信看到這個部落格,您已經對什麼是元資料有了一定的了解,如果還不夠了解可以網上搜一下,也可以參見我的另一篇部落格 資料治理 元資料 定義 url 元資料的作用主要體現在以下幾方面 1 便捷的業務導航 可以讓相關人員更快的理解組織內的業務範圍,業務流程,應用系統,資料類別,歸屬關係等...

元資料 and 元資料標準

一般銀行內的系統建設環境分為三個 開發環境 測試環境與生產環境,每乙個系統建設的週期都需要經過前兩個環境才能正式進入生產環境。然而在系統的設計 開發 測試 上線過程中,無論是需求變更還是bug修改都避免不了資料模型也就是元資料的改動。大到庫表結構重新設計,小到乙個字段型別的變更,都可能對程式造成影響...

mysql 元資料 MySQL 元資料

mysql 元資料 你可能想知道mysql以下三種資訊 查詢結果資訊 select,update 或 delete語句影響的記錄數。資料庫和資料表的資訊 包含了資料庫及資料表的結構資訊。mysql伺服器資訊 包含了資料庫伺服器的當前狀態,版本號等。在mysql的命令提示符中,我們可以很容易的獲取以上...