什麼是資料標準?如何建設管理?這篇文章給你講明白了

2021-10-10 11:08:11 字數 2937 閱讀 1927

在數字經濟快速發展的今天,為了善用日積月累的大資料資訊,挖掘資料背後的價值,更加高效的產生資料效益,許多公司走上了資料治理的踐行之路。

可是面對日漸繁雜,結構不一的資料,企業進行資料治理並不是一件簡單的事情,首先橫亙在面前的最大問題就是資料間的不一致性。而資料標準管理,則是為解決這一資料病症而誕生的一劑良方。

資料標準是一套由管理制度、管控流程、技術工具共同組成的體系,通過這套體系來推廣和應用統一的資料定義、資料分類、紀律格式和轉換、編碼等來對資料的標準化,保障資料定義和使用的一致性、準確性和完整性的規範性約束。

長久以來,絕大多數企業的系統建設都是依據業務需求來的,沒有乙個整體的規劃,沒有考慮是否與其它系統的功能或資料存在重複的問題,而且各個系統由不同的廠商和產品搭建,所以不同系統之間資料的不一致性難以避免,也造成多種資料問題:

1、資料共享難以實現

資料儲存結構不一致,呼叫多系統的資料時,由於某些資料在不同系統中資料儲存結構不同,導致資料無法直接關聯,影響不同系統之間的資料共享。

2、資料同名不同義導致錯誤

資料定義不一致,不同系統對資料的命名、業務含義、取值範圍等定義不同,比如同名不同義、同義不同名等。

3、溝通成本增加

資料理解不一致,不同人員對資料的理解不一致,導致在資料使用時浪費很多時間來進行溝通。

4、資料**不明

資料**不一致,資料存在多個**,在使用資料時,不清楚應該取哪個系統的資料。

上述問題,任何乙個的出現都會讓人頭痛不已,但是通過資料標準的建設,卻可以有效消除資料跨系統的非一致性,從根源上解決資料定義和使用的不一致問題,為企業資料建設帶來諸多好處:

同時,資料標準建設也為企業各類人員提供了強有力的支撐:

要讓資料從下至上、從裡到外真正做到高度一致,一定要進行有組織有紀律的規劃,再按規劃的流程進行實施,定能事半功倍。資料標準建設的實施流程如下:

1、標準規劃

從實際情況出發,結合業界經驗,收集國家標準、現行標準、新系統需求標準以及行業通行標準等,梳理出資料標準建設的整體範圍,定義資料標準體系框架和分類,並制定資料標準的實施計畫。不是所有的資料都需要建立資料標準,企業實際資料模型中有上萬個字段,有些模型還會經常變換更新,沒有必要將這些資訊全部納入到標準體系中,僅需對核心資料建立標準並落地,即可達到預期效果,同時也提公升了工作效率。資料標準範圍圈定建議如下:

2、標準編制

資料標準管理辦公室根據資料需求展開資料的編制工作、確定資料項,資料標準管理執行組根據所需資料項提供資料屬性資訊,例如:資料項的名稱、編碼、型別、長度、業務含義、資料**、質量規則、安全級別、值域範圍等。資料標準管理辦公室對這些資料項進行標準化定義形成初稿並提交審核。

3、標準評審發布

資料標準管理委員會對資料標準初稿進行審核,判斷資料標準是否符合企業的應用和管理需求,是否符合企業資料戰略要求。如資料標準審查不通過,則由資料標準管理辦公室進行修訂,直到滿足企業資料標準的發布要求。

標準通過審查後,由資料標準管理辦公室面向全公司進行資料標準的發布。該過程中資料標準管理執行組需要配合進行資料標準發布對現有應用系統、資料模型的影響評估,並做好相應的應對策略。

4、標準落地執行

把已定義的資料標準與業務系統、應用和服務進行對映,標明標準和現狀的關係以及可能影響到的應用。該過程中,對於企業新建的系統應當直接應用定義好的資料標準,對於舊系統則建議建立相應的資料對映關係,進行資料轉換,逐步進行資料標準的落地。

當然,不是所有的資料標準都能夠完全落地,實際工作中可能會存在歷史系統無法改造的情況,所以首先確定資料標準落地策略和落地範圍,並制定相應的落地方案,然後推動資料標準落地方案的執行,對標準落地情況進行跟蹤並評估成效。

5、標準維護增強

資料標準後續可能會隨著業務的發展變化、國標行標的變化、以及監管要求的變化需要不斷更新和完善。在資料標準維護階段,需要對標準變更建立相應的管理流程,並做好標準版本管理。

資料標準建設一般都要從上述五個步驟來下手,其中任何乙個步驟單拎出來看工作量都是相當龐大,像標準的落地及維護想要完全依靠人工也不太現實。對於企業而言,需要一套完善、易用且更加智慧型的資料標準建設方案幫助其將資料標準建設工作落地。

億信華辰旗下的esdatastandard資料標準管理平台,可以有效的幫助企業建立規範的資料應用標準,消除資料的不一致性,從根本上改善和解決系統的資料質量問題,實現資料有效共享,並通過智慧型化的管理方法,讓企業輕鬆享受大資料帶來的便利和效益。

1、內建標準一鍵應用

平台內建一批國標、行標,可一鍵應用大大提高專案交付效率。另外平台內建標準的技術、業務、管理、質量屬性,結合靈活的定義方式,從手工建立、匯入、拾取、智慧型識別等,可幫助客戶快速構建基礎標準、指標標準、**標準。

2、智慧型追蹤標準歷史

平台支援標準增、刪、改、查、發布、審核等各種基礎操作,其變更過程能被自動記錄,通過變更版本控制,追蹤標準歷史。另外平台還提供了靈活細緻的使用者許可權管理機制,滿足不同使用者管理各自的標準的場景。

3、視覺化的介面一目了然

實現資料從建立到消亡全生命週期的視覺化,資料標準的建立也是完全可視的,並且實現全角色的視覺化,不管是執行層還是決策層都可對資料標準的完善起到關鍵作用。

esdatastandard資料標準管理平台包括:標準分類管理、標準增刪改查、標準匯入匯出、標準評審、標準發布、標準版本管理、標準落地對映、標準落地評估、標準監控等功能。同時為更好的保障資料標準的落地,最好結合元資料管理工具一起使用。

如果你已經非常明確自家資料體系存在資料病症,急缺乙個可以妙手回春的良醫的話,esdatastandard資料標準管理平台一定是乙個非常明智的選擇。

如何搭建資料標準管理平台

企業內部開展企業資料資源整合工作,實現對企業核心業務 核心資源的綜合管控,是企業資訊化的乙個核心目標。通過體系化的資料資源管理平台的建設,可有效打通企業內部之間的資料流通渠道,解決企業管理資訊化在資料層面的核心問題,形成橫向整合 縱向貫通的高效 有序的資訊流,發揮資料資訊的基礎支撐作用,滿足企業對資...

資料倉儲 什麼是主資料管理

主資料是指在整個企業範圍內各個系統 操作 事務型應用系統以及分析型系統 間要共享的資料,比如,可以是與客戶 customers 商 suppliers 帳戶 accounts 以及組織單位 organizational units 相關的資料。主資料通常需要在整個企業範圍內保持 一致性 consis...

什麼是合成資料?為什麼它需要主資料管理?

by darren cooper 合成資料 synthetic data 是使您的業務運營平穩執行的測試資料 如果這些操作通過人工智慧實現自動化,那麼使用主資料管理 mdm 來確保您的決策是無偏見的,這一點非常重要。資料生成的資料反過來又生成更多的資料。我們如何知道產生的資料是否符合業務需求策略?舉...