完整的資料平台建設方案涉及到哪些?

2021-12-29 21:14:37 字數 788 閱讀 8218

乙個完整的資料平台建設方案,可能會涉及到以下3個方面:

邏輯架構、應用架構、物理架構,而這些架構我們之前只找了一家廠商就都完成了。下面我說說這三個方面分別是什麼:

1.邏輯架構

資料來源層:

•所有資料的源頭。

•**於多個業務系統。

•資料格式不統一,尚待清洗。

運算元據儲存(ods)層:

•介於業務系統與資料倉儲間的隔離層, 通常在該層中完成etl的大部分工作。

•用於存放從業務系統直接抽取出來的資料。

•通過分步彙總,逐步得到資料倉儲所需分析資料。

•etl中的大部分工作在ods層完成。

資料倉儲層:

•面向各業務主題的、整合的、穩定的、時變的資料。

•通常是彙總的、可冗餘的資料。

•主要用於查詢。

資料共享層:

•該層通過各類技術手段(如:webservice、webapi、esb等)將資料倉儲中的規範資料向外部共享。

•通過資料共享層,實現資料倉儲、各業務系統間的聯動。

•資料倉儲的規範資料對於完善業務系統功能有重大推動作用。

資料分析層:

•單個主題更加集中。

•從各維度視角觀察度量資料。

•技術上通常採用各種技術手段(如:列儲存)提高查詢效能。

2.物料架構

3.應用架構

圖中展示的,其實就是永洪科技幫我們梳理出來的架構,而且對於我所在的行業也有很深的理解,幫助我們梳理了業務指標,從前期資料平台體系的建設,到後期具體業務場景下業務指標的梳理,都為我們提供了良好的支援。

vue中品牌列表案例及涉及到的知識點 完整可執行

這個案列中詳述了 自定義按鍵修飾符,自定義指令,自定義過濾器 複習了v model v for 按鍵修飾符 後加鍵 系統提供的有 enter,tab,delete,esc,space,up,down,left,right 如果要用別的,則可以使用鍵盤碼 鍵盤上的每個鍵都對應乙個碼 比如113 f2 ...

JS中涉及到xml格式的資料解析方法

如果後台傳遞到前台的資料有xml格式的話 怎樣解析呢 方法如下 然後就可以使用上面的方法對xml格式的資料進行解析了 譬如options是從後台傳遞過來的json物件中取出的 帶xml格式的字串 首先 options data options 這是將xml格式的字串轉為dom文件物件 var str...

Actvity啟動過程涉及到的資料結構

taskrecord 記錄activiyt棧的資訊,持有乙個arraylist和activitytask activityrecord 記錄activiyt的資訊,持有乙個activityinfo activitystack 持有乙個taskrecord的list arraylistmtaskhis...