資料庫 資料倉儲 資料集市認知要點(總結筆記)

2021-07-26 16:26:30 字數 999 閱讀 8080

1、oltp(online transaction processing)—聯機事務處理系統,它是事件驅動、面向應用的。

例如銀行的儲蓄系統就是乙個典型的oltp系統。

其特點是:

對響應時間要求非常高;

使用者數量非常龐大,主要是操作人員;

資料庫的各種操作基於索引進行

關聯式資料庫滿足了聯機事務處理(oltp)的要求

2、olap(online analytical processing)-聯機分析處理是基於資料倉儲的資訊分析處理過程,是資料倉儲的使用者介面部分。

olap系統是跨越部門、面向主題的。

其基本特點是:

基礎資料**於資訊系統中的運算元據;

響應時間合理;

使用者數量相對較少,主要是業務決策與管理人員;

資料庫的各種操作不能完全基於索引進行。

3、典型的olap操作

上捲 (drill-up,roll up): 概括資料

通過沿乙個維的概念分層向上攀公升或者通過維歸約,對資料立方進行聚集

下鑽 (drill down ,roll down): 上捲的逆操作

從高層概括到底層概括,從不太詳細到更加詳細的資料

給資料新增更多細節,新增新的維到立方體來實現

切片和切塊(slice and dice):投影和選擇

轉軸或旋轉(pivot or rotate):

轉換立方體的視角, 視覺化, 從3d 到 2d 平面序列

其他操作

鑽過(drill across): 涉及多個事實表的查詢

鑽透(drill through): 鑽透立方體的底層,到後端關係表 (using sql)

資料倉儲到搭建資料集市

資料倉儲是一種關聯式資料庫模式,其中儲存了來自乙個或者多個源資料庫的歷史資料和元資料。資料倉儲的目的是便於將資料的報告和分析彙總到多個層次。或者更簡單點 是作為乙個存放企業各個領域的資料的單獨且有組織的庫。典型的資料倉儲有以下的一些特點 涉及多個主題域 有十分詳細的資訊 集合來自不同資料來源的資料 ...

資料倉儲設計要點

資料倉儲層級一般可分為 增量或全量資料映象層,最新基礎資料層,清單資料中間層,彙總層,報表層。設計的時候要注意一下 1.彙總層表的字段,不應該根據報表的需要來建立,應該根據不同維度和不同粒度的資料和不同時間點的資料進行區分。2.表設計的時候 1 為什麼需要這樣設計,2 作用是什麼,3 在整個資料倉儲...

資料庫 資料倉儲 大資料

資料庫是用來儲存資料的東西,通常表現為一種軟體系統,面向事務,以處理日常工作為主要目的。資料倉儲的基礎是資料庫,面向分析,面向主題。可以這樣理解,在處理日常工作時用資料 庫獲取的 或者說臨時儲存在資料庫中的 資料都是雜亂無章的,不利於分析,不利於挖掘 的,那麼就需要對其進行處理,比如去燥 歸類等,處...