資料倉儲 大資料學習 記錄 筆記

2021-09-30 12:33:29 字數 430 閱讀 8813

名詞解釋:

(1)scd:

slow changing dimension緩慢變化維度;

能告訴我scd哪三種型別嗎?

第一種 覆蓋原記錄,只保留最新記錄

第二種 對每一種變化(update)都記錄,**主鍵預留一部分(powercenter好像是預留1000個)

第三種 折中 保留上次的記錄;

(2)ods:

運算元據儲存ods(operational data store)是

資料倉儲體系結構中的乙個可選部分,ods具備資料倉儲的部分特徵和

oltp系統的部分特徵,它是「面向主題的、整合的、當前或接近當前的、不斷變化的」資料。

作用:1、在業務系統和資料倉儲之間形成乙個隔離層

2、轉移一部分業務系統細節查詢的功能

3、完成資料倉儲中不能完成的一些功能;

資料倉儲 學習記錄(1)

1.資料的抽取 1.1 從資料庫中抽取資料生成本地檔案 1.1.1 將 資料流任務 控制項拖入 控制流 視窗 1.1.2 選擇資料來源 1.1.2.1 將 ole db 源 拖入 資料流 視窗,雙擊編輯屬性 1.1.2.2 新建 連線管理器 輸入資料庫名稱,選擇連線方式,選擇資料庫名,嘗試連線成功即...

大資料資料倉儲 場景

2015 10 24 朱潔hadoop技術學習 傳統oltp olap之分 資料倉儲裡面有oltp olap之分,oltp是傳統關係型資料庫的主要應用,其主要面向基本的 日常的事務處理,例如銀行交易。olap是資料倉儲系統的主要應用,支援複雜的分析操作,側重決策支援,並且提供直觀易懂的查詢結果。大資...

資料倉儲 大資料定義

2012年gartner公司將大資料定義為3v,即 大容量 volume 高流速 velocity 多樣化 variety 後來人們在3v基礎上增加新的v veracity 即真實性。現在人們普遍認可的大資料是具有4v,即 volume velocity variety veracity,也就是大 ...