數倉中的星型模型和雪花模型

2021-10-09 14:28:38 字數 1690 閱讀 8961

在多維分析的商業智慧型解決方案中,根據事實表和維度表的關係,又可將常見的資料模型分為星型模型雪花型模型。在設計邏輯型資料的模型的時候,就應考慮資料是按照星型模型還是雪花型模型進行組織。

當所有維表都直接連線到「 事實表」上時,整個**就像星星一樣,故將該模型稱為星型模型,

星型架構是一種非正規化的結構,多維資料集的每乙個維度都直接與事實表相連線,不存在漸變維度,所以資料有一定的冗餘。

如在地域維度表中,存在國家 a 省 b 的城市 c 以及國家 a 省 b 的城市 d 兩條記錄,那麼國家 a 和省 b 的資訊分別儲存了兩次,即存在冗餘。

當有乙個或多個維表沒有直接連線到事實表上,而是通過其他維表連線到事實表上時,其**就像多個雪花連線在一起,故稱雪花模型。

雪花模型是對星型模型的擴充套件。它對星型模型的維表進一步層次化,原有的各維表可能被擴充套件為小的事實表,形成一些區域性的 " 層次 " 區域,這些被分解的表都連線到主維度表而不是事實表。如圖 2,將地域維表又分解為國家,省份,城市等維表。

雪花模型的優點是 : 通過最大限度地減少資料儲存量以及聯合較小的維表來改善查詢效能。雪花型結構去除了資料冗餘。

此在冗餘可以接受的前提下,實際運用中星型模型使用更多,也更有效率(空間換易用與效率)。

雪花模型使用的是規範化資料,也就是說資料在資料庫內部是組織好的,以便消除冗餘,因此它能夠有效地減少資料量。通過引用完整性,其業務層級和維度都將儲存在資料模型之中。

相比較而言,星形模型實用的是反規範化資料。在星形模型中,維度直接指的是事實表,業務層級不會通過維度之間的參照完整性來部署。

主鍵是乙個單獨的唯一鍵(資料屬性),為特殊資料所選擇。在上面的例子中,advertiser_id就將是乙個主鍵。外來鍵(參考屬性)僅僅是乙個表中的字段,用來匹配其他維度表中的主鍵。在我們所引用的例子中,advertiser_id將是account_dimension的乙個外來鍵。

在雪花模型中,資料模型的業務層級是由乙個不同維度表主鍵-外來鍵的關係來代表的。而在星形模型中,所有必要的維度表在事實表中都只擁有外來鍵。

第三個區別在於效能的不同。雪花模型在維度表、事實表之間的連線很多,因此效能方面會比較低。舉個例子,如果你想要知道advertiser 的詳細資訊,雪花模型就會請求許多資訊,比如advertiser name、id以及那些廣告主和客戶表的位址需要連線起來,然後再與事實表連線。

而星形模型的連線就少的多,在這個模型中,如果你需要上述資訊,你只要將advertiser的維度表和事實表連線即可。

雪花模型載入資料集市,因此etl操作在設計上更加複雜,而且由於附屬模型的限制,不能並行化。

星形模型載入維度表,不需要再維度之間新增附屬模型,因此etl就相對簡單,而且可以實現高度的並行化。

通過上面的對比,我們可以發現資料倉儲大多數時候是比較適合使用星型模型構建底層資料hive表,通過大量的冗餘來提公升查詢效率,星型模型對olap的分析引擎支援比較友好,這一點在kylin中比較能體現。而雪花模型在關係型資料庫中如mysql,oracle中非常常見,尤其像電商的資料庫表。在資料倉儲中雪花模型的應用場景比較少,但也不是沒有,所以在具體設計的時候,可以考慮是不是能結合兩者的優點參與設計,以此達到設計的最優化目的。

星型模型和雪花模型

星型模型和雪花模型的對比 總結在多維分析的商業智慧型解決方案中,根據事實表和維度表的關係,又可將常見的模型分為星型模型個雪花模型,在設計邏輯型資料的模型的時候,就應考慮資料是按照星型模型還是雪花型模型進行組織。當所有的維表都直接連線到 事實表 上時整個 就像星星一樣,故將該模型稱為星型模型 星型架構...

星形和雪花模型 星型模型和雪花型模型比較

每個資料倉儲都包含乙個或者多個事實資料表。事實資料表可能包含業務銷售資料,如現金登記事務所產生的資料,事實資料表通常包含大量的行。事實資料表的主要特點是包含數字資料 事實 並且這些數字資訊可以彙總,以提供有關單位作為歷史的資料,每個事實資料表包含乙個由多個部分組成的索引,該索引包含作為外來鍵的相關性...

星型模型和雪花型模型比較

一 概述 在多維分析的商業智慧型解決方案中,根據事實表和維度表的關係,又可將常見的模型分為星型模型和雪花型模型。在設計邏輯型資料的模型的時候,就應考慮資料是按照星型模型還是雪花型模型進行組織。當所有維表都直接連線到 事實表 上時,整個 就像星星一樣,故將該模型稱為星型模型,如圖 1 星型架構是一種非...