聯機分析處理(OLAP)與資料探勘的關係

2021-05-21 20:25:53 字數 1141 閱讀 8671

聯機分析處理

(olap)

是用來分析資料倉儲中海量資料的技術。它的核心概念是「維」,它支援資料分析人員和決策人員從不同的角度、不同的級別地對資料倉儲中的資料進行複雜查詢和多維分析處理,並且能以直觀形象的形式將查詢和分析結果展現給分析和決策人員。

olap

使用的邏輯資料模型為多維資料模型。它主要用於分析大量歷史資料,提供彙總和聚集機制,訪問大部分是唯讀操作。這不同於

oltp

中頻繁的更新修改資料。

資料探勘

(data mining)

是從海量資料中,提取隱含在其中的、人們事先不知道的但又可能有用的資訊和知識的過程。資料探勘的資料有多種**,包括資料倉儲、資料庫或其他資料來源。所有的資料都需要再次進行選擇,具體的選擇方式與任務相關。挖掘的結果需要進行評價才能最終成為有用的資訊,按照評價結果的不同,資料可能需要反饋到不同的階段,重新進行分析計算。資料探勘的常用方法包括關聯分析、分類和**、聚類、檢測離群點、趨勢和演變分析等。可以說聯機分析處理和資料探勘是資料倉儲之上的增值技術。

在理論研究上,

olap

技術的研究人員主要來自資料庫界,重點研究資料立方體

cube

壓縮與計算、實體化檢視的選擇與維護、多維資料的索引和多維查詢處理等技術,以便能夠在海量資料上提供秒級的分析請求響應時間。資料探勘技術的研究人員來自人工智慧、統計、資料庫界,其研究主要集中在各種挖掘演算法和評價方法上,研究可伸縮的資料探勘方法、基於約束的挖掘方法、複雜資料型別的挖掘等。

聯機分析處理和資料探勘雖然是資料倉儲上獲取兩種不同目標的資料增值技術,前者是分析型的,後者是驗證型的,但這兩類技術如果能夠在一定程度上融合,會使分析操作智慧型化,使挖掘操作目標化,從而全面提公升商務智慧型技術的實用價值。即:一方面,聯機分析技術可以為資料探勘提供預期的挖掘物件和目標,避免挖掘的盲目性。另一方面,資料探勘技術可以使聯機分析處理智慧型化,減少分析人員手工操作的繁雜性,減輕分析人員的負擔。例如,當分析人員在手工分析操作中發現離群點資料,可以有針對性地直接對此資料利用資料探勘技術尋找原因,從中找出惡意違規或發現新的需求點。又如,在資料分析過程中,通過跟蹤分析人員的操作過程,利用資料探勘技術**他可能感興趣的操作和資料,提前預計算或預取資料,從而提高分析操作的響應時間。

因此可以說,基於資料倉儲的聯機分析處理技術與資料探勘技術的融合和互補,將是商務智慧型技術發展的未來走向。

聯機分析處理(OLAP)

聯機分析處理 olap 的概念最早是由關聯式資料庫之父e.f.codd於1993年提出的,他同時提出了關於olap的12條準則。olap的提出引起了很大的反響,olap作為一類產品同聯機事務處理 oltp 明顯區分開來。當今的資料處理大致可以分成兩大類 聯機事務處理oltp on line tran...

OLAP(聯機分析處理)

什麼是聯機分析處理 olap 聯機分析處理 olap 的概念最早是由關聯式資料庫之父e.f.codd於1993年提出的,他同時提出了關於olap的12條準則。olap的提出引起了很大的反響,olap作為一類產品同聯機事務處理 oltp 明顯區分開來。當今的資料處理大致可以分成兩大類 聯機事務處理ol...

OLAP(聯機分析處理)

什麼是聯機分析處理 olap 聯機分析處理 olap 的概念最早是由關聯式資料庫之父e.f.codd於1993年提出的,他同時提出了關於olap的12條準則。olap的提出引起了很大的反響,olap作為一類產品同聯機事務處理 oltp 明顯區分開來。當今的資料處理大致可以分成兩大類 聯機事務處理ol...