《大資料管理概論》一導讀

2021-09-23 16:58:11 字數 1329 閱讀 2853

叢書前言

前言作者簡介

第1章 概述

1.1 大資料的基本概念

1.2 大資料的演變過程

1.3 大資料應用

1.4 大資料的處理模式

1.4.1 批處理

1.4.2 流處理

1.5 大資料管理的關鍵技術

1.5.1 大資料融合

1.5.2 大資料分析

1.5.3 大資料隱私

1.5.4 大資料能耗

1.5.5 大資料處理與硬體的協同

1.6 小結

第2章 大資料融合

2.1 引言

2.2 大資料融合的概念

2.2.1 大資料融合需求的獨特性

2.2.2 大資料融合物件的獨特性

2.3 大資料融合的方**

2.3.1 資料庫視角下的融合

2.3.2 認知計算和人工智慧視角下的融合

2.3.3 兩種融合方式的對比分析

2.3.4 大資料融合正規化

2.4 資料融合技術

2.4.1 模式/本體對齊

2.4.2 實體鏈結

2.4.3 衝突解決

2.4.4 知識庫自適應發展

2.5 知識融合技術

2.5.1 知識抽象與建模

2.5.2 關係推演

2.5.3 深度知識發現

2.5.4 普適機理的剖析和歸納

2.6 大資料融合的驅動樞紐

2.6.1 智慧型晶格

2.6.2 遷移學習

2.6.3 資料溯源

2.6.4 d&2v處理

2.7 小結

第3章 大資料儲存

3.1 引言

3.2 大資料儲存與管理方法

3.2.1 基於pcm的主存架構

3.2.2 基於快閃儲存器的主存擴充套件架構

3.2.3 基於多儲存介質的分層儲存架構

3.2.4 分布式儲存與快取架構

3.3 基於新型儲存的大資料管理

3.3.1 儲存管理

3.3.2 索引管理

3.3.3 查詢處理

3.3.4 事務處理

3.3.5 大資料分析

3.4 大資料處理與儲存一體化技術

3.4.1 一體化架構中的大資料儲存

3.4.2 一體化架構中的大資料處理

3.4.3 一體化架構面臨的挑戰

3.5 小結

《大資料管理概論》一3 2 大資料儲存與管理方法

快閃儲存器 pcm等新型儲存介質的引入使得大資料儲存架構有了多種選擇。但由於新型儲存介質在 壽命等方面與傳統的磁碟相比不具優勢,因此目前主流的觀點是在大資料儲存系統中同時使用新型儲存介質和傳統儲存介質,由此產生了多種基於新型儲存的大資料儲存架構,如基於pcm的主存架構 基於快閃儲存器的主存擴充套件架...

《大資料管理概論》一1 2 大資料的演變過程

從資料庫 database,db 到大資料 big data,bd 看似只是乙個簡單的技術演進,但細細考究不難發現兩者有著本質上的差別。大資料的出現必將顛覆傳統的資料管理方式,在資料 資料處理方式和資料思維等方面都會帶來革命性變化。如果要用簡單的方式來比較傳統的資料庫和大資料的區別的話,我們認為 池...

大資料管理

1 資料治理 概念 業務中涉及資料使用的一整套管理行為,如何制定和實施針對整個企業內部資料的商業應用和技術管理的一系列政策和流程.組成部分 元資料管理 主資料管理 大資料質量管理 大資料資產化 大資料共享發布 大資料標準 大資料交換整合 元資料管理 收集元資料,對元資料進行查詢 分析 版本管理 後期...