聯合之大資料(三 資料儲存)

2021-10-02 03:54:27 字數 488 閱讀 2906

資料的儲存一直是乙個很熱門的話題和技術,資料的儲存不但要持久化儲存,還要有更優的儲存技術。有些人會想能把資料存起來就好了幹嘛還有更優的儲存呢?我現在這裡說明一下,這裡所指的更優化的儲存指的是:資料寫入和讀取的速度、資料儲存的安全、資料儲存的備份和容災、資料訪問的事務性。在這四項裡面資料寫入和讀取的速度與資料儲存的安全就一直是乙個痛點也可以說是你死我活的點。

一般的比較體積比較小的資料只需要少則500gb多則2~3tb的儲存空間即可儲存,一般個人的資料在500gb-1tb的就已經足夠使用,企業級別的在2tb-3tb的也基本夠用。但是在大資料中1~2tb的基本上算是起步資料量,一般為10~30tb的資料量,再高點的就到50tb-10pb,甚至可以達到上百pb以及eb級別。有些人會問大資料怎麼會需要這麼大的資料儲存量呢?其實,在大資料中資料的儲存只是解決的了最基本的功能而最重要的是資料的備份和容災。

聯合之大資料(一 資料起源)

資料其實是乙個很常見的東西,怎麼地呢?比如 有乙個孩子叫小明從小學到初中再到高中這三個階段,如果每乙個階段他的學習成績都很好在班上甚至整個年級每次考試都能名列前茅,那麼在他考大學的時候他的父母 老師 同學認為他考上重點大學的可能性就很高。這個可能性是從何而來?如果我們讓乙個陌生人看一眼小明沒有其他的...

大資料之大資料時代

下面,開啟第一講 大資料之大資料時代 講大資料一定脫離不開乙個大的背景。下面先從大資料背景講起。縱觀整個it發展史,也不過短短幾十年,在這幾十年裡,我們這個資訊化社會經歷了三次大的資訊化浪潮。第一次浪潮是在上個世紀90年代前,1980年前後,pc機進入市場,ibm公司制定了全球的pc標準,即一台電腦...

大資料系列之大資料分析如何權衡儲存

文章講的是大資料系列之大資料分析如何權衡儲存,系列1 未來24個月市場趨勢和it投入重點 系列2 大資料分析對it資源的需求 在之前的系列1和2中,我們已就大資料分析的發展趨勢以及對it資源的需求進行了解析。接下來,針對大資料分析的重要一環 儲存,中橋將結合市場熱門的儲存技術如快閃儲存器 固態盤等,...