儲存那些事兒(四) 傳統商業儲存融入雲計算之路

2021-08-27 16:53:48 字數 1499 閱讀 6297

一年前開始學習hadoop。hadoop, 大資料的事實標準,被facebook, yahoo,ebay,taobao,baidu廣泛應用。hadoop本身很複雜,包含了很多子專案,不同的應用場景催生了不同的子專案。

最近要做openstack的專案,開始學習openstack。也反思了一下我現在所從事的行業:企業儲存,路在何方?

it的技術發展可以說是日新月異。在人們還沒有正在逐漸完善hadoop時,google幾年前就摒棄了mapreduce的架構。現在google的新三駕馬車caffeine、pregel、dremel據說可以將1pb的查詢請求控制在3秒以內。這個技術我沒有去了解過。但是可以肯定的是,新三駕馬車對於it的影響和幾年前google的三個**mapreduce、bigtable、gfs相比有過之而無不及。

那傳統的商業儲存的技術發展可以說相當緩慢。提出的模式很多都是基於商業而非技術。對於雲計算和大資料,傳統的商業儲存也沒有很好的應對之策,只能去融合,都是希望把自己的儲存能夠作為雲計算時代資料中心的基礎儲存。本篇文章,也算是**如何將傳統商業儲存支援雲計算。我們這裡會將雲計算細化,僅僅去討論openstack和hadoop。當然這有些片面。但是既然誰也不能給出雲計算的學術定義,我們這種片面也不算是大的錯誤吧。

由於我對其他友商的了解不多,因此我這裡僅僅討論emc的virp是如何將emc的儲存陣列整合到haoop和openstack的。

vipr是emc一款軟體定義儲存產品vipr™,表示為virtualization platform reinvented。vipr並不是乙個物理的儲存系統,而是乙個邏輯的儲存系統。vipr將emc和其他第三方的儲存集合起來放在乙個儲存池中,將儲存池作為單一的系統進行管理,同時又保留底層具體儲存的完整價值。vipr可以跨越多個地點和資料中心,使用多種不同的儲存平台產品,對外提供統一的塊儲存、檔案儲存以及物件儲存服務,同時,vipr提供了統一的元資料服務和自助式的部署、計量和監控服務。此外vipr還適用於多租戶環境。

vipr採用開放的scale-out架構,部署在乙個3節點的集群上,這種架構可以為大型複雜的儲存環境提供高可用性、負載平衡以及系統無干擾公升級。vipr的介面有restfulapi、gui(console)、cli以及sdk,可以為使用者提供最大限度的靈活性。

vipr可以將資料中心中異構的物理儲存系統抽象對映到乙個大型的邏輯共享儲存池,對企業級it部門和雲服務提供商提供了極大的價值。這對於地理上分布的資料中心中的儲存資源管理和混合雲部署是乙個巨大的改進。vipr可以有效和靈活地管理以資料為中心的雲基礎架構。

vipr解決了當前企業級it部門和雲管理員所面臨的一大問題:該如何將多**商的儲存系統轉移到乙個雲基礎架構中,並且從乙個中心檢視管理和共享儲存系統,同時仍然使用和最大化已有儲存系統的能力。vipr通過自服務管理方式簡化了資料中心的儲存操作並且提供了塊、檔案、物件儲存資料的服務。

雲計算儲存之Ceph是什麼?

ceph is a unified,distributed storage system designed for excellent performance,reliability and scalability.也即,ceph是一種為優秀的效能 可靠性和可擴充套件性而設計的統一的 分布式的儲存系...

雲計算資料儲存之購買指南

正文 雖然本地儲存比較易於控制和保護,但是管理這些儲存會非常昂貴,而且這些資料在自然災害是非常容易丟失,很多企業開始把目光投向雲儲存。由於雲儲存的廠家眾多,在選用雲資料儲存時,需要考慮如下問題 1。方案能否保證資料的可用性 在任何時間都保證資料可以被快速地訪問,是為客戶提供高質量服務的基礎。為了提供...

一步一步學習雲計算 雲儲存 四

1.什麼是雲儲存?2.雲儲存的特點 優勢 3.雲儲存不是儲存更是服務 4.雲儲存的架構模型 5.雲儲存的相關技術.1.什麼是雲儲存?下面來看幾個張圖 雲儲存的概念 雲儲存和雲計算類似.它是指通過 集群應用 網格技術 或分布式檔案系統 等功能.將網路中大量各種不同型別的儲存裝置通過應用軟體集合起來 協...