資料倉儲 過去,現在和未來

2021-09-24 23:50:08 字數 2379 閱讀 5367

在當今世界,資料正在快速生成,尤其是幾乎每個行業的企業都經歷數位化轉型。我們也看到了前所未有的需求,使每個業務決策者都能夠訪問實時資料,以便他們能夠為業務做出最明智的決策。全球公司比以往任何時候都更多地將虛擬團隊分散到世界各地,使他們能夠使用所有可用資料做出明智的業務決策。例如,零售商不僅要考慮過去的購買和瀏覽歷史,還要使用所有公開的客戶資訊,例如他們的專業和雇主,他們的**和收聽興趣,體育和愛好,旅行模式和餐館。經常光顧。

為了使資料對業務具有可操作性和有用性,公司需要一種以高效且經濟高效的方式儲存,標記和分析資料的方法。輸入資料倉儲。

「資料倉儲」一詞是由美國計算機科學家bill inmon在20世紀70年代創造的。第一批資料倉儲誕生為內部部署伺服器,旨在以千兆位元組的規模執行。現代手機比最早的資料倉儲擁有更多的儲存和處理能力。今天的資料倉儲必須從頭開始構建,以便在相當互動的響應時間內容納數pb的資料。由於最早的雲資料倉儲在當今分析工作負載的壓力下顯示其年齡和吱吱聲,我們看到硬體被交易以獲得更靈活的軟體,資料倉儲已經遷移到雲端。這種演變導致了三代不同的雲資料倉儲。

第一代雲資料倉儲消除了設定支援群集mpp資料倉儲所需的相當複雜的基礎架構的複雜性。不僅預先配置了硬體和作業系統環境,資料倉儲也是如此。亞馬遜redshift等技術被預示為改變未來資料倉儲的部署方式,並且採用率迅速提高。

第一代資料倉儲除了部署簡單之外還提供許多好處:它們可以隨著業務需求的變化而擴充套件和縮小,它們是資料整合和應用程式開發生態系統的一部分,可以構建新的應用程式類,並且它們構建於乙個專為彈性和安全性而設計的平台。

但是,它們可能是有限的。由於第一代雲資料倉儲僅提供雲版本,因此該技術的採用者需要找到替代解決方案,以便出於合規性或敏感性原因必須駐留在本地。與其他相關服務整合的承諾伴隨著** - 將它們連線在一起可能既困難又耗時。

第一代雲資料倉儲中儲存和計算的緊密耦合意味著在不影響儲存的情況下關閉計算是不可能的,因此儀表始終在執行。對於那些工作時間訪問分析就足夠的用例,這可能會成本過高。雖然定價可能開始較低,但規模化的生產工作量可能會變得昂貴。

第一代雲資料倉儲由雲平台提供商提供,其部署通常僅限於他們自己的雲平台(redshift僅限於aws,big query僅限於google cloud等)。當業務需求需要替代方案時,這可能是乙個挑戰。

對第一代雲資料倉儲的巨大需求清楚地表明,除了雲平台提供商之外,還有巨大的市場機會和空間。

第二代雲資料倉儲具有雲基礎架構的所有優勢,例如可擴充套件性,安全性和健壯性,但它們不像本地第一代倉庫那樣與單個雲提供商繫結。它們還解決了第一代的一些缺點。它們提供完全託管的雲資料倉儲服務,客戶可以專注於發展業務,而不是專注於自己的資料基礎架構。它們還提供了更真實的雲經濟學,期望您只需支付使用的費用。由snowflake等公司定義的第二代雲資料倉儲已經永遠改變了企業資料倉儲的經濟性。

但第二代資料倉儲有其自身的侷限性。它們是雲原生解決方案,與第一代一樣,意味著需要選擇第二種技術來滿足內部資料需求。此外,隨著額外的計算集群不斷湧現以滿足不斷增長的使用者需求,它們的成本開始較低但卻迅速上公升。

許多組織的乙個關鍵要求是,軟體服務提供了乙個內部部署等效項,可以在雲中執行相同的技術,技能和應用程式,以及可能受監管要求約束的敏感資料的內部部署。還應該能夠從單個查詢中無縫地將雲資料倉儲中的資料與其內部部署備選方案相結合。這是第三代資料倉儲的用武之地。

第三代資料倉儲通過允許資料同時儲存在內部和雲中,將所有資料連線到更廣泛的資料生態系統(無論位於何處)並允許組織利用其資料提供的實時洞察力來解決這一挑戰 - 所有他們的資料。這種混合能力是其主要區別之一。這對於具有法規遵從性要求的行業(如金融服務,醫療保健和製藥)尤其重要,這些行業希望利用相同的技術滿足其內部部署和雲分析需求,以及無縫加入內部部署和雲駐留資料。這也允許為雲和內部部署使用相同的技能,技術和應用程式,

早期的幾代人也在努力在企業規模上執行混合工作負載的大量使用者。為了解決這個問題,第三代雲資料倉儲旨在提供一種服務,該服務非常適用於資料量高且查詢複雜性多變的用例,以及組織希望為每個業務決策者提供實時訪問的情況所有相關資料。第三代產品旨在成為更廣泛的雲戰略中的乙個元件,並與數百個資料來源整合,包括流行的saas解決方案,如salesforce,netsuite,workday和servicenow,因此來自這些服務的資料可以無縫混合以提供見解。

此外,以前的雲資料倉儲遇到了併發問題。第三代解決方案專為需要容納數百名使用者並行查詢資料的頂級企業而設計。為大量使用者和海量資料執行複雜查詢對於第三代資料倉儲來說是個孩子的遊戲。擁有強大的併發功能,無需成本擴充套件,因為使用者可以訪問資料,這意味著組織可以真正地大規模利用每個業務功能中的資料,以提供可操作的見解。

多年來,資料倉儲已經發生了變化,從內部部署的主力解決方案開始,然後轉變為雲 - 每次新的迭代都解決了之前提出的問題。

在第三代中,我們將資料倉儲視為混合解決方案,將內部部署和雲資料的功能相結合,以利用實時洞察力。第三代倉庫是為那些希望為其業務決策者提供他們做出明智決策所需的所有資訊的大型企業而設計的,無論這些資訊可能存在於何處。展望未來,我們預計會有更多組織採用第三代的力量。

CRM的過去 現在和未來

crm的現在 根據杜撰了crm一詞的gartnergroup的抽樣統計,通過crm採用主動式客戶服務的企業,其銷售收入增加了15 20 不等,這說明企業在採用crm之後,將會獲得明顯的回報。而根據dataquest的 到2003年,全世界crm服務所創造的利潤將增長48.4 由此可見,crm正日益成...

混合雲儲存 過去 現在和未來

許多企業的cio和部門負責人認為,靈活的雲計算解決方案能夠幫助他們更加創新性 敏捷和具備競爭力地開展業務。他們意識到海量資料能夠為他們的業務帶來的價值,但是,海量資料的儲存需要一種能夠適應多種應用場景,並且能夠支援在本地 雲端和混合部署的儲存解決方案。他們渴求一種具有靈活性 可擴充套件性和簡便性的混...

邊緣計算的過去 現在和未來

它是當前被稱為網際網路的超級結構持續分散化的邏輯演進。這是網際網路密度的進一步增加,填補了傳統上幾乎沒有ip訊號的領域,使虛擬世界在我們的日常互動中變得生動起來。它需要一系列的途徑 發展和基礎設施才能發揮作用。邊緣計算的可能性是無限的。總有一天,我們的世界將被監視 控制和優化,以獲得即時的舒適感和知...