Redis不僅僅是快取

2022-07-10 11:51:11 字數 3757 閱讀 9455

一段時間以來,巨大數量的資料處理迫使所有的應用程式在資料庫層前新增快取策略。即使經典資料庫進行了大量的下劃線優化,仍然不能提供足夠的速度和可用性。主要原因在於資料儲存越遠,獲取資料就越困難。另乙個原因是因為資料庫中的資料通常儲存在磁碟中,而不是在記憶體。經典資料庫卻是在記憶體上嵌入了快取來優化,但是擁有乙個專用的獨立快取也是一種很常用的策略。

在解決訪問資料庫的效能問題,通常的解決方案是快取。快取並不新鮮,快取實際上是把經常訪問的少量資料儲存在離你更近的地方。我們在處理器上有快取,資料庫中也有快取,你甚至可以在自己的應用中編寫快取。

但隨著事情的發展,現在我們有來高可用的分布式記憶體快取,可以被不同的例項同時使用。

快取——redis

也許最流行的分布式記憶體資料儲存是redis,它不是快取,但被當作快取使用。 引用官方的描述如下:

redis是乙個開源的(bsd協議),記憶體中的資料結構儲存,它可以用作資料庫,快取,訊息**。它支援的資料結構包括字串,雜湊,列表,集合,有序集合,位圖,超級日誌,具有半徑查詢和流的地理空間索引和流,redis具有內建複製,lua指令碼,lru驅逐,事務和不同級別的磁碟持久化,並通過redis哨兵和redis集群自動分割槽。

redis速度很快,它被認為是目前最快的資料儲存之一。它對cpu快取進行了優化,並且沒有上下文切換。從一開始它就被設計成了記憶體資料庫,這不僅意味著將資料從磁碟移動到記憶體,它從一開始就針對性的優化了。

由於redis速度非常快,可以儲存各種資料結構,因此它是分布式快取的乙個很好的備選。

因為作為快取,redis獲得了非常高的人氣。有一些快取載入器庫在使用redis作為應用程式和資料庫之間的快取層。以redisson地圖載入器為例:

因此,使用分布式快取可以極大的提高效能。但是**和架構變得更複雜了。資料被複製到資料庫和快取中,我們必須保持它們的資料同步。**應該管理整個快取策略,控制快取失效,重新填充快取,都是為了保持資料的一致性。我們實現了更高的效能和可伸縮性,但引入了高風險的複雜性。

資料是重複的

你可能會問為什麼要在兩個地方都儲存資料?不能只儲存redis中的資料嗎?如果這樣做我們可以減少**的複雜性。但首先讓我們看看經典資料庫的一下特點和優勢,看看我們是否可以直接使用redis實現這些。

關係型資料庫的優點 

傳統來說,快取是不會長期儲存資料的。我們將資料儲存在快取中只是為了快速的訪問,但是為了長時間的永續性,我們通常使用乙個**資料庫。

除了資料的永續性以外,關係型資料庫提供了資料一致性等其他特點。使用關係型資料庫,你可以定義資料間的關係,約束,複雜查詢,構建它是為了保證多個相關表間的一致性。

它有一些重要的優勢,即使nosql資料庫很流行,關係型資料庫也不會很快消失。

但是使用redis作為快取和關係型資料庫搭配使用,增加了一層複雜性,因為你必須通過**保持兩者的資料同步。

考慮到你的快取策略,你不得不構建一些複雜的**在redis和資料庫間進行資料傳送。不要誤解我的意思,有時候你必須這麼做。就像之前提到的,關係型資料庫有它的優點,我們不能把它扔掉。

但是我們必須每次都這麼做嗎?如果不同資料間不需要非常複雜的關係,而只儲存乙個鍵對映就足夠了呢?我們是不是可以不用關係型資料庫了?

redis作為**資料儲存

如前所述,關係型資料庫的優點是一致性和永續性。如果我們不需要資料之間的關係對映,那麼它將只保留永續性。有很多nosql資料庫提供鍵對映儲存,但我們可以直接使用redis。

redis持久化

redis有兩種持久化模型:rdb和aof。

rdb在指定的時間間隔儲存資料快照。它們非常適合快速恢復備份。rdb最大化了redis的效能,因為父程序所做的唯一工作就是fork建立快照的子程序。

但是由於rdb在一定時間間隔執行計畫,如果你無法承受丟失一些資料,那麼這就不是乙個好的選擇。fork是乙個高成本的操作,不能在每次資料變化都進行fork,因此可能會出現最近的資料沒有被儲存在快照中的情況。

aof是乙個不同的持久化模型。它是由乙個只能追加的檔案組成,只在其中新增所有資料。它更持久,因為fsync策略通常比整個rdb更有計畫性。由於該檔案僅用於追加,因此資料是不可更改的。即使在最後一條資料沒有完全寫完而出現斷電,也可以很容易的重新斷電前的構建狀態。

但是它也有缺點。第乙個是aof檔案通常比rdb更大。另外,如果fsync策略被排程的太頻繁,舉個例子,在每次寫命令之後,那麼效能會大打折扣。在預設情況下,fsync每秒執行一次。

你應該使用哪個?

如果你想要乙個類似postgres提供的安全級別,你將不得不兩種情況都使用。使用rdb可以讓你在重啟後更快的恢復備份;使用aof可以避免資料丟失。但是如果你能承受一些資料損失,那可以只使用rdb。記住,redis會把它們合併成乙個單一的持久化模型。

其他優勢

未來是屬於位元組定址的由於磁碟旋轉在很長一段時間都是持久化單元,所以當前的大多數資料庫仍然在適應磁碟的旋轉方面進行優化。比如資料定位,以減少磁碟旋轉滯後,甚至選擇了專門的格式,將索引放在了碟片的特定部分。但是這些優化對於當前的技術,比如ssd,是沒有意義的。redis儲存資料是為位元組定址優化的。未來是屬於位元組定址的,而redis已經在那裡了。

可伸縮性和高可用性

redis提供了不同的方式來實現伸縮性和高可用性。

你可以在不同的redis節點上分割資料來實現水平的可擴充套件性。分片將減輕單個例項的負擔,你將受益於多核和計算能力。但是你應該知道分片的侷限性,因為不能支援多鍵操作和事務。

通過複製獲得高可用性。主節點是同步複製的,可以免受節點故障,資料中心故障和redis程序故障。如果主節點宕機,副節點將會取而代之。在不同的az中也有乙個副本,這將保護你免受災難時間的影響,比如整個az失敗。

如果你打算使用redis企業集群,所有的這些對你都是抽象的,你將擁有分片和高可用性,而不需要額外的**。你可以通過編碼連線到乙個redis例項。

複雜資料結構

redis不僅可以處理字串,還可以處理不同的資料結構,如:二進位制安全字串,列表,集合,排序集合,位圖,超級日誌,流等等。這使得redis不僅是乙個鍵值儲存,更是乙個完整的資料結構伺服器。

不是銀彈

一切聽起來都非常棒,但是作為乙個事實,沒什麼東西是銀彈,redis也不是。主要的缺點是所有的資料都應該裝進記憶體中。這使redis適合那些有足夠記憶體進行儲存的資料。如果沒有,那就必須將資料拆分。但是你會失去一下保證,如事務,管道,或發布/訂閱。

結論

在很長一段時間裡,redis被認為只是乙個快取。乙個非常好的分布式快取,但仍然只是乙個應用程式和主資料庫之間的快取。正如你所看到的,redis不僅僅是乙個快取,它試圖擺脫這個誤解。redis不是乙個快取,它是乙個分布式資料儲存。它可以以執行緒安全模式以令人難以置信的速度處理不同的資料結構,並為資料永續性提供了不同的機制。

考慮到所有這些,即使redis被非常成功地用作快取,它還是可以做更多的事情。如果你不需要一些像關係資料和高儲存的sql屬性,為什麼你要在應用程式中建立乙個複雜的三層系統?redis作為快取和還是資料庫?在這些情況下,你可以只使用redis作為主要的持久層。

不僅僅是土豆

這是一則職場寓言 小張和小王是同班同學,他們一起進了一家公司,小張工作勤勤懇懇,風風火火,小王辦事慢條斯理,但是一年後,小王被提公升為主管。小張很不服氣,所以找到領導劉總。劉總,這次人事調整我很不服氣,我和小王是一起進公司的,在學校的時候我比他成績好,在單位,我勤勤懇懇的工作,為什麼公司提拔他而不提...

不僅僅是土豆

小張和小王是同班同學,他們一起進了乙個公司,小張工作勤勤懇懇,風風火火,小王辦事慢條斯理,但是一年後,小王被提公升為主管。小張很是不服氣,如是找到領導劉總。劉總,這次人事調整我很不服氣,我和小王是一起進公司的,在學校的時候我比他成績好,在單位,我勤勤懇懇的工作,為什麼公司提拔他而不提拔我呢,我很困惑...

不僅僅是吐槽

今天和乙個同事聊到現在的工作,沒想到一聊就是二個多小時,大多是對現在的處境的吐槽 同時展望了一下以後的工作領域。乙個人走著想了很多 總感覺要寫下來點什麼,生活不能這麼將就 更多的是一種感慨,也希望給自己定乙個目標,讓自己去改變 因為這不僅僅是吐槽。公司主要是erp產品,因為是垂直行業的產品,加上這幾...