Redis快取和資料庫雙寫一致性問題

2022-07-25 19:12:16 字數 1720 閱讀 8304

資料庫與快取讀寫模式策略

寫完資料庫後是否需要馬上更新快取還是直接刪除快取?

(1)、如果寫資料庫的值與更新到快取值是一樣的,不需要經過任何的計算,可以馬上更新快取,但是如果對於那種寫資料頻繁而讀資料少的場景並不合適這種解決方案,因為也許還沒有查詢就被刪除或修改了,這樣會浪費時間和資源

(2)、如果寫資料庫的值與更新快取的值不一致,寫入快取中的資料需要經過幾個表的關聯計算後得到的結果插入快取中,那就沒有必要馬上更新快取,只有刪除快取即可,等到查詢的時候在去把計算後得到的結果插入到快取中即可。

所以一般的策略是當更新資料時,先刪除快取資料,然後更新資料庫,而不是更新快取,等要查詢的時候才把最新的資料更新到快取

資料庫與快取雙寫情況下導致資料不一致問題

場景一

當更新資料時,如更新某商品的庫存,當前商品的庫存是100,現在要更新為99,先更新資料庫更改成99,然後刪除快取,發現刪除快取失敗了,這意味著資料庫存的是99,而快取是100,這導致資料庫和快取不一致。

場景一解決方案

這種情況應該是先刪除快取,然後在更新資料庫,如果刪除快取失敗,那就不要更新資料庫,如果說刪除快取成功,而更新資料庫失敗,那查詢的時候只是從資料庫里查了舊的資料而已,這樣就能保持資料庫與快取的一致性。

場景二

在高併發的情況下,如果當刪除完快取的時候,這時去更新資料庫,但還沒有更新完,另外乙個請求來查詢資料,發現快取裡沒有,就去資料庫里查,還是以上面商品庫存為例,如果資料庫中產品的庫存是100,那麼查詢到的庫存是100,然後插入快取,插入完快取後,原來那個更新資料庫的執行緒把資料庫更新為了99,導致資料庫與快取不一致的情況

場景二解決方案

遇到這種情況,可以用佇列的去解決這個問,建立幾個佇列,如20個,根據商品的id去做hash值,然後對佇列個數取摸,當有資料更新請求時,先把它丟到佇列裡去,當更新完後在從佇列裡去除,如果在更新的過程中,遇到以上場景,先去快取裡看下有沒有資料,如果沒有,可以先去佇列裡看是否有相同商品id在做更新,如果有也把查詢的請求傳送到佇列裡去,然後同步等待快取更新完成。

這裡有乙個優化點,如果發現佇列裡有乙個查詢請求了,那麼就不要放新的查詢操作進去了,用乙個while(true)迴圈去查詢快取,迴圈個200ms左右,如果快取裡還沒有則直接取資料庫的舊資料,一般情況下是可以取到的。

在高併發下解決場景二要注意的問題

(1)讀請求時長阻塞

由於讀請求進行了非常輕度的非同步化,所以一定要注意讀超時的問題,每個讀請求必須在超時間內返回,該解決方案最大的風險在於可能資料更新很頻繁,導致佇列中擠壓了大量的更新操作在裡面,然後讀請求會發生大量的超時,最後導致大量的請求直接走資料庫,像遇到這種情況,一般要做好足夠的壓力測試,如果壓力過大,需要根據實際情況新增機器。

(2)請求併發量過高

這裡還是要做好壓力測試,多模擬真實場景,併發量在最高的時候qps多少,扛不住就要多加機器,還有就是做好讀寫比例是多少

(3)多服務例項部署的請求路由

可能這個服務部署了多個例項,那麼必須保證說,執行資料更新操作,以及執行快取更新操作的請求,都通過nginx伺服器路由到相同的服務例項上

(4)熱點商品的路由問題,導致請求的傾斜

某些商品的讀請求特別高,全部打到了相同的機器的相同丟列裡了,可能造成某台伺服器壓力過大,因為只有在商品資料更新的時候才會清空快取,然後才會導致讀寫併發,所以更新頻率不是太高的話,這個問題的影響並不是很大,但是確實有可能某些伺服器的負載會高一些。

如何保證Redis快取和資料庫的雙寫一致性?

在資料庫 快取模式下,當資料庫中的資料需要更新時,快取裡的資料怎麼處理?如何保證快取和資料庫中資料的一致性?常用的解決方案有兩種 其他渣渣的方案這裡不討論 1 先刪除快取,再更新資料庫 2 先更新資料庫,再刪除快取 下面我們就來看一下這兩種方案,看看它們是怎麼保證資料一致性的?理想的流程是這樣的 先...

redis快取 資料庫雙寫不一致

讀的時候 先讀快取,快取沒有的話,再讀取資料庫,然後取出資料後放入快取,同時返回響應 更新的時候 先刪除快取,然後再更新資料庫 之所以刪除快取而不是更新,其實是乙個懶載入的思想,避免頻繁更新,降低開銷,同時也可以避免更新快取成功後在更新資料庫時異常帶來的問題 場景1 先修改資料庫,再修改 刪除快取,...

redis 12 快取和資料庫雙寫一致性問題

資料庫中的資料和快取中的資料不一致 如果我們只是讀操作,肯定不會存在快取和資料庫雙寫一致性問題。但是如果更新或者刪除操作呢?我們知道執行乙個更新操作花費的時間遠遠大於乙個讀操作花費的時間。更新操作,我們是先更新資料庫呢還是先更新快取呢?如果兩步操作符合原子性,要麼同時成功,要麼同時失敗,則不存在一致...