欧美性猛交xxxx免费看_牛牛在线视频国产免费_天堂草原电视剧在线观看免费_国产粉嫩高清在线观看_国产欧美日本亚洲精品一5区

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

到底是更新緩存還是刪緩存

數(shù)據(jù)分析與開發(fā) ? 來源:水滴與銀彈 ? 作者:Magic Kaito ? 2021-10-22 17:05 ? 次閱讀

如何保證緩存和數(shù)據(jù)庫一致性,這是一個(gè)老生常談的話題了。

但很多人對(duì)這個(gè)問題,依舊有很多疑惑:

到底是更新緩存還是刪緩存?

到底選擇先更新數(shù)據(jù)庫,再刪除緩存,還是先刪除緩存,再更新數(shù)據(jù)庫?

為什么要引入消息隊(duì)列保證一致性?

延遲雙刪會(huì)有什么問題?到底要不要用?

這篇文章,我們就來把這些問題講清楚。

這篇文章干貨很多,希望你可以耐心讀完。

引入緩存提高性能

我們從最簡(jiǎn)單的場(chǎng)景開始講起。

如果你的業(yè)務(wù)處于起步階段,流量非常小,那無論是讀請(qǐng)求還是寫請(qǐng)求,直接操作數(shù)據(jù)庫即可,這時(shí)你的架構(gòu)模型是這樣的:

但隨著業(yè)務(wù)量的增長(zhǎng),你的項(xiàng)目請(qǐng)求量越來越大,這時(shí)如果每次都從數(shù)據(jù)庫中讀數(shù)據(jù),那肯定會(huì)有性能問題。

這個(gè)階段通常的做法是,引入「緩存」來提高讀性能,架構(gòu)模型就變成了這樣:

c8576fe8-3230-11ec-82a8-dac502259ad0.jpg

當(dāng)下優(yōu)秀的緩存中間件,當(dāng)屬 Redis 莫屬,它不僅性能非常高,還提供了很多友好的數(shù)據(jù)類型,可以很好地滿足我們的業(yè)務(wù)需求。

但引入緩存之后,你就會(huì)面臨一個(gè)問題:之前數(shù)據(jù)只存在數(shù)據(jù)庫中,現(xiàn)在要放到緩存中讀取,具體要怎么存呢?

最簡(jiǎn)單直接的方案是「全量數(shù)據(jù)刷到緩存中」:

數(shù)據(jù)庫的數(shù)據(jù),全量刷入緩存(不設(shè)置失效時(shí)間)

寫請(qǐng)求只更新數(shù)據(jù)庫,不更新緩存

啟動(dòng)一個(gè)定時(shí)任務(wù),定時(shí)把數(shù)據(jù)庫的數(shù)據(jù),更新到緩存中

這個(gè)方案的優(yōu)點(diǎn)是,所有讀請(qǐng)求都可以直接「命中」緩存,不需要再查數(shù)據(jù)庫,性能非常高。

但缺點(diǎn)也很明顯,有 2 個(gè)問題:

緩存利用率低:不經(jīng)常訪問的數(shù)據(jù),還一直留在緩存中

數(shù)據(jù)不一致:因?yàn)槭恰付〞r(shí)」刷新緩存,緩存和數(shù)據(jù)庫存在不一致(取決于定時(shí)任務(wù)的執(zhí)行頻率)

所以,這種方案一般更適合業(yè)務(wù)「體量小」,且對(duì)數(shù)據(jù)一致性要求不高的業(yè)務(wù)場(chǎng)景。

那如果我們的業(yè)務(wù)體量很大,怎么解決這 2 個(gè)問題呢?

緩存利用率和一致性問題

先來看第一個(gè)問題,如何提高緩存利用率?

想要緩存利用率「最大化」,我們很容易想到的方案是,緩存中只保留最近訪問的「熱數(shù)據(jù)」。但具體要怎么做呢?

我們可以這樣優(yōu)化:

寫請(qǐng)求依舊只寫數(shù)據(jù)庫

讀請(qǐng)求先讀緩存,如果緩存不存在,則從數(shù)據(jù)庫讀取,并重建緩存

同時(shí),寫入緩存中的數(shù)據(jù),都設(shè)置失效時(shí)間

這樣一來,緩存中不經(jīng)常訪問的數(shù)據(jù),隨著時(shí)間的推移,都會(huì)逐漸「過期」淘汰掉,最終緩存中保留的,都是經(jīng)常被訪問的「熱數(shù)據(jù)」,緩存利用率得以最大化。

再來看數(shù)據(jù)一致性問題。

要想保證緩存和數(shù)據(jù)庫「實(shí)時(shí)」一致,那就不能再用定時(shí)任務(wù)刷新緩存了。

所以,當(dāng)數(shù)據(jù)發(fā)生更新時(shí),我們不僅要操作數(shù)據(jù)庫,還要一并操作緩存。具體操作就是,修改一條數(shù)據(jù)時(shí),不僅要更新數(shù)據(jù)庫,也要連帶緩存一起更新。

但數(shù)據(jù)庫和緩存都更新,又存在先后問題,那對(duì)應(yīng)的方案就有 2 個(gè):

先更新緩存,后更新數(shù)據(jù)庫

先更新數(shù)據(jù)庫,后更新緩存

哪個(gè)方案更好呢?

先不考慮并發(fā)問題,正常情況下,無論誰先誰后,都可以讓兩者保持一致,但現(xiàn)在我們需要重點(diǎn)考慮「異常」情況。

因?yàn)椴僮鞣譃閮刹?,那么就很有可能存在「第一步成功、第二步失敗」的情況發(fā)生。

這 2 種方案我們一個(gè)個(gè)來分析。

1) 先更新緩存,后更新數(shù)據(jù)庫

如果緩存更新成功了,但數(shù)據(jù)庫更新失敗,那么此時(shí)緩存中是最新值,但數(shù)據(jù)庫中是「舊值」。

雖然此時(shí)讀請(qǐng)求可以命中緩存,拿到正確的值,但是,一旦緩存「失效」,就會(huì)從數(shù)據(jù)庫中讀取到「舊值」,重建緩存也是這個(gè)舊值。

這時(shí)用戶會(huì)發(fā)現(xiàn)自己之前修改的數(shù)據(jù)又「變回去」了,對(duì)業(yè)務(wù)造成影響。

2) 先更新數(shù)據(jù)庫,后更新緩存

如果數(shù)據(jù)庫更新成功了,但緩存更新失敗,那么此時(shí)數(shù)據(jù)庫中是最新值,緩存中是「舊值」。

之后的讀請(qǐng)求讀到的都是舊數(shù)據(jù),只有當(dāng)緩存「失效」后,才能從數(shù)據(jù)庫中得到正確的值。

這時(shí)用戶會(huì)發(fā)現(xiàn),自己剛剛修改了數(shù)據(jù),但卻看不到變更,一段時(shí)間過后,數(shù)據(jù)才變更過來,對(duì)業(yè)務(wù)也會(huì)有影響。

可見,無論誰先誰后,但凡后者發(fā)生異常,就會(huì)對(duì)業(yè)務(wù)造成影響。那怎么解決這個(gè)問題呢?

別急,后面我會(huì)詳細(xì)給出對(duì)應(yīng)的解決方案。

我們繼續(xù)分析,除了操作失敗問題,還有什么場(chǎng)景會(huì)影響數(shù)據(jù)一致性?

這里我們還需要重點(diǎn)關(guān)注:并發(fā)問題。

并發(fā)引發(fā)的一致性問題

假設(shè)我們采用「先更新數(shù)據(jù)庫,再更新緩存」的方案,并且兩步都可以「成功執(zhí)行」的前提下,如果存在并發(fā),情況會(huì)是怎樣的呢?

有線程 A 和線程 B 兩個(gè)線程,需要更新「同一條」數(shù)據(jù),會(huì)發(fā)生這樣的場(chǎng)景:

線程 A 更新數(shù)據(jù)庫(X = 1)

線程 B 更新數(shù)據(jù)庫(X = 2)

線程 B 更新緩存(X = 2)

線程 A 更新緩存(X = 1)

最終 X 的值在緩存中是 1,在數(shù)據(jù)庫中是 2,發(fā)生不一致。

也就是說,A 雖然先于 B 發(fā)生,但 B 操作數(shù)據(jù)庫和緩存的時(shí)間,卻要比 A 的時(shí)間短,執(zhí)行時(shí)序發(fā)生「錯(cuò)亂」,最終這條數(shù)據(jù)結(jié)果是不符合預(yù)期的。

同樣地,采用「先更新緩存,再更新數(shù)據(jù)庫」的方案,也會(huì)有類似問題,這里不再詳述。

除此之外,我們從「緩存利用率」的角度來評(píng)估這個(gè)方案,也是不太推薦的。

這是因?yàn)槊看螖?shù)據(jù)發(fā)生變更,都「無腦」更新緩存,但是緩存中的數(shù)據(jù)不一定會(huì)被「馬上讀取」,這就會(huì)導(dǎo)致緩存中可能存放了很多不常訪問的數(shù)據(jù),浪費(fèi)緩存資源。

而且很多情況下,寫到緩存中的值,并不是與數(shù)據(jù)庫中的值一一對(duì)應(yīng)的,很有可能是先查詢數(shù)據(jù)庫,再經(jīng)過一系列「計(jì)算」得出一個(gè)值,才把這個(gè)值才寫到緩存中。

由此可見,這種「更新數(shù)據(jù)庫 + 更新緩存」的方案,不僅緩存利用率不高,還會(huì)造成機(jī)器性能的浪費(fèi)。

所以此時(shí)我們需要考慮另外一種方案:刪除緩存。

刪除緩存可以保證一致性嗎?

刪除緩存對(duì)應(yīng)的方案也有 2 種:

先刪除緩存,后更新數(shù)據(jù)庫

先更新數(shù)據(jù)庫,后刪除緩存

經(jīng)過前面的分析我們已經(jīng)得知,但凡「第二步」操作失敗,都會(huì)導(dǎo)致數(shù)據(jù)不一致。

這里我不再詳述具體場(chǎng)景,你可以按照前面的思路推演一下,就可以看到依舊存在數(shù)據(jù)不一致的情況。

這里我們重點(diǎn)來看「并發(fā)」問題。

1) 先刪除緩存,后更新數(shù)據(jù)庫

如果有 2 個(gè)線程要并發(fā)「讀寫」數(shù)據(jù),可能會(huì)發(fā)生以下場(chǎng)景:

線程 A 要更新 X = 2(原值 X = 1)

線程 A 先刪除緩存

線程 B 讀緩存,發(fā)現(xiàn)不存在,從數(shù)據(jù)庫中讀取到舊值(X = 1)

線程 A 將新值寫入數(shù)據(jù)庫(X = 2)

線程 B 將舊值寫入緩存(X = 1)

最終 X 的值在緩存中是 1(舊值),在數(shù)據(jù)庫中是 2(新值),發(fā)生不一致。

可見,先刪除緩存,后更新數(shù)據(jù)庫,當(dāng)發(fā)生「讀+寫」并發(fā)時(shí),還是存在數(shù)據(jù)不一致的情況。

2) 先更新數(shù)據(jù)庫,后刪除緩存

依舊是 2 個(gè)線程并發(fā)「讀寫」數(shù)據(jù):

緩存中 X 不存在(數(shù)據(jù)庫 X = 1)

線程 A 讀取數(shù)據(jù)庫,得到舊值(X = 1)

線程 B 更新數(shù)據(jù)庫(X = 2)

線程 B 刪除緩存

線程 A 將舊值寫入緩存(X = 1)

最終 X 的值在緩存中是 1(舊值),在數(shù)據(jù)庫中是 2(新值),也發(fā)生不一致。

這種情況「理論」來說是可能發(fā)生的,但實(shí)際真的有可能發(fā)生嗎?

其實(shí)概率「很低」,這是因?yàn)樗仨殱M足 3 個(gè)條件:

緩存剛好已失效

讀請(qǐng)求 + 寫請(qǐng)求并發(fā)

更新數(shù)據(jù)庫 + 刪除緩存的時(shí)間(步驟 3-4),要比讀數(shù)據(jù)庫 + 寫緩存時(shí)間短(步驟 2 和 5)

仔細(xì)想一下,條件 3 發(fā)生的概率其實(shí)是非常低的。

因?yàn)閷憯?shù)據(jù)庫一般會(huì)先「加鎖」,所以寫數(shù)據(jù)庫,通常是要比讀數(shù)據(jù)庫的時(shí)間更長(zhǎng)的。

這么來看,「先更新數(shù)據(jù)庫 + 再刪除緩存」的方案,是可以保證數(shù)據(jù)一致性的。

所以,我們應(yīng)該采用這種方案,來操作數(shù)據(jù)庫和緩存。

好,解決了并發(fā)問題,我們繼續(xù)來看前面遺留的,第二步執(zhí)行「失敗」導(dǎo)致數(shù)據(jù)不一致的問題。

如何保證兩步都執(zhí)行成功?

前面我們分析到,無論是更新緩存還是刪除緩存,只要第二步發(fā)生失敗,那么就會(huì)導(dǎo)致數(shù)據(jù)庫和緩存不一致。

保證第二步成功執(zhí)行,就是解決問題的關(guān)鍵。

想一下,程序在執(zhí)行過程中發(fā)生異常,最簡(jiǎn)單的解決辦法是什么?

答案是:重試。

是的,其實(shí)這里我們也可以這樣做。

無論是先操作緩存,還是先操作數(shù)據(jù)庫,但凡后者執(zhí)行失敗了,我們就可以發(fā)起重試,盡可能地去做「補(bǔ)償」。

那這是不是意味著,只要執(zhí)行失敗,我們「無腦重試」就可以了呢?

答案是否定的?,F(xiàn)實(shí)情況往往沒有想的這么簡(jiǎn)單,失敗后立即重試的問題在于:

立即重試很大概率「還會(huì)失敗」

「重試次數(shù)」設(shè)置多少才合理?

重試會(huì)一直「占用」這個(gè)線程資源,無法服務(wù)其它客戶端請(qǐng)求

看到了么,雖然我們想通過重試的方式解決問題,但這種「同步」重試的方案依舊不嚴(yán)謹(jǐn)。

那更好的方案應(yīng)該怎么做?

答案是:異步重試。什么是異步重試?

其實(shí)就是把重試請(qǐng)求寫到「消息隊(duì)列」中,然后由專門的消費(fèi)者來重試,直到成功。

或者更直接的做法,為了避免第二步執(zhí)行失敗,我們可以把操作緩存這一步,直接放到消息隊(duì)列中,由消費(fèi)者來操作緩存。

到這里你可能會(huì)問,寫消息隊(duì)列也有可能會(huì)失敗?。慷?,引入消息隊(duì)列,這又增加了更多的維護(hù)成本,這樣做值得嗎?

這個(gè)問題很好,但我們思考這樣一個(gè)問題:如果在執(zhí)行失敗的線程中一直重試,還沒等執(zhí)行成功,此時(shí)如果項(xiàng)目「重啟」了,那這次重試請(qǐng)求也就「丟失」了,那這條數(shù)據(jù)就一直不一致了。

所以,這里我們必須把重試或第二步操作放到另一個(gè)「服務(wù)」中,這個(gè)服務(wù)用「消息隊(duì)列」最為合適。這是因?yàn)橄㈥?duì)列的特性,正好符合我們的需求:

消息隊(duì)列保證可靠性:寫到隊(duì)列中的消息,成功消費(fèi)之前不會(huì)丟失(重啟項(xiàng)目也不擔(dān)心)

消息隊(duì)列保證消息成功投遞:下游從隊(duì)列拉取消息,成功消費(fèi)后才會(huì)刪除消息,否則還會(huì)繼續(xù)投遞消息給消費(fèi)者(符合我們重試的場(chǎng)景)

至于寫隊(duì)列失敗和消息隊(duì)列的維護(hù)成本問題:

寫隊(duì)列失敗:操作緩存和寫消息隊(duì)列,「同時(shí)失敗」的概率其實(shí)是很小的

維護(hù)成本:我們項(xiàng)目中一般都會(huì)用到消息隊(duì)列,維護(hù)成本并沒有新增很多

所以,引入消息隊(duì)列來解決這個(gè)問題,是比較合適的。這時(shí)架構(gòu)模型就變成了這樣:

那如果你確實(shí)不想在應(yīng)用中去寫消息隊(duì)列,是否有更簡(jiǎn)單的方案,同時(shí)又可以保證一致性呢?

方案還是有的,這就是近幾年比較流行的解決方案:訂閱數(shù)據(jù)庫變更日志,再操作緩存。

具體來講就是,我們的業(yè)務(wù)應(yīng)用在修改數(shù)據(jù)時(shí),「只需」修改數(shù)據(jù)庫,無需操作緩存。

那什么時(shí)候操作緩存呢?這就和數(shù)據(jù)庫的「變更日志」有關(guān)了。

拿 MySQL 舉例,當(dāng)一條數(shù)據(jù)發(fā)生修改時(shí),MySQL 就會(huì)產(chǎn)生一條變更日志(Binlog),我們可以訂閱這個(gè)日志,拿到具體操作的數(shù)據(jù),然后再根據(jù)這條數(shù)據(jù),去刪除對(duì)應(yīng)的緩存。

訂閱變更日志,目前也有了比較成熟的開源中間件,例如阿里的 canal,使用這種方案的優(yōu)點(diǎn)在于:

無需考慮寫消息隊(duì)列失敗情況:只要寫 MySQL 成功,Binlog 肯定會(huì)有

自動(dòng)投遞到下游隊(duì)列:canal 自動(dòng)把數(shù)據(jù)庫變更日志「投遞」給下游的消息隊(duì)列

當(dāng)然,與此同時(shí),我們需要投入精力去維護(hù) canal 的高可用和穩(wěn)定性。

如果你有留意觀察很多數(shù)據(jù)庫的特性,就會(huì)發(fā)現(xiàn)其實(shí)很多數(shù)據(jù)庫都逐漸開始提供「訂閱變更日志」的功能了,相信不遠(yuǎn)的將來,我們就不用通過中間件來拉取日志,自己寫程序就可以訂閱變更日志了,這樣可以進(jìn)一步簡(jiǎn)化流程。

至此,我們可以得出結(jié)論,想要保證數(shù)據(jù)庫和緩存一致性,推薦采用「先更新數(shù)據(jù)庫,再刪除緩存」方案,并配合「消息隊(duì)列」或「訂閱變更日志」的方式來做。

主從庫延遲和延遲雙刪問題

到這里,還有 2 個(gè)問題,是我們沒有重點(diǎn)分析過的。

第一個(gè)問題,還記得前面講到的「先刪除緩存,再更新數(shù)據(jù)庫」方案,導(dǎo)致不一致的場(chǎng)景么?

這里我再把例子拿過來讓你復(fù)習(xí)一下:

2 個(gè)線程要并發(fā)「讀寫」數(shù)據(jù),可能會(huì)發(fā)生以下場(chǎng)景:

線程 A 要更新 X = 2(原值 X = 1)

線程 A 先刪除緩存

線程 B 讀緩存,發(fā)現(xiàn)不存在,從數(shù)據(jù)庫中讀取到舊值(X = 1)

線程 A 將新值寫入數(shù)據(jù)庫(X = 2)

線程 B 將舊值寫入緩存(X = 1)

最終 X 的值在緩存中是 1(舊值),在數(shù)據(jù)庫中是 2(新值),發(fā)生不一致。

第二個(gè)問題:是關(guān)于「讀寫分離 + 主從復(fù)制延遲」情況下,緩存和數(shù)據(jù)庫一致性的問題。

在「先更新數(shù)據(jù)庫,再刪除緩存」方案下,「讀寫分離 + 主從庫延遲」其實(shí)也會(huì)導(dǎo)致不一致:

線程 A 更新主庫 X = 2(原值 X = 1)

線程 A 刪除緩存

線程 B 查詢緩存,沒有命中,查詢「從庫」得到舊值(從庫 X = 1)

從庫「同步」完成(主從庫 X = 2)

線程 B 將「舊值」寫入緩存(X = 1)

最終 X 的值在緩存中是 1(舊值),在主從庫中是 2(新值),也發(fā)生不一致。

看到了么?這 2 個(gè)問題的核心在于:緩存都被回種了「舊值」。

那怎么解決這類問題呢?

最有效的辦法就是,把緩存刪掉。

但是,不能立即刪,而是需要「延遲刪」,這就是業(yè)界給出的方案:緩存延遲雙刪策略。

按照延時(shí)雙刪策略,這 2 個(gè)問題的解決方案是這樣的:

解決第一個(gè)問題:在線程 A 刪除緩存、更新完數(shù)據(jù)庫之后,先「休眠一會(huì)」,再「刪除」一次緩存。

解決第二個(gè)問題:線程 A 可以生成一條「延時(shí)消息」,寫到消息隊(duì)列中,消費(fèi)者延時(shí)「刪除」緩存。

這兩個(gè)方案的目的,都是為了把緩存清掉,這樣一來,下次就可以從數(shù)據(jù)庫讀取到最新值,寫入緩存。

但問題來了,這個(gè)「延遲刪除」緩存,延遲時(shí)間到底設(shè)置要多久呢?

問題1:延遲時(shí)間要大于「主從復(fù)制」的延遲時(shí)間

問題2:延遲時(shí)間要大于線程 B 讀取數(shù)據(jù)庫 + 寫入緩存的時(shí)間

但是,這個(gè)時(shí)間在分布式和高并發(fā)場(chǎng)景下,其實(shí)是很難評(píng)估的。

很多時(shí)候,我們都是憑借經(jīng)驗(yàn)大致估算這個(gè)延遲時(shí)間,例如延遲 1-5s,只能盡可能地降低不一致的概率。

所以你看,采用這種方案,也只是盡可能保證一致性而已,極端情況下,還是有可能發(fā)生不一致。

所以實(shí)際使用中,我還是建議你采用「先更新數(shù)據(jù)庫,再刪除緩存」的方案,同時(shí),要盡可能地保證「主從復(fù)制」不要有太大延遲,降低出問題的概率。

可以做到強(qiáng)一致嗎?

看到這里你可能會(huì)想,這些方案還是不夠完美,我就想讓緩存和數(shù)據(jù)庫「強(qiáng)一致」,到底能不能做到呢?

其實(shí)很難。

要想做到強(qiáng)一致,最常見的方案是 2PC、3PC、Paxos、Raft 這類一致性協(xié)議,但它們的性能往往比較差,而且這些方案也比較復(fù)雜,還要考慮各種容錯(cuò)問題。

相反,這時(shí)我們換個(gè)角度思考一下,我們引入緩存的目的是什么?

沒錯(cuò),性能。

一旦我們決定使用緩存,那必然要面臨一致性問題。性能和一致性就像天平的兩端,無法做到都滿足要求。

而且,就拿我們前面講到的方案來說,當(dāng)操作數(shù)據(jù)庫和緩存完成之前,只要有其它請(qǐng)求可以進(jìn)來,都有可能查到「中間狀態(tài)」的數(shù)據(jù)。

所以如果非要追求強(qiáng)一致,那必須要求所有更新操作完成之前期間,不能有「任何請(qǐng)求」進(jìn)來。

雖然我們可以通過加「分布鎖」的方式來實(shí)現(xiàn),但我們要付出的代價(jià),很可能會(huì)超過引入緩存帶來的性能提升。

所以,既然決定使用緩存,就必須容忍「一致性」問題,我們只能盡可能地去降低問題出現(xiàn)的概率。

同時(shí)我們也要知道,緩存都是有「失效時(shí)間」的,就算在這期間存在短期不一致,我們依舊有失效時(shí)間來兜底,這樣也能達(dá)到最終一致。

總結(jié)

好了,總結(jié)一下這篇文章的重點(diǎn)。

1、想要提高應(yīng)用的性能,可以引入「緩存」來解決

2、引入緩存后,需要考慮緩存和數(shù)據(jù)庫一致性問題,可選的方案有:「更新數(shù)據(jù)庫 + 更新緩存」、「更新數(shù)據(jù)庫 + 刪除緩存」

3、更新數(shù)據(jù)庫 + 更新緩存方案,在「并發(fā)」場(chǎng)景下無法保證緩存和數(shù)據(jù)一致性,且存在「緩存資源浪費(fèi)」和「機(jī)器性能浪費(fèi)」的情況發(fā)生

4、在更新數(shù)據(jù)庫 + 刪除緩存的方案中,「先刪除緩存,再更新數(shù)據(jù)庫」在「并發(fā)」場(chǎng)景下依舊有數(shù)據(jù)不一致問題,解決方案是「延遲雙刪」,但這個(gè)延遲時(shí)間很難評(píng)估,所以推薦用「先更新數(shù)據(jù)庫,再刪除緩存」的方案

5、在「先更新數(shù)據(jù)庫,再刪除緩存」方案下,為了保證兩步都成功執(zhí)行,需配合「消息隊(duì)列」或「訂閱變更日志」的方案來做,本質(zhì)是通過「重試」的方式保證數(shù)據(jù)一致性

6、在「先更新數(shù)據(jù)庫,再刪除緩存」方案下,「讀寫分離 + 主從庫延遲」也會(huì)導(dǎo)致緩存和數(shù)據(jù)庫不一致,緩解此問題的方案是「延遲雙刪」,憑借經(jīng)驗(yàn)發(fā)送「延遲消息」到隊(duì)列中,延遲刪除緩存,同時(shí)也要控制主從庫延遲,盡可能降低不一致發(fā)生的概率

后記

本以為這個(gè)老生常談的話題,寫起來很好寫,沒想到在寫的過程中,還是挖到了很多之前沒有深度思考過的細(xì)節(jié)。

在這里我也分享 4 點(diǎn)心得給你:

1、性能和一致性不能同時(shí)滿足,為了性能考慮,通常會(huì)采用「最終一致性」的方案

2、掌握緩存和數(shù)據(jù)庫一致性問題,核心問題有 3 點(diǎn):緩存利用率、并發(fā)、緩存 + 數(shù)據(jù)庫一起成功問題

3、失敗場(chǎng)景下要保證一致性,常見手段就是「重試」,同步重試會(huì)影響吞吐量,所以通常會(huì)采用異步重試的方案

4、訂閱變更日志的思想,本質(zhì)是把權(quán)威數(shù)據(jù)源(例如 MySQL)當(dāng)做 leader 副本,讓其它異質(zhì)系統(tǒng)(例如 Redis / Elasticsearch)成為它的 follower 副本,通過同步變更日志的方式,保證 leader 和 follower 之間保持一致

很多一致性問題,都會(huì)采用這些方案來解決,希望我的這些心得對(duì)你有所啟發(fā)。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 緩存
    +關(guān)注

    關(guān)注

    1

    文章

    242

    瀏覽量

    26771
  • 數(shù)據(jù)庫
    +關(guān)注

    關(guān)注

    7

    文章

    3852

    瀏覽量

    64724
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3338

    瀏覽量

    49266

原文標(biāo)題:緩存和數(shù)據(jù)庫一致性問題,看這篇就夠了

文章出處:【微信號(hào):DBDevs,微信公眾號(hào):數(shù)據(jù)分析與開發(fā)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    ADS4129后級(jí)接緩存器,緩存器出現(xiàn)過熱的原因?

    使用25M的采樣頻率對(duì)1M的信號(hào)進(jìn)行采樣,ADS4129以12位cmos電平輸出,出來后的數(shù)據(jù)接緩存器SN74AVC16244,緩存器工作電壓是3.3V,在工作過程中緩存器很燙,芯片管腳沒有短路
    發(fā)表于 02-07 08:42

    緩存與不帶緩存的固態(tài)硬盤有什么區(qū)別

    延遲、高可靠性和低噪音等優(yōu)點(diǎn),逐漸取代了傳統(tǒng)的機(jī)械硬盤,成為市場(chǎng)的主流選擇。而固態(tài)硬盤中的緩存技術(shù),更是提升其性能的關(guān)鍵因素之一。本文將深入探討固態(tài)硬盤的定義、結(jié)構(gòu)、工作原理,以及帶緩存與不帶緩存的固態(tài)硬盤之間的區(qū)別,以期為相關(guān)
    的頭像 發(fā)表于 02-06 16:35 ?113次閱讀

    DSD1793緩存器是怎么寫和讀的?

    看了很久,看不懂DSD1793緩存器是怎么寫和讀的。一般的I2C都是8bit的地址,它這個(gè)好像是16bit的地址, 暈死我了。 煩請(qǐng)幫忙啊。。。特別是怎么讀緩存器 謝謝?。。?
    發(fā)表于 12-25 06:09

    緩存對(duì)大數(shù)據(jù)處理的影響分析

    緩存對(duì)大數(shù)據(jù)處理的影響顯著且重要,主要體現(xiàn)在以下幾個(gè)方面: 一、提高數(shù)據(jù)訪問速度 在大數(shù)據(jù)環(huán)境中,數(shù)據(jù)存儲(chǔ)通常采用分布式存儲(chǔ)系統(tǒng),數(shù)據(jù)量龐大,直接從存儲(chǔ)系統(tǒng)中讀取數(shù)據(jù)會(huì)存在較高的延遲。而通過緩存技術(shù)
    的頭像 發(fā)表于 12-18 09:45 ?259次閱讀

    HTTP緩存頭的使用 本地緩存與遠(yuǎn)程緩存的區(qū)別

    HTTP緩存頭是一組HTTP響應(yīng)頭,它們控制瀏覽器和中間代理服務(wù)器如何緩存網(wǎng)頁內(nèi)容。合理使用HTTP緩存頭可以顯著提高網(wǎng)站的加載速度和性能,減少服務(wù)器的負(fù)載。 1. HTTP緩存頭概述
    的頭像 發(fā)表于 12-18 09:41 ?180次閱讀

    Web緩存的類型及功能分析

    隨著互聯(lián)網(wǎng)的迅速發(fā)展,用戶對(duì)網(wǎng)絡(luò)內(nèi)容的訪問需求日益增長(zhǎng)。為了提高用戶體驗(yàn)和降低服務(wù)器負(fù)擔(dān),Web緩存技術(shù)應(yīng)運(yùn)而生。Web緩存通過存儲(chǔ)重復(fù)請(qǐng)求的數(shù)據(jù),減少了對(duì)原始服務(wù)器的訪問次數(shù),從而加快了數(shù)據(jù)傳輸
    的頭像 發(fā)表于 12-18 09:35 ?329次閱讀

    緩存技術(shù)在軟件開發(fā)中的應(yīng)用

    在現(xiàn)代軟件開發(fā)中,隨著數(shù)據(jù)量的爆炸性增長(zhǎng)和用戶對(duì)響應(yīng)速度的高要求,緩存技術(shù)成為了提升系統(tǒng)性能的重要手段。緩存技術(shù)通過將數(shù)據(jù)存儲(chǔ)在離用戶更近的位置,減少數(shù)據(jù)訪問延遲,提高數(shù)據(jù)處理速度,從而優(yōu)化
    的頭像 發(fā)表于 12-18 09:32 ?347次閱讀

    什么是緩存(Cache)及其作用

    緩存(Cache)是一種高速存儲(chǔ)器,用于臨時(shí)存儲(chǔ)數(shù)據(jù),以便快速訪問。在計(jì)算機(jī)系統(tǒng)中,緩存的作用是減少處理器訪問主存儲(chǔ)器(如隨機(jī)存取存儲(chǔ)器RAM)所需的時(shí)間。 緩存(Cache)概述 緩存
    的頭像 發(fā)表于 12-18 09:28 ?1642次閱讀

    探討移動(dòng)設(shè)備中的緩存文件管理

    ? 本文發(fā)表于FAST 2022。 探討 緩存文件管理方法。本文 通過一個(gè)輕量級(jí)的基于機(jī)器學(xué)習(xí)的分類引擎來篩選和個(gè)性化管理緩存文件 ,實(shí)驗(yàn) 在 華為P9 和 Mate30 兩部手機(jī)上進(jìn)行 ,驗(yàn)證I
    的頭像 發(fā)表于 11-28 11:50 ?664次閱讀
    探討移動(dòng)設(shè)備中的<b class='flag-5'>緩存</b>文件管理

    緩存之美——如何選擇合適的本地緩存?

    Guava cache是Google開發(fā)的Guava工具包中一套完善的JVM本地緩存框架,底層實(shí)現(xiàn)的數(shù)據(jù)結(jié)構(gòu)類似于ConcurrentHashMap,但是進(jìn)行了更多的能力拓展,包括緩存過期時(shí)間設(shè)置、緩存容量設(shè)置、多種淘汰策略、
    的頭像 發(fā)表于 11-17 14:24 ?428次閱讀
    <b class='flag-5'>緩存</b>之美——如何選擇合適的本地<b class='flag-5'>緩存</b>?

    DSP指令緩存性能OMAP5912

    電子發(fā)燒友網(wǎng)站提供《DSP指令緩存性能OMAP5912.pdf》資料免費(fèi)下載
    發(fā)表于 10-16 10:16 ?0次下載
    DSP指令<b class='flag-5'>緩存</b>性能OMAP5912

    請(qǐng)問LMV772到底是雙電源還是單電源???

    請(qǐng)問LMV772到底是雙電源還是單電源???手冊(cè)前面寫的太模糊了。求指教
    發(fā)表于 09-09 07:10

    什么是CPU緩存?它有哪些作用?

    CPU緩存(Cache Memory)是計(jì)算機(jī)系統(tǒng)中一個(gè)至關(guān)重要的組成部分,它位于CPU與內(nèi)存之間,作為兩者之間的臨時(shí)存儲(chǔ)器。CPU緩存的主要作用是減少CPU訪問內(nèi)存所需的時(shí)間,從而提高系統(tǒng)的整體性能。以下將詳細(xì)闡述CPU緩存
    的頭像 發(fā)表于 08-22 14:54 ?3842次閱讀

    ESP8266緩存AP后,是否會(huì)自動(dòng)連接到任何緩存的AP?

    ,如果 ESP 進(jìn)入范圍,ESP 是否會(huì)自動(dòng)連接到任何緩存的 AP?還是只有第一個(gè)(或第零個(gè))?我的任務(wù)是在它們之間切換嗎? SDK 說道
    發(fā)表于 07-11 07:58

    交換機(jī)分布緩存_述說數(shù)據(jù)中心交換機(jī)的重要性能指標(biāo)——緩存

    交換機(jī)是數(shù)據(jù)中心不可缺少的網(wǎng)絡(luò)設(shè)備,在數(shù)據(jù)中心里發(fā)揮著重要作用。在平時(shí)使用和采購時(shí),大多數(shù)都關(guān)注交換機(jī)的背板帶寬、端口密度、單端口速度、協(xié)議特性等方面的性能指標(biāo),很少有人去關(guān)注緩存指標(biāo),這是一個(gè)常常
    的頭像 發(fā)表于 03-15 17:39 ?951次閱讀