領(lǐng)導(dǎo):誰(shuí)再用 Redis 實(shí)現(xiàn)過(guò)期訂單關(guān)閉,立馬滾蛋
點(diǎn)擊關(guān)注公眾號(hào):互聯(lián)網(wǎng)架構(gòu)師,后臺(tái)回復(fù) 2T獲取2TB學(xué)習(xí)資源!
上一篇:Alibaba開(kāi)源內(nèi)網(wǎng)高并發(fā)編程手冊(cè).pdf
日前拜讀阿牛老師的大作 領(lǐng)導(dǎo):誰(shuí)再用定時(shí)任務(wù)實(shí)現(xiàn)關(guān)閉訂單,立馬滾蛋!發(fā)現(xiàn)其方案有若干瑕疵,特此拋磚引玉討論一二。
在電商、支付等領(lǐng)域,往往會(huì)有這樣的場(chǎng)景,用戶下單后放棄支付了,那這筆訂單會(huì)在指定的時(shí)間段后進(jìn)行關(guān)閉操作,細(xì)心的你一定發(fā)現(xiàn)了像某寶、某東都有這樣的邏輯,而且時(shí)間很準(zhǔn)確,誤差在1s內(nèi);那他們是怎么實(shí)現(xiàn)的呢?
一般實(shí)現(xiàn)的方法有幾種:
1、 使用rocketmq、rabbitmq、pulsar等消息隊(duì)列的延時(shí)投遞功能;
2、 使用redisson提供的DelayedQueue;
有一些方案雖然廣為流傳但存在著致命缺陷,不要用來(lái)實(shí)現(xiàn)延時(shí)任務(wù)
1、 使用redis的過(guò)期監(jiān)聽(tīng);
2、 使用rabbitmq的死信隊(duì)列;
3、 使用非持久化的時(shí)間輪;
redis 過(guò)期監(jiān)聽(tīng)
在Redis 官方手冊(cè)的keyspace-notifications: timing-of-expired-events中明確指出:
Basically expired events are generated when the Redis server deletes the key and not when the time to live theoretically reaches the value of zero
redis 自動(dòng)過(guò)期的實(shí)現(xiàn)方式是:定時(shí)任務(wù)離線掃描并刪除部分過(guò)期鍵;在訪問(wèn)鍵時(shí)惰性檢查是否過(guò)期并刪除過(guò)期鍵。redis 從未保證會(huì)在設(shè)定的過(guò)期時(shí)間立即刪除并發(fā)送過(guò)期通知。實(shí)際上,過(guò)期通知晚于設(shè)定的過(guò)期時(shí)間數(shù)分鐘的情況也比較常見(jiàn)。
此外鍵空間通知采用的是發(fā)送即忘(fire and forget)策略,并不像消息隊(duì)列一樣保證送達(dá)。當(dāng)訂閱事件的客戶端會(huì)丟失所有在斷線期間所有分發(fā)給它的事件。
這是一種比定時(shí)掃描數(shù)據(jù)庫(kù)更 “LOW” 的解決方案,請(qǐng)不要使用。
有另一位大佬做了測(cè)試 請(qǐng)勿過(guò)度依賴Redis的過(guò)期監(jiān)聽(tīng), 有興趣的朋友可以自行查閱。
rabbitmq 死信
死信(Dead Letter) 是 rabbitmq 提供的一種機(jī)制。當(dāng)一條消息滿足下列條件之一那么它會(huì)成為死信:
消息被否定確認(rèn)(如channel.basicNack) 并且此時(shí)requeue 屬性被設(shè)置為false。 消息在隊(duì)列的存活時(shí)間超過(guò)設(shè)置的TTL時(shí)間 消息隊(duì)列的消息數(shù)量已經(jīng)超過(guò)最大隊(duì)列長(zhǎng)度
若配置了死信隊(duì)列,死信會(huì)被 rabbitmq 投到死信隊(duì)列中。
在rabbitmq 中創(chuàng)建死信隊(duì)列的操作流程大概是:
創(chuàng)建一個(gè)交換機(jī)作為死信交換機(jī) 在業(yè)務(wù)隊(duì)列中配置 x-dead-letter-exchange 和 x-dead-letter-routing-key,將第一步的交換機(jī)設(shè)為業(yè)務(wù)隊(duì)列的死信交換機(jī) 在死信交換機(jī)上創(chuàng)建隊(duì)列,并監(jiān)聽(tīng)此隊(duì)列
死信隊(duì)列的設(shè)計(jì)目的是為了存儲(chǔ)沒(méi)有被正常消費(fèi)的消息,便于排查和重新投遞。死信隊(duì)列同樣也沒(méi)有對(duì)投遞時(shí)間做出保證,在第一條消息成為死信之前,后面的消息即使過(guò)期也不會(huì)投遞為死信。
為了解決這個(gè)問(wèn)題,rabbit 官方推出了延遲投遞插件 rabbitmq-delayed-message-exchange ,推薦使用官方插件來(lái)做延時(shí)消息。
這里說(shuō)點(diǎn)題外話,使用 redis 過(guò)期監(jiān)聽(tīng)或者 rabbitmq 死信隊(duì)列做延時(shí)任務(wù)都是以設(shè)計(jì)者預(yù)想之外的方式使用中間件,這種出其不意必自斃的行為通常會(huì)存在某些隱患,比如缺乏一致性和可靠性保證,吞吐量較低、資源泄漏等。比較出名的一個(gè)事例是很多人使用 redis 的 list 作為消息隊(duì)列,以致于最后作者看不下去寫了 disque 并最后演變?yōu)?redis stream。工作中還是盡量不要濫用中間件,用專業(yè)的組件做專業(yè)的事
時(shí)間輪
時(shí)間輪是一種很優(yōu)秀的定時(shí)任務(wù)的數(shù)據(jù)結(jié)構(gòu),然而絕大多數(shù)時(shí)間輪實(shí)現(xiàn)是純內(nèi)存沒(méi)有持久化的。運(yùn)行時(shí)間輪的進(jìn)程崩潰之后其中所有的任務(wù)都會(huì)灰飛煙滅,所以奉勸各位勇士謹(jǐn)慎使用。
redisson delayqueue
redisson delayqueue 是一種基于 redis zset 結(jié)構(gòu)的延時(shí)隊(duì)列實(shí)現(xiàn)。delayqueue 中有一個(gè)名為 timeoutSetName 的有序集合,其中元素的 score 為投遞時(shí)間戳。delayqueue 會(huì)定時(shí)使用 zrangebyscore 掃描已到投遞時(shí)間的消息,然后把它們移動(dòng)到就緒消息列表中。
delayqueue 保證 redis 不崩潰的情況下不會(huì)丟失消息,在沒(méi)有更好的解決方案時(shí)不妨一試。
在數(shù)據(jù)庫(kù)索引設(shè)計(jì)良好的情況下,定時(shí)掃描數(shù)據(jù)庫(kù)中未完成的訂單產(chǎn)生的開(kāi)銷并沒(méi)有想象中那么大。在使用 redisson delayqueue 等定時(shí)任務(wù)中間件時(shí)可以同時(shí)使用掃描數(shù)據(jù)庫(kù)的方法作為補(bǔ)償機(jī)制,避免中間件故障造成任務(wù)丟失。
golang 玩家可以試試我做的類似產(chǎn)品 hdt3213/delayqueue
結(jié)論
1、 首先推薦使用rocketmq、pulsar等擁有定時(shí)投遞功能的消息隊(duì)列;
2、 在不方便獲得專業(yè)消息隊(duì)列時(shí)可以考慮使用redissondelayqueue等基于redis的延時(shí)隊(duì)列方案,但要為redis崩潰等情況設(shè)計(jì)補(bǔ)償保護(hù)機(jī)制;
3、 在無(wú)法使用redissondelayqueue等方案時(shí)可以考慮使用時(shí)間輪由于時(shí)間輪重啟遠(yuǎn)比redis重啟要頻繁,定時(shí)掃庫(kù)等保護(hù)機(jī)制更為重要;
4、 永遠(yuǎn)不要使用redis過(guò)期監(jiān)聽(tīng)實(shí)現(xiàn)定時(shí)任務(wù);
來(lái)源:cnblogs.com/Finley/p/16395466.html
正文結(jié)束
1.求求你別在用SpringMVC了,太Low了!Spring又官宣了一個(gè)更牛逼的替代框架!
2.從零開(kāi)始搭建創(chuàng)業(yè)公司后臺(tái)技術(shù)棧
4.Spring Boot+Redis+攔截器+自定義Annotation實(shí)現(xiàn)接口自動(dòng)冪等
5.為什么國(guó)內(nèi) 996 干不過(guò)國(guó)外的 955呢?

