用Redis輕松實(shí)現(xiàn)秒殺系統(tǒng)

導(dǎo)論

曾經(jīng)被問(wèn)過(guò)好多次怎樣實(shí)現(xiàn)秒殺系統(tǒng)的問(wèn)題。因此這里把我設(shè)想的實(shí)現(xiàn)秒殺系統(tǒng)的價(jià)格設(shè)計(jì)分享出來(lái)。供大家參考。

秒殺系統(tǒng)的架構(gòu)設(shè)計(jì)

秒殺系統(tǒng),是典型的短時(shí)大量突發(fā)訪問(wèn)類(lèi)問(wèn)題。對(duì)這類(lèi)問(wèn)題,有三種優(yōu)化性能的思路:

寫(xiě)入內(nèi)存而不是寫(xiě)入硬盤(pán)

異步處理而不是同步處理

分布式處理

用上這三招,不論秒殺時(shí)負(fù)載多大,都能輕松應(yīng)對(duì)。更好的是,Redis能夠滿(mǎn)足上述三點(diǎn)。因此,用Redis就能輕松實(shí)現(xiàn)秒殺系統(tǒng)。

用我這個(gè)方案,無(wú)論是電商平臺(tái)特價(jià)秒殺,12306火車(chē)票秒殺,都不是事:)

下面介紹一下為什么上述三種性能優(yōu)化思路能夠解決秒殺系統(tǒng)的性能問(wèn)題:

寫(xiě)入內(nèi)存而不是寫(xiě)入硬盤(pán)

傳統(tǒng)硬盤(pán)的讀寫(xiě)性能是相當(dāng)差的。SSD硬盤(pán)比傳統(tǒng)硬盤(pán)快100倍。而內(nèi)存又比SSD硬盤(pán)快10倍以上。因此,寫(xiě)入內(nèi)存而不是寫(xiě)入硬盤(pán),就能使系統(tǒng)的能力提升上千倍。也就是說(shuō),原來(lái)你的秒殺系統(tǒng)可能需要1000臺(tái)服務(wù)器支撐,現(xiàn)在1臺(tái)服務(wù)器就可以扛住了。

你可能會(huì)有這樣的疑問(wèn):寫(xiě)入內(nèi)存而不是持久化,那么如果此時(shí)計(jì)算機(jī)宕機(jī)了,那么寫(xiě)入的數(shù)據(jù)不就全部丟失了嗎?如果你就這么倒霉碰到服務(wù)器宕機(jī),那你就沒(méi)秒到了,有什么大不了?

最后,后面真正處理秒殺訂單時(shí),我們會(huì)把信息持久化到硬盤(pán)中。因此不會(huì)丟失關(guān)鍵數(shù)據(jù)。

Redis是一個(gè)緩存系統(tǒng),數(shù)據(jù)寫(xiě)入內(nèi)存后就返回給客戶(hù)端了,能夠支持這個(gè)特性。

異步處理而不是同步處理

像秒殺這樣短時(shí)大并發(fā)的系統(tǒng),在性能負(fù)載上有一個(gè)明顯的波峰和長(zhǎng)期的波谷。為了應(yīng)對(duì)相當(dāng)短時(shí)間的大并發(fā)而準(zhǔn)備大量服務(wù)器來(lái)應(yīng)對(duì),在經(jīng)濟(jì)上是相當(dāng)不合算的。

因此,對(duì)付秒殺類(lèi)需求,就應(yīng)該化同步為異步。用戶(hù)請(qǐng)求寫(xiě)入內(nèi)存后立刻返回。后臺(tái)啟動(dòng)多個(gè)線程從內(nèi)存池中異步讀取數(shù)據(jù),進(jìn)行處理。如用戶(hù)請(qǐng)求可能是1秒鐘內(nèi)進(jìn)入的,系統(tǒng)實(shí)際處理完成可能花30分鐘。那么一臺(tái)服務(wù)器在異步情況下其處理能力大于同步情況下1800多倍!

異步處理,通常用MQ(消息隊(duì)列)來(lái)實(shí)現(xiàn)。Redis可以看作是一個(gè)高性能的MQ。因?yàn)樗臄?shù)據(jù)讀寫(xiě)都發(fā)生在內(nèi)存中。

分布式處理

好吧。也許你的客戶(hù)很多,秒殺系統(tǒng)即使用了上面兩招,還是捉襟見(jiàn)肘。沒(méi)關(guān)系,我們還有大招:分布式處理。如果一臺(tái)服務(wù)器撐不住秒殺系統(tǒng),那么就多用幾臺(tái)服務(wù)器。10臺(tái)不行,就上100臺(tái)。分布式處理,就是把海量用戶(hù)的請(qǐng)求分散到多個(gè)服務(wù)器上。一般使用hash實(shí)現(xiàn)均勻分布。

這類(lèi)系統(tǒng)在大數(shù)據(jù)云計(jì)算時(shí)代的今天已經(jīng)有很多了。無(wú)非是用Paxos算法和Hash Ring實(shí)現(xiàn)的。

Redis Cluster正是這樣一個(gè)分布式的產(chǎn)品。

使用Redis實(shí)現(xiàn)描述系統(tǒng)

Redis和Redis Cluster(分布式版本),是一個(gè)分布式緩存系統(tǒng)。其支持多種數(shù)據(jù)結(jié)構(gòu),也支持MQ。Redis在性能上做了大量?jī)?yōu)化。因此使用Redis或者Redis Cluster就可以輕松實(shí)現(xiàn)一個(gè)強(qiáng)大的秒殺系統(tǒng)。

基本上,你用Redis的這些命令就可以了。

RPUSH key value

插入秒殺請(qǐng)求

當(dāng)插入的秒殺請(qǐng)求數(shù)達(dá)到上限時(shí),停止所有后續(xù)插入。

后臺(tái)啟動(dòng)多個(gè)工作線程,使用

LPOP key

讀取秒殺成功者的用戶(hù)id,進(jìn)行后續(xù)處理。

或者使用LRANGE key start end命令讀取秒殺成功者的用戶(hù)id,進(jìn)行后續(xù)處理。

每完成一條秒殺記錄的處理,就執(zhí)行INCR key_num。一旦所有庫(kù)存處理完畢,就結(jié)束該商品的本次秒殺,關(guān)閉工作線程,也不再接收秒殺請(qǐng)求。

要是還撐不住,該怎么辦

也許你會(huì)說(shuō),我們的客戶(hù)很多。即使部署了Redis Cluster,仍然撐不住。那該怎么辦呢?

記得某個(gè)偉人曾經(jīng)說(shuō)過(guò):辦法總比困難多!

下面,我們具體分析下,還有哪些情況會(huì)壓垮我們架構(gòu)在Redis(Cluster)上的秒殺系統(tǒng)。

腳本攻擊

如現(xiàn)在有很多搶火車(chē)票的軟件。它們會(huì)自動(dòng)發(fā)起http請(qǐng)求。一個(gè)客戶(hù)端一秒會(huì)發(fā)起很多次請(qǐng)求。如果有很多用戶(hù)使用了這樣的軟件,就可能會(huì)直接把我們的交換機(jī)給壓垮了。

這個(gè)問(wèn)題其實(shí)屬于網(wǎng)絡(luò)問(wèn)題的范疇,和我們的秒殺系統(tǒng)不在一個(gè)層面上。因此不應(yīng)該由我們來(lái)解決。很多交換機(jī)都有防止一個(gè)源IP發(fā)起過(guò)多請(qǐng)求的功能。開(kāi)源軟件也有不少能實(shí)現(xiàn)這點(diǎn)。如linux上的TC可以控制。流行的Web服務(wù)器Nginx(它也可以看做是一個(gè)七層軟交換機(jī))也可以通過(guò)配置做到這一點(diǎn)。一個(gè)IP,一秒鐘我就允許你訪問(wèn)我2次,其他軟件包直接給你丟了,你還能壓垮我嗎?

交換機(jī)撐不住了

可能你們的客戶(hù)并發(fā)訪問(wèn)量實(shí)在太大了,交換機(jī)都撐不住了。

這也有辦法。我們可以用多個(gè)交換機(jī)為我們的秒殺系統(tǒng)服務(wù)。

原理就是DNS可以對(duì)一個(gè)域名返回多個(gè)IP,并且對(duì)不同的源IP,同一個(gè)域名返回不同的IP。如網(wǎng)通用戶(hù)訪問(wèn),就返回一個(gè)網(wǎng)通機(jī)房的IP;電信用戶(hù)訪問(wèn),就返回一個(gè)電信機(jī)房的IP。也就是用CDN了!

我們可以部署多臺(tái)交換機(jī)為不同的用戶(hù)服務(wù)。 用戶(hù)通過(guò)這些交換機(jī)訪問(wèn)后面數(shù)據(jù)中心的Redis Cluster進(jìn)行秒殺作業(yè)。

總結(jié)

有了Redis Cluster的幫助,做個(gè)支持海量用戶(hù)的秒殺系統(tǒng)其實(shí)So Easy!

這里介紹的方案雖然是針對(duì)秒殺系統(tǒng)的,但其背后的原理對(duì)其他高并發(fā)系統(tǒng)一樣有效。

最后,我們?cè)僦販匾幌赂咝阅芟到y(tǒng)的優(yōu)化原則:

寫(xiě)入內(nèi)存而不是寫(xiě)入硬盤(pán)

異步處理而不是同步處理

分布式處理

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 227,224評(píng)論 6 529
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 97,916評(píng)論 3 413
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人,你說(shuō)我怎么就攤上這事。” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 175,014評(píng)論 0 373
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 62,466評(píng)論 1 308
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 71,245評(píng)論 6 405
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 54,795評(píng)論 1 320
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 42,869評(píng)論 3 440
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 42,010評(píng)論 0 285
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 48,524評(píng)論 1 331
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 40,487評(píng)論 3 354
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 42,634評(píng)論 1 366
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,173評(píng)論 5 355
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 43,884評(píng)論 3 345
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 34,282評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 35,541評(píng)論 1 281
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 51,236評(píng)論 3 388
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 47,623評(píng)論 2 370

推薦閱讀更多精彩內(nèi)容