www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當前位置:首頁 > 公眾號精選 > 架構(gòu)師社區(qū)
[導讀]假如下單時,用分布式鎖來防止庫存超賣,但是是每秒上千訂單的高并發(fā)場景,如何對分布式鎖進行高并發(fā)優(yōu)化來應(yīng)對這個場景?

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!

本文授權(quán)轉(zhuǎn)自石杉的架構(gòu)筆記


背景引入


首先,我們一起來看看這個問題的背景?


前段時間有個朋友在外面面試,然后有一天找我聊說:有一個國內(nèi)不錯的電商公司,面試官給他出了一個場景題:


假如下單時,用分布式鎖來防止庫存超賣,但是是每秒上千訂單的高并發(fā)場景,如何對分布式鎖進行高并發(fā)優(yōu)化來應(yīng)對這個場景?


他說他當時沒答上來,因為沒做過沒什么思路。其實我當時聽到這個面試題心里也覺得有點意思,因為如果是我來面試候選人的話,應(yīng)該會給的范圍更大一些。


比如讓面試的同學聊一聊電商高并發(fā)秒殺場景下的庫存超賣解決方案,各種方案的優(yōu)缺點以及實踐,進而聊到分布式鎖這個話題。


因為庫存超賣問題是有很多種技術(shù)解決方案的,比如悲觀鎖,分布式鎖,樂觀鎖,隊列串行化,Redis原子操作,等等吧。


但是既然那個面試官兄弟限定死了用分布式鎖來解決庫存超賣,我估計就是想問一個點:在高并發(fā)場景下如何優(yōu)化分布式鎖的并發(fā)性能


我覺得,面試官提問的角度還是可以接受的,因為在實際落地生產(chǎn)的時候,分布式鎖這個東西保證了數(shù)據(jù)的準確性,但是他天然并發(fā)能力有點弱。


剛好我之前在自己項目的其他場景下,確實是做過高并發(fā)場景下的分布式鎖優(yōu)化方案,因此正好是借著這個朋友的面試題,把分布式鎖的高并發(fā)優(yōu)化思路,給大家來聊一聊。


庫存超賣現(xiàn)象是怎么產(chǎn)生的?


先來看看如果不用分布式鎖,所謂的電商庫存超賣是啥意思?大家看看下面的圖:

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!


這個圖,其實很清晰了,假設(shè)訂單系統(tǒng)部署兩臺機器上,不同的用戶都要同時買10臺iphone,分別發(fā)了一個請求給訂單系統(tǒng)。接著每個訂單系統(tǒng)實例都去數(shù)據(jù)庫里查了一下,當前iphone庫存是12臺。


倆大兄弟一看,樂了,12臺庫存大于了要買的10臺數(shù)量??!于是乎,每個訂單系統(tǒng)實例都發(fā)送SQL到數(shù)據(jù)庫里下單,然后扣減了10個庫存,其中一個將庫存從12臺扣減為2臺,另外一個將庫存從2臺扣減為-8臺。


現(xiàn)在完了,庫存出現(xiàn)了負數(shù)!淚奔啊,沒有20臺iphone發(fā)給兩個用戶?。∵@可如何是好。


用分布式鎖如何解決庫存超賣問題?


我們用分布式鎖如何解決庫存超賣問題呢?其實很簡單,回憶一下上次我們說的那個分布式鎖的實現(xiàn)原理:


同一個鎖key,同一時間只能有一個客戶端拿到鎖,其他客戶端會陷入無限的等待來嘗試獲取那個鎖,只有獲取到鎖的客戶端才能執(zhí)行下面的業(yè)務(wù)邏輯。

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!


代碼大概就是上面那個樣子,現(xiàn)在我們來分析一下,為啥這樣做可以避免庫存超賣?

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!

大家可以順著上面的那個步驟序號看一遍,馬上就明白了。從上圖可以看到,只有一個訂單系統(tǒng)實例可以成功加分布式鎖,然后只有他一個實例可以查庫存、判斷庫存是否充足、下單扣減庫存,接著釋放鎖。


釋放鎖之后,另外一個訂單系統(tǒng)實例才能加鎖,接著查庫存,一下發(fā)現(xiàn)庫存只有2臺了,庫存不足,無法購買,下單失敗。不會將庫存扣減為-8的。


有沒有其他方案可以解決庫存超賣問題?


當然有??!比如悲觀鎖,分布式鎖,樂觀鎖,隊列串行化,異步隊列分散,Redis原子操作,等等,很多方案,我們對庫存超賣有自己的一整套優(yōu)化機制。


但是前面說過了,這篇文章就聊一個分布式鎖的并發(fā)優(yōu)化,不是聊庫存超賣的解決方案,庫存超賣只是一個業(yè)務(wù)場景而已。


分布式鎖的方案在高并發(fā)場景下


好,現(xiàn)在我們來看看,分布式鎖的方案在高并發(fā)場景下有什么問題?


問題很大啊!兄弟,不知道你看出來了沒有。分布式鎖一旦加了之后,對同一個商品的下單請求,會導致所有客戶端都必須對同一個商品的庫存鎖key進行加鎖


比如,對iphone這個商品的下單,都必對“iphone_stock”這個鎖key來加鎖。這樣會導致對同一個商品的下單請求,就必須串行化,一個接一個的處理。大家再回去對照上面的圖反復看一下,應(yīng)該能想明白這個問題。



假設(shè)加鎖之后,釋放鎖之前,查庫存 -> 創(chuàng)建訂單 -> 扣減庫存,這個過程性能很高吧,算他全過程20毫秒,這應(yīng)該不錯了。


那么1秒是1000毫秒,只能容納50個對這個商品的請求依次串行完成處理。比如一秒鐘來50個請求,都是對iphone下單的,那么每個請求處理20毫秒,一個一個來,最后1000毫秒正好處理完50個請求。


大家看一眼下面的圖,加深一下感覺。

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!



所以看到這里,大家起碼也明白了,簡單的使用分布式鎖來處理庫存超賣問題,存在什么缺陷。


缺陷就是同一個商品多用戶同時下單的時候,會基于分布式鎖串行化處理,導致沒法同時處理同一個商品的大量下單的請求。


這種方案,要是應(yīng)對那種低并發(fā)、無秒殺場景的普通小電商系統(tǒng),可能還可以接受。因為如果并發(fā)量很低,每秒就不到10個請求,沒有瞬時高并發(fā)秒殺單個商品的場景的話,其實也很少會對同一個商品在一秒內(nèi)瞬間下1000個訂單,因為小電商系統(tǒng)沒那場景。


如何對分布式鎖進行高并發(fā)優(yōu)化?


好了,終于引入正題了,那么現(xiàn)在怎么辦呢?


面試官說,我現(xiàn)在就卡死,庫存超賣就是用分布式鎖來解決,而且一秒對一個iphone下上千訂單,怎么優(yōu)化?


現(xiàn)在按照剛才的計算,你一秒鐘只能處理針對iphone的50個訂單。


其實說出來也很簡單,相信很多人看過java里的ConcurrentHashMap的源碼和底層原理,應(yīng)該知道里面的核心思路,就是分段加鎖!


把數(shù)據(jù)分成很多個段,每個段是一個單獨的鎖,所以多個線程過來并發(fā)修改數(shù)據(jù)的時候,可以并發(fā)的修改不同段的數(shù)據(jù)。不至于說,同一時間只能有一個線程獨占修改ConcurrentHashMap中的數(shù)據(jù)。


另外,Java 8中新增了一個LongAdder類,也是針對Java 7以前的AtomicLong進行的優(yōu)化,解決的是CAS類操作在高并發(fā)場景下,使用樂觀鎖思路,會導致大量線程長時間重復循環(huán)。


LongAdder中也是采用了類似的分段CAS操作,失敗則自動遷移到下一個分段進行CAS的思路。


其實分布式鎖的優(yōu)化思路也是類似的,之前我們是在另外一個業(yè)務(wù)場景下落地了這個方案到生產(chǎn)中,不是在庫存超賣問題里用的。


但是庫存超賣這個業(yè)務(wù)場景不錯,很容易理解,所以我們就用這個場景來說一下。大家看看下面的圖:

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!


其實這就是分段加鎖。你想,假如你現(xiàn)在iphone有1000個庫存,那么你完全可以給拆成20個庫存段,要是你愿意,可以在數(shù)據(jù)庫的表里建20個庫存字段,比如stock_01,stock_02,類似這樣的,也可以在redis之類的地方放20個庫存key。


總之,就是把你的1000件庫存給他拆開,每個庫存段是50件庫存,比如stock_01對應(yīng)50件庫存,stock_02對應(yīng)50件庫存。


接著,每秒1000個請求過來了,好!此時其實可以是自己寫一個簡單的隨機算法,每個請求都是隨機在20個分段庫存里,選擇一個進行加鎖。


bingo!這樣就好了,同時可以有最多20個下單請求一起執(zhí)行,每個下單請求鎖了一個庫存分段,然后在業(yè)務(wù)邏輯里面,就對數(shù)據(jù)庫或者是Redis中的那個分段庫存進行操作即可,包括查庫存 -> 判斷庫存是否充足 -> 扣減庫存。


這相當于什么呢?相當于一個20毫秒,可以并發(fā)處理掉20個下單請求,那么1秒,也就可以依次處理掉20 * 50 ?= 1000個對iphone的下單請求了。


一旦對某個數(shù)據(jù)做了分段處理之后,有一個坑大家一定要注意:就是如果某個下單請求,咔嚓加鎖,然后發(fā)現(xiàn)這個分段庫存里的庫存不足了,此時咋辦?


這時你得自動釋放鎖,然后立馬換下一個分段庫存,再次嘗試加鎖后嘗試處理。這個過程一定要實現(xiàn)。


分布式鎖并發(fā)優(yōu)化方案有沒有什么不足?


不足肯定是有的,最大的不足,大家發(fā)現(xiàn)沒有,很不方便啊!實現(xiàn)太復雜了。


  • 首先,你得對一個數(shù)據(jù)分段存儲,一個庫存字段本來好好的,現(xiàn)在要分為20個分段庫存字段;

  • 其次,你在每次處理庫存的時候,還得自己寫隨機算法,隨機挑選一個分段來處理;

  • 最后,如果某個分段中的數(shù)據(jù)不足了,你還得自動切換到下一個分段數(shù)據(jù)去處理。


這個過程都是要手動寫代碼實現(xiàn)的,還是有點工作量,挺麻煩的。


不過我們確實在一些業(yè)務(wù)場景里,因為用到了分布式鎖,然后又必須要進行鎖并發(fā)的優(yōu)化,又進一步用到了分段加鎖的技術(shù)方案,效果當然是很好的了,一下子并發(fā)性能可以增長幾十倍。


該優(yōu)化方案的后續(xù)改進


以我們本文所說的庫存超賣場景為例,你要是這么玩,會把自己搞的很痛苦!


再次強調(diào),我們這里的庫存超賣場景,僅僅只是作為演示場景而已,以后有機會,再單獨聊聊高并發(fā)秒殺系統(tǒng)架構(gòu)下的庫存超賣的其他解決方案。

作者:中華石杉,十余年BAT架構(gòu)經(jīng)驗傾囊相授。個人微信公眾號:石杉的架構(gòu)筆記(IDshishan100


特別推薦一個分享架構(gòu)+算法的優(yōu)質(zhì)內(nèi)容,還沒關(guān)注的小伙伴,可以長按關(guān)注一下:

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!

長按訂閱更多精彩▼

每秒上千訂單場景下的分布式鎖高并發(fā)優(yōu)化實踐!

如有收獲,點個在看,誠摯感謝

免責聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺僅提供信息存儲服務(wù)。文章僅代表作者個人觀點,不代表本平臺立場,如有問題,請聯(lián)系我們,謝謝!

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫毥谦F公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

加利福尼亞州圣克拉拉縣2024年8月30日 /美通社/ -- 數(shù)字化轉(zhuǎn)型技術(shù)解決方案公司Trianz今天宣布,該公司與Amazon Web Services (AWS)簽訂了...

關(guān)鍵字: AWS AN BSP 數(shù)字化

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動 BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運行,同時企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風險,如企業(yè)系統(tǒng)復雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報道,騰訊和網(wǎng)易近期正在縮減他們對日本游戲市場的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機 衛(wèi)星通信

要點: 有效應(yīng)對環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實提質(zhì)增效舉措,毛利潤率延續(xù)升勢 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競爭力 堅持高質(zhì)量發(fā)展策略,塑強核心競爭優(yōu)勢...

關(guān)鍵字: 通信 BSP 電信運營商 數(shù)字經(jīng)濟

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺與中國電影電視技術(shù)學會聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會上宣布正式成立。 活動現(xiàn)場 NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會上,軟通動力信息技術(shù)(集團)股份有限公司(以下簡稱"軟通動力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉