www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當前位置:首頁 > 單片機 > 架構(gòu)師社區(qū)
[導讀]我們知道,大部分的業(yè)務(wù)場景都是讀多寫少,為了利用好這個特性,提升Redis集群系統(tǒng)的吞吐能力,通常會采用主從架構(gòu)、讀寫分離如上圖所示:其中Master節(jié)點:負責業(yè)務(wù)的寫操作Slave節(jié)點:實時同步Master節(jié)點的數(shù)據(jù),提供讀能力為了提高吞吐量,采用一主多從的架構(gòu),將業(yè)務(wù)的讀壓力...


我們知道,大部分的業(yè)務(wù)場景都是讀多寫少,為了利用好這個特性,提升Redis集群系統(tǒng)的吞吐能力,通常會采用主從架構(gòu)讀寫分離



如上圖所示:其中

  • Master節(jié)點:負責業(yè)務(wù)的寫操作
  • Slave節(jié)點:實時同步Master節(jié)點的數(shù)據(jù),提供讀能力
為了提高吞吐量,采用一主多從的架構(gòu),將業(yè)務(wù)的讀壓力分攤到多臺服務(wù)器上

上述方案,看似合理,但其實可能存在一定隱患!


一、拉取過期數(shù)據(jù)

Redis性能高主要得益于純內(nèi)存操作,但內(nèi)存存儲介質(zhì)的成本過高,所以數(shù)據(jù)的存儲有一定的約束。

通常會設(shè)置過期時間,對于一些使用不是很頻繁的數(shù)據(jù),會定期刪除,提高資源的利用率。

刪除過期數(shù)據(jù),Redis提供了兩種策略:

1、惰性刪除。

也稱被動刪除,當數(shù)據(jù)過期后,并不會馬上刪除。而是等到有請求訪問時,對數(shù)據(jù)檢查,如果數(shù)據(jù)過期,則刪除數(shù)據(jù)。

優(yōu)點:不需要單獨啟動額外的掃描線程,減少了CPU資源的損耗。


缺點:大量的過期數(shù)據(jù)滯留內(nèi)存中,需要主動觸發(fā)、檢查、刪除,否則會一直占用內(nèi)存資源。

2、定期刪除。每隔一段時間,默認100ms,Redis會隨機挑選一定數(shù)量的Key,檢查是否過期,并將過期的數(shù)據(jù)刪除。

你可能會為問了,既然Redis有過期數(shù)據(jù)刪除策略,那為什么還會拉取到已經(jīng)過期的數(shù)據(jù)呢?


這要從主從同步講起了,我們先來看張流程圖



當客戶端往主庫寫入數(shù)據(jù)后,并設(shè)置了過期時間,數(shù)據(jù)會以異步方式同步給從庫。

1、如果此時讀主庫,數(shù)據(jù)已經(jīng)過期,主庫的惰性刪除會發(fā)揮作用,主動觸發(fā)刪除操作,客戶端不會拿到已過期數(shù)據(jù)

2、但是如果讀從庫,則有可能拿到過期數(shù)據(jù)。原因有兩個

原因一:

跟 Redis 的版本有關(guān)系,Redis 3.2 之前版本,讀從庫并不會判斷數(shù)據(jù)是否過期,所以有可能返回過期數(shù)據(jù)。

解決方案:

升級Redis的版本,至少要3.2 以上版本,讀從庫,如果數(shù)據(jù)已經(jīng)過期,則會過濾并返回空值。

特別注意:


此時同步過來的數(shù)據(jù),雖然已經(jīng)過期,但本著誰生產(chǎn)誰維護的原則,從庫并不會主動刪除同步的數(shù)據(jù),需要依賴于主節(jié)點同步過來的key刪除命令。


原因二:

跟過期時間的設(shè)置方式有關(guān)系,我們一般采用 EXPIRE 和 PEXPIRE,表示從執(zhí)行命令那個時刻開始,往后延長 ttl 時間。嚴重依賴于 開始時間 從什么時候算起。

  • EXPIRE:單位為秒
  • PEXPIRE:單位為毫秒

如上圖所示,簡單描述下過程:

  • 主庫在 t1 時刻寫入一個帶過期時間的數(shù)據(jù),數(shù)據(jù)的有效期一直到 t3
  • 由于網(wǎng)絡(luò)原因、或者緩存服務(wù)器的執(zhí)行效率,從庫的命令并沒有立即執(zhí)行。一直等到了 t2 才開始執(zhí)行, 數(shù)據(jù)的有效期則會延后到 t5
  • 如果,此時客戶端訪問從庫,發(fā)現(xiàn)數(shù)據(jù)依然處于有效期內(nèi),可以正常使用
解決方案:

可以采用Redis的另外兩個命令,EXPIREAT 和 PEXPIREAT,相對簡單,表示過期時間為一個具體的時間點。避免了對開始時間從什么時候算起的依賴。

  • EXPIREAT:單位為秒
  • PEXPIREAT:單位為毫秒
特別注意:


EXPIREAT 和 PEXPIREAT 設(shè)置的是時間點,所以要求主從節(jié)點的時鐘保持一致,需要與NTP 時間服務(wù)器保持時鐘同步。


主從同步,除了讀從庫可能拉取到過期數(shù)據(jù),還可能遇到數(shù)據(jù)一致性問題。

繼續(xù)往下看

二、主從數(shù)據(jù)不一致

解釋下,什么是主從數(shù)據(jù)不一致?指客戶端從庫中讀取到的值與主庫中讀取的值不一致!

如圖所示:

  • 客戶端寫入主庫,值為100
  • 然后,主庫將值100 同步給 從庫
  • 接著,客戶端又訪問主庫,將值更新為 200
  • 由于主從同步是異步進行的,有一定延遲,假如最新數(shù)據(jù)還沒有同步到從庫,那么從庫讀取的就不是最新值。
從庫同步落后的原因主要有兩個:

1、主從服務(wù)器間的網(wǎng)絡(luò)傳輸可能有延遲

2、從庫已經(jīng)收到主庫的命令,由于是單線程執(zhí)行,前面正在處理一些耗時的命令(如:pipeline批處理),無法及時同步執(zhí)行。

解決方案:

1、主從服務(wù)器盡量部署在同一個機房,并保持服務(wù)器間的網(wǎng)絡(luò)良好通暢

2、監(jiān)控主從庫間的同步進度,通過info replication命令 ,查看主庫接收寫命令的進度信息(master_repl_offset),從庫的復(fù)制寫命令的進度信息(slave_repl_offset)

master_repl_offset - slave_repl_offset

得到從庫與主庫間的復(fù)制進度差

我們可以開發(fā)一個監(jiān)控程序,定時拉取主從服務(wù)器的進度信息,計算進度差值。如果超過我們設(shè)置的閾值,則通知客戶端斷開從庫的連接,全部訪問主庫,一定程度上減少數(shù)據(jù)不一致情況。

待同步進度跟上后,我們再恢復(fù)客戶端與從節(jié)點的讀操作。

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

LED驅(qū)動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: 驅(qū)動電源

在工業(yè)自動化蓬勃發(fā)展的當下,工業(yè)電機作為核心動力設(shè)備,其驅(qū)動電源的性能直接關(guān)系到整個系統(tǒng)的穩(wěn)定性和可靠性。其中,反電動勢抑制與過流保護是驅(qū)動電源設(shè)計中至關(guān)重要的兩個環(huán)節(jié),集成化方案的設(shè)計成為提升電機驅(qū)動性能的關(guān)鍵。

關(guān)鍵字: 工業(yè)電機 驅(qū)動電源

LED 驅(qū)動電源作為 LED 照明系統(tǒng)的 “心臟”,其穩(wěn)定性直接決定了整個照明設(shè)備的使用壽命。然而,在實際應(yīng)用中,LED 驅(qū)動電源易損壞的問題卻十分常見,不僅增加了維護成本,還影響了用戶體驗。要解決這一問題,需從設(shè)計、生...

關(guān)鍵字: 驅(qū)動電源 照明系統(tǒng) 散熱

根據(jù)LED驅(qū)動電源的公式,電感內(nèi)電流波動大小和電感值成反比,輸出紋波和輸出電容值成反比。所以加大電感值和輸出電容值可以減小紋波。

關(guān)鍵字: LED 設(shè)計 驅(qū)動電源

電動汽車(EV)作為新能源汽車的重要代表,正逐漸成為全球汽車產(chǎn)業(yè)的重要發(fā)展方向。電動汽車的核心技術(shù)之一是電機驅(qū)動控制系統(tǒng),而絕緣柵雙極型晶體管(IGBT)作為電機驅(qū)動系統(tǒng)中的關(guān)鍵元件,其性能直接影響到電動汽車的動力性能和...

關(guān)鍵字: 電動汽車 新能源 驅(qū)動電源

在現(xiàn)代城市建設(shè)中,街道及停車場照明作為基礎(chǔ)設(shè)施的重要組成部分,其質(zhì)量和效率直接關(guān)系到城市的公共安全、居民生活質(zhì)量和能源利用效率。隨著科技的進步,高亮度白光發(fā)光二極管(LED)因其獨特的優(yōu)勢逐漸取代傳統(tǒng)光源,成為大功率區(qū)域...

關(guān)鍵字: 發(fā)光二極管 驅(qū)動電源 LED

LED通用照明設(shè)計工程師會遇到許多挑戰(zhàn),如功率密度、功率因數(shù)校正(PFC)、空間受限和可靠性等。

關(guān)鍵字: LED 驅(qū)動電源 功率因數(shù)校正

在LED照明技術(shù)日益普及的今天,LED驅(qū)動電源的電磁干擾(EMI)問題成為了一個不可忽視的挑戰(zhàn)。電磁干擾不僅會影響LED燈具的正常工作,還可能對周圍電子設(shè)備造成不利影響,甚至引發(fā)系統(tǒng)故障。因此,采取有效的硬件措施來解決L...

關(guān)鍵字: LED照明技術(shù) 電磁干擾 驅(qū)動電源

開關(guān)電源具有效率高的特性,而且開關(guān)電源的變壓器體積比串聯(lián)穩(wěn)壓型電源的要小得多,電源電路比較整潔,整機重量也有所下降,所以,現(xiàn)在的LED驅(qū)動電源

關(guān)鍵字: LED 驅(qū)動電源 開關(guān)電源

LED驅(qū)動電源是把電源供應(yīng)轉(zhuǎn)換為特定的電壓電流以驅(qū)動LED發(fā)光的電壓轉(zhuǎn)換器,通常情況下:LED驅(qū)動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關(guān)鍵字: LED 隧道燈 驅(qū)動電源
關(guān)閉