今天浩道跟大家分享一篇關(guān)于redis的硬核干貨,通過(guò)圖解帶你全面了解redis及其使用場(chǎng)景!
文章來(lái)源:https://mp.weixin.qq.com/s/nLR7jccXtHF9W4LvpfuBqw
—1— 什么是 Redis?
Redis(REmote DIctionary Service)是一個(gè)開(kāi)源的鍵值對(duì)數(shù)據(jù)庫(kù)服務(wù)器。
Redis 更準(zhǔn)確的描述是一個(gè)數(shù)據(jù)結(jié)構(gòu)服務(wù)器。Redis 的這種特殊性質(zhì)讓它在開(kāi)發(fā)人員中很受歡迎。
Redis不是通過(guò)迭代或者排序方式處理數(shù)據(jù),而是一開(kāi)始就按照數(shù)據(jù)結(jié)構(gòu)方式組織。早期,它的使用很像 Memcached,但隨著 Redis 的改進(jìn),它在許多其他用例中變得可行,包括發(fā)布-訂閱機(jī)制、流(streaming)和隊(duì)列。
主要來(lái)說(shuō),Redis 是一個(gè)內(nèi)存數(shù)據(jù)庫(kù),用作另一個(gè)“真實(shí)”數(shù)據(jù)庫(kù)(如 MySQL 或 PostgreSQL)前面的緩存,以幫助提高應(yīng)用程序性能。它通過(guò)利用內(nèi)存的高速訪(fǎng)問(wèn)速度,從而減輕核心應(yīng)用程序數(shù)據(jù)庫(kù)的負(fù)載,例如:
不經(jīng)常更改且經(jīng)常被請(qǐng)求的數(shù)據(jù)
任務(wù)關(guān)鍵性較低且經(jīng)常變動(dòng)的數(shù)據(jù)
上述數(shù)據(jù)的示例可以包括會(huì)話(huà)或數(shù)據(jù)緩存以及儀表板的排行榜或匯總分析。
但是,對(duì)于許多用例場(chǎng)景,Redis 都可以提供足夠的保證,可以將其用作成熟的主數(shù)據(jù)庫(kù)。再加上 Redis 插件及其各種高可用性(HA)設(shè)置,Redis 作為數(shù)據(jù)庫(kù)對(duì)于某些場(chǎng)景和工作負(fù)載變得非常有用。
另一個(gè)重要方面是 Redis 模糊了緩存和數(shù)據(jù)存儲(chǔ)之間的界限。這里要理解的重要一點(diǎn)是,相比于使用 SSD 或 HDD 作為存儲(chǔ)的傳統(tǒng)數(shù)據(jù)庫(kù),讀取和操作內(nèi)存中數(shù)據(jù)的速度要快得多。
最初,Redis 最常被比作 Memcached,后者當(dāng)時(shí)缺乏任何非易失性持久化。
這是當(dāng)前兩個(gè)緩存之間的功能細(xì)分。
Memcached | Redis | |
---|---|---|
亞毫秒延遲 | Yes | Yes |
開(kāi)發(fā)者易用性 | Yes | Yes |
數(shù)據(jù)分區(qū) | Yes | Yes |
支持廣泛的編程語(yǔ)言 | Yes | Yes |
高級(jí)數(shù)據(jù)結(jié)構(gòu) | - | Yes |
多線(xiàn)程架構(gòu) | Yes | - |
快照 | - | Yes |
復(fù)制(Replication) | - | Yes |
事務(wù) | - | Yes |
發(fā)布/訂閱 | - | Yes |
Lua腳本 | - | Yes |
地理空間支持 | - | Yes |
雖然現(xiàn)在擁有多種配置方式將數(shù)據(jù)持久化到磁盤(pán),但當(dāng)時(shí)首次引入持久化時(shí),Redis 是使用快照方式,通過(guò)異步拷貝內(nèi)存中的數(shù)據(jù)方式來(lái)做持久化。不幸的是,這種機(jī)制的缺點(diǎn)是可能會(huì)在快照之間丟失數(shù)據(jù)。
Redis 自 2009 年成立到現(xiàn)在已經(jīng)變的很成熟。我們將介紹它的大部分架構(gòu)和拓?fù)洌员隳憧梢詫?Redis 添加到你的數(shù)據(jù)存儲(chǔ)系統(tǒng)庫(kù)中。
—2— Redis 架構(gòu)
在開(kāi)始討論 Redis 內(nèi)部結(jié)構(gòu)之前,讓我們先討論一下各種 Redis 部署及其權(quán)衡取舍。
我們將主要關(guān)注以下這些設(shè)置:
單個(gè) Redis 實(shí)例
Redis 高可用性
Redis 哨兵
Redis 集群
根據(jù)你的用例和規(guī)模,決定使用哪一種設(shè)置。
單個(gè) Redis 實(shí)例
單個(gè) Redis 實(shí)例是最直接的 Redis 部署方式。它允許用戶(hù)設(shè)置和運(yùn)行小型實(shí)例,從而幫助他們快速發(fā)展和加速服務(wù)。但是,這種部署并非沒(méi)有缺點(diǎn)。例如,如果此實(shí)例失敗或不可用,則所有客戶(hù)端對(duì) Redis 的調(diào)用都將失敗,從而降低系統(tǒng)的整體性能和速度。
如果有足夠的內(nèi)存和服務(wù)器資源,這個(gè)實(shí)例可以很強(qiáng)大。主要用于緩存的場(chǎng)景可能會(huì)以最少的設(shè)置獲得顯著的性能提升。給定足夠的系統(tǒng)資源,你可以在應(yīng)用程序運(yùn)行的同一機(jī)器上部署此 Redis 服務(wù)。
在管理系統(tǒng)內(nèi)的數(shù)據(jù)方面,了解一些 Redis 概念是必不可少的。發(fā)送到 Redis 的命令首先在內(nèi)存中處理。然后,如果在這些實(shí)例上設(shè)置了持久性,則在某個(gè)時(shí)間間隔上會(huì)有一個(gè)fork進(jìn)程,來(lái)生成數(shù)據(jù)持久化 RDB(Redis 數(shù)據(jù)的非常緊湊的時(shí)間點(diǎn)表示)快照或 AOF(僅附加文件)。
這兩個(gè)流程可以讓 Redis 擁有長(zhǎng)期存儲(chǔ),支持各種復(fù)制策略,并啟用更復(fù)雜的拓?fù)洹H绻?Redis 未設(shè)置為持久化數(shù)據(jù),則在重新啟動(dòng)或故障轉(zhuǎn)移時(shí)數(shù)據(jù)會(huì)丟失。如果在重啟時(shí)啟用了持久化,它會(huì)將 RDB 快照或 AOF 中的所有數(shù)據(jù)加載回內(nèi)存,然后實(shí)例可以支持新的客戶(hù)端請(qǐng)求。
話(huà)雖如此,讓我們看看你可能會(huì)用到的更多分布式 Redis 設(shè)置。
Redis 高可用性
Redis 的另一個(gè)流行設(shè)置是主從部署方式,從部署保持與主部署之間數(shù)據(jù)同步。當(dāng)數(shù)據(jù)寫(xiě)入主實(shí)例時(shí),它會(huì)將這些命令的副本發(fā)送到從部署客戶(hù)端輸出緩沖區(qū),從而達(dá)到數(shù)據(jù)同步的效果。從部署可以有一個(gè)或多個(gè)實(shí)例。這些實(shí)例可以幫助擴(kuò)展 Redis 的讀取操作或提供故障轉(zhuǎn)移,以防 main 丟失。
我們現(xiàn)在已經(jīng)進(jìn)入了一個(gè)分布式系統(tǒng),因此需要在此拓?fù)渲锌紤]許多新事物。以前簡(jiǎn)單的事情現(xiàn)在變得復(fù)雜了。
Redis 復(fù)制
Redis 的每個(gè)主實(shí)例都有一個(gè)復(fù)制 ID 和一個(gè)偏移量。這兩條數(shù)據(jù)對(duì)于確定副本可以繼續(xù)其復(fù)制過(guò)程的時(shí)間點(diǎn)或確定它是否需要進(jìn)行完整同步至關(guān)重要。對(duì)于主 Redis 部署上發(fā)生的每個(gè)操作,此偏移量都會(huì)增加。
更明確地說(shuō),當(dāng) Redis 副本實(shí)例僅落后于主實(shí)例幾個(gè)偏移量時(shí),它會(huì)從主實(shí)例接收剩余的命令,然后在其數(shù)據(jù)集上重放,直到同步完成。如果兩個(gè)實(shí)例無(wú)法就復(fù)制 ID 達(dá)成一致,或者主實(shí)例不知道偏移量,則副本將請(qǐng)求全量同步。這時(shí)主實(shí)例會(huì)創(chuàng)建一個(gè)新的 RDB 快照并將其發(fā)送到副本。
在此傳輸之間,主實(shí)例會(huì)緩沖快照截止和當(dāng)前偏移之間的所有中間更新指令,這樣在快照同步完后,再將這些指令發(fā)送到副本實(shí)例。這樣完成后,復(fù)制就可以正常繼續(xù)。
如果一個(gè)實(shí)例具有相同的復(fù)制 ID 和偏移量,則它們具有完全相同的數(shù)據(jù)。現(xiàn)在你可能想知道為什么需要復(fù)制 ID。當(dāng) Redis 實(shí)例被提升為主實(shí)例或作為主實(shí)例從頭開(kāi)始重新啟動(dòng)時(shí),它會(huì)被賦予一個(gè)新的復(fù)制 ID。
這用于推斷此新提升的副本實(shí)例是從先前哪個(gè)主實(shí)例復(fù)制出來(lái)的。這允許它能夠執(zhí)行部分同步(與其他副本節(jié)點(diǎn)),因?yàn)樾碌闹鲗?shí)例會(huì)記住其舊的復(fù)制 ID。
例如,兩個(gè)實(shí)例(主實(shí)例和從實(shí)例)具有相同的復(fù)制 ID,但偏移量相差幾百個(gè)命令,這意味著如果在實(shí)例上重放這些偏移量后面的命令,它們將具有相同的數(shù)據(jù)集。現(xiàn)在,如果復(fù)制 ID 完全不同,并且我們不知道新降級(jí)(或重新加入)從節(jié)點(diǎn)的先前復(fù)制 ID(沒(méi)有共同祖先)。我們將需要執(zhí)行昂貴的全量同步。
相反,如果我們知道以前的復(fù)制 ID,我們就可以推斷如何使數(shù)據(jù)同步,因?yàn)槲覀兡軌蛲茢喑鏊鼈児蚕淼墓餐嫦龋⑶移屏繉?duì)于部分同步再次有意義。
Redis 哨兵(Sentinel)
Sentinel 是一個(gè)分布式系統(tǒng)。與所有分布式系統(tǒng)一樣,Sentinel 有幾個(gè)優(yōu)點(diǎn)和缺點(diǎn)。Sentinel 的設(shè)計(jì)方式是,一組哨兵進(jìn)程協(xié)同工作以協(xié)調(diào)狀態(tài),從而為 Redis 提供高可用性。畢竟,你不希望保護(hù)你免受故障影響的系統(tǒng)有自己的單點(diǎn)故障。
Sentinel 負(fù)責(zé)一些事情。首先,它確保當(dāng)前的主實(shí)例和從實(shí)例正常運(yùn)行并做出響應(yīng)。這是必要的,因?yàn)樯诒ㄅc其他哨兵進(jìn)程)可以在主節(jié)點(diǎn)和/或從節(jié)點(diǎn)丟失的情況下發(fā)出警報(bào)并采取行動(dòng)。其次,它在服務(wù)發(fā)現(xiàn)中發(fā)揮作用,就像其他系統(tǒng)中的 Zookeeper 和 Consul 一樣。所以當(dāng)一個(gè)新的客戶(hù)端嘗試向 Redis 寫(xiě)東西時(shí),Sentinel 會(huì)告訴客戶(hù)端當(dāng)前的主實(shí)例是什么。
因此,哨兵不斷監(jiān)控可用性并將該信息發(fā)送給客戶(hù)端,以便他們能夠在他們確實(shí)進(jìn)行故障轉(zhuǎn)移時(shí)對(duì)其做出反應(yīng)。
以下是它的職責(zé):
監(jiān)控——確保主從實(shí)例按預(yù)期工作。
通知——通知系統(tǒng)管理員 Redis 實(shí)例中的事件。
故障轉(zhuǎn)移管理——如果主實(shí)例不可用并且足夠多的(法定數(shù)量)節(jié)點(diǎn)同意這是真的,Sentinel 節(jié)點(diǎn)可以啟動(dòng)故障轉(zhuǎn)移。
配置管理——Sentinel 節(jié)點(diǎn)還充當(dāng)當(dāng)前主 Redis 實(shí)例的發(fā)現(xiàn)服務(wù)。
以這種方式使用 Redis Sentinel 可以進(jìn)行故障檢測(cè)。此檢測(cè)涉及多個(gè)哨兵進(jìn)程同意當(dāng)前主實(shí)例不再可用。這個(gè)協(xié)議過(guò)程稱(chēng)為 Quorum。這可以提高魯棒性并防止一臺(tái)機(jī)器行為異常導(dǎo)致無(wú)法訪(fǎng)問(wèn)主 Redis 節(jié)點(diǎn)。
此設(shè)置并非沒(méi)有缺點(diǎn),因此我們將在使用 Redis Sentinel 時(shí)介紹一些建議和最佳實(shí)踐。
你可以通過(guò)多種方式部署 Redis Sentinel。老實(shí)說(shuō),要提出任何明智的建議,我需要有關(guān)你的系統(tǒng)的更多背景信息。作為一般指導(dǎo),我建議在每個(gè)應(yīng)用程序服務(wù)器旁邊運(yùn)行一個(gè)哨兵節(jié)點(diǎn)(如果可能的話(huà)),這樣你也不需要考慮哨兵節(jié)點(diǎn)和實(shí)際使用 Redis 的客戶(hù)端之間的網(wǎng)絡(luò)可達(dá)性差異。
你可以將 Sentinel 與 Redis 實(shí)例一起運(yùn)行,甚至可以在獨(dú)立節(jié)點(diǎn)上運(yùn)行,只不過(guò)它會(huì)按照別的方式處理,從而會(huì)讓事情變得更復(fù)雜。我建議至少運(yùn)行三個(gè)節(jié)點(diǎn),并且至少具有兩個(gè)法定人數(shù)(quorum)。這是一個(gè)簡(jiǎn)單的圖表,分解了集群中的服務(wù)器數(shù)量以及相關(guān)的法定人數(shù)和可容忍的可持續(xù)故障。
Number of Servers | Quorum | Number Of Tolerated Failures |
---|---|---|
1 | 1 | 0 |
2 | 2 | 0 |
3 | 2 | 1 |
4 | 3 | 1 |
5 | 3 | 2 |
6 | 4 | 2 |
7 | 4 | 3 |
這會(huì)因系統(tǒng)而異,但總體思路是不變的。
讓我們花點(diǎn)時(shí)間思考一下這樣的設(shè)置會(huì)出現(xiàn)什么問(wèn)題。如果你運(yùn)行這個(gè)系統(tǒng)足夠長(zhǎng)的時(shí)間,你會(huì)遇到所有這些。
如果哨兵節(jié)點(diǎn)超出法定人數(shù)怎么辦?
如果網(wǎng)絡(luò)分裂將舊的主實(shí)例置于少數(shù)群體中怎么辦?這些寫(xiě)入會(huì)發(fā)生什么?(劇透:當(dāng)系統(tǒng)完全恢復(fù)時(shí)它們會(huì)丟失)
如果哨兵節(jié)點(diǎn)和客戶(hù)端節(jié)點(diǎn)(應(yīng)用程序節(jié)點(diǎn))的網(wǎng)絡(luò)拓?fù)溴e(cuò)位會(huì)發(fā)生什么?
沒(méi)有持久性保證,特別是持久化到磁盤(pán)的操作(見(jiàn)下文)是異步的。還有一個(gè)麻煩的問(wèn)題,當(dāng)客戶(hù)發(fā)現(xiàn)新的 primary 時(shí),我們失去了多少寫(xiě)給一個(gè)不知道的 primary?Redis 建議在建立新連接時(shí)查詢(xún)新的主節(jié)點(diǎn)。根據(jù)系統(tǒng)配置,這可能意味著大量數(shù)據(jù)丟失。
如果你強(qiáng)制主實(shí)例將寫(xiě)入復(fù)制到至少一個(gè)副本實(shí)例,有幾種方法可以減輕損失程度。請(qǐng)記住,所有 Redis 復(fù)制都是異步的,這是有其權(quán)衡的考慮。因此,它需要獨(dú)立跟蹤確認(rèn),如果至少有一個(gè)副本實(shí)例沒(méi)有確認(rèn)它們,主實(shí)例將停止接受寫(xiě)入。
Redis 集群
我相信很多人都想過(guò)當(dāng)你無(wú)法將所有數(shù)據(jù)存儲(chǔ)在一臺(tái)機(jī)器上的內(nèi)存中時(shí)會(huì)發(fā)生什么。目前,單個(gè)服務(wù)器中可用的最大 RAM 為 24TIB,這是目前 AWS 線(xiàn)上列出來(lái)的。當(dāng)然,這很多,但對(duì)于某些系統(tǒng)來(lái)說(shuō),這還不夠,即使對(duì)于緩存層也是如此。
Redis Cluster 允許 Redis 的水平擴(kuò)展。
首先,讓我們擺脫一些術(shù)語(yǔ)約束;一旦我們決定使用 Redis 集群,我們就決定將我們存儲(chǔ)的數(shù)據(jù)分散到多臺(tái)機(jī)器上,這稱(chēng)為分片。所以集群中的每個(gè) Redis 實(shí)例都被認(rèn)為是整個(gè)數(shù)據(jù)的一個(gè)分片。
這帶來(lái)了一個(gè)新的問(wèn)題。如果我們向集群推送一個(gè)key,我們?nèi)绾沃滥膫€(gè) Redis 實(shí)例(分片)保存了該數(shù)據(jù)?有幾種方法可以做到這一點(diǎn),但 Redis Cluster 使用算法分片。
為了找到給定 key 的分片,我們對(duì) key 進(jìn)行哈希處理,并通過(guò)對(duì)總分片數(shù)量取模。然后,使用確定性哈希函數(shù),這意味著給定的 key 將始終映射到同一個(gè)分片,我們可以推斷將來(lái)讀取特定 key 的位置。
當(dāng)我們之后想在系統(tǒng)中添加一個(gè)新的分片時(shí)會(huì)發(fā)生什么?這個(gè)過(guò)程稱(chēng)為重新分片。
假設(shè)鍵 'foo' 之前映射到分片 0, 在引入新分片后它可能會(huì)映射到分片 5。但是,如果我們需要快速擴(kuò)展系統(tǒng),移動(dòng)數(shù)據(jù)來(lái)達(dá)到新的分片映射,這將是緩慢且不切實(shí)際的。它還對(duì) Redis 集群的可用性產(chǎn)生不利影響。
Redis Cluster 為這個(gè)問(wèn)題設(shè)計(jì)了一種解決方案,稱(chēng)為 Hashslot,所有數(shù)據(jù)都映射到它。有 16K 哈希槽。這為我們提供了一種在集群中傳播數(shù)據(jù)的合理方式,當(dāng)我們添加新的分片時(shí),我們只需在系統(tǒng)之間移動(dòng)哈希槽。通過(guò)這樣做,我們只需要將 hashlot 從一個(gè)分片移動(dòng)到另一個(gè)分片,并簡(jiǎn)化將新的主實(shí)例添加到集群中的過(guò)程。
這可以在沒(méi)有任何停機(jī)時(shí)間和最小的性能影響的情況下實(shí)現(xiàn)。讓我們通過(guò)一個(gè)例子來(lái)談?wù)劇?/p>
M1 包含從 0 到 8191 的哈希槽。
M2 包含從 8192 到 16383 的哈希槽。
因此,為了映射 “foo”,我們采用一個(gè)確定性的鍵(foo)散列,并通過(guò)散列槽的數(shù)量(16K)對(duì)其進(jìn)行修改,從而得到 M2 的映射。現(xiàn)在假設(shè)我們添加了一個(gè)新實(shí)例 M3。新的映射將是:
M1 包含從 0 到 5460 的哈希槽。
M2 包含從 5461 到 10922 的哈希槽。
M3 包含從 10923 到 16383 的哈希槽。
現(xiàn)在映射到 M2 的 M1 中映射哈希槽的所有鍵都需要移動(dòng)。但是散列槽的各個(gè)鍵的散列不需要移動(dòng),因?yàn)樗鼈円呀?jīng)被劃分到散列槽中。因此,這一級(jí)別的誤導(dǎo)(misdirection)解決了算法分片的重新分片問(wèn)題。
Gossiping 協(xié)議
Redis Cluster 使用 gossiping 來(lái)確定整個(gè)集群的健康狀況。在上圖中,我們有 3 個(gè) M 個(gè)節(jié)點(diǎn)和 3 個(gè) S 節(jié)點(diǎn)。所有這些節(jié)點(diǎn)不斷地進(jìn)行通信以了解哪些分片可用并準(zhǔn)備好為請(qǐng)求提供服務(wù)。
如果足夠多的分片同意 M1 沒(méi)有響應(yīng),他們可以決定將 M1 的副本 S1 提升為主節(jié)點(diǎn)以保持集群健康。觸發(fā)此操作所需的節(jié)點(diǎn)數(shù)量是可配置的,并且必須正確執(zhí)行此操作。如果操作不當(dāng)并且在分區(qū)的兩邊相等時(shí)無(wú)法打破平局,則可能會(huì)導(dǎo)致集群被拆分。這種現(xiàn)象稱(chēng)為裂腦。作為一般規(guī)則,必須擁有奇數(shù)個(gè)主節(jié)點(diǎn)和兩個(gè)副本,以實(shí)現(xiàn)最穩(wěn)健的設(shè)置。
—3— Redis 持久化模型
如果我們要使用 Redis 存儲(chǔ)任何類(lèi)型的數(shù)據(jù)同時(shí)要求安全保存,了解 Redis 是如何做到這一點(diǎn)很重要。在許多用例中,如果你丟失了 Redis 存儲(chǔ)的數(shù)據(jù),這并不是世界末日。將其用作緩存或在其支持實(shí)時(shí)分析的情況下,如果發(fā)生數(shù)據(jù)丟失,則并非世界末日。
在其他場(chǎng)景中,我們希望圍繞數(shù)據(jù)持久性和恢復(fù)有一些保證。
無(wú)持久化
無(wú)持久化:如果你愿意,可以完全禁用持久化。這是運(yùn)行 Redis 的最快方式,并且沒(méi)有持久性保證。
RDB文件
RDB(Redis 數(shù)據(jù)庫(kù)):RDB 持久化以指定的時(shí)間間隔執(zhí)行數(shù)據(jù)集的時(shí)間點(diǎn)快照。
這種機(jī)制的主要缺點(diǎn)是快照之間的數(shù)據(jù)會(huì)丟失。此外,這種存儲(chǔ)機(jī)制還依賴(lài)于主進(jìn)程的 fork,在更大的數(shù)據(jù)集中,這可能會(huì)導(dǎo)致服務(wù)請(qǐng)求的瞬間延遲。話(huà)雖如此,RDB 文件在內(nèi)存中的加載速度要比 AOF 快得多。
AOF
AOF(Append Only File):AOF 持久化記錄服務(wù)器接收到的每個(gè)寫(xiě)入操作,這些操作將在服務(wù)器啟動(dòng)時(shí)再次被執(zhí)行,重建原始數(shù)據(jù)集。
這種持久性的方法能夠確保比 RDB 快照更持久,因?yàn)樗且粋€(gè)僅附加文件。隨著操作的發(fā)生,我們將它們緩沖到日志中,但它們還沒(méi)有被持久化。該日志與我們運(yùn)行的實(shí)際命令一致,以便在需要時(shí)進(jìn)行重放。
然后,如果可能,我們使用 fsync 將其刷新到磁盤(pán)(當(dāng)此運(yùn)行可配置時(shí)),它將被持久化。缺點(diǎn)是格式不緊湊,并且比 RDB 文件使用更多的磁盤(pán)。
為什么不兼得?
RDB + AOF:可以將 AOF 和 RDB 組合在同一個(gè) Redis 實(shí)例中。如果你愿意的話(huà),可以以速度換取持久化是一種折衷方法。我認(rèn)為這是設(shè)置 Redis 的一種可接受的方式。在重啟的情況下,請(qǐng)記住如果兩者都啟用,Redis 將使用 AOF 來(lái)重建數(shù)據(jù),因?yàn)樗亲钔暾摹?/p>
Forking
現(xiàn)在我們了解了持久化的類(lèi)型,讓我們討論一下我們?nèi)绾卧谙?Redis 這樣的單線(xiàn)程應(yīng)用程序中實(shí)際執(zhí)行它。
在我看來(lái),Redis 最酷的部分是它如何利用 forking 和寫(xiě)時(shí)復(fù)制來(lái)高效地促進(jìn)數(shù)據(jù)持久化。
Forking 是操作系統(tǒng)通過(guò)創(chuàng)建自身副本來(lái)創(chuàng)建新進(jìn)程的一種方式。這樣,你將獲得一個(gè)新的進(jìn)程 ID 和一些其他信息和句柄,因此新 forking 的進(jìn)程(子進(jìn)程)可以與原始進(jìn)程父進(jìn)程通信。
現(xiàn)在事情變得有趣了。Redis 是一個(gè)分配了大量?jī)?nèi)存的進(jìn)程,那么它如何在不耗盡內(nèi)存的情況下進(jìn)行復(fù)制呢?
當(dāng)你 fork 一個(gè)進(jìn)程時(shí),父進(jìn)程和子進(jìn)程共享內(nèi)存,并且在該子進(jìn)程中 Redis 開(kāi)始快照(Redis)進(jìn)程。這是通過(guò)一種稱(chēng)為寫(xiě)時(shí)復(fù)制的內(nèi)存共享技術(shù)實(shí)現(xiàn)的——該技術(shù)在創(chuàng)建分叉時(shí)傳遞對(duì)內(nèi)存的引用。如果在子進(jìn)程持久化到磁盤(pán)時(shí)沒(méi)有發(fā)生任何更改,則不會(huì)進(jìn)行新的分配。
在發(fā)生更改的情況下,內(nèi)核會(huì)跟蹤對(duì)每個(gè)頁(yè)面的引用,如果某個(gè)頁(yè)面有多個(gè)更改,則將更改寫(xiě)入新頁(yè)面。子進(jìn)程完全不知道更改以及具有一致的內(nèi)存快照的事情。因此,在只使用了一小部分內(nèi)存的情況下,我們能夠非常快速有效地獲得潛在千兆字節(jié)內(nèi)存的時(shí)間點(diǎn)快照!
-
服務(wù)器
+關(guān)注
關(guān)注
12文章
9235瀏覽量
85649 -
開(kāi)源
+關(guān)注
關(guān)注
3文章
3371瀏覽量
42578 -
Redis
+關(guān)注
關(guān)注
0文章
376瀏覽量
10891
原文標(biāo)題:看看人家圖解Redis,那叫通俗易懂!
文章出處:【微信號(hào):浩道linux,微信公眾號(hào):浩道linux】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論