www.久久久久|狼友网站av天堂|精品国产无码a片|一级av色欲av|91在线播放视频|亚洲无码主播在线|国产精品草久在线|明星AV网站在线|污污内射久久一区|婷婷综合视频网站

當前位置:首頁 > > 架構師社區(qū)
[導讀]來自:非科班的科班 本文腦圖 Redis是一個基于內存的非關系型的數(shù)據(jù)庫,數(shù)據(jù)保存在內存中,但是內存中的數(shù)據(jù)也容易發(fā)生丟失。這里Redis就為我們提供了持久化的機制,分別是 RDB(Redis DataBase)和 AOF(Append Only File)。 Redis在以前的版本中是單線程的,而

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
   </figure>
   <figure style= 來自:非科班的科班

本文腦圖

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
   </figure>
   <br>
   <code style=Redis是一個基于內存的非關系型的數(shù)據(jù)庫,數(shù)據(jù)保存在內存中,但是內存中的數(shù)據(jù)也容易發(fā)生丟失。這里Redis就為我們提供了持久化的機制,分別是 RDB(Redis DataBase)AOF(Append Only File)。

Redis在以前的版本中是單線程的,而在6.0后對Redis的io模型做了優(yōu)化,io Thread為多線程的,但是worker Thread仍然是單線程。

在Redis啟動的時候就會去加載持久化的文件,如果沒有就直接啟動,在啟動后的某一時刻會繼續(xù)持久化內存中產生的數(shù)據(jù)。

接下來我們就來詳細了解Redis的兩種持久化機制RDB(Redis DataBase)AOF(Append Only File)。

RDB持久化機制

什么是RDB持久化呢?RDB持久化就是將當前進程的數(shù)據(jù)以生成快照的形式持久化到磁盤中。對于快照的理解,我們可以理解為將當前線程的數(shù)據(jù)以拍照的形式保存下來。

RDB持久化的時候會單獨fork一個與當前進程一摸一樣的子進程來進行持久化,因此RDB持久化有如下特點:

  1. 開機恢復數(shù)據(jù)快。

  2. 寫入持久化文件快。

RDB的持久化也是Redis默認的持久化機制,它會把內存中的數(shù)據(jù)以快照的形式寫入默認文件名為dump.rdb中保存。

在安裝后的Redis中,Redis的配置都在redis.conf文件中,如下圖所示,dbfilename就是配置RDB的持久化文件名。

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=
持久化觸發(fā)時機

在RDB機制中觸發(fā)內存中的數(shù)據(jù)進行持久化,有以下三種方式:

(1)save命令:

save命令不會fork子進程,通過阻塞當前Redis服務器,直到RDB完成為止,所以該命令在生產中一般不會使用。save命令執(zhí)行原理圖如下:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

在redis.conf的配置中 dir的配置就是RDB持久化后生成rdb二進制文件所在的位置,默認的位置是 ./,表示當前位置,哪里啟動redis,就會在哪里生成持久化文件,如下圖所示:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

下面我們進行一下實操,演示一下二進制文件生成的過程,在我本機的電腦虛擬機中,我所在的位置如下,該文件夾是新創(chuàng)建的redis的數(shù)據(jù)存儲文件夾。

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

然后我們直接在該位置啟動我們的Redis服務,啟動的命令如下:

/root/redis-4.0.6/src/redis-server /root/redis-4.0.6/redis.conf

接著通過該命令:ps -aux | grep redis,查看我們的redis服務是否正常啟動,若是顯示如下圖所示,則表示Redis是正常啟動的:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <span style=

正常啟動后,直接登陸Redis,可以通過以下命令登陸Redis,如下圖所示:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

因為當前中Redis是新安裝的,數(shù)據(jù)都是為空,什么都沒有,然后通過下圖的命令隨意向Redis中輸入幾條命令,最后執(zhí)行 save命令,在該文件夾下就會出現(xiàn) dump.rdb持久化的數(shù)據(jù)文件。

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

當然上面說到,在新安裝的Redis中默認的RDB數(shù)據(jù)持久化位置為 ./文件,一般我們會把它改成服務器自己的特定位置下,原理都是一樣的,可以自己進行嘗試,這里不再進行演示。

(2)bgsave命令:

bgsave命令會在后臺fork一個與Redis主線程一模一樣的子線程,由子線程負責內存中的數(shù)據(jù)持久化。

這樣fork與主線程一樣的子線程消耗了內存,但是不會阻塞主線程處理客戶端請求,是以空間換時間的方式快照內存中的數(shù)據(jù)到到文件中。

bgsave命令阻塞只會發(fā)生在fork子線程的時候,這段時間發(fā)生的非常短,可以忽略不計,如下圖是 bgsave執(zhí)行的流程圖:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

上面說到redis.conf中的 dir配置是配置持久化文件生成的指定的目錄, dbfilename是配置生成的文件名,也可以通過命令行使用命令來動態(tài)的設置這兩個配置,命令如下:

config set dir{newDir}
config set dbfilename{newFileName}

(3)自動化

除了上面在命令行使用save和bgsave命令觸發(fā)持久化,也可以在redis.conf配置文件中,完成配置,如下圖所示:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

在新安裝的redis中由默認的以上三個save配置, save 900 1表示900秒內如果至少有1個key值變化,則進行持久化保存數(shù)據(jù);

save 300 10則表示300秒內如果至少有10個key值發(fā)生變化,則進行持久化,save 60 10000以此類推。

通過以上的分析可以得出以下save和bgsave的對比區(qū)別:

  1. save是同步持久化數(shù)據(jù),而bgsave是異步持久化數(shù)據(jù)。

  2. save不會fork子進程,通過主進程持久化數(shù)據(jù),會阻塞處理客戶端的請求,而bdsavefork子進程持久化數(shù)據(jù),同時還可以處理客戶端請求,高效。

  3. save不會消耗內存,而bgsave會消耗內存。

RDB的優(yōu)缺點

缺點: RDB持久化后的文件是緊湊的二進制文件,適合于備份、全量復制、大規(guī)模數(shù)據(jù)恢復的場景,對數(shù)據(jù)完整性和一致性要求不高,RDB會丟失最后一次快照的數(shù)據(jù)。

優(yōu)點: 開機的恢復數(shù)據(jù)快,寫入持久化文件快。

AOF持久化機制

AOF持久化機制是以日志的形式記錄Redis中的每一次的增刪改操作,不會記錄查詢操作,以文本的形式記錄,打開記錄的日志文件就可以查看操作記錄。

AOF是默認不開啟的,若是想開啟AOF,在如下圖的配置修改即可:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

只需要把 appendonly no修改為 appendonly yes即可開啟,在AOF中通過 appendfilename配置生成的文件名,該文件名默認為 appendonly.aof,路徑也是通過dir配置的,這個與RDB的一樣,具體的配置信息如下圖所示:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=
AOF觸發(fā)機制

AOF帶來的持久化更加安全可靠,默認提供三種觸發(fā)機制,如下所示:

  1. no:表示等操作系統(tǒng)等數(shù)據(jù)緩存同步到磁盤中(快、持久化沒保證)。

  2. always:同步持久化,每次發(fā)生數(shù)據(jù)變更時,就會立即記錄到磁盤中(慢,安全)。

  3. everysec:表示每秒同步一次(默認值,很快,但是會丟失一秒內的數(shù)據(jù))。

AOF中每秒同步也是異步完成的,效率是非常高的,由于該機制對日志文件的寫入操作是采用append的形式。

因此在寫入的過程即使宕機,也不會丟失已經存入日志文件的數(shù)據(jù),數(shù)據(jù)的完整性是非常高的。

在新安裝的Redis的配置文件中,AOF的配置如下所示:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=
AOF重寫機制

但是,在寫入所有的操作到日志文件中時,就會出現(xiàn)日志文件很多重復的操作,甚至是無效的操作,導致日志文件越來越大。

所謂的無效的的操作,舉個例子,比如某一時刻對一個k++,然后后面的某一時刻k--,這樣k的值是保持不變的,那么這兩次的操作就是無效的。

如果像這樣的無效操作很多,記錄的文件臃腫,就浪費了資源空間,所以在Redis中出現(xiàn)了rewrite機制。

redis提供了bgrewriteaof命令。將內存中的數(shù)據(jù)以命令的方式保存到臨時文件中,同時會fork出一條新進程來將文件重寫。

重寫AOF的日志文件不是讀取舊的日志文件瘦身,而是將內存中的數(shù)據(jù)用命令的方式重寫一個AOF文件,重新保存替換原來舊的日志文件,因此內存中的數(shù)據(jù)才是最新的。

重寫操作也會fork一個子進程來處理重寫操作,重寫以內存中的數(shù)據(jù)作為重寫的源,避免了操作的冗余性,保證了數(shù)據(jù)的最新。

在Redis以append的形式將修改的數(shù)據(jù)寫入老的磁盤中    ,同時Redis也會創(chuàng)建一個新的文件用于記錄此期間有哪些命令被執(zhí)行。

下面進行演示一下AOF的操作,首先先打開AOF機制,修改配置文件中的appendonly noappendonly yes,然后執(zhí)行如下圖的操作:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

都顯示執(zhí)行成功,ls以下查看此時當前的文件夾終究會出現(xiàn) appendonly.aof
,AOF的數(shù)據(jù)持久化文件,通過cat命令查看內容:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

從上面的存儲的文件中可以看出,每一個命令是非常有規(guī)律的,比如第一次執(zhí)行 key *映射到該配置文件中的命令如下:

*2 //表示該命令兩組key 為一組 * 為一組
$6 //表示SELECT有6字符
SELECT
$1 //表示下面的0一個字符
0

然后執(zhí)行set k1 1的命令,此命令映射到文件中的命令如下:

*3 //表示該命令有三組set為一組 k1為一組 1為一組
$3 // 表示set有三個字符
set // 表示執(zhí)行了set命令
$2 // 表示k1有兩個字符
k1 // key值
$1 // 便是value值的字符長度為1
1  // value值

當AOF的日志文件增長到一定大小的時候Redis就能夠bgrewriteaof對日志文件進行重寫瘦身。當AOF配置文件大于改配置項時自動開啟重寫(這里指超過原大小的100%)。

該配置可以通過如下的配置項進行配置:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=
AOF的優(yōu)缺點

優(yōu)點: AOF更好保證數(shù)據(jù)不會被丟失,最多只丟失一秒內的數(shù)據(jù),通過fork一個子進程處理持久化操作,保證了主進程不會進程io操作,能高效的處理客戶端的請求。

另外重寫操作保證了數(shù)據(jù)的有效性,即使日志文件過大也會進行重寫。

AOF的日志文件的記錄可讀性非常的高,即使某一時刻有人執(zhí)行flushall清空了所有數(shù)據(jù),只需要拿到aof的日志文件,然后把最后一條的flushall給刪除掉,就可以恢復數(shù)據(jù)。

缺點:  對于相同數(shù)量的數(shù)據(jù)集而言,AOF文件通常要大于RDB文件。RDB 在恢復大數(shù)據(jù)集時的速度比 AOF 的恢復速度要快。AOF在運行效率上往往會慢于RDB。

混合持久化

在redis4.0后混合持久化(RDB+AOF)對重寫的優(yōu)化,4.0版本的混合持久化默認是關閉的,可以通過以下的配置開啟混合持久化:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? >
    <figcaption style=

混合持久化也是通過 bgrewriteaof來完成的,不同的是當開啟混合持久化時,fork出的子進程先將共享內存的數(shù)據(jù)以RDB方式寫入aof文件中,然后再將重寫緩沖區(qū)的增量命令以AOF方式寫入文件中。

寫入完成后通知主進程統(tǒng)計信息,并將新的含有RDB格式和AOF格式的AOF文件替換舊的AOF文件。簡單的說:新的AOF文件前半段是以RDB格式的全量數(shù)據(jù)后半段是AOF格式的增量數(shù)據(jù)。

優(yōu)點: 混合持久化結合RDB持久化AOF持久化的優(yōu)點,由于絕大部分的格式是RDB格式,加載速度快,增量數(shù)據(jù)以AOF方式保存,數(shù)據(jù)更少的丟失。

RDB和AOF優(yōu)勢和劣勢

rdb適合大規(guī)模的數(shù)據(jù)恢復,由于rdb是以快照的形式持久化數(shù)據(jù),恢復的數(shù)據(jù)快,在一定的時間備份一次,而aof的保證數(shù)據(jù)更加完整,損失的數(shù)據(jù)只在秒內。

具體哪種更適合生產,在官方的建議中兩種持久化機制同時開啟,如果兩種機制同時開啟,優(yōu)先使用aof持久化機制。

特別推薦一個分享架構+算法的優(yōu)質內容,還沒關注的小伙伴,可以長按關注一下:

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? ></p><pre ng-bind-html=

長按訂閱更多精彩▼

面試造飛機系列:面對Redis持久化連環(huán)Call,你還頂?shù)米幔? ></p><p style=如有收獲,點個在看,誠摯感謝

免責聲明:本文內容由21ic獲得授權后發(fā)布,版權歸原作者所有,本平臺僅提供信息存儲服務。文章僅代表作者個人觀點,不代表本平臺立場,如有問題,請聯(lián)系我們,謝謝!

本站聲明: 本文章由作者或相關機構授權發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內容真實性等。需要轉載請聯(lián)系該專欄作者,如若文章內容侵犯您的權益,請及時聯(lián)系本站刪除。
換一批
延伸閱讀

LED驅動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關鍵字: 驅動電源

在工業(yè)自動化蓬勃發(fā)展的當下,工業(yè)電機作為核心動力設備,其驅動電源的性能直接關系到整個系統(tǒng)的穩(wěn)定性和可靠性。其中,反電動勢抑制與過流保護是驅動電源設計中至關重要的兩個環(huán)節(jié),集成化方案的設計成為提升電機驅動性能的關鍵。

關鍵字: 工業(yè)電機 驅動電源

LED 驅動電源作為 LED 照明系統(tǒng)的 “心臟”,其穩(wěn)定性直接決定了整個照明設備的使用壽命。然而,在實際應用中,LED 驅動電源易損壞的問題卻十分常見,不僅增加了維護成本,還影響了用戶體驗。要解決這一問題,需從設計、生...

關鍵字: 驅動電源 照明系統(tǒng) 散熱

根據(jù)LED驅動電源的公式,電感內電流波動大小和電感值成反比,輸出紋波和輸出電容值成反比。所以加大電感值和輸出電容值可以減小紋波。

關鍵字: LED 設計 驅動電源

電動汽車(EV)作為新能源汽車的重要代表,正逐漸成為全球汽車產業(yè)的重要發(fā)展方向。電動汽車的核心技術之一是電機驅動控制系統(tǒng),而絕緣柵雙極型晶體管(IGBT)作為電機驅動系統(tǒng)中的關鍵元件,其性能直接影響到電動汽車的動力性能和...

關鍵字: 電動汽車 新能源 驅動電源

在現(xiàn)代城市建設中,街道及停車場照明作為基礎設施的重要組成部分,其質量和效率直接關系到城市的公共安全、居民生活質量和能源利用效率。隨著科技的進步,高亮度白光發(fā)光二極管(LED)因其獨特的優(yōu)勢逐漸取代傳統(tǒng)光源,成為大功率區(qū)域...

關鍵字: 發(fā)光二極管 驅動電源 LED

LED通用照明設計工程師會遇到許多挑戰(zhàn),如功率密度、功率因數(shù)校正(PFC)、空間受限和可靠性等。

關鍵字: LED 驅動電源 功率因數(shù)校正

在LED照明技術日益普及的今天,LED驅動電源的電磁干擾(EMI)問題成為了一個不可忽視的挑戰(zhàn)。電磁干擾不僅會影響LED燈具的正常工作,還可能對周圍電子設備造成不利影響,甚至引發(fā)系統(tǒng)故障。因此,采取有效的硬件措施來解決L...

關鍵字: LED照明技術 電磁干擾 驅動電源

開關電源具有效率高的特性,而且開關電源的變壓器體積比串聯(lián)穩(wěn)壓型電源的要小得多,電源電路比較整潔,整機重量也有所下降,所以,現(xiàn)在的LED驅動電源

關鍵字: LED 驅動電源 開關電源

LED驅動電源是把電源供應轉換為特定的電壓電流以驅動LED發(fā)光的電壓轉換器,通常情況下:LED驅動電源的輸入包括高壓工頻交流(即市電)、低壓直流、高壓直流、低壓高頻交流(如電子變壓器的輸出)等。

關鍵字: LED 隧道燈 驅動電源
關閉