99精品久久精品一区二区-亚洲熟妇无码?v在线播放-日本国产精品无码字幕在线观看-久久久亚洲永夜AV-亚洲一级无码一区二区一-免费国产成高清人在线视频-中文字幕乱码免费观看-国产毛片精品妇女久久久

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Redis深度實戰(zhàn):從數(shù)據(jù)結(jié)構(gòu)到高可用架構(gòu)與緩存治理

Redis深度實戰(zhàn):從數(shù)據(jù)結(jié)構(gòu)到高可用架構(gòu)與緩存治理 說個實話Redis 是被低估得最厲害的一個中間件。很多人學(xué)了幾天會了SET和GET知道五種數(shù)據(jù)類型就以為自己入門了結(jié)果一到面試被問“緩存穿透怎么解決”“主從切換會不會丟數(shù)據(jù)”或者一上線就被慢查詢、內(nèi)存暴漲、分布式鎖失效折騰到懷疑人生才發(fā)現(xiàn)自己根本沒摸到 Redis 的門。這篇筆記不是給你背面試題的是按我實際折騰 Redis 的路徑整理的從安裝選型、數(shù)據(jù)類型底層邏輯到高可用架構(gòu)、緩存治理、常見故障排查一次講透。內(nèi)容適用于用 Redis 做緩存、做分布式鎖、做排行榜、做消息隊列的開發(fā)者和運維同學(xué)也適合準(zhǔn)備大廠面試、想系統(tǒng)梳理 Redis 知識體系的人。我盡量用大白話講清楚每個關(guān)鍵選擇的“為什么”而不是只告訴你“怎么做”。1. 學(xué)習(xí)路線與整體設(shè)計思路拆解1.1 為什么你該把 Redis 當(dāng)“數(shù)據(jù)結(jié)構(gòu)服務(wù)器”來學(xué)很多教程開場就說“Redis 是高性能 KV 緩存數(shù)據(jù)庫”這個定位本身沒錯但它直接把你的思路帶窄了。如果只把 Redis 當(dāng)緩存那你永遠(yuǎn)只會用它來存字符串遇到實際需求就想“這玩意兒是不是不適合”——排行榜用 ZSet、去重用 Set、消息隊列用 List 或 Stream、分布式 ID 用 INCR、附近的人用 GEO這些都不是“緩存”而是數(shù)據(jù)結(jié)構(gòu)能力。我建議把 Redis 理解成“一個跑在內(nèi)存里的數(shù)據(jù)結(jié)構(gòu)服務(wù)器”。它和 MySQL 最大的區(qū)別不是快而是它的數(shù)據(jù)模型本身就是為特定數(shù)據(jù)結(jié)構(gòu)設(shè)計的你往里面放 String、Hash、List、Set、ZSet它幫你維護(hù)增刪改查、排序、聚合、去重這些能力。學(xué) Redis 的第一原則就是拿到一個需求先判斷“這個數(shù)據(jù)結(jié)構(gòu)適不適合用 Redis 表達(dá)”而不是“能不能塞進(jìn)緩存里”。帶著這個思路學(xué)習(xí)路徑就清晰了先掌握命令和數(shù)據(jù)結(jié)構(gòu)再理解持久化和過期策略接著上高可用和集群最后回到緩存治理和分布式鎖這些真實場景。每一步都在解決前一步帶來的新問題是一條完整的鏈路。1.2 按階段拆解基礎(chǔ)、進(jìn)階、實戰(zhàn)三步走第一階段是基礎(chǔ)目標(biāo)是“會用”。這個階段只需要搞定三件事安裝、五種數(shù)據(jù)類型、常用命令。你可以把 Redis 跑起來然后用redis-cli或者可視化工具比如 Another Redis Desktop Manager手動敲命令把每種數(shù)據(jù)類型的增刪改查、過期時間、TTL 都過一遍。這一步不需要背命令大全先把最常用的三十個命令用到條件反射就行。第二階段是進(jìn)階目標(biāo)是“懂原理”。這個階段要搞清楚三塊內(nèi)容Redis 為什么快單線程 IO 多路復(fù)用、數(shù)據(jù)怎么不丟RDB 和 AOF、內(nèi)存不夠了怎么辦過期策略和淘汰策略。這三個問題是面試高頻題也是你以后排查性能問題和設(shè)計緩存方案的理論基礎(chǔ)。很多人在這個階段容易犯的錯是只背概念不結(jié)合命令去驗證。比如你背了“Redis 默認(rèn)有 16 個庫”但你不知道SELECT 1切庫之后AOF 重寫、RDB 快照到底怎么處理多庫數(shù)據(jù)你背了“LRU 淘汰”但你不知道 Redis 的 LRU 是近似實現(xiàn)不是嚴(yán)格 LRU。第三階段是實戰(zhàn)目標(biāo)是“會排障”。這一階段要圍繞真實場景展開主從怎么搭、哨兵解決了什么問題、集群的槽位是怎么分配的、緩存穿透擊穿雪崩分別怎么應(yīng)對、分布式鎖怎么實現(xiàn)才不會出事故。這個階段的標(biāo)志是你開始能看懂redis.log里的告警信息能根據(jù)INFO命令的輸出判斷系統(tǒng)健康度能在 Redis Desktop Manager 的連接失敗提示里快速定位問題。我個人建議這個階段配合 Docker 來做實驗因為主從、哨兵、集群的搭建會反復(fù)摧毀重建用容器最省心。2. 環(huán)境準(zhǔn)備安裝、選型與可視化工具的坑2.1 Windows 安裝別去官網(wǎng)下“官方 Windows 版”先說一個很多人踩過的坑Redis 官方是不支持 Windows 的官網(wǎng)只提供 Linux 源碼包。你在網(wǎng)上搜“redis windows 下載”搜到的那些.exe安裝包基本都是第三方移植版或者微軟舊版維護(hù)分支。不是說不能用而是要選對來源。如果你只是本地學(xué)習(xí)我推薦最常見的方案去 Redis 的 Windows 移植倉庫比如 tporadowski/redis下載 zip 包解壓后直接運行redis-server.exe默認(rèn)端口 6379 就能起來redis-cli.exe就是命令行客戶端特別適合新手。注意兩個細(xì)節(jié)第一這個移植版大多停留在 Redis 5.x 或 6.x 版本學(xué)習(xí)和單機測試沒問題但它和 Linux 官方版在高版本特性上會有差異生產(chǎn)環(huán)境千萬別用第二啟動后進(jìn)程會一直占著控制臺窗口關(guān)掉窗口 關(guān)掉服務(wù)學(xué)習(xí)階段無所謂但你最好知道有redis-server --service-install這種以 Windows 服務(wù)方式運行的命令。Linux 上安裝是更正經(jīng)的做法。以 CentOS 和 Ubuntu 為例源碼編譯是標(biāo)準(zhǔn)的安裝路徑下載源碼包、make、make install。編譯之前記得裝好gcc和make否則會報一堆讓人頭大的編譯錯誤。編譯安裝完Redis 的可執(zhí)行文件會放在/usr/local/bin配置文件在源碼目錄下的redis.conf。這里有個常見坑很多人直接./redis-server啟動結(jié)果發(fā)現(xiàn)根本沒有配置文件生效所有的數(shù)據(jù)持久化和后臺運行配置都失效了。正確姿勢是./redis-server /path/to/redis.conf顯式指定配置文件。2.2 Docker 方式學(xué)習(xí)高可用架構(gòu)最快的路徑如果你要學(xué)主從、哨兵、集群我強烈建議直接用 Docker。手寫配置文件、在一臺機器上起多個實例不是不行但改端口、改 pid 文件、調(diào)日志路徑會消耗大量耐心。用 Docker 的話一條docker run命令就是一個獨立實例網(wǎng)絡(luò)隔離也是天然的。舉個例子搭建一主兩從的 Redis 主從結(jié)構(gòu)# 創(chuàng)建自定義網(wǎng)絡(luò)方便容器間通過容器名互相訪問 docker network create redis-net # 主節(jié)點 docker run -d --name redis-master --network redis-net -p 6379:6379 redis:7.0 redis-server --appendonly yes # 從節(jié)點1 docker run -d --name redis-slave1 --network redis-net -p 6380:6379 redis:7.0 redis-server --appendonly yes --slaveof redis-master 6379 # 從節(jié)點2 docker run -d --name redis-slave2 --network redis-net -p 6381:6379 redis:7.0 redis-server --appendonly yes --slaveof redis-master 6379啟動完成后進(jìn)入主節(jié)點容器執(zhí)行INFO replication你就能看到兩個從節(jié)點已經(jīng)連接上來。用 Docker 做這種實驗的好處是環(huán)境干凈、銷毀容易、模擬故障特別方便。比如你直接docker stop redis-slave1就能觀察主從斷開后主節(jié)點有沒有報錯、從節(jié)點重連后的數(shù)據(jù)同步情況。注意Docker 方式雖然方便但你要分清兩個概念——--slaveof這是主從復(fù)制的配置不是集群的配置。主從復(fù)制解決的是“數(shù)據(jù)多副本冗余”集群解決的是“數(shù)據(jù)分片存儲”。很多人把這兩個搞混后面看集群文檔時一臉懵。2.3 可視化客戶端Redis Desktop Manager 的替代品Redis Desktop Manager簡稱 RDM是搜索最多、知名度最高的 Redis 可視化客戶端但它的坑也不少。2022 年起新版 RDM 開始收費如果你搜“redis desktop manager 免費版”或者“redis desktop manager 開源舊版”能找到的是最后一個免費開源版本大概停在 2022 年 6 月左右。當(dāng)年很多人就在這個坎上栽了跟頭——下載安裝了新版一打開就彈試用提醒還看不到 key 列表的完整功能。我實際用下來的推薦是如果只是日常學(xué)習(xí)直接用Another Redis Desktop Manager這是一個完全開源免費、持續(xù)維護(hù)的替代品。它的 UI 比舊版 RDM 更現(xiàn)代支持 SSH 隧道、支持可視化查看 stream、支持命令執(zhí)行的實時監(jiān)控對單機、集群、哨兵模式都有不錯的支持。當(dāng)然如果你只有幾臺服務(wù)器、鍵也不多用命令行的redis-cli其實完全夠可視化客戶端的核心價值是讓你看清 key 的分布、內(nèi)存占用和過期時間排查問題時特別直觀。3. 五大數(shù)據(jù)類型與底層實現(xiàn)邏輯3.1 String不只是字符串的三層編碼String 是一個繞不開的基礎(chǔ)但你真不一定了解它。Redis 的 String 除了存文本還能存數(shù)字配合 INCR/DECR 做計數(shù)器、存二進(jìn)制數(shù)據(jù)比如圖片的字節(jié)流但容易讓你翻車的點在于它的內(nèi)存編碼。Redis 對 String 做了三種內(nèi)部編碼int純數(shù)字、embstr短字符串、raw長字符串。前兩種字節(jié)數(shù)少存儲緊湊超過 44 字節(jié)會自動轉(zhuǎn)成raw。這個 44 字節(jié)不是隨便定的它和 Redis 內(nèi)部redisObject結(jié)構(gòu)的對齊、內(nèi)存分配器的分配粒度有關(guān)你不需要死記但你得理解Redis 對短字符串做了極致優(yōu)化所以設(shè)計 key 時別弄動輒幾百字節(jié)的 value除非業(yè)務(wù)必須。實際測試下來一個幾百字節(jié)的 value 比短字符串多占 3~5 倍內(nèi)存這在千萬級 key 的緩存里就是幾十 GB 的差距。String 最常見的生產(chǎn)場景有三個緩存、計數(shù)器、分布式 ID。計數(shù)器用INCR時要留心INCR不準(zhǔn)的坑——這里說的“不準(zhǔn)”不是 Redis 算錯而是并發(fā)下的計數(shù)語義問題。如果你用INCR做庫存扣減命令本身是原子的沒問題但如果你先GET再SET這就是經(jīng)典的讀改寫競態(tài)丟更新就是必然結(jié)果。類似“瀏覽量 1”這種業(yè)務(wù)用INCR沒問題但“基于當(dāng)前值做復(fù)雜計算再寫回”就必須用 Lua 腳本或者加鎖。3.2 Hash對象類數(shù)據(jù)的“常規(guī)武器”和 Redis 的“乞丐版分片”Hash 在業(yè)務(wù)里最典型的應(yīng)用是存儲對象。比如一個用戶信息最笨的存法是SET user:1001 {name:tom,age:18}問題是改一個字段就要整體覆蓋整個 JSON浪費網(wǎng)絡(luò)和內(nèi)存。用 Hash 存就變成了HSET user:1001 name tom age 18改哪個字段就只更新哪個字段還能單獨對字段設(shè)置過期時間嗎不行Hash 本身沒有字段級別的 TTL這是它和 String 的另一個取舍。Hash 內(nèi)部編碼有兩種ziplist和hashtable。當(dāng)字段數(shù)量少、字段值小的時候用ziplist緊湊存儲字段多了或者值大了自動轉(zhuǎn)成hashtable。這里有一個用 Hash 做“小分片”的思路當(dāng)單個 key 的 value 過大比如一個大 List 存了百萬條記錄會導(dǎo)致讀寫這個 key 的耗時增加這在 Redis 里叫“大 key 問題”。解決方案之一就是把一個大集合拆成多個小 Hash。舉例來說如果你要存一個用戶的行為記錄一天幾十條不要用SET user_actions:1001 大JSON而是按天分片HINCRBY user_actions:20250120:1001 type_click 1這樣每個 key 只負(fù)責(zé)一天的增量數(shù)據(jù)。這個思路在任何需要給單個 key 瘦身的場景都通用理解它能幫你解決一大批“Redis 查詢越來越慢”的問題。3.3 List 和 Stream隊列功能到底用誰List 的LPUSHRPOP組合是最簡單的生產(chǎn)者消費者模式配合BLPOP還能實現(xiàn)阻塞讀很多輕量級消息隊列就是用這個做的。但 List 做隊列有天然的毛病消息丟失沒有重試機制沒有消費確認(rèn)消費者崩了就永遠(yuǎn)丟了而且LRANGE翻頁取數(shù)據(jù)雖然方便但對長列表是 O(N) 操作列表一長就拖垮性能。所以 Redis 5.0 之后引入了 Stream它的設(shè)計目標(biāo)就是正兒八經(jīng)的消息隊列支持消費者組、支持消息確認(rèn)ACK、支持 PEL待處理列表、支持持久化。如果你在做項目時需要一個“能用但不想引入 Kafka/RabbitMQ”的輕量隊列Stream 幾乎是唯一正解。我自己的建議是隊列非常簡單的場景比如事件通知丟了也無所謂可以用 List要求消息不丟、要消費組、要重試用 Stream。面試問到“Redis 做消息隊列”你要能說出這個演進(jìn)關(guān)系比單純背命令值錢多了。3.4 Set 和 ZSet從去重到排行榜Set 用來做去重和集合運算交集、并集、差集典型場景是抽獎、標(biāo)簽系統(tǒng)、共同好友。ZSet 比 Set 多了分值排序底層是跳躍表 哈希表跳躍表的時間復(fù)雜度是 O(log N)所以 ZSet 在百萬級數(shù)據(jù)量下的排序操作依然很快。排行榜、實時熱點、延時隊列都是 ZSet 的主場。我要提醒一個 ZSet 的坑同樣是ZADD如果你在寫入時不控制 member 的規(guī)模一個 ZSet 里有幾百萬個 member后續(xù)的ZRANGE、ZREM雖然單次很快但內(nèi)存占用會非常嚇人。ZSet 的成員越多跳躍表的指針開銷越大單個 member 的額外開銷可能有幾十字節(jié)。所以設(shè)計上要注意排行榜類數(shù)據(jù)要么只保留 Top N用ZREMRANGEBYRANK定期清理要么按業(yè)務(wù)維度拆 key比如按天拆排行榜千萬別讓一個 ZSet 無限增長。4. 高可用架構(gòu)主從、哨兵與集群4.1 主從復(fù)制REPLICAOF 背后的增量與全量同步主從復(fù)制解決的是“單點故障”問題。主節(jié)點可讀可寫從節(jié)點默認(rèn)只讀主節(jié)點把寫操作同步給從節(jié)點。同步分兩種情況全量同步和增量同步。全量同步發(fā)生在從節(jié)點剛連接主節(jié)點、或者主從數(shù)據(jù)差距過大時。流程是從節(jié)點發(fā)送PSYNC命令主節(jié)點執(zhí)行BGSAVE生成 RDB 快照發(fā)給從節(jié)點從節(jié)點清空舊數(shù)據(jù)并加載快照然后主節(jié)點把快照生成期間新增的寫命令存在復(fù)制緩沖區(qū)里再發(fā)給從節(jié)點。增量同步靠的是主從之間維護(hù)的復(fù)制偏移量如果偏移量還在緩沖區(qū)范圍內(nèi)只需要同步差額部分如果從節(jié)點斷連太久緩沖區(qū)里的數(shù)據(jù)已經(jīng)覆蓋了就得重新全量同步。這里有一個隱藏很深的坑如果從節(jié)點斷連時間很短但主節(jié)點的復(fù)制緩沖區(qū)太小默認(rèn) 1MB可通過client-output-buffer-limit replica調(diào)大也會觸發(fā)全量同步。全量同步一旦頻繁發(fā)生主節(jié)點要反復(fù) BGSAVE 傳輸數(shù)據(jù)CPU 和網(wǎng)絡(luò)都會被打滿導(dǎo)致主節(jié)點阻塞。生產(chǎn)環(huán)境出現(xiàn)“主從反復(fù)全量同步”的情況第一件事就是去看INFO replication里的偏移量差值和緩沖區(qū)大小。4.2 哨兵自動故障轉(zhuǎn)移的“哨兵進(jìn)程”主從復(fù)制解決了數(shù)據(jù)冗余但主節(jié)點掛了從節(jié)點不會自動頂上需要人工切換。哨兵Sentinel就是來解決這個問題的它是一個獨立進(jìn)程負(fù)責(zé)監(jiān)控主從節(jié)點的健康狀態(tài)在主節(jié)點掛掉后自動從從節(jié)點中選舉出一個新主節(jié)點并把其他從節(jié)點重新指向新主節(jié)點。但哨兵不是萬能的。它最被人質(zhì)疑的點是哨兵本身就是單點雖然可以部署哨兵集群而且故障轉(zhuǎn)移期間存在“腦裂”窗口。經(jīng)典場景主節(jié)點和哨兵之間的網(wǎng)絡(luò)發(fā)生分區(qū)哨兵認(rèn)為主節(jié)點掛了選舉出新的主節(jié)點但原主節(jié)點其實還活著還能接收寫入等網(wǎng)絡(luò)恢復(fù)后原主節(jié)點的數(shù)據(jù)就和新主節(jié)點不一致了這部分丟失的數(shù)據(jù)無法找回。所以涉及錢的業(yè)務(wù)比如扣庫存、交易流水不能只靠 Redis 主從 哨兵保證強一致這是架構(gòu)層面的問題。用 Docker 搭建哨兵的時候最容易被坑的是配置文件里的sentinel monitor master-name host port quorum這個host不能寫127.0.0.1因為哨兵需要通知“其他”哨兵和“其他”從節(jié)點連接主節(jié)點。在容器環(huán)境里主機地址要寫容器網(wǎng)絡(luò)中可達(dá)的別名的地址比如redis-master。這個細(xì)節(jié)我當(dāng)年調(diào)試了一下午白屏的時間都浪費在地址可達(dá)性上。4.3 集群數(shù)據(jù)分片的槽位分配以及為什么集群也有“一票否決”Redis Cluster 和主從哨兵是兩套不同的體系。Cluster 把整個數(shù)據(jù)空間分成 16384 個槽位每個節(jié)點負(fù)責(zé)一部分槽位key 通過CRC16(key) % 16384計算屬于哪個槽。寫請求如果落到了非負(fù)責(zé)節(jié)點節(jié)點會返回MOVED錯誤客戶端要跟著重定向。這是 Cluster 和單機模式最大的體驗差異——你的客戶端必須支持集群協(xié)議比如 Jedis 的JedisCluster、Lettuce 的集群模式否則會出現(xiàn)各種莫名其妙的連接和寫入失敗。Cluster 本身自帶主從冗余每個主節(jié)點可以掛一個或多個從節(jié)點主掛了從自動頂上。但要注意Cluster 的可用性判定比哨兵更嚴(yán)格如果一個主節(jié)點和它的所有從節(jié)點同時掛掉整個集群就會進(jìn)入不可用狀態(tài)即使其他槽位的主節(jié)點都活著。這就是少數(shù)派不可訪問導(dǎo)致集群不可用的經(jīng)典場景。查詢操作可以通過CLUSTER SLOTS命令看清楚每個槽位的負(fù)責(zé)節(jié)點這個命令排障時非常好使。Docker 部署集群有幾個注意點端口映射不能只映射 6379因為集群通信要用 16379總線端口不映射會造成節(jié)點間通信失敗容器重啟后 IP 變化會讓集群變的不可用解決辦法是給容器設(shè)置固定 IP--ip或使用 Docker Swarm / Kubernetes 的穩(wěn)定 DNS 名稱。這些問題在本地實驗時不明顯但如果你用 KubeSphere 之類的平臺去搭建 Redis 集群就會頻繁遇到“集群狀態(tài)正常但客戶端連不上”的怪事排查到最后基本都是網(wǎng)絡(luò)標(biāo)識變動引起的。4.4 從“會搭”到“會調(diào)”配置參數(shù)背后的取舍搭建完高可用架構(gòu)你才能真正讀懂配置文件里的各種參數(shù)。比如maxmemory和maxmemory-policy決定了內(nèi)存耗盡后的行為——allkeys-lru是全局近似 LRU 淘汰volatile-ttl只對設(shè)置了過期時間的 key 淘汰。再比如appendonly yes開啟 AOF 后appendfsync everysec表示每秒刷盤一次這是性能和可靠性的折中方案always最安全但性能下降明顯no交給操作系統(tǒng)決定但可能丟失一秒鐘的數(shù)據(jù)。關(guān)于 AOF 和 RDB我的建議是生產(chǎn)環(huán)境兩者都開RDB 做快速恢復(fù)的冷備AOF 做災(zāi)備的精確日志。只開 AOF 的坑是AOF 文件會越來越大雖然 rewrite 能瘦身但如果宕機時 AOF 文件有損壞Redis 可能啟動失敗需要先運行redis-check-aof --fix修復(fù)。只開 RDB 的坑更明顯兩次快照之間的數(shù)據(jù)全部丟失。我遇到過把 RDB 快照間隔設(shè)成 900 秒的項目一次斷電丟了十五分鐘緩存雖然后臺有 MySQL 兜底但那個時間段的請求壓力直接把 DB 打崩了這個教訓(xùn)說明持久化參數(shù)不是隨便填的。5. 緩存治理穿透、擊穿、雪崩與分布式鎖5.1 緩存三大災(zāi)難的應(yīng)對不是靠 Redis 本身緩存穿透、擊穿、雪崩這三個問題面試必問但很多人回答得過于套路化。我按自己的經(jīng)驗說說區(qū)別和處理優(yōu)先級。緩存穿透是查一個根本不存在的數(shù)據(jù)緩存里沒有數(shù)據(jù)庫里也沒有請求直接打到 DB。對 Redis 而言它根本沒壓力壞的是 DB。常見的解法有三種緩存空值設(shè)置一個較短的過期時間比如 5 分鐘、布隆過濾器一種空間效率很高的概率型數(shù)據(jù)結(jié)構(gòu)不存在則直接短路、參數(shù)校驗攔截非法請求。我個人覺得業(yè)務(wù)層參數(shù)校驗是最先該做的布隆過濾器適合 key 基數(shù)大的場景空值緩存適合 key 容易被窮舉暴力的場景。緩存擊穿是某一個熱點 key 過期瞬間大量請求直接打到 DB。注意是“單個 key”不是“一批 key”。應(yīng)對的核心思路是“不讓 DB 扛流量”一是互斥鎖只有一個線程去查 DB 重建緩存其它線程等待或返回默認(rèn)值二是邏輯過期不讓 key 實際過期而是在 value 里塞一個過期時間戳后臺異步刷新適合對一致性要求不高的熱點數(shù)據(jù)。緩存雪崩是大量 key 同時過期或者 Redis 實例宕機導(dǎo)致流量直撲 DB。處理手法過期時間加隨機值比如SETEX key (base random(0,300))、熱點 key 預(yù)熱、多級緩存兜底本地 Caffeine 再擋一層。在 Redis 本身宕機時多級緩存幾乎是唯一能在 Redis 恢復(fù)前保護(hù) DB 的手段否則你再怎么設(shè)計過期時間也擋不住洪水。5.2 分布式鎖SET NX EX 和 Lua 缺一不可說到分布式鎖最常見的實現(xiàn)是基于SET key value NX EX seconds。注意這個命令必須是一條命令完成不能拆成SETNX再EXPIRE因為兩條命令之間有間隙進(jìn)程崩了鎖就沒過期時間了死鎖就是這么來的。然后是釋放鎖很多人寫成if (redis.call(GET, KEYS[1]) ARGV[1]) then return redis.call(DEL, KEYS[1]) else return 0 end為什么要用 Lua因為“判斷值是否是自己的”和“刪除 key”是兩個操作拆開執(zhí)行中間鎖過期了別的線程拿到了鎖然后你把這個別人的鎖刪了。這個 bug 在并發(fā)稍高的場景下必現(xiàn)。用 Lua 把兩步合并成一個原子操作這是分布式鎖最底層的底線。還有兩個進(jìn)階問題要心里有數(shù)。第一個是“鎖過期時間怎么設(shè)”業(yè)務(wù)執(zhí)行時間可能超過鎖的過期時間導(dǎo)致鎖被提前釋放解決辦法是“看門狗”機制——在持有鎖期間定期續(xù)期但這是 Redisson 這些客戶端庫實現(xiàn)的能力自己裸寫要慎重。第二個是“主從切換鎖丟失”的問題主節(jié)點拿到了鎖但數(shù)據(jù)還沒同步到從節(jié)點主節(jié)點掛了從節(jié)點頂上后鎖就沒了。Redisson 的 RedLock 試圖解決這個問題但代價是復(fù)雜度陡增而且在大規(guī)模部署下正確性爭議一直存在。我的建議是能用數(shù)據(jù)庫唯一約束解決的業(yè)務(wù)就別用 Redis 分布式鎖用了就要接受它的“在極端故障下有鎖丟失風(fēng)險”這個前提。5.3 序列化Redis 客戶端里最容易被忽視的性能瓶頸Java 用 Redis 時序列化方式直接影響你能存什么、占多少內(nèi)存。最常用的兩個StringRedisTemplate是純字符串讀寫存 Java 對象時你得自己把對象轉(zhuǎn)成 JSONRedisTemplateGenericJackson2JsonRedisSerializer可以自動把對象序列化成 JSON 存入取出來時反序列化回對象非常方便但代價是存儲的內(nèi)容里會帶一段class類型信息占用并不大但是讀出來的數(shù)據(jù)肉眼看起來也不是那么干凈。序列化還有一個隱藏痛點默認(rèn)的JdkSerializationRedisSerializerSpring Data Redis 默認(rèn)配置如果沒做任何定制是 Java 原生序列化二進(jìn)制格式占用空間大而且存進(jìn)去的東西你在可視化工具里完全看不懂全是\xAC\xED開頭的一堆亂碼。我強烈建議任何項目都顯式配置 JSON 序列化方式除非你能忍受排查問題時對著亂碼猜內(nèi)容。Python 連接 Redis 也有類似問題用pickle序列化存進(jìn)去的數(shù)據(jù)別指望redis-cli能人類可讀??缯Z言讀寫同一個 key 時一定要統(tǒng)一序列化方案否則等著你的就是亂碼或者反序列化異常。5.4 Lua 腳本不是炫技是原子性的救命稻草Redis 的 Lua 腳本能力很多初學(xué)者不重視覺得“我是業(yè)務(wù)開發(fā)用不上 Lua”。但實際上只要你的操作需要“讀當(dāng)前值 - 計算 - 寫回”這樣的組合Lua 就是最優(yōu)雅的原子性保證。前面說的分布式鎖釋放邏輯只是一個例子還有“限流器”INCR后判斷當(dāng)前計數(shù)是否超限超過則返回失敗整個過程塞進(jìn) Lua 里執(zhí)行就沒有并發(fā)下超發(fā)的問題。Lua 在 Spring 中通常用DefaultRedisScript配合execute調(diào)用在 Python 里是redis.register_script。用 Lua 時有幾個細(xì)節(jié)容易踩坑第一Lua 腳本里要訪問 Redis key 必須通過KEYS[]數(shù)組傳入不能寫在腳本里拼字符串否則 Redis 無法預(yù)分配槽位第二腳本執(zhí)行期間會阻塞 Redis千萬別寫死循環(huán)或者毫秒級都算慢的重計算第三腳本的“確定性”要求它不能在執(zhí)行過程中讀取自身的寫入結(jié)果在集群模式下會直接報錯所以你在集群環(huán)境用 Lua 時要特別克制盡量只對單個 key 做操作。6. 從學(xué)習(xí)到面試高頻題、監(jiān)控日志和排障手冊6.1 高頻面試題我建議你追根溯源別只背答案翻一翻網(wǎng)上流傳的“Redis 面試題”問得最多的是這些Redis 為什么快、緩存穿透和擊穿怎么解決、分布式鎖怎么實現(xiàn)、持久化怎么選、主從和集群的腦裂問題。這些問題并不難難的是你說答案的時候有沒有“現(xiàn)場感”。比如“Redis 為什么快”標(biāo)準(zhǔn)答案是“單線程避免上下文切換 基于 IO 多路復(fù)用的事件循環(huán) 純內(nèi)存操作”但你要是再往深走一步“單線程為什么還能這么快IO 多路復(fù)用到底是什么”很多人的回答就開始含糊了。我自己的理解是Redis 把每個連接封裝成一個文件事件交給內(nèi)核去監(jiān)聽讀寫事件有事件到達(dá)才觸發(fā)回調(diào)處理這本質(zhì)上和 Nginx 的事件驅(qū)動模型類似是把“等待 IO”這件事從線程里解放出去了。你用“餐廳只有一個服務(wù)員但門口的鈴一響服務(wù)員才出去接待而不是坐在門口死等每個客人”這個類比就可以跟小白講清楚。再比如“Kubernetes 上能不能搭 Redis”這其實是一個信號題對方想看你有沒有意識到在云原生場景下Redis 這類有狀態(tài)應(yīng)用對網(wǎng)絡(luò)標(biāo)識Pod IP、節(jié)點名的依賴很強StatefulSet 是唯一合理的選擇。如果你能說出 StatefulSet 的穩(wěn)定網(wǎng)絡(luò)標(biāo)識和 Redis Cluster 的槽位分配之間是什么關(guān)系面試官對你的印象會立刻不一樣。6.2 日志、監(jiān)控和常見錯誤每一個報錯都別放過排查 Redis 問題的第一步是看日志。Docker 部署的實例用docker logs 容器名Linux 直接看日志文件的路徑在 redis.conf 里的logfile配置項。我最常關(guān)注的日志信息有幾類Background saving terminated by signal表示 BGSAVE 失敗通常和內(nèi)存或文件系統(tǒng)有關(guān)Possible nokey和Cant persist這類表示 RDB/AOF 寫入出問題要優(yōu)先檢查磁盤空間df -hMISCONF Redis is configured to save RDB snapshots, but its currently unable to persist on disk這個經(jīng)典的只讀錯誤就是磁盤寫不進(jìn)去導(dǎo)致的。監(jiān)控指標(biāo)要盯四個connected_clients連接數(shù)used_memory內(nèi)存占用keyspace_hits和keyspace_misses算命中率命中率長期低于 80% 說明緩存設(shè)計有問題rdb_last_bgsave_status和aof_last_write_status持久化狀態(tài)。用redis-cli INFO stats | grep keyspace可以快速查命中率用SLOWLOG GET可以看慢查詢結(jié)合實際業(yè)務(wù)分析是查還是不查。可視化工具連接不上的排查路徑也很有套路基本按這個順序來第一步ping通不通第二步 telnet 6379 通不通第三步看服務(wù)端有沒有設(shè)置bind 127.0.0.1很多默認(rèn)配置只監(jiān)聽本機外部當(dāng)然連不上第四步看有沒有requirepass認(rèn)證第五步看云廠商安全組/防火墻有沒有放行 6379。八成問題都出在bind和防火墻這兩項。6.3 壓測、優(yōu)化和一把“性能底牌”最后聊聊性能Redis 本身吞吐很高但別忽略“客戶端導(dǎo)致的問題”。在項目中用了KEYS *這種 O(N) 命令在阻塞事件循環(huán)的同時它可能讓整個 Redis 卡頓到毫秒級超時。用SMEMBERS拉取一個巨大 Set 的全部成員它會撐爆網(wǎng)絡(luò)和內(nèi)存。這些替換方案都是現(xiàn)成的SCAN分批遍歷 keySSCAN遍歷 SetLRANGE注意限制數(shù)量。養(yǎng)成“避免 O(N) 命令”的習(xí)慣是所有 Redis 使用者必須過的一道坎。壓測工具的選擇上redis-benchmark是官方自帶的最簡方案但它模擬不了復(fù)雜業(yè)務(wù)流量真要壓真實場景用redis-cli --latency看延遲分布、用INFO commandstats看每條命令的執(zhí)行次數(shù)和耗時占比比盲目壓 QPS 更有參考價值。我見過很多團(tuán)隊“壓測 QPS 達(dá)標(biāo)”但線上一緊張就告警觀察下來基本都是沒看延遲分布、沒看命令耗時導(dǎo)致的性能優(yōu)化要看“哪個命令最慢”而不是“系統(tǒng)最高支持多少 QPS”。我個人在實際操作中的體會是Redis 不是一個“學(xué)完就完了”的東西它和業(yè)務(wù)形態(tài)綁定得很深。同一個命令在緩存場景、計數(shù)場景、隊列場景中的語義和坑完全不一樣。你學(xué)它的方式?jīng)Q定了你后來踩坑的多少——如果只是背命令你會覺得它很簡單如果你動手搭過集群、看過日志、壓過延遲、親手修過緩存穿透你才會真的理解“高性能中間件”這幾個字背后藏著多少容易被忽略的工程細(xì)節(jié)。這篇筆記是我自己踩坑過程的復(fù)盤寫出來算是給后來者省點時間尤其是那些第一次在項目里引入 Redis 的朋友愿你少走幾步彎路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
99er这里只有精品| caop视频| 丁香五月婷婷激情网| 人妻AV中文系列| 五月婷婷开心六月激情小说| 丁香六月AV| 久久婷婷五月综合一| 五月天精品视频| 九九视频在线| 九九人妻福利| 五月丁香色| 亚洲春色奇米影视| 无码色| 五月丁香啪。| 综合AV网| 人妻丰满精品一区二区A片| 激情综合五月婷婷| 五月丁香色| 天天插天天很| 狠色狠色狠色狠色狠色网| 久久久久久久97| 在线播放 精品| 亚洲精品色| 综合啪啪| 91久久电影| 伊人五月网| 天天搞夜夜叫| 天天做天天爱天天日| 九月婷婷激情| 台湾无码A片一区二区| 婷婷五月天桃花网| 久久看九九90| 欧美婷婷丁香社区在线播放| 久久5 9视频免费观看| 中文字幕黄色片| 五月婷婷激情网| 亚州视频九九99| 五月婷婷黄色| 精品视频99看在线视频| 5月婷婷视频网站综合| www.五月天色色色| 亚洲情色一区| 日韩啪啪视频| 五月婷婷激情刺激| se色99| 狠狠综合| 立川无码av| 六月婷婷网| 激情综合五月天| 五月色婷婷中文字幕| 射琪琪| 色444综合网| 高潮毛片又色又爽免费| 色五月丁香A欧美com| 八戒青柠影视剧在线观看| 国产精产国品一二三在观看| 色九九综合色| 激情综合婷婷久久| 热99精品视频五月| www.日日日.com| 成人视频九九| 青青草原福利在线| 激情图片婷婷丁香五月| 色热久| 九九久久99精品免费观看www| 久久久久久久人妻| 色色婷| 久久综合五月| 牛牛澡牛牛爽| 色情婷| 欧美激情伊人| jiujiu热在线视频| 五月婷六月丁香| 丁香五月亚洲天堂| 久综合色| A片试看120分钟做受视频红杏| av九九| 精品无码久久久久久久久 | 99re欧美精品| 日韩综合久| 97精品自拍| 日本a片网址| 99r这里只有精品哦| 丁香五月久久综合| 丁香婷婷色情| 欧美婷婷| 九九99在线视频| 亚洲午夜av| 丁香五月 综合| 五月婷婷丁香av| 野战毛片三一3| 久久久激情视频| 五月成人网站| 9热久久| 99色五月| 久久这里都是精品视频| 97碰碰视频在线观看| 九色视频91| 激情小说色五月| 久久婷婷的综合色丁香五月| www.狠狠操.co m| 深爱五月天天| 日韩成人中文字幕| 人人操婷婷| 久草性爱| 成人视频婷婷| 福利视频在线播放| www.9797国产| 思思久热6| 婷婷伊人久久| 久久综合9| 丁香五月婷婷av| 婷婷丁香五月天综合网| 色婷操逼| 亚洲欧洲小视频9| 噜一噜免费视频| 五月婷婷丁香狠狠撸久久| 97碰超级人人看| 熟女强人妻一区二区三区四区无| 五月婷六月综合在线观看| 99久久久| WW婷婷五月天com| 久久婷婷网站| www.婷婷五月| 婷婷情色五月| 婷婷色播综合五月| 亚洲综合五月天| 变态另类色图| 婷婷久久六月费| 日本精品99网站| 亚洲丁香五冃97色| 2050人人操免费工开爱| 大香蕉伊人久久| 99热99日天天干| 五月婷婷六月丁香激情深爱| 夜夜久久综合网| 99在线精品免费视频| 久久婷.com| 人妻自慰高清合集| 色婷婷丁香女女| 丁香六月婷月91婷月| 婷婷九月在线| 婷婷丁香色情| 久99视频在线观看| 婷婷五月综合社区| 狠狠色综合网| 婷婷综合色图| 五月丁香啪啪啪综合网| BT综合在线视频观看| 天天干com| 国产欧美熟妇另类久久久 | 婷婷五月天播| 免费黄色片子| 五月婷婷五月天激情视频| 日本婷久久| 色yeye色综合| 美女五月狠狠| www.97碰碰com| 五月色影院| 色色色丁香| 亚洲婷婷六月天| 五月丁香久久| hd五月婷婷在线| 久久激情五月| 激情五月天综合图片小说网站| 超碰在线人妻| 五月丁香六月久久| 婷婷久久五月天| 激情久久久| 99热.com| 无码中文一区二区三区| 色综啪啪| 天天爱天天狠天天透| 婷婷WWW久久| 99小视频网站| 在线中文亚洲| 色人久久| 精品久久久久久久人妻| 人妻中文字幕精品| 五月婷视频久久| 中文无码婷婷| 热久久77777| 国产FREESEXVIDEOS性中国| 五月天五月色婷婷综合| 91久久精品国产91性色TV| 婷婷五月天激情小说网站| 最新无毒无码AV| 婷婷开心激情综合五月天| 亚洲综合色成丁香五月色| 天天天添天天操| 黄色片久久| 五月婷久久在线| 久久婷五月影院| 亚州色色色| 久久99精品久久久久久青青AR| 五月丁香六月婷婷网| 97色97干| 无码激情AAAAA片-区区| 四月婷婷丁香五月| 日本人妻伦在线中文字幕| 狠狠干天天内射| 免费观看全黄做爰的视频| 久久婷婷五月综合激情国产| 色五月婷婷影视| 激情五月天社区| 丁香五月天黄色片| 综合aV在线| 色狠久| 影音先锋天天日| 伊人超碰| 五月婷婷色吧!| 色色色五月| www.婷婷,com| 影音先锋 婷婷| 91久久九| 操操啪| 激情黄色小说五月天| 91啪啪啪啪| 色播五月| 激情网五月| 狠狠综合| 色婷亚洲五月丁香| 久草热8精品视频在线观看 | 五月天色狠狠| 九色激情| 婷婷俺去也| 激情五月婷婷在线区| 黄色毛片精品| 国产午夜精品一区二区三区嫩草| 天天干,天天日| 精品五月视频婷婷在线观看| 日本在线wwww| 超碰在线观看三级片| 人妻精品一区二区三区| 色播五月丁香婷婷| 五月天综合在线| www.wuyuetian啪啪| 91avse| 东北婷婷五月天| 婷婷五月六月丁香| 五月美女婷婷风骚| www久久99| 婷婷五月天在线观看免费| 99日韩| 婷婷五月天久草在线| 九色自拍| 色欲婷婷五月天丁香| 夜夜爽天天| 91成人看| 热思思九九| 九九热视频99| 五月丁香六月情| 天天日综合网射| 大香蕉人人人| 狠狠色综合无线观看| 婷婷五月丁香六月| 日本色天堂| 色综合色综合网| 五月激情日本在线| 色丁香五月婷婷| 182tv992tv人之初午夜免费观看| 嫩BBB槡BBBB搡BBBB| www.henhenl| 色婷婷综合网站| 五月天丁香成人社| 久久婷婷五月天激情新地址| 人人摸人人搞| XX久久| 激情五月婷婷色播网| 9 1超碰九色| 久久久久久久五月| 五月丁香综合网| 欧美性猛交99久久久久99按摩| 操逼巨乳91| 米奇影视资源婷婷狠狠色激情欧美五月丁香 | 亚洲电影中文字幕| 丁香五月婷婷图片综合| 欧类av怡春院| 少妇人妻偷人精品无码视频新浪| 中文字幕网伦射乱中文| 少妇性按摩无码中文A片| 26uuu精品国产| www.色综合.com| 色五月天成人| 偷拍91九色| 激情亚洲网| 99在线综合视频| 日韩成人影片网站| 潘金莲AAAAAAAAAA| 婷婷性爱五月天丁香网| 中文av在线观看| 亚洲中文AV网站| 噼里啪啦在线观看免费完整版视频| 99爱无码| 思思热精品在线视频| 热思思| 五月天黄色激情小说| 五月 丁香 欧美| 丁香五月综合久久八| 色播五月丁香| 天天色天天爱天天舔| 美妞av| 丁香六月av| 成人va在线观看视频| 天天搞夜夜爽夜夜爽| 亚洲综合成人网| 五月久熟女| 天天搡日日搡aaaaⅩ| 99久操| 99精品久久久久久久| 亚洲免费av在线| 大香蕉免费9| 欧美99视频| 亚洲综合另类| 精品欧美一区二区三区久久久| 国产真人做爰视频免费| 韩日AV片| 99ri在线| 亚洲热综合网在线观看| 日韩五月丁香| 97人人草| 婷婷丁香18| 91猫咪国产在线播放| 久久久五月天网站| 天天日天天插天天操| 岛国资源网| 久久免费视频62| 天天 日综合| 激情综合色播| 欧美五月婷婷| 亚洲三A| www99精品在线观看| 丁香狠狠操| 国产老熟妇亲子乱对白| 日本va欧美va精品发布视频| 九九色色网| 色婷婷丁香五月天| 色欲资源网| 日夜夜久久| 99精品大片| 91久久九久久九久久九久久九久久| 我爱大香蕉| 99re在线播放| site:901-07.com| 五月丁香激情四射综合| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇| 天天搞天天爽| 久久婷婷网| 婷婷综合色色| 午夜五月天| 色99网站| 色婷婷香蕉丁丁网| 亚洲精品色| 色婷婷免费视频| 日产精品一线二线三线芒果| 噜噜狠狠色综合久| 久久婷婷五月天蜜桃| 人妻六月天| 九九热视频精品2| 视频这里只有精品| 欧美日韩aaa| 黑人糟蹋人妻HD中文字幕| 日本97久久久精品| 四色女婷婷| 99A级片| 亚洲欧洲中文日韩久久AV乱码| 五月婷婷综合激情网| 国产黄色在线观看| 色五月婷婷激情综合网| 精品激情| 五月激情婷婷国产精品久久久久久| 久久这里面只有精品视频| 草综合14| 色五月激情图片| 婷婷五月蜜桃成人桃色丁香| 丁香蜜臀黄色婷婷五月天| 免费日本aⅴ中文字幕 | 屁股翘好撅高迎合跪趴| 欧美精品A片一区在线观看| 婷婷丁香77777| 日韩色色视频| 婷婷色色宗合网| 狠狠va| 久操人妻| 亚洲成人网在线观看| 深爱五月日韩| av婷婷丁香| 亚洲视频在线观看99| 天天综合色丁香| 日韩有码一区| 九草性爱| 六月激情综合| se色综合网| 狠狠干五码| 综合色播| eeuus五月婷| 国产在线黄色| 综合色五月| 天天做天天爽| 九九99热| 欧美色色色色色色色| 久草丁香婷婷五月天婷| 久狠狠| 久久久久九九九九视屏小说88| 天天激情夜夜干| 午夜丁香| 激情5月婷婷狠狠干| 丁香色色网| 91色久| 超碰99在线观看| 婷婷丁香激情综合色情| 激情亚洲网| 婷婷操逼| 中国丰满熟女A片免费观| 日韩黄黄| 天堂久热| 五月丁香综合在线| 色婷婷激情| 99干日本| 亚洲激情亚洲激情| 久久AV无码精品人妻系列试探| \\五月天婷婷激情| 在线超碰免费| 久久这里只有精品热在99| 国产黄色大片| 精品99视频| 婷婷成人综合| 久久香蕉影院| 欧美成人精品老美女噜噜噜| 激情综合在线播放| 91九色在线| 五月婷婷色| 五月综合久久| 婷婷射婷婷舔| 激情丁香六月| 五月丁香网站| 激情五月狠狠| 久久久大香蕉| 99在线精品观看99| 五月涩涩网| 婷婷久久在线| 亚洲综合五月天婷婷| 亚洲精99| 色yeye色综合| 天天干夜夜想| 台湾佬天天日丁香婷婷五月天| 丁香狠狠色婷婷久久无码视频| 天天天久久人人人合| www.婷婷,com| 五月丁香激情综合| 激情综合色播| 婷婷五月激情四月综合| 久久五月婷综合| 99热97| 久久女婷| 97男人天堂| 欧美色色色色色色色| 梁铮版蜘蛛女在线观看| 久久婷婷资源| 激情五月激情综合网| 五月丁香狠狠地噜噜噜噜| 日韩五月婷婷| 搡BBBB搡BBB搡18| 色五月丁香伊人五月| 婷综合| 91在线操逼视频| 六月丁香中文字幕| 天天插天天| 久久99久久99精品免观看粉嫩| 婷婷99狠狠躁天天躁| 久久人妻视步| 亚洲性爱干干| 99九九玖玖| 熟妇人妻中文字幕无码老熟妇 | 五月色色色| 婷婷在线播放| 色色五月天网站| xxx日本东京热| 五月激情婷婷综合| 人人操碰| 亚洲亚洲人成综合网络| 26uuu最新地址| 日韩视频99| 综合激情网五月激情| 五月激情射| 99riav 亚洲| 日韩成人AV在线| 色五月婷婷五月丁香五月| 免费观看亚洲AV片| 久久久久久久久久久月丁| 国产亚洲精品AAAA片APP| 五月婷婷啪啪| 激情五月天网页| 五月婷婷综合影院| 操碰色一区就去操| 操91| 婷婷五月色激情欧美激情| 久久五月天激情婷婷| 五月久久网| 激情五月婷婷综合秋霞| 狠狠干综合| 日本一道久久| 五月婷婷婷丁香播| 天天做天天摸| 丁香5月婷婷| 激情com| 狠狠色狠狠| 婷五月天| 亚洲传媒在线观看| 五月天丁香色色| 99热色精品| 综合久久97| 丁香五月成人社区| 激情网综合| 婷婷五月天直播| 激情五月天丁香| 91婷婷丁香五月| 超碰激情五月| 久久婷婷六月综合综合| 天天草比天天爽| 五月熟妇婷婷久久| 美臀自射自家人妻| 加勒比色色| 九九蜜臀精品| 丁香五月综合色婷婷| 久久丁香五月婷婷| 婷婷久久大香蕉| 婷婷午夜精品久久久| 婷婷五月丁香超碰| 色婷婷88| 91 九色 熟女| 开心五月天私房婷婷| 综合网色| 九九人妻福利| 色插综合网| 亚洲狠狠狠色婷婷综合激情久久久| 五月天天天操天天爽夜夜操| 袁子仪视频观看| 怕怕av| 色小说婷婷五月天天天| 色青青视频| 激情黄色小说五月天| 色情播放| 99热无码首页| 九九热re99re6在线精品| 99成人| 五月天婷婷自拍图片在线观看| 亚洲中文丁香| 西瓜美女a片| 四色女婷婷| 婷婷五月花| 婷婷久久影院| 婷婷五月天奸女| 五月丁香无码| 久久视频这里都是精品| 亚洲激情综合五月婷婷啪啪| 久久人妻久久| 黄网在线免费观看| 日产精品一线二线三线芒果| 青青草原亚洲久| 婷综合六月| 久久大香蕉丁香| 色爱爱综合网| 久久92| 丁香婷婷大香蕉| 丁香五月天激情网址| 另类图片激情五月天| 激情综合五月色丁香婷婷 | 欧美精品999| 国产成人网站在线观看| 老师高潮流白浆喷水的A片| 丁香花五月天社区| 国产精品大香蕉| 午夜青草资源| 色五月综合资源推荐| 婷婷五月天激情四射| 午夜天堂一区人妻| 婷婷久久五月| 91av传媒高清在线视频网| www.九月婷婷丁香.com | 六月色播| 综合激情视频| 婷婷香蕉香| 大香蕉人在线65| 天天日,天天射,天天插| 淑女丝袜bi操逼123| 色综合色色| 激情5月婷婷| 欧美色97| 婷婷六月久久| 日本综合久久| 涩丁香91| 欧美丁香婷婷天天操| 久久精品视频9| 超碰在线91| 国av网| 97久久人人操| 五月激情婷婷女| 六月 丁香 视频| 婷婷干六月综合旧址| 天天拍夜夜撸| 大香蕉天堂| 婷婷丁香18| 久久综合五月天| 天天橾夜夜爽| 一起草av| 精品久久9| 2025年最新亚洲在线欧美| 激情五月天在线视频| 97操碰免费视频| 深爱五月综合网| 六月婷婷激情| 婷婷激情六月中文| 伍月激情天| 色婷网| 婷婷丁香www视频日本韩国| 精品视频99看在线视频| 91精品婷婷国产综合久久| 色色色色色色色五月| 天天舔天天插天天爱| 97色色网| 亚洲成Av人片乱码色第1集| 深爱开心五月天| 人人干av| 在线色色| 外国碰视频网站97| 成人网丁香五月| 日日夜夜综合| 精品欧美性爱超级爽| 亭亭五月丁香综合欧美| 日本美女上人| 丁香五月综合激情性爱| 五月婷婷激情综合网| 欧美婷婷色| 婷婷色色综合激情| 国产毛片精品一区二区色欲黄A片| sewuyuetingtingiii| 99秘 在线| 97色婷婷| 国产亚洲99久久| 五月天基地| 欧美日本韩国亚洲| 日日夜夜青青草| 可以免费观看的AV| 婷婷五月天色色| 久操福利| 狠狠狠色激情综合适合| 夜夜操夜夜爽| 色婷婷视频| 另类伊人婷婷| 欧美色九| 婷婷丁香激情综合色情| 97人人操| 久久99久久99精品免视看婷| 狼人久草| 五月天婷婷激情网| 色五月激情综合网| 噜噜综合网| 北京熟妇搡BBBB搡BBBB| 色人五月婷婷| 日本黄 色 片| 五月丁香婷婷潮喷中文字幕| 激情婷婷22月间| 开心五月天激情网站| 亚洲传媒在线观看| www色五月| 色婷婷瘦婷婷日韩| 97碰超级人人看| 激情色色| 做爰丰满少妇1313| 婷婷五月精品中文字幕| 丁香六月婷婷社区| 丁香五月激情婷婷视频| 综合色色网| 桃色激情婷婷伊人网| seav天堂| 热久精品| 爱射综合| 欧美成人AAA片一区国产精品| 日碰日| 六月色播| 婷婷九月丁香| 99在线精品免费视频| 婷婷五月天综合色| 77777亚洲午夜久久| 色综合久久天天综合网| 久久久久久久久久久久久久人妻视频| 九九九九九999999| 女人天堂AV| 欧美日韩成人| 国产麻豆视频| 99热碰碰| 国内裸舞二区| 色色综合五月| 91婷婷| 亚洲一区先锋影音| 激情五月天第四色| 99这里只有精品视频| 三十路磁力链接| 5五月综合网亚洲| 99亚洲天堂| 婷婷丁香一月| 狠狠色五月| 五月天久久久| 青草青青草| 六月婷婷激情| 91在线97视频| www.久久| 五月婷视屏在线观看| 婷婷丁香久久| 超碰免费电影| 99色色视频| 久久人妻视步| 久鲁鲁色网| 色色啊| 9久久婷婷国产综合精品性色| 青青草日本亚洲| 激情综合久久| 色爱99| 婷婷欧美| 婷婷国产综合| 9色操| AV性爱在线| 亚洲激情免费视频| 色五月综合网| 久久香视频| 超碰成人免费| 91九色精品| 五月天玖玖狠狠色色| 性爱网五月天| 丁香伊人五月色婷婷五十路| 99在线观看| 综合色情网| 97人人妻人人艹| 狠狠干夜夜干| 日韩精品一品二区三区的使用体验| 成人五月天在线视频在线观看| 欧美99视频| 亲子乱AV-区二区三区| 成人片在线播放| 99在线免费视频| 亚洲噜色| 亚洲中文无码成人| 中文字幕不卡+婷婷五月| 另类亚洲电影| 欧美婷婷色| 99爱爱| 情色五月天网站| 99久久综合| 九玖欧洲亚洲| 五月天亚洲最大成人| 久久色婷婷| 五月婷婷成人| 91人人人人人| 五月天婷婷色| 成人丁香五月| 99久久婷婷国产综合| 欧美性丁香色色五月天干干| 开心五月婷婷在线| 婷婷五六日| 久热精品视频在线观| 久久久久亚洲AV无码网影音先锋| 婷婷五月综合网激情| 日本WwW色偷偷丁香花久久久京东热| 91Chinese在线| 亚洲午夜av| 香焦网五月天| 六月丁香网| 亚洲va欧洲va国产va不卡| 五月婷婷花| 婷婷操逼网| 天天日日天天| 99 色色吧| 久久婷婷激情五月天一区二区| 国产99久久久| 丁香五月天激情| 精品久久99| 亚洲六月婷婷| 99精品色| www.激情| 丁香六月激情综合| 亚洲黄色影视| 精品人妻伦九区久久AAA片| 狠狠色丁香| 综合色播| 免费无码毛片一区二区A片| 九九色热| 夫妇交换刺激做爰| 国产av一区二区三区| 四季8848精品成人免费网站| 九九99精品免费播放| 成人免费超碰| 99人人看| 五月天色色婷婷| 五月婷婷丁香综合| 欧洲永久精品| 婷婷六月网| 欧美天堂久久| 日本婷婷在线| 久热超碰| 亚洲精品国产熟女久久久| 国产偷人爽久久久久久老妇APP| 少妇大叫太大太粗太爽了A片| 亚洲精品又粗又大又爽A片| 久久A极片| 色婷婷丁香AV综合| 超碰电影在线播放| 女性自慰系列第五页| 日 日干 日日做| 99热在线免费| 丁香久久综合| 色五月婷婷在线| 爱穴久久| 九月综合| 六月丁香基地| 日本操逼九九九九58日本操逼| 欧美va在线观看| 激情伊人五月天| 荫道BBWBBB高潮潮喷| 在线一起草av| 色婷婷大香蕉| 奸逼视频| 97色碰| 巴基斯坦粉嫰无码视频| 亚洲热综合| 激情綜合W W W,激情五月天| 91.www综合| 亚洲AV无码成人精品区电影网| 亚洲综合色色| 婷婷日日天天| 色狠狠综合网| 日本不卡高字幕在线2019| 色婷婷yy久| 国产精品久久..4399| 伍月激情天| 99视频只有精品| 五月婷婷激情五月| 久久五月热| www.五月婷婷| 欧美久久五月婷婷| 天天爽天天| 国产一级片| 久人人操| 五月丁香少妇A| 欧美色性色好| 久久99国产综合精品免费| 超碰啪啪网| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | 成人综合视频网址| 婷婷欧美激情综合| 婷婷色五月天综合网| 色天堂A| 五月天激情av| 九九热99热| 91美女啪啪| 久久婷婷激情五月天一区二区| 亚洲精品午夜国产va久久成人| 26uuu最新地址| 久久码久久无清| 亚洲激情五月婷婷日日| 亚洲在线操| 色色图五月天| 天天舔天天摸天天射| 色色激情五月| 午夜丁香久久久久久| 天天操夜夜夜夜爽| 久9久9久9久9久9久9| 九九九AAA热视频| 五月丁香WWW| 婷婷亚洲综合| 百度4399有码精品V在线观看| 天天拍夜夜爽日日| 激情五月综合网| www激情网站| av人人操| 啪啪啪大香蕉| 久色网| 丁香五月av| 色九月丁香婷婷蜜桃在线观看| 26uuu.| 香蕉综合在线| www,com,五月色色| 夜夜撸天天操| 久热99狠| 99re这里有精品手机在线| 亚洲成人免费电影| 亚洲人妻av| 91色在线/日韩| 一二区成人电影| 影音先锋777xfplay色资源网站| 亚洲中字AV电影在线网站| 亚洲国产色婷婷| 激情丁香婷婷| 色婷精品91| 人妻aV在线| 另类视屏| WWW.17C亚洲精品| 亚洲在线成人| 成人免费va| AV操一操| 天天婷婷色六月| 99视频免费播放 | 99久久久久久www| 色色亚洲五月天| 91精品久| 五月天婷婷激情综合| 天堂网亚洲色图| 五月色天情| 岛囯综合激情网| 狠狠色综合五月| 婷婷五月丁香青青草在线| 天天操九九插| 风流少妇A片一区二区蜜桃 | 成人中文字幕在线| 激情亚洲婷婷| 亚洲视频二区| 五月婷婷,六月丁香| 久久丁香五月综合六月激情红杏视频| 99碰碰| 九九色热| 色色色99| 国产欧美日韩一区二区三区| 亚洲乱码日产精品BD| 婷婷成人小说综合| 婷婷综合国产| www夜夜| 婷婷五月色综合| 色狠狠色| 亚洲综合色网站| 91夫妻视频| 综合九九| 色天使色婷婷| 99热这里只有精品3| 亚洲色色在线| 乱乱av| 99爱视频在线观看这里只有精品| 色蜜婷婷| 99热在线只有精品| 婷婷丁香五月天欧美| 婷婷丁香18| 婷婷丁香人妻天天爽| 亚洲视频另类| 五月色亭丁香| 婷婷午夜丁香| 久久伊人五月天| 五月婷婷 六月丁香| 超碰免费人人肏| 色五月婷婷老师| 色香蕉影院| 九九热精品视频在线观看| 日本AAAAAAAAAAAAAA片| 亚洲一区二区无遮挡A片| 色色五月婷| 国产五月婷| 国产性爱色| 婷婷99狠狠躁天天躁| http://www.lingjunshare.com/ | 日本婷婷在线| av婷婷丁香 六月| 成人婷婷色综合| 99热天堂| 五月婷婷综合网在线播放| 久久综合55| 色婷婷狠狠爱| 色婷婷伦理| 五月丁香婷婷婷激情爱爱| 天天搞天天爽| 六月丁香婷婷五月| 97干97色| 久久久精品婷婷五月天| 在线看片av| 色五月天成人在线| 五月天综合久久丁香91| 99热免费| 欧美色五月| 亚洲综合色网站| 5五月综合网亚洲| 久久婷综合| 五月丁香婷婷六月| 亚洲丁香五月综合| 五月天久久激情| 久久婷婷视频| 思思热在线观看| 五月综合婷婷网| 久99在线视频| 久久六月婷婷| 丁香婷婷久久 | 蜜臀综合久草| 啪啪91| 人妻操逼视频| 欧美色骚婷婷五月天| 91热网址| 超碰人妻公开在线| 97色婷| 97色色色色色| se色99| 伊人玖玖精品| 丁香五月激情五月| 中文av网| 日本欧美国产| 婷婷五月天色综合| 久热久色| 操久久精| 久久丁香网| 国产精品涩涩涩视频网站| 久草五月婷婷| 少妇激情五月天| 开心五月婷婷激情网| 丁香五月激情六月欧亚激情综合导航 | 久久九九激情五月天| 夜夜爱网站| 五月婷婷|欧美| 操逼棍操逼| www.狠狠狠狠| 婷婷综合欧美| 中文字幕精品在线观看| 亚洲天堂制| 91无码色色| 亚洲综合在线视频| 婷婷五月天影院| 六月丁丁香| 激情五月天伊人av| 思思热热久久| 夜夜天天久久婷婷| 欧美噜噜久久久XXX| 97碰超级人人看| 小泽玛利亚视频一区二区| 欧美黄色一级| 婷婷五月天天| 国产XXXX搡XXXXX搡麻豆| 婷婷五月综合在线| 久久免片| 亚洲综合九九| 99热日韩| 國語久久婷| 久久看婷婷| 激情婷婷五月天| 深爱五月激情五月| 色播激情五月天| 丁香婷婷视频一区二区| 狠狠色 综合色区| 欧美综合激情五月| 五月婷婷精品视频| 涩涩五| 五月天激情婷婷五月天久久| 综合五月亭亭9| A一级操| 激情开心五月婷婷| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 丁香五月婷婷国产av| 99婷婷精品推荐在线视频| 五月丁香啪| 99精品视频在线观看| 国产69精品久久久久999小说| 免费看欧美成人A片无码| 强辱丰满人妻HD中文字幕| 少妇人妻丰满做爰XXX| 亚洲成av人影院| 国产精品18久久久| 成人 在线观看国产| 六月婷婷毛片| 婷婷丁香五月视频| 欧美毛卡| 久久婷五月综合| caop在线视频| 色婷婷XXXXX| 思思99精品视频| 激情网站综合五月天| 五月天四色房丁香| 色婷婷狠狠久久综合五月| 99热这里只有精品无码| 最新丁香六月婷婷| 这里只有精品视频在线| 五月婷婷亚洲| 婷婷五月天堂| 亚洲亚洲人成综合网络| av在线播放网站| 月丁香久久久| 婷婷爱爱蜜臀天天操| 久久伊人婷婷| 综合99在线| 成人丁香婷婷五月天| 婷婷开心激情| 天天摸天天肏| 香蕉综合网| 五月丁香综合色婷婷| 国产永久一黄| 久久婷五月婷| 久久五月婷综合网| 99操逼| 热久久91| 欧美搡BBBBB摔BBBBB| 久久99网| 99热综合在线| 最新激情五月天| 99re思思久久| 99操视频| 俺去也五月| www.一起草av| 亚洲精品视频在线播放| 五月丁香久久久日婷婷久久婷婷日| 五月婷婷丁香在线视频| 久99久在线观看| 婷婷五月天网| 大香蕉婷婷婷| 大香蕉精品视频| 亚洲男人的天堂婷婷色五月| 99精品免费| 五月天婷婷久久| 日本熟女啪啪| 99久久久99久久91熟女| 九色色| 在线不卡视频| 欧美三级视频| 日本99久久| 淫荡综合网| 色婷婷综合久久久久| 99ree6| www.99婷婷| 狠狠色狠狠色综合日日91| 九九热10| 蜜臀综合久草| 91精品久久久久久综合五月天| 婷婷五月六月丁香综合| 97人人射| 大香伊人婷婷影院| 激情影院内射| 99亚洲视频| 免费无码毛片一区二区A片| 伦99热| 色五月色综合| 色久天| sewuyuetingtingiii| 五月天三级| 99自拍网| 五月丁香综合网| 美臀自射自家人妻| 91干视频| 色吊丝99| 五月婷婷五月丁香综合| XX久久| 久久综合55| 视频免费精品免费精品免费精品免费精品免费精品免费精品免费99 | 操一区| 情趣视频66| 99精品偷自拍| 五月色色色| www.婷婷五月| 在线中文AV| 免费九九热| 国产精品色色| 97碰碰叉| 五月香蕉婷婷| 99热99色| 玖玖婷婷色五月| 丁香五月婷综合网| 高潮毛片又色又爽免费| 丁香五月综合高清在线| www.久久综合| 色偷偷人人| 精品成人无码A片观看香草视频| 99色在线| 综合色五月| 久草大| 激情五月天久久| 日本va欧美va精品发布视频| 97精品综合久久| av操一操| 五月亚洲| 在线免费视频caop| 伊人五月人妻精品| 99色在线| 久久99这里只有精品| 色五月综合激情| 伊人网碰碰| www,超碰| 啪精品| 色婷婷综合视频| 31色区视频免费看| 好激情在线综合网| 丁香五月天天久久综合小说| 亚洲激情无码久久| 久久天天| 色婷婷丁香网| 天天干天天日天天操| 婷婷色播婷婷| 婷婷久热| 99ri精品视频在线观看| 日韩高清成人| 久久最新色| 夜夜久久综合网| 综合性爱网| 五月激情网站| 色五月激情| 五月天综合久久| 五月色婷| 五月婷在线观看| 美女天天艹人人爽| www.久久久久| 婷婷欧美色| 激情五月天婷婷| 色婷婷综合五月| 97超碰免费超级在线观看| sewuyuejiqingwang| 日韩在线观看网址| 色人妻五月| 婷婷五月激情视频网| 丁香五月婷婷在线| 黑人熟妇一区二区三区| 色婷婷偷拍| 黄色AV日韩| 婷婷成人五月天| 人妻内射麻豆视频| 亚洲精品又粗又大又爽A片| 综合在线丁香五月| 久久久久久久久月丁| www.亭亭五月天| 婷婷色五月天色| 久久久WWW| 婷婷五月天美女| AA片在线观看视频在线播放| 亚洲va欧美va国产综合久久久| 一区无码| 性高潮久久久久久-九九九九九九九九九九热-成人AV| 国产精品美女| 超碰在线99| 五月情婷婷五月| 麻豆忘忧草午夜| 色婷婷国产精品综合在线观看| 欧洲不卡视频| 欧美精品XXXXBBBB| 丁香婷婷色五月天| 啪啪六月婷婷| 天天爱天天做天天操| 中文字幕簧片| 99资源人人| 天天摸天天肏| 色亭亭五月天网扯| 欧美成综合在线观看| 久久色天堂| 人人爱天天摸摸天天爱| 久久33视频| av色婷婷| 色五月婷婷五月久久| 久久99日本精品视频免费观看| 久久多色| 天干干夜夜操| 碰碰碰91| 激情五月天社区| 五月婷婷激情四月| 亚洲综合视频网| 欧美S码亚洲码精品M码| 天天日天天舔| 欧美日韩成人h| 久久婷婷内射| 婷婷丁香六月影视| 五月丁香花激情啪啪网| 二色AV| 久热这里精品免费| 97热久久五月婷婷| 亚洲爆乳无码精品AAA片蜜桃| 四色五月婷婷在线观看| 另类图片色五月| 超碰色碰碰| 欧美色婷婷| 亚洲欧州色情在线观看|