Redis大key問題及解讀
1、什么是大key
在redis中，大key通常指以下三種情況之一：
1、value過大：單個key的value體積過大（如字符串值超過10KB，集合/列表/哈希/有序集合元素過多）
2、元素過多：集合類型（hash/list/set/zset）中包含大量元素（如超過5000個元素）
3、結構復雜：key對應的數(shù)據(jù)結構嵌套過深或過于復雜
2、大key的危害
【1】阻塞風險
1、大key的讀寫操作會消耗更多CPU和內存。
2、可能會導致redis阻塞，影響其他請求的響應時間。
【2】網(wǎng)絡阻塞
1、大key傳輸會占用大量帶寬。
2、可能會導致集群節(jié)點間同步延遲。
【3】內存不均
1、在集群模式下，大key會導致數(shù)據(jù)分片不均衡。
2、可能造成某些節(jié)點內存壓力過大。
【4】持久化問題
1、AOF重寫和RDB生成時處理大key會變慢。
2、可能導致持久化失敗或服務暫停。
3、如何發(fā)現(xiàn)大key
【1】使用內置命令
redis-cli --bigkeys #掃描并統(tǒng)計大key
【2】使用memory命令（Redis 4.0+）
MEMORY USAGE key_name #查看指定key的內存使用
【3】使用scan命令
redis-cli --scan --pattern '*' | while read key; do echo "$key: $(redis-cli memory usage "$key")"; done
【4】監(jiān)控工具
1、RedisInsight 2、Redis Desktop Manager
4、解決方案
【1】拆分大key
1、將大hash拆分成多個小hash
2、對大list/set進行分片
【2】使用合適的數(shù)據(jù)結構
1、根據(jù)合適的業(yè)務場景使用合適的數(shù)據(jù)結構
【3】設置過期時間
1、EXPIRE key seconds
【4】漸進式刪除
1、對大key刪除，使用UNLINK代替DEL（非阻塞）
2、對集合類型，分批刪除
【5】客戶端緩存
1、對不常變更的大key使用客戶端緩存
5、最佳實踐
【1】設計階段預防
1、預估數(shù)據(jù)規(guī)模，提前設計合理的key結構
2、避免單個key存儲過多數(shù)據(jù)
【2】監(jiān)控告警
1、設置大key監(jiān)控告警
2、定期掃描和清理
【3】讀寫優(yōu)化
1、對大key使用pipeline減少網(wǎng)絡往返
2、避免對大key進行范圍操作
總結
以上為個人經(jīng)驗，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關文章
Redis在實際應用中使用的非常廣泛，本篇文章就從一個簡單的需求說起，為你講述一個需求是如何從頭到尾開始做的，又是如何一步步完善的2019-12-12
想要一文搞懂Redis最常用字符串技能？你來對地方了,這篇指南將帶你深入淺出,輕松掌握Redis字符串的強大功能,別眨眼,跟我們一起,讓數(shù)據(jù)操作變得前所未有的簡單,需要的朋友可以參考下2024-03-03
Redis數(shù)據(jù)結構之intset整數(shù)集合使用學習
這篇文章主要為大家介紹了Redis數(shù)據(jù)結構之整數(shù)集合使用學習，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步，早日升職加薪2023-07-07
詳解Redis中的BigKey如何發(fā)現(xiàn)和處理
這篇文章主要為大家詳細介紹了Redis中的BigKey如何發(fā)現(xiàn)和處理,文中給大家詳細講解了BigKey危害和如何解決這些問題,文章通過代碼示例和圖文介紹的非常詳細,需要的朋友可以參考下2023-10-10
文章介紹了如何使用Redis實現(xiàn)會話管理,包括會話的創(chuàng)建、讀取、更新和刪除操作,通過設置會話超時時間并重置,可以確保會話在用戶持續(xù)活動期間不會過期,此外,展示了使用Redis的Hashes存儲更多信息,并使用Redis集群提高系統(tǒng)的可用性和擴展性,感興趣的朋友跟隨小編一起看看吧2025-12-12
本文主要介紹了Redis搶單預熱的實現(xiàn)示例,以應對搶單活動帶來的高并發(fā)訪問壓力,具有一定的參考價值,感興趣的可以了解一下2023-11-11
詳談redis跟數(shù)據(jù)庫的數(shù)據(jù)同步問題
文章討論了在Redis和數(shù)據(jù)庫數(shù)據(jù)一致性問題上的解決方案,主要比較了先更新Redis緩存再更新數(shù)據(jù)庫和先更新數(shù)據(jù)庫再更新Redis緩存兩種方案,文章指出,刪除Redis緩存后再更新數(shù)據(jù)庫的方案更優(yōu),因為它可以避免數(shù)據(jù)不一致的問題,但可能產生高并發(fā)問題2025-01-01
本文主要介紹了Redis中key的操作命令,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面隨著小編來一起學習學習吧2024-06-06
這篇文章主要介紹了排查Redis大key的方法,文中通過示例代碼介紹的非常詳細,對大家的學習或者工作具有一定的參考學習價值,需要的朋友們下面跟著小編來一起學習學習吧2024-08-08
這篇文章主要介紹了antd為Tree組件標題附加操作按鈕功能，文章圍繞主題展開詳細的內容介紹，具有一定的參考價值，需要的小伙伴可以參考一下2022-08-08